上海拜服信息科技(kējì)有限公司2014-6上海清算(qīnɡsuàn)所

企業(yè)級開源架構交流精品資料匯報(huìbào)人介紹余軍joeyu任上海拜服開源架構總監(jiān)2006-2012RedHat中國區(qū)解決方案業(yè)務總監(jiān)2000-2006中國惠普高級顧問中國區(qū)HPC高性能計算集群技術顧問亞太區(qū)Linux二線支持團隊成員AlphaTru64Unix高級講師，HP-UXMC/SG講師1998-2000上海信息技術投資有限公司項目經理，RS6000/AIX程序員國內早期開源運動的熱心推動者，開源許可協(xié)議GPL中文版初版譯者1998年創(chuàng)建(chuàngjiàn)中國第一個(規(guī)模最大)Linux用戶協(xié)會–SHLUG()ChinaUnix集群及高可用版版主(ID:nntp–since2006)專業(yè)研究方向開源分布式架構和高可用系統(tǒng)精品資料上海拜服信息科技(kējì)有限公司公司成立成為(chéngwéi)IBM/HP合作伙伴,開始為外資客戶提供IT服務成為富士通服務合作伙伴為星巴克，歐尚超市，易買得等大型連鎖零售行業(yè)提供IT服務成為RedHat高級合作伙伴

確立開源解決方案和專家服務作為業(yè)務核心和發(fā)展方向成為RedHat認證服務合作伙伴(CSP)開始為華東地區(qū)金融和電信客戶提供專業(yè)服務同年正式成為上海市開源軟件專業(yè)委員會成員成為Novell公司SuSELinux業(yè)務高級合作伙伴成為Dell中國開源解決方案供應商和服務商成為OracleMySQL,Linux,虛擬化開源方案高級合作伙伴2011年Intel中國開展Hadoop大數據解決方案合作200320052006200720082009-20102009-現在10年歷程公司總部:上海,北京和成都有分公司和辦事處員工70人左右，80%以上為技術工程師技術工程師認證:持有RedHatRHCE/RHCA認證,NovellNCLP認證,OracleMySQL認證，VMWareVCP認證按技術能力分為Linux系統(tǒng)組,開源數據庫組,基礎系統(tǒng)與工具開發(fā)組精品資料我們(wǒmen)的金融業(yè)客戶-銀行業(yè)銀行客戶主要平臺及服務主要支持應用和工作中國銀聯MySQL數據庫,

高容量Web系統(tǒng)設計批量自動化運維平臺設計,Apache門戶Hadoop集群服務,SuSELinux服務集團短彩信平臺，電子票據DB2到MySQL遷移，商戶管理Web平臺RISCtoIA遷移，openstack云管理后臺數據庫，加密發(fā)卡平臺，MySQL數據庫資源池管理平臺,Linux/XEN運維管理規(guī)劃和服務中國建設銀行(總行及上海分行)Linux,Linux高可用集群前置機鏡像災備高可用咨詢，實施和運維支持服務會計對賬，自主發(fā)卡，總賬管理，ECTIP，綜合前端，會計稽核內容管理，DCC柜面，信用卡進件，SWIFT報文處理系統(tǒng)，鈔箱管理系統(tǒng)，安全服務器，員工績效考核系統(tǒng)，企業(yè)信息門戶系統(tǒng)，E路通積分系統(tǒng)，ATMV系統(tǒng)，券商網點管理，BO儀表盤系統(tǒng)，CBPS系統(tǒng)，ODSB系統(tǒng)，分行報表平臺等中國銀行Linux,現場專家服務單證影像，綜合門戶，安全監(jiān)控,總行開源架構咨詢，MySQL數據庫，自動化運維中國工商銀行Linux,現場專家服務故障排查，應急響應，運維支持交通銀行Linux,現場專家服務故障排查，應急響應，運維支持浦東發(fā)展銀行Linux,現場專家服務數據匯聚平臺，中移動支付網關，銀稅共享平臺，第三方存管，卡稽核系統(tǒng)，證券交易所債券交易系統(tǒng)，西聯匯款,

成都客服中心上海銀行LinuxLinux高可用集群高可用咨詢，實施和運維支持服務電子國債，大小額支付，開放式理財，電子工作流，電子商業(yè)匯票，數據倉庫，新一代電子銀行，數據傳輸平臺，路透外匯交易，大宗農產品交易，網銀平臺，同城票據，在線客服中國農業(yè)銀行Linux,現場專家服務報表反傳項目,影像平臺華夏銀行Linux,Linux高可用集群,現場專家服務全國分行金融IC卡平臺上海清算所Linux,現場專家服務外匯MQ詢價平臺，招投標平臺，門戶平臺中國外匯交易中心Linux,現場專家服務批量自動化運維設計DNS容災平臺，央行項目，增值服務平臺，BMO系統(tǒng)，外匯做市商報價引擎等,自動化運維工具精品資料我們的金融業(yè)客戶(kèhù)-證券期貨業(yè)交易所產品與服務主要應用和工作上海證券交易所Linux架構咨詢，現場專家服務BPM/ERP平臺,NTP服務器,綜合門戶網站基礎架構平臺架構咨詢上海期貨交易所Linux架構咨詢，現場專家服務全面部署，核心交易引擎性能優(yōu)化咨詢，運維支持中國金融期貨交易所Linux

現場專家服務模擬交易集群及網絡監(jiān)控深證證券交易所Linux,OracleMySQL架構咨詢，現場專家服務高性能核心交易引擎日志數據庫系統(tǒng)架構設計咨詢券商/期貨公司相關產品與服務主要應用和工作海通證券Linux現場專家服務故障排查，應急響應，運維支持上海證券Linux現場專家服務故障排查，應急響應，運維支持東方證券Linux,JBoss中間件故障排查，應急響應，運維支持華寶證券Linux,JBoss中間件現場專家服務綜合門戶平臺，清算系統(tǒng)上海期貨信息技術有限公司Linux現場專家服務CTP期貨交易平臺上海證券通信技術有限公司Linux現場專家服務通訊平臺精品資料我們(wǒmen)的金融業(yè)客戶-保險業(yè)保險客戶產品與服務主要應用和支持太平洋保險Linux現場專家服務太保網上商城Hadoop大數據分析平臺故障排查，應急響應，運維支持平安保險OracleMySQL分布式架構設計及現場專家服務平安保險集團，新一貸

網銷-電銷融合項目長江養(yǎng)老保險Linux,JBoss中間件現場專家服務從交易核心到外圍，所有平臺故障排查，應急響應，運維支持AIA友邦保險中國LinuxJBoss

中間件JBoss

BRMS規(guī)則引擎現場專家服務BRMS開發(fā)支持服務核保業(yè)務規(guī)則計算平臺故障排查，應急響應，運維支持AXA金盛人壽中國LinuxJBoss中間件現場專家服務影像和工作流系統(tǒng)，通訊平臺，數據倉庫平臺,災備系統(tǒng)精品資料部分電信行業(yè)–制造行業(yè)-大型(dàxíng)國企客戶產品與服務中國移動(上海)Linux現場專家服務架構咨詢，故障排查，應急響應，運維支持中國電信(上海)Linux專家服務架構咨詢，故障排查，應急響應，運維支持寶鋼/寶信Linux現場專家服務Linux高可用,虛擬化平臺云計算項目架構咨詢，故障排查，應急響應，運維支持通用汽車Linux現場專家服務大規(guī)模Linux自動化運維平臺開發(fā)故障排查，應急響應，運維支持大眾汽車Linux現場專家服務故障排查，應急響應，運維支持上汽Linux現場專家服務HPC高性能計算集群故障排查，應急響應，運維支持中遠集裝箱Linux現場專家服務大規(guī)模Linux自動化運維平臺開發(fā)故障排查，應急響應，運維支持精品資料議題(yìtí)互聯網的開源架構簡介金融行業(yè)(hángyè)的開源架構實踐(案例分享)金融行業(yè)(hángyè)的應用場景與互聯網行業(yè)(hángyè)的區(qū)別當前主要的主要的開源架構和基礎技術金融行業(yè)(hángyè)適用的典型開源架構我們對于金融行業(yè)(hángyè)開源架構的進一步思考和研發(fā)開源及生態(tài)圈介紹開源技術引入的策略性思考精品資料1.互聯網開源(kāiyuán)架構簡介核心業(yè)務平臺軟負載&配置中心:LVS/HAProxy/Tengine/Diamond消息中間件:MetaQ/RocketMQ,Notify服務框架(kuànɡjià):Dubbo分布式數據:TDDL分布式日志跟蹤:Tracer/EagleEye系統(tǒng)穩(wěn)定性平臺:CSP系統(tǒng)性能優(yōu)化平臺:未公布詳細技術細節(jié)見阿里中間件團隊官方網站/?p=335910年的系統(tǒng)架構進化精品資料互聯網開源架構簡介核心系統(tǒng)(xìtǒng)平臺精品資料互聯網開源架構簡介(jiǎnjiè)核心數據平臺GatewayServersOracle備庫MySQL備庫日志(rìzhì)系統(tǒng)LogServerHadoop開發(fā)平臺GatewayServersDBSync爬蟲數據MapReduceJavaJobsStreamingJobsHiveJobsTimeTunnelDataX數據流向主站服務（淘寶，B2B，廣告，搜索，BOSS）HbaseHbaseMysqlOracleDataXMyfoxLoaderLzLoaderOtherSystem數據產品Adhoc報表(淘數據，BusinessPreview)回流主站應用流式計算其它實時計算平臺OLAPserver精品資料2.金融行業(yè)(hángyè)的開源實踐中國銀聯精品資料貸款信息(xìnxī)集中庫（MySql）網銷數據庫（Oracle）電銷數據庫（Oracle）②②網銷、電銷通過調用公共服務，來維護雙方共享的信息；網銷、電銷各自的，不需要(xūyào)共享的渠道數據，在各自的數據庫維護；把所有公共模塊，包裝成公共服務，網，電不直接寫集中庫，而是通過調用公共服務來完成；網銷電銷客戶中國平安保險集團

網銷-電銷融合項目業(yè)務架構①③貸款公共服務網銷數據庫:維護網銷特有的，不需要在網電間共享的數據:如網絡活動信息等電銷數據庫：維護電銷特有的，不需要在網電間共享的數據；如坐席信息等；貸款信息集中庫:維護網、電需要共享貸款信息；包括：客戶信息；申請單信息；客戶貸款方案信息；處理進度信息；貸款信息等；坐席①③精品資料3.金融行業(yè)的應用場景(chǎngjǐng)與互聯網行業(yè)的區(qū)別與互聯網應用的主要差異(chāyì)規(guī)模：無需為單一應用建立大規(guī)模集群，且沒有互聯網應用類型的海量并發(fā)應用：數據庫的架構設計需要和應用設計開發(fā)保持一致安全：高可用和數據安全是放在第一位的團隊：沒有獨立的開源軟件核心定制開發(fā)團隊運維：嚴格的運維和監(jiān)管要求值得參考和借鑒互聯網應用的地方重視結構化和非結構化數據的歸集和價值挖掘性能優(yōu)化的研究和實踐分布式和橫向擴展的架構的實踐自動化運維監(jiān)控的實踐需要警惕和注意的拿來主義不可取，代價高，風險大開發(fā)到運維的應用交付要統(tǒng)籌考慮，避免脫節(jié)規(guī)范的缺失導致開源技術引入入口失守精品資料虛擬化操作系統(tǒng)(cāozuòxìtǒnɡ)高可用保護層數據庫/數據處理層中間件業(yè)務(yèwù)邏輯層Web接入和展現層負載均衡層服務器/存儲/網絡VMWareAIX,HPUXPartitionVeritasVCS,IBMHACMP,HPMC/SGOracleDB,IBMDB2Teradata,EMCGreenplumOracleWeblogicIBMWebsphere,iLogOracleIAS,IBMIHS,MSIISF5服務器/存儲/網絡RHEV/OVMRedHat/OracleLinuxRHCS,Heartbeat,KeepalivedPacemaker,Corosync,DRBDPostgres,MySQL,MongoDB,Hadoop/HBase/HiveJBoss,Tomcat,BRMS,JBPMApache/Nginx/TengineLVS,HAProxy,Nginx服務器/存儲/網絡數據存儲和管理VeritasStorageFoundationXFS,GFS,GlusterFS,HDFS典型的IT架構常見的閉源實現架構主流企業(yè)級開源架構CobblerPuppetMcoLogstashKibanaNagiosZenOSSZabbixBMCPatrolHPOpenViewIBMTivoli4.主要的開源架構和基礎技術–演進精品資料RHEV/OVMRedHat/OracleLinuxRHCS,Heartbeat,KeepalivedPacemaker,Corosync,DRBDMySQL,Postgres,MongoDB,Hadoop/HBase/HiveJBoss,Tomcat,BRMS,JBPMApache/Nginx/TengineLVS,HAProxy,Nginx服務器/存儲(cúnchǔ)/網絡XFS,GFS,GlusterFS,HDFS企業(yè)級開源架構(jiàɡòu)方案CobblerPuppetMcoLogstashKibanaNagiosZenOSSZabbix高性能，高可靠性Web平臺解決方案OSI4/7層負載均衡集群高性能反向代理，動靜分離開源中間件解決方案開源Java應用服務器開源工作流引擎，規(guī)則引擎開源數據庫，數據庫集群解決方案開源大數據處理解決方案開源HA高可用集群解決方案開源集群存儲，彈性分布式存儲解決方案開源虛擬化解決方案開源自動化運維管理方案開源架構咨詢和規(guī)劃服務開源架構專家實施服務開源系統(tǒng)運維支持服務我們的開源解決方案和服務金融行業(yè)電信行業(yè)制造行業(yè)主要的開源架構和基礎技術–方案化精品資料虛擬化操作系統(tǒng)(cāozuòxìtǒnɡ)高可用保護層數據庫/數據處理層中間件業(yè)務(yèwù)邏輯層Web接入和展現層負載均衡層服務器/存儲/網絡VMWare生產環(huán)境Oracle/DB2核心生產服務器/存儲/網絡KVM開發(fā)測試環(huán)境RHCS,Heartbeat,KeepalivedPacemaker,CorosyncMySQL/Hadoop核心外圍JBoss,Tomcat,BRMS,JBPM，SolrApache/Nginx/TengineLVS,HAProxy,Nginx數據存儲和管理RedHatEnterpriseLinux典型的IT架構CobblerPuppetMcoLogstashKibanaNagiosZenOSSZabbixBMCPatrolHPOpenViewIBMTivoli5.金融行業(yè)適用的典型開源架構XFS,GFS,GlusterFS,HDFS精品資料6.我們對金融行業(yè)開源(kāiyuán)架構的進一步探索和研發(fā)計算資源池數據庫資源(zīyuán)池中間件資源池虛擬機VMWare/KVM/XENIaaSOpenstack/Cloudstack輕量虛擬化cgroup/namespace/unifiedfsMySQLPostgreSQLMongoDBApache/NginxTomcatJBossHAProxy/LVSMemcachedRedis自動化部署集中配置管理集中日志分析集中監(jiān)控告警資源的池化，

本質上是計物理資源的歸集和調度自動化運維，本質上是規(guī)范的落地HadoopSolrElasticSearch三橫一縱的開源運行/管理架構精品資料我們對金融行業(yè)開源架構的進一步探索(tànsuǒ)和研發(fā)計算資源池資源的池化，本質(běnzhì)上是物理資源的歸集和調度自動化運維管理數據庫資源池中間件資源池應用負載自動化部署集中配置管理集中日志分析集中監(jiān)控告警資源池管理應用負載均衡

資源池調度算法實例生命周期管理實例高可用控制資源池資源回收MW實例DB實例OS實例12341234應用申請池內資源資源池調度資源，創(chuàng)建實例自動化部署和配置推送(監(jiān)控)應用開始使用資源三橫一縱的開源運行/管理架構–應用視角

精品資料7.開源及生態(tài)圈介紹(jièshào)-什么是開源軟件在軟件開發(fā)和分發(fā)的過程中，提交最終(zuìzhōnɡ)軟件產品的同時，全部公開和分發(fā)該軟件的源代碼，并允許其它個人或組織對該軟件的源代碼進行修改或再分發(fā)的軟件開發(fā)和傳播模式。開源軟件的開發(fā)和傳播過程，依據開源許可證協(xié)議作為法律基礎。根據開源許可證的限制范圍和強度的不同，同時存在多種開源許可證供軟件作者方選擇。開源不等于免費,軟件本身仍舊可以進行銷售，只不過在銷售的過程中，必須同時開放該軟件的源代碼或提供獲取源代碼的途徑。商業(yè)開源軟件，可以100%開源，也可以部分開源，部分閉源，但是閉源代碼和開源代碼的接口部分代碼必須開放。開源軟件基金會及其合作伙伴（商業(yè)開源公司）在統(tǒng)一的法律框架下，維護整個開源軟件的游戲和運行規(guī)則。精品資料開源的發(fā)展(fāzhǎn)脈絡回顧幾乎所有Unix系統(tǒng)都開源Unix上絕大多數的軟件都開源1976年前比爾蓋茨宣布微軟基于許可證的收費模式1976年2月3日RichardStallman建立GNU和自由軟件基金會1984年商業(yè)軟件公司普遍采用微軟的基于許可證的收費模式互聯網和互聯網經濟崛起開源軟件被大量使用1995-2000傳統(tǒng)用戶在周邊系統(tǒng)上嘗試開源軟件WEB門戶類應用率先部署開源技術互聯網公司開始進化到云計算模式(商業(yè)模式和技術平臺)2003–2005傳統(tǒng)用戶周邊系統(tǒng)規(guī)模化使用開源軟件，部分用戶開始在重要平臺上嘗試開源軟件(軍工，金融交易所)互聯網公司大規(guī)模進入云計算和大數據應用階段2006年–2013傳統(tǒng)用戶業(yè)務模式發(fā)生變化，電商化和互聯網化業(yè)務產生，開源云計算和大數據技術引入互聯網公司業(yè)務拓展進入傳統(tǒng)行業(yè)2013

–未來5年?精品資料Openstack主流(zhǔliú)社區(qū)(Upstream)Fedora主流(zhǔliú)社區(qū)(Upstream)Linux內核主流社區(qū)(Upstream)開源軟件是如何生產和流通的(生態(tài)圈)頂級開源軟件基金會Linux基金會,自由軟件基金會,Apache基金會,OpenStack基金會商業(yè)開源公司

打包發(fā)行，提供商業(yè)服務RedHat,SuSE,Oracle,Cloudera,Intel,MongoDB….權威合法組織政府接口中心財/才資源中心法律，規(guī)范中心廠商接口中心委員會形式管理代碼審核權控制代碼遞交權控制成熟的全球化聯合開發(fā)協(xié)作模式核心開發(fā)成員由對口基金會聘用最終用戶個人開發(fā)者開源開發(fā)小團體商業(yè)公司如IBM,Intel,Oracle,RedHat,Cisco互聯網如Facebook,Twitter阿里巴巴，網易策略影響資源贊助規(guī)則維護代碼遞交參與社區(qū)重要人事管理資源提供法律支持提供社區(qū)版代碼庫提供代碼修訂意見開發(fā)社區(qū)活動產品打包和商業(yè)發(fā)布增強企業(yè)特性提供產品級別售后服務專業(yè)開源咨詢及服務商開源策略咨詢開源架構設計開源專家服務交付技術互動社區(qū)參與商業(yè)合作開源軟件產品化以訂閱模式交付商業(yè)開源產品與主流社區(qū)保持緊密聯系和互動精品