互聯(lián)網(wǎng)金融 楊敏強(qiáng) 金山云互聯(lián)網(wǎng)金融解決方案-v20171123

金山云互聯(lián)網(wǎng)金融解決方案楊敏強(qiáng)???北京金山云網(wǎng)絡(luò)技術(shù)有限公司提綱?金山與戸■品家族?金山云應(yīng)用場(chǎng)景-互聯(lián)網(wǎng)應(yīng)用視頻應(yīng)用-深度學(xué)習(xí)應(yīng)用?金山有互聯(lián)網(wǎng)金融彳丁業(yè)應(yīng)用場(chǎng)景2￡UJe金山集0簡(jiǎn)介中國(guó)領(lǐng)先的應(yīng)用軟件產(chǎn)品和服務(wù)供應(yīng)商，26年以上歷史,2家上市公司（金山軟件HK03888,獵豹移動(dòng)NYSECMCM）3￡UJe金山云：國(guó)內(nèi)領(lǐng)先的云計(jì)算服務(wù)提供商，5年實(shí)現(xiàn)跨越式發(fā)展4金111私有云計(jì)■存旳匸捲五版如捲爲(wèi)負(fù)建場(chǎng)|C美典Bl據(jù)庫度油敬1?專■長(zhǎng)o國(guó)掀私有阿略云數(shù)據(jù)庫Redis云癡B5云物理主機(jī)鰹儺ipMongoDB&CDN帛：GPU無服務(wù)的E)BNATy表^m如GPU物理服務(wù)襦0冬專線擬入G)::對(duì)等涯歯印S^JK^i&旅fdoop@臍擊榷&撤蠟評(píng)測(cè)島云口播服務(wù)器覽全幽金山云廣告盈云碑揭?漏洞歸商厘廄自誑曲高圾安全服葬6短掘艦路國(guó)Mb郵廟火壕全業(yè)!您金山企獨(dú)天毋小＞云勝析&深度學(xué)習(xí)平臺(tái)(3@超m臺(tái)存留:證書凝完善的云服務(wù)產(chǎn)品家族，幫助企業(yè)搭建混合云應(yīng)用￡UJe產(chǎn)品家族5金山公有云用例模型￡UJe?應(yīng)用用戶?賬號(hào)管理員金山呑公有玄-通過控制臺(tái)對(duì)所有賬單操作負(fù)責(zé)（比如創(chuàng)建、釋放云服務(wù)器）?賬號(hào)用戶賬號(hào)管理員—??*?———T—ZT■■T.-通過控制臺(tái)對(duì)非賬單操作負(fù)責(zé)（比如修改云服BE務(wù)器網(wǎng)絡(luò)設(shè)置）金山?？刂婆_(tái)?實(shí)例管理員laaS實(shí)例PaaS實(shí)例賬號(hào)用戶-管理云服務(wù)實(shí)例,比如在云服務(wù)器上部署應(yīng)用）OpenAPI實(shí)例管理員SSH,VNC遠(yuǎn)程桌面連接MySQLClient-夢(mèng)應(yīng)用用戶-訪問運(yùn)行在云服務(wù)實(shí)例上的應(yīng)用?集成系統(tǒng)集成系統(tǒng)云管理平臺(tái)JenkinsAnsible-通過API實(shí)現(xiàn)云服務(wù)實(shí)例的操作自動(dòng)化6完備的計(jì)算.存儲(chǔ)和網(wǎng)絡(luò)基礎(chǔ)設(shè)施，是金山云服務(wù)的基石￡UJeWWWKSYUNCOM200G+BGP帶寬儲(chǔ)備100G+長(zhǎng)途骨干網(wǎng)帶寬總量20T+全網(wǎng)CDN帶寬總量5T+城域骨干網(wǎng)帶寬總量80000+臺(tái)服務(wù)器19個(gè)大型數(shù)據(jù)中心600+個(gè)全球CDN節(jié)點(diǎn)數(shù)量7豐富的公有云運(yùn)維經(jīng)驗(yàn)，確保交付高安全.高可用公有云服務(wù)￡UJeWWWKSYUNCOM?實(shí)時(shí)監(jiān)控?智能定位?自動(dòng)修復(fù)8眾多客戶已經(jīng)基于金山云加速業(yè)務(wù)創(chuàng)新￡UJe?石存儲(chǔ)解決方條-小米-WPS-醫(yī)療云解決方案—北大人民醫(yī)院-政務(wù)云解決方案-北京政斃-混泰解決方案小米樂CCTV.wzr.corn中國(guó)中史電棍臺(tái)的電話邦云和聲UriisiQuriid凡客vandB，siv百褪通＜o(jì)魂云一^風(fēng)行網(wǎng)

國(guó)廣東方■f■'AJ.Z'鑿熾魚!1111匡CINYLwm。撤診湘奩説北京市經(jīng)濟(jì)和常息化委員會(huì)首都之窗卷！絶幣與winsan運(yùn)廳賁港K徊般唇單宿州而人民政府中關(guān)村管委會(huì)l^lnacomatfism

織忸土怒時(shí)點(diǎn)CJ諸吉.林省大見政府北京市文化局-當(dāng)當(dāng)網(wǎng)-新網(wǎng)銀行9提綱?金山與戸■品家族?金山云應(yīng)用場(chǎng)景-互聯(lián)網(wǎng)應(yīng)用視頻應(yīng)用-深度學(xué)習(xí)應(yīng)用,金山有互聯(lián)網(wǎng)金融彳丁業(yè)應(yīng)用場(chǎng)景互聯(lián)網(wǎng)應(yīng)用典型邏輯架構(gòu)￡UJe體驗(yàn)好速度快高可用高安全智能化企業(yè)內(nèi)網(wǎng)服務(wù)11互聯(lián)網(wǎng)應(yīng)用上云部署架構(gòu)彈性IP應(yīng)用>1公I(xiàn)彈性IP署人員第三方公網(wǎng)服務(wù)終端子網(wǎng)：data普通子網(wǎng)：webYUM源企業(yè)內(nèi)網(wǎng)服務(wù)￡UJeWWWKSYUNCOM'KtC'互聯(lián)網(wǎng)應(yīng)用金山云陸制臺(tái)互聯(lián)岡昌公I(xiàn)^Kiat北京6區(qū))VPC(豐嚅|VPC:demo會(huì)LU無Wi^VW.IMCd=HTTP負(fù)載均衡器Redis旨KRDS&KMR集群日志務(wù)析=□=111深度學(xué)習(xí)服務(wù)坐對(duì)象存儲(chǔ)KS3晶金山云CDN?國(guó)V高防IP云監(jiān)控云告警云至內(nèi)網(wǎng)NATVPN云平臺(tái)管甌部署人員12計(jì)算:搭建高穩(wěn)定.高可用,高安全的計(jì)算環(huán)境￡UJe?服務(wù)器類型-云服務(wù)器-云物理機(jī)專屬有-GPU云服務(wù)器-GPU物理服務(wù)器?存儲(chǔ)類型-本地硬盤-云硬盤5=RNHfl債謂白BE工?Sfi+O計(jì)骨竈■>**囲:I+?■**!I?FHL)?wC3-uG'lff■人w円際嗦留”Q9Q■幽□5ASKCeSrK)1EJBE1KKVW；3S2?&jiC?^uWIbUb1?J■HtFKSA皿HflHG一pradK#N?Hrcxutau■miEOA1RRGM,prad.wpfpraiHwc-m..1HSNE*▼■orDWitfflu□H8"HA?RKhp?<L*wF<nd-vp<--m..￡tt￡Mft*,.□Miibh-M■?IDSItfflUBH+"HAJWHGHfpCwpmd-^pc-m..ASKH■瑋"tO*4^Ustrt*nrflJHAi#?Hpython-vpcIk_MASKHV#-tO*4^Ustrt*nrflJHAMMh，gdmt￡C_UX_M由fM*□w^-jn(Dl?0SH4>ww*韻MGHFfKjWfMHC_ALl_5&□dtt*-mOagroxoaizSEI的EOA沖GigpradjvpraiHwc-m..E#*O?iuirv0O4roxitsiz■HtEOAJWtGwprad.-pcpraHpc-m..AKMR*?■?rositauBfl屮H.UHA!??HpralJWpmd-^c-m.ASKH■Jkv-通過冗災(zāi)組、可用區(qū)、數(shù)據(jù)中心實(shí)現(xiàn)云服務(wù)器高可用13網(wǎng)絡(luò)：創(chuàng)建安全.互聯(lián)互通的網(wǎng)絡(luò)環(huán)境￡UJe?實(shí)現(xiàn)不同類型服務(wù)器的統(tǒng)一組網(wǎng)?完備的網(wǎng)絡(luò)隔離和安全訪問朿峪?通過EIP和NAT實(shí)現(xiàn)互聯(lián)網(wǎng)互訪?通過專線和VPN整合自有數(shù)據(jù)中心14KRDS:基于MySQL的關(guān)系數(shù)據(jù)庫服務(wù)?高可用MySQL實(shí)例?完善的監(jiān)控信息?自動(dòng)備份數(shù)據(jù).詳盡的操作日志15緩存數(shù)據(jù)庫Redis:實(shí)現(xiàn)對(duì)常用數(shù)據(jù)的快速訪問￡UJe?通過控制臺(tái)即時(shí)開通、部署、配置和擴(kuò)容Redis服務(wù)-支持Redis集群模式和單主從齢-通過白名單或VPC策略對(duì)服務(wù)訪問進(jìn)行安全控制?緩存服務(wù)監(jiān)控告警16對(duì)象存儲(chǔ)KS3:存儲(chǔ)和操作大容量圖像.視頻等文件￡UJe提交：控制臺(tái)、命令行、API管理:圖片處理，訪問控制tanQomef^aINRS*MiAimaKflA1SU0Hmzttij>3HG3IK2I'c|an9o<TMii*madto(hotttagi*photo*AW5SrtA-h/antoiawuclwSonwi.9??.2M7-l^W.?ja4?37.PMpsHL7-W-WMtU3i拗gMD-W^L&JLSpiq血頑?加IttMJJSO—2M7"l?Jt_lW22_FW四BL?K>20iaU:iaZLLJXI!krwi_Swt_JtaMO-JMg血頑?加IttMJL9U1KB?流量統(tǒng)計(jì)分析:按天、網(wǎng)絡(luò)線路、地區(qū)統(tǒng)計(jì)?訪問統(tǒng)計(jì)分析:每個(gè)對(duì)象訪問次數(shù)統(tǒng)計(jì)17hopc//<)p>ornBdxn/kscdndptectj^hctp//4pp4om?dxn/hnp^pp<?om*dvn/TW跡Mehttpc//app^omadxn/st?tic/B^mMcU￡O=aI運(yùn)莒商訪冋占比苓月整用球l?!：朝3.40MIIB辜月34.14Kbps5筆貫3fl.J4Kb|S?頁面加速-靜態(tài)加速-動(dòng)態(tài)加速—?jiǎng)屿o混合加速?多媒體文件加速音tK?下載-軟件下載CDfl_____窯心四環(huán)?3etttstf■lULHCON>?5ZZJ8latglM害2/3I技旅■城客排擰ki3(j?moM<iMdcn60Cikl?l￥Vft-C4mimgjcHTMIMlifEAdMn____it技tMWn：2O17ff10^2061630■S.Q6KIVH蹄KKIVB俾530099.77KtEH內(nèi)容分發(fā)網(wǎng)絡(luò)(CDN):提高用戶訪問速度，分析用戶訪問行為數(shù)據(jù)￡UJeWWWKSYUNCOM__游戲下載OJDOUA____________________________________________________________________________________________________________________1EV2009炳100001:44]I(P30D32t]SOQQ051?!>00006:4DI(112013820!02C10MId蛍011:40Id^iC1320Ia>2D15.D010*21]16.40田勃1心縁農(nóng)318KMR:實(shí)現(xiàn)日志數(shù)據(jù)分析￡UJe?基于Ambari實(shí)現(xiàn)集群快速部署和擴(kuò)容?集成金山云告警服務(wù)?利用KRDS實(shí)現(xiàn)支撐數(shù)據(jù)庫的高可用應(yīng)用VPC大麟VPC大數(shù)據(jù)接入子網(wǎng)E據(jù)核心子冋WebserverBlgData窖戶端WebserverBigData，戶，WebserverFlumeClientAgentFlumeClientAgentFlumeClientAgentFlumeCollectorAgentHadoopClientFlumeCollectorAgentHadoopClientHadoop大數(shù)據(jù)平臺(tái)Flume導(dǎo)入的原始日孟/etl/weblog/rawlog/year=2014/month=10/day=10過波車復(fù)日志后的歡據(jù)/etl/weblog/deduplogs/year=2014/month=10/day=10加入會(huì)話信息后的數(shù)據(jù)/etl/weblog/sessioni2edhgs/year=2014/month=10/day=10導(dǎo)入的CRM系統(tǒng)數(shù)據(jù)庫數(shù)據(jù)/data/crm過洩兩復(fù)曰志/appsAveblog/dedup.pig給日志加入會(huì)話信息的Spark程序/apps/weblog/JavaSessionize-1.0-SNAPSHOTjar創(chuàng)建Hive表的腳本/apps/weblog/create-parquet-log-table.hqlOozie工作流腳本/app/oozie-workflows/weblog/processing.xml日志分析翻本/apps/webllog/query_xx3thq1負(fù)載均衡器19￡UJe云監(jiān)控和云告警:實(shí)時(shí)監(jiān)控云服務(wù)實(shí)例，并自動(dòng)發(fā)送告警信息?完善的監(jiān)控指標(biāo)?可自定義的告警策略?自定義監(jiān)控儀表盤4=工単云i偵努^9^?H機(jī)?粋P自定安胞1天3天?NATCPU邛均負(fù)魏【毎衡ttJfiCPU*MongoDBCPUPJWff?烏旳PCPU罕為策IE?EPC■共蛔s11/1411/15111IE11/1711/1&11/1911/20三c￡)￡LD￡闕輯敝據(jù)摩牘與BN析C5賦UWffi芯堂全域名曜BIDC資產(chǎn)宣理—■^―5in|(]ISnnini云監(jiān)枠>云匱務(wù)>云主扒>python-web-srvOL曲120提綱?金山與戸■品家族?金山云應(yīng)用場(chǎng)景-互聯(lián)網(wǎng)應(yīng)用,—視頻應(yīng)用-深度學(xué)習(xí)應(yīng)用,金山有互聯(lián)網(wǎng)金融彳丁業(yè)應(yīng)用場(chǎng)景企業(yè)視頻應(yīng)用架構(gòu)￡UJeOBS視頻生產(chǎn)端KSYMediaEditor短視頻編輯SDKKSYLive直播SDK端姍素材播放端KSYMediaPlayer移動(dòng)端播放SDKKSPlayerWeb端視頻播放SDK視頻消費(fèi)端APP/WEB22￡UJe直播控制臺(tái)：靈活配置和監(jiān)控直播場(chǎng)景.推流.拉流.錄制.截屏.轉(zhuǎn)碼?安全0￡LBcj=計(jì)貝鬱源?阿塔瞄63皤關(guān)毒牌與BN?棍婀踽順?■誠Jifi?域名空值）標(biāo)識(shí)。:uSOedeO多退宮盤案工單文檔中心I推流信息CNAME0I拉流信息CNAME0舞作M2D09O4A?中梭通過H除ICDNUOifttf名】D腕.rtmpvdoud.krtrnpy/a^omad.cn/(Apps-cdrtcofnNam?)/{SteamName}img^omadxn.up^loud.ks.cdn.cow囂當(dāng)了。頑cMAppNamW{気?申婭1I應(yīng)用信息擇作轉(zhuǎn)碼模板appOOl截圖設(shè)置應(yīng)用名稱HLS|g^Sa?W(?)I直播中斷起時(shí)僧）斷狀I(lǐng)握作live20關(guān)閉編輯23點(diǎn)播控制臺(tái)?管理點(diǎn)播姍?配置轉(zhuǎn)碼規(guī)則?點(diǎn)播數(shù)據(jù)統(tǒng)計(jì)分析:管理點(diǎn)播視頻，統(tǒng)計(jì)點(diǎn)播數(shù)據(jù)帶寬焼計(jì)商啓?上樁流■:564-29KB下遂流■:&83.14KB上搟■下*W2flKB3ITO63KB2Sff97KB1A531KB0006?云點(diǎn)皤應(yīng)1鹼計(jì)報(bào)表開岫間：2O17AOm皓商間：2017/11/194fl1710112017101-?20171#1720171020201710232017103620171A29201T1101201711CW2Q1711Q72Q171T1D2Q1711132017111620171124提綱?金山與戸■品家族?金山云應(yīng)用場(chǎng)景-互聯(lián)網(wǎng)應(yīng)用視頻應(yīng)用+-深度學(xué)習(xí)應(yīng)用,金山有互聯(lián)網(wǎng)金融彳丁業(yè)應(yīng)用場(chǎng)景￡UJe25￡UJe深度學(xué)習(xí)是高維浮點(diǎn)密集型計(jì)算-基于卷積神經(jīng)網(wǎng)絡(luò)的深度學(xué)習(xí)算法進(jìn)行手寫數(shù)字識(shí)別(以mnist_deep.py為例)-模型參數(shù)個(gè)數(shù):(5*5*32+32)+(5*5*64+64)+(7*7*64*1024)+好024*10)-大量的訓(xùn)練數(shù)據(jù)要求大存儲(chǔ)，高吞吐-大量矩陣運(yùn)算ConvConvOutput26采用GPU進(jìn)行深度學(xué)習(xí)，大幅度提高模型訓(xùn)練和推理速度DRAMCPUSpythonmnistdeep.py273J匕0V/33s9J5￡UJeWWWKSYUNCOMControlALUALUALUALUCacheCPU(28vCPU)GPU(TeslaP40)717秒82秒金山云基于GPU的深度學(xué)習(xí)laaS￡UJe-GPU服務(wù)器和標(biāo)準(zhǔn)CPU服務(wù)器融合?融合高速內(nèi)部網(wǎng)絡(luò)?融合大容量存儲(chǔ)面向推理業(yè)務(wù)金山云安全金山云VPC網(wǎng)絡(luò)/EIP/NAT/SLBCUDAGPU云實(shí)例業(yè)務(wù)網(wǎng)絡(luò)20Gb（支持VPC&含存儲(chǔ)）高性能集群存儲(chǔ)KS3存儲(chǔ)28KDL:深度學(xué)習(xí)PaaS平臺(tái)，快速實(shí)踐深度學(xué)習(xí)技術(shù)￡UJe模型開發(fā)QSIDEma分析-定義深度學(xué)習(xí)訓(xùn)練模型H務(wù)模型訓(xùn)練域名旳-執(zhí)行模型訓(xùn)公idDC網(wǎng)鄭遍練任務(wù)MatbonchATWtt模型服務(wù)，3R虞學(xué)習(xí)平白-利用模型進(jìn)行推理個(gè)人W4消息制fw平如ATM>kdl>■￡開發(fā)詳情tf-envOOl運(yùn)行中服務(wù)嶼notebooM^iatt:120.92.91J17:301S9|*|岫岫Ea3??fiIs]基本信息IMIS融：tf-?rM)01tt*:爆行中三ftJ?S4間：2017-111417^756或；tensorflowks3bucket掛載信息ks3_buckecmyang-*O01套餐信息?CPUSttfSK多誼音工華皿中心ssh-p30059roo<?>120.9291J17環(huán)墳ID.?429?14c-dS2-4012-9b3(>-5c8595e73245SR(r?Vl*XM9nWV??Wil"時(shí)間2017-11-1417:4??主Jk號(hào)kscibutMdNdngWtcom―阪本13.0子■■-locM.dlr/mnt/k$3_bucketVmyang-M0129提綱?金山與戸■品家族?金山云應(yīng)用場(chǎng)景-互聯(lián)網(wǎng)應(yīng)用視頻應(yīng)用-深度學(xué)習(xí)應(yīng)用金山云互聯(lián)網(wǎng)金融行業(yè)應(yīng)用場(chǎng)景30|5答I編［區(qū)統(tǒng)一控制臺(tái)（管理員、租戶）大數(shù)據(jù)平臺(tái)數(shù)據(jù)庫平臺(tái)運(yùn)維運(yùn)營(yíng)監(jiān)控告警vt#計(jì)費(fèi)日志審計(jì)混合云管理平臺(tái)金山公有云計(jì)算網(wǎng)絡(luò)存儲(chǔ)計(jì)劃服務(wù)目錄用戶工單系統(tǒng)瀰呈審批智能云資源調(diào)度平臺(tái)計(jì)算虛擬化存儲(chǔ)虛擬化ServerSAN集中式存儲(chǔ)雌利諸網(wǎng)絡(luò)虛擬化SDNNFV安全增強(qiáng)vFireWall安華且密鑰整合的混合云平臺(tái)￡UJe基礎(chǔ)架構(gòu)31利用公有云的彈性實(shí)施大數(shù)據(jù)平臺(tái)KS3對(duì)象存儲(chǔ)KECEPC大螭平臺(tái)KEC關(guān)系數(shù)據(jù)庫KECEPC應(yīng)用1VPC大數(shù)據(jù)VPC接入子網(wǎng)終端子網(wǎng)核心子網(wǎng)應(yīng)用2VPC子網(wǎng)ACL消叫列Kafka32￡UJe利用深度學(xué)習(xí)技術(shù)提升風(fēng)控能力?AutoEncoder自編碼器算法實(shí)現(xiàn)欺詐檢測(cè),訓(xùn)練數(shù)據(jù)-284,807交易數(shù)據(jù)，%0.17是欺詐，數(shù)據(jù)非常不平衡一出于隱私考慮，數(shù)據(jù)經(jīng)過主成分分析（PrincipalComponentAnalysis,PCA）,難以進(jìn)行特征抽取?