企業(yè)級技術(shù)中臺架構(gòu)的實踐課件

1、企業(yè)級技術(shù)中臺架構(gòu)的實踐技術(shù)創(chuàng)新 變革未來很早就和客戶進(jìn)行數(shù)智化探索與實踐讓數(shù)據(jù)成為生產(chǎn)要素高效的數(shù)智化轉(zhuǎn)型ICT + 互聯(lián)網(wǎng) 雙基因數(shù)據(jù)智能 + 智能鏈接 雙翼驅(qū)動8.5億服務(wù)超過8.5億終端用戶80+保障全球80多個國家的通信暢通250+服務(wù)全球250多家企業(yè)、政府客戶企業(yè)IT架構(gòu)轉(zhuǎn)型的背景商業(yè)模式 變化客戶行為 變化產(chǎn)品應(yīng)用 變化渠道變化生態(tài)變化架構(gòu)轉(zhuǎn)型的挑戰(zhàn)如何實現(xiàn)系統(tǒng) 架構(gòu)平穩(wěn)改造01如何高效提升 研發(fā)效率02如何快速發(fā)布 交付微服務(wù)應(yīng)用03如何平穩(wěn)運行 和高效的運維041+1+1方法論技術(shù)中臺1中臺DevOps理念1理念組織結(jié)構(gòu)變化1變化頂層理念+具體建設(shè)+組織運營技術(shù)中臺的解決方

2、案面向政企面向家庭面向個人電商企業(yè)直連應(yīng) 用 層智慧中臺極簡受理解決方案新零售解決方案5G生態(tài)解決方案智慧家庭解決方案交易類商品類權(quán)益類營銷類合作伙伴類支付類服務(wù)類服務(wù)治理能力編排運 營 層數(shù)據(jù)中臺業(yè)務(wù)中臺AI中臺微服務(wù)管控&能力編排客戶訂單商品銷售中 中心中心中心心結(jié)算 中心權(quán)益中 合作伙 心伴中心人力中心物資 中心BSSOSS調(diào)度故障中編排中 中心心心MSS數(shù)據(jù)模型算法學(xué)習(xí)訓(xùn)練推理通用類能力（如規(guī)則引擎、流程引擎等）數(shù)據(jù)庫技術(shù)計算服務(wù)網(wǎng)絡(luò)服務(wù)存儲服務(wù)中間件技術(shù)大數(shù)據(jù)技術(shù)微服務(wù)技術(shù)彈性計算技術(shù)PASSIASS內(nèi)部外 部統(tǒng) 一 開 發(fā)統(tǒng)統(tǒng)一運安維全開發(fā)運維 一體化 (DevOps)應(yīng)用急速孵化

3、器-AEIAPP ExtremeIncubator按需定制，積木搭建。 極速開發(fā)，創(chuàng)新賦能。智慧運營大腦-POBPowdeful OperateBrain意圖使能，編排協(xié)同。 持續(xù)迭代，能力運營。智能技術(shù)底座-ITF Intellect Technology Foundation資源整合，能力沉淀。 動態(tài)伸縮，智能運維。技術(shù)中臺核心競爭力技術(shù)生態(tài)產(chǎn)品系列覆蓋 企業(yè)研發(fā)全生命周期提供全面的技術(shù)工具保 障提供一站式的解決方案覆蓋全面采用中臺架構(gòu)和模塊化 設(shè)計可組合拆分，靈活交付易于整合企業(yè)原有基礎(chǔ) 設(shè)施可自由擴(kuò)展架構(gòu)靈活開展系統(tǒng)穩(wěn)定建設(shè)建立多層防御體系提升系統(tǒng)反脆弱能力保障業(yè)務(wù)產(chǎn)品穩(wěn)定運 行穩(wěn)定可

4、靠在運營商/政企領(lǐng)域， 上百個電信級企業(yè)項 目的落地將丌同行業(yè)項目的最 佳實踐沉淀到產(chǎn)品行業(yè)沉淀覆蓋全面：架構(gòu)轉(zhuǎn)型一站式解決方案微服務(wù)建設(shè) 服務(wù)管理 持續(xù)交付 一鍵部署研發(fā)態(tài)灰度發(fā)布 應(yīng)用管理 服務(wù)管控 服務(wù)安全問題定位 監(jiān)控告警 運維自動化運維態(tài)運行態(tài)覆蓋全面：提供全面的分布式技術(shù)組件分布式數(shù)據(jù)庫中間件分布式消息中間件分布式緩存中間件分布式服務(wù)框架分布式流程平臺分布式內(nèi)存數(shù)據(jù)庫解決單庫訪問瓶頸問題實現(xiàn)應(yīng)用解藕和削峰填谷的能力提升應(yīng)用系統(tǒng)數(shù)據(jù)操作性能實現(xiàn)業(yè)務(wù)解藕，具備水平擴(kuò)容能力實現(xiàn)流程編排，統(tǒng)一調(diào)度實現(xiàn)更高性能的數(shù)據(jù)訪問能力SCP覆蓋全面：低代碼平臺加速應(yīng)用孵化界面編排服務(wù)編排流程編排界面可

5、視化開發(fā)所見即所得前后端結(jié)合業(yè)務(wù)流程可視化編排流程環(huán)節(jié)可視化配置流程規(guī)則結(jié)合元數(shù)據(jù)和通用接口原子服務(wù)可視化編排原子服務(wù)可視化組合數(shù)字化需求業(yè)務(wù)中臺數(shù)據(jù)中臺客戶中心中臺業(yè)務(wù)能力面部識別身份識別智能小秘數(shù)據(jù)驅(qū)動AI驅(qū)動數(shù)據(jù)商機(jī)洞悉Alibaba CloudGoogle CloudPrivate Cloud產(chǎn)商品 中心訂單中心 計費/賬務(wù) 權(quán)益中心 資源中心網(wǎng)絡(luò)開通業(yè)務(wù)信息采集業(yè)務(wù)流程流轉(zhuǎn)業(yè)務(wù)信息共享模型編排架構(gòu)靈活：多云組件適配能力運維管理資源管理自動化運維日志管理全棧監(jiān)控服務(wù)管理統(tǒng)一門戶運營門戶運維門戶消費者門戶技 術(shù) 服 務(wù)組件分布式消息分布式緩存分布式數(shù)據(jù)庫分布式服務(wù)框架分布式內(nèi)存數(shù)據(jù)庫第三

6、方組件CTGMQCTGCacheUDALSC/Dubbo.研發(fā)管理開發(fā)框架構(gòu)建管理軟件資產(chǎn)庫測試管理質(zhì)量中心能力開放平臺阿里組件開源組件阿里MQMySQLDRDSPostgreSQLEDASHadoopGTSSpark.彈性計算平臺資源適配資源調(diào)度彈性伸縮資源模板服務(wù)部署Alibaba CloudGoogle CloudOpenstack實現(xiàn)云，阿里云，天翼云，天宮云，AWS云的適配能力。同一套產(chǎn)品適配多種技術(shù)組件。架構(gòu)靈活：云管平臺靈活部署能力云管理平臺性能管理中心容器管理中心監(jiān)控中心日志中心Base門戶CMDB緩存Nginx數(shù)據(jù)庫CICD中心非容器化部署容器化部署云管平臺部署方式靈活支持精

7、簡化部署業(yè)務(wù)承載方式豐富應(yīng)用、中間件管理功能可編排發(fā)布、部署、升級簡單方便落地數(shù)百個電級項目 組件穩(wěn)定建設(shè)不斷強(qiáng)化豐富故障場景實現(xiàn) 模擬精確注入指定故障擴(kuò)展開源組件功能 實現(xiàn)容災(zāi)功能權(quán)限認(rèn)證，操作審計 黑白名單，數(shù)據(jù)脫敏穩(wěn)定可靠故障演練提升容錯性和可恢復(fù)性容災(zāi)建設(shè)保障業(yè)務(wù)的平穩(wěn)運行安全增強(qiáng)滿足企業(yè)級的安全管控 要求穩(wěn)定加固增強(qiáng)產(chǎn)品的穩(wěn)定性穩(wěn)定可靠：基于故障演練的系統(tǒng)攻防提升產(chǎn)品穩(wěn)定性，引入故障演練，主動注入 故障，修復(fù)穩(wěn)定性問題。提供一鍵模擬各種常見故障，持續(xù)積累故障 庫，豐富故障場景實現(xiàn)。01故障注入、故障生命周期管理故障演練用例管理0203演練流程自動化執(zhí)行故障演練大盤0405生成故障演練

8、報告HATT穩(wěn)定可靠：緩存集群穩(wěn)定性提升5000010000150002000025000300000 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59原生Redis與Zcache持久化：OPS對比Redis讀Redis寫Zcache讀Zcache寫1.61.41.210.80.60.40.200 1 2 3 4

9、 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59原生Redis與Zcache持久化：LATENCY(ms)對比Redis讀Redis寫Zcache讀Zcache寫用戶資料放置緩存組件實現(xiàn)高效訪問印尼某運營商用戶數(shù)：1.5億開戶持久化功能后，當(dāng)磁盤IO阻塞，R edis OPS會下降很多，會造成整個服務(wù)不可用對持久化機(jī)制改造2W

10、+ OPS在磁盤IO出現(xiàn)阻塞現(xiàn)象時， ZCache組件能提供2W+ OPS的訪問能力穩(wěn)定可靠：消息流控提升最大緩存消息量為：1000*100一段時間后， consumer2 異常退出C1C2C3隊列100隊列100隊列100最大緩存消息量為：1000*150C1隊列150C2異常crashC3隊列150ZMQ服務(wù)端 某TOPIC總隊列數(shù)300ZMQ服務(wù)端 某TOPIC總隊列數(shù)300開源的RocketMQ消息組件在消息量超大情況 下會影響系統(tǒng)可用性定 期 開 展 促 銷 活 動有效保障項目促銷活動業(yè)務(wù)正常開展實現(xiàn)topic級別的 消息流控能力穩(wěn)定可靠：故障自愈能力建設(shè)每月23次服務(wù)不可用MQ集群

11、部署在虛機(jī)， 磁盤性能差，磁盤IO不穩(wěn)定提供故障自愈方案，主動切換資源更優(yōu)的機(jī)器節(jié)點； 根據(jù)業(yè)務(wù)消息處理類型決策切換至內(nèi)存消息處理模式某運營商項目資源緊缺業(yè)務(wù)彈性伸縮主機(jī)異常中間件自愈 主機(jī)異常應(yīng)用自愈 磁盤滿自動清理進(jìn)程掛了重啟主機(jī)CPU超高處理 SQL慢自修復(fù)場景配置異常場景 診斷匹配業(yè)務(wù)指標(biāo)/CPU超閾值 CPU超閾值主機(jī)宕機(jī)/中間件節(jié)點掛 主機(jī)宕機(jī)/業(yè)務(wù)實例掛 文件系統(tǒng)使用率告警進(jìn)程掛 SQL響應(yīng)慢自愈服務(wù)調(diào)用應(yīng)用生命周期清理文件系統(tǒng)中間件自愈-主機(jī)異常 CPU占用Top10進(jìn)程 業(yè)務(wù)自愈-主機(jī)異常 慢SQL的TOPN進(jìn)程拉起通知報告處理結(jié)果通知 出現(xiàn)異常通知 故障自愈報告持續(xù)半年無故

12、障行業(yè)沉淀：緩存集群上限擴(kuò)容對集群節(jié)點通信機(jī)制改造，實現(xiàn)節(jié)點上限的突破redisredisredisredisredis普通節(jié)點管理節(jié)點redisredisredisredisredis印尼某運營商200節(jié)點用戶數(shù)：1.5億超過開源Redis Cluster集群節(jié)點 上限提升4倍，至1000節(jié)點行業(yè)沉淀：一鍵部署通過一鍵部署實現(xiàn)項目軟件的高效部署一鍵部署需求 收集一鍵部署方案 評審一鍵部署啟動 準(zhǔn)備一鍵部署結(jié)果 匯報一鍵部署結(jié)束 測試一鍵部署開始 執(zhí)行部署需求人工收集整理一鍵部署規(guī)劃方案評估一鍵部署規(guī)劃方案確認(rèn)一鍵部署保障級別提供一鍵部署資產(chǎn)清單,含數(shù)據(jù)庫 信息、中間件信息、應(yīng)用配置文 件信息

13、等腳本應(yīng)用鏡像包生成作業(yè)執(zhí)行報告對上線異常事件進(jìn)行分析總 結(jié)執(zhí)行作業(yè)流程的子任務(wù)，自動化測 試；測試異常自動化預(yù)處理預(yù)處理異常升級人工處理人工判斷原因，解決問題或者執(zhí)行回 退操作。作業(yè)平臺獲取資源根據(jù)作業(yè)流程執(zhí)行部署任 務(wù)，支持從裸機(jī)到應(yīng)用上 線的全面部署執(zhí)行過程可視化部署對象多樣化行業(yè)沉淀：資源利用率優(yōu)化ZMQ SERVER共享集群消息生產(chǎn)集群（租戶:CRM_PROD）消息生產(chǎn)集群（租戶:OSS_PROD）消息消費集群（租戶:CRM_PROD）消息消費集群（租戶:OSS_PROD）BUSINESS_TOPICBUSINESS_TOPICBUSINESS_TOPICBUSINESS_TOPIC

14、不同的租戶CRM和OSS擁有同樣的邏輯TOPIC，但兩個租戶互不可見，數(shù)據(jù)隔離基于多租戶機(jī)制提供共享集群200+機(jī)器能力中心數(shù)：20+；研發(fā)環(huán)境數(shù)：60+ 每套環(huán)境搭建中間件集群，各自申請， 導(dǎo)致機(jī)器占用多，資源利用率低僅需6臺機(jī)器行業(yè)沉淀：電信級分布式數(shù)據(jù)庫分片規(guī)則管理codepdm定制團(tuán)隊codepdm產(chǎn)品團(tuán)隊db2db3db0db1code應(yīng)用 +code1. 部署1. 部署2. 加載規(guī)則3. 分庫訪問分片規(guī)則支持定制化， 規(guī)則分團(tuán)隊維護(hù)統(tǒng)一加載使用更方便重新設(shè)計分片規(guī)則的加載機(jī)制在國內(nèi)/國際運營商領(lǐng)域，政企領(lǐng)域，工業(yè)互聯(lián)網(wǎng)領(lǐng)域有眾多項目落地技術(shù)中臺助力數(shù)字化轉(zhuǎn)型中國中國電信、中國移 動

15、、中國聯(lián)通等亞太50+StarHub，AIS，smartfren，Airtel等歐洲20+KPN，POST，Orange等美洲50+TELMEX， NATCOM， Digicel等非洲50+MTN， telecom，TTNet，ECoNet等1800+活躍應(yīng)用2000次日CICD構(gòu)建200次日應(yīng)用升級接入150+產(chǎn)品技術(shù)中臺助力運營商數(shù)字化轉(zhuǎn)型實現(xiàn)數(shù)據(jù)與應(yīng)用分離服務(wù)與界面分離服務(wù)可編排界面輕量化靈活可配置應(yīng)用水平彈性可擴(kuò)展核 心 能 力IaaS門戶PaaSX86服務(wù)器網(wǎng)絡(luò)資源分布式數(shù)據(jù)庫崗位助手存儲資源能力開放管理門戶能力管理能力運維能力分析開發(fā)者門戶監(jiān)控 中心運維 操作 中心規(guī)范 約束安全管

16、理網(wǎng)廳10000號門戶BSS統(tǒng)一門戶分布式緩存分布式消息中間件分布式計算框架CPC配置中心客戶中 心受S理a中aS 心營服協(xié)同中心營銷資源中心賬務(wù)中 心批價中心策略中心客戶查詢中心渠道支持中心銷售支持中心采預(yù)中 心支付中 心充值中心結(jié)算中 心基礎(chǔ)運 營管理 中心客戶服務(wù)中心事件偵探中心3500萬+用戶量80萬/天平均訂單150萬/天高峰訂單業(yè)務(wù)效果服務(wù)積累680+查詢類業(yè)務(wù)500+規(guī)則校驗類業(yè)務(wù)400+受理類業(yè)務(wù)敏捷交付降低至0.5天原發(fā)布周期為15 天降低至10分鐘原部署時間為4 小時 技術(shù)中臺湖南電信X項目鯨智WhaleDI城市級/企業(yè)級數(shù)據(jù)智能基礎(chǔ)設(shè)施城市級/企業(yè)級數(shù)據(jù)智能基礎(chǔ)設(shè)施鯨智WhaleDI是科技旗下的數(shù)據(jù)智能品牌，致力于在云原生技術(shù)時代為通信服務(wù)、城市大腦和產(chǎn) 業(yè)互聯(lián)網(wǎng)等政府和企業(yè)客戶打造城市級或企業(yè)級數(shù)據(jù)智能基礎(chǔ)設(shè)施，同時通過聯(lián)合基礎(chǔ)技術(shù)、行業(yè)協(xié)會、 科研院所和行業(yè)業(yè)務(wù)等合作