AIGC助力大規(guī)模對象存儲服務OSS的能效提升

AIGC助力大規(guī)模對象存儲服務OSS的能效提升阿里巴巴資深技術專家對象存儲負責人羅慶超大規(guī)模對象存儲服務OSS在開發(fā)運維中的挑戰(zhàn)和目標海量存儲量阿里云400萬用戶？？？慢請求海量工單慢請求海量工單簡單快捷易用性99.995%可用性SLA智能運維智能運維AIOPS開發(fā)運維Dev開發(fā)運維DevOPS數(shù)據(jù)運維DataOPS人肉運維Person人肉運維PersonOPS腳本運維ScriptOPS場景1：通過AI做好根因分析支撐可用性SLA達成—背景X萬億請求存儲規(guī)模X萬億請求存儲規(guī)模99.995%99.995%可用性SLA根因分析是核心赤驥運維基礎模塊場景1：通過AI做好根因分析支撐可用性SLA達成—赤驥運維基礎模塊簡單易用POPAPIPOPAPI…….釘釘分析報告釘釘機器人WEB釘釘機器人WEB頁面展示監(jiān)控報警運維數(shù)據(jù)管理查詢模塊監(jiān)控報警運維數(shù)據(jù)管理查詢模塊分析結果專家經驗集群指標畫像機器指標畫像用戶指標畫像集群指標畫像機器指標畫像用戶指標畫像實體指標特征畫像（基線庫）集群指標異常機器指標異常集群指標異常機器指標異常異常庫事件跟蹤聚合異常根因報告關聯(lián)異常事件跟蹤聚合異常根因報告關聯(lián)異常分析結果錯誤根因分析執(zhí)行層ConstraintConstraintK-sigmaLOFLOF算法引擎算法引擎分析診斷引擎分析診斷引擎分析診樹配置分析診樹配置根因模型根因模型智能算法庫異常感知模塊數(shù)據(jù)機器級機器級功能模塊級非功能模塊監(jiān)控自身業(yè)務模塊業(yè)務模塊Trace后端日志后端日志前端日志前端日志工單事件工單事件運維事件運維事件EventOLAPOLTP文件存儲對象存儲底層平臺實時計算離線計算OLAPOLTP文件存儲對象存儲底層平臺實時計算離線計算機器學習場景1：通過AI做好根因分析支撐可用性SLA達成—分析流程赤驥告警分析任務SLS告警分析任務構建赤驥告警分析任務SLS告警分析任務構建TRACETRACE分析樹構建分析樹構建分析樹配置分析樹配置專家經驗專家經驗分析樹構建'.異常集合模塊B（IP地址2）模塊B（IP地址3）特征庫特征庫指標庫指標庫'.模塊C（IP地址4）'.模塊C（IP地址4）異常檢測算法鏈路異常分析根因分析候選根因根因模型模型訓練根因分析根因分析候選根因根因模型模型訓練根因分析場景1：通過AI做好根因分析支撐可用性SLA達成—效果完成百萬錯誤分析（百萬錯誤在1分鐘內產生）30分鐘添加新檢查項到系統(tǒng)場景2：智能分析訪問全鏈路追蹤慢請求—背景租戶A要求秒開，租戶B要求不超過2秒，租戶A要求秒開，租戶B要求不超過2秒，……場景2：智能分析訪問全鏈路追蹤慢請求—邏輯架構根因定位異常監(jiān)控499499超時……實時數(shù)據(jù)性能分析CPUCPUMEMMEM慢請求! 對象前端機分析對象功能層分析對象功能層分析 盤古層分析 機器層分析增)問底層慢性能異常(CPU、MEM、升級檢測等場景2：智能分析訪問全鏈路追蹤慢請求—效果用戶延時集群延時機器延時售后服務人工參與遇到問題針對進入工單系統(tǒng)的問題定點優(yōu)化專家經驗專家經驗模型迭代工單系統(tǒng)數(shù)據(jù)工單系統(tǒng)數(shù)據(jù)NLPNLP接入數(shù)據(jù)清洗基于工單標簽分類，費用類工單居然占比最大分析流轉環(huán)節(jié)，服務時長降低X倍通過智能分析，大量節(jié)約手工標注開銷40+40+3輪迭代工單分類準確率從遇到問題售后服務