DevOps和AIOps探索及實(shí)踐課件

阿里搜索的DevOps和AIOps探索及實(shí)踐阿里搜索的1阿里搜索的阿里搜索的1目錄DevOps-基礎(chǔ)調(diào)度框架DevOps-運(yùn)維管控平臺(tái)AIOps-探索及實(shí)踐目錄2目錄目錄2搜索AI·OS搜索AI·OS3搜索AI·OS搜索AI·OS3DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度4DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度DevOps基礎(chǔ)歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代緩慢。在線服務(wù)基礎(chǔ)運(yùn)維具備相似性：在線服務(wù)管理、數(shù)據(jù)Dump&Build、數(shù)據(jù)回流鏈路管理等。差異點(diǎn)是不同業(yè)務(wù)系統(tǒng)的管控模型不一樣。DevOps運(yùn)維管控平臺(tái)歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代5歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維簡(jiǎn)化運(yùn)維概念DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維6DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維DevOps運(yùn)維管控平臺(tái)：DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維從系統(tǒng)到全鏈路DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維7DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維DevOps運(yùn)維管控平臺(tái)：DevOps：Continuous

DeliveryDevOps：ContinuousDelivery8DevOps：ContinuousDeliveryDev? SP,

Wsearch? TPP????iG

raph??? HA3? ES? HA3? HA3???AIO

ps K

Mon? Metrics+Log+

Event? alarm->action?? +SP,

WsearchTPP????

iG

raph??HA3ESHA3

HA3???A

IO

ps KM

onMetrics+Log+

Eventalarm->action??+AIOps在搜索的探索? SP,Wsearch?iGraph? HA3?AIO9? SP,Wsearch?iGraph? HA3?AIO背景QPS預(yù)估差異過大服務(wù)間存在錯(cuò)峰服務(wù)QPS存在波動(dòng)周期性規(guī)律目標(biāo)打破靜態(tài)分配資源，按時(shí)按需分配根據(jù)流量動(dòng)態(tài)調(diào)整，應(yīng)對(duì)突發(fā)流量AIOps-大促突發(fā)流量變化：彈性伸縮背景AIOps-大促突發(fā)流量變化：彈性伸縮10背景AIOps-大促突發(fā)流量變化：彈性伸縮背景AIOps-大AIOps-大促突發(fā)流量變化：彈性伸縮AIOps-大促突發(fā)流量變化：彈性伸縮11AIOps-大促突發(fā)流量變化：彈性伸縮AIOps-大促突發(fā)流AIOps-資源碎片整理AIOps-資源碎片整理12AIOps-資源碎片整理AIOps-資源碎片整理12AIOps-日常化容量評(píng)估背景從1000+到10000+的業(yè)務(wù)規(guī)模爆炸業(yè)務(wù)變化是常態(tài)目標(biāo)自動(dòng)化申請(qǐng)合理的（成本低，安全）容器資源容量評(píng)估克隆仿真自動(dòng)化性能壓測(cè)平臺(tái)價(jià)格調(diào)控小規(guī)格實(shí)例提升資源分配率平衡CPU&Mem&Disk使用AIOps-日?；萘吭u(píng)估13AIOps-日?；萘吭u(píng)估AIOps-日?；萘吭u(píng)估13++c??gg????A??L??&EiM&e L???L基礎(chǔ)設(shè)施建設(shè)高效管控的執(zhí)行-夯實(shí)的DevOps一切運(yùn)維對(duì)象樣本化-運(yùn)維樣本庫(kù)算法的高效迭代優(yōu)化-算法產(chǎn)品化AIOps-平臺(tái)化建設(shè)++cgg?A?L??EiM&e L?基礎(chǔ)設(shè)施建設(shè)高效管14++cgg?A?L??EiM&e L?基礎(chǔ)設(shè)施建設(shè)高效管THANK

YOU！THANKYOU！15THANKYOU！THANKYOU！15阿里搜索的DevOps和AIOps探索及實(shí)踐阿里搜索的16阿里搜索的阿里搜索的16目錄DevOps-基礎(chǔ)調(diào)度框架DevOps-運(yùn)維管控平臺(tái)AIOps-探索及實(shí)踐目錄17目錄目錄17搜索AI·OS搜索AI·OS18搜索AI·OS搜索AI·OS18DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度19DevOps基礎(chǔ)調(diào)度框架：復(fù)雜行列式服務(wù)調(diào)度DevOps基礎(chǔ)歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代緩慢。在線服務(wù)基礎(chǔ)運(yùn)維具備相似性：在線服務(wù)管理、數(shù)據(jù)Dump&Build、數(shù)據(jù)回流鏈路管理等。差異點(diǎn)是不同業(yè)務(wù)系統(tǒng)的管控模型不一樣。DevOps運(yùn)維管控平臺(tái)歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代20歷史問題存在三套各自獨(dú)立的運(yùn)維系統(tǒng)，維護(hù)難、投入多，架構(gòu)迭代DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維簡(jiǎn)化運(yùn)維概念DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維21DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維DevOps運(yùn)維管控平臺(tái)：DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維從系統(tǒng)到全鏈路DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維22DevOps運(yùn)維管控平臺(tái)：基礎(chǔ)運(yùn)維DevOps運(yùn)維管控平臺(tái)：DevOps：Continuous

DeliveryDevOps：ContinuousDelivery23DevOps：ContinuousDeliveryDev? SP,

Wsearch? TPP????iG

raph??? HA3? ES? HA3? HA3???AIO

ps K

Mon? Metrics+Log+

Event? alarm->action?? +SP,

WsearchTPP????

iG

raph??HA3ESHA3

HA3???A

IO

ps KM

onMetrics+Log+

Eventalarm->action??+AIOps在搜索的探索? SP,Wsearch?iGraph? HA3?AIO24? SP,Wsearch?iGraph? HA3?AIO背景QPS預(yù)估差異過大服務(wù)間存在錯(cuò)峰服務(wù)QPS存在波動(dòng)周期性規(guī)律目標(biāo)打破靜態(tài)分配資源，按時(shí)按需分配根據(jù)流量動(dòng)態(tài)調(diào)整，應(yīng)對(duì)突發(fā)流量AIOps-大促突發(fā)流量變化：彈性伸縮背景AIOps-大促突發(fā)流量變化：彈性伸縮25背景AIOps-大促突發(fā)流量變化：彈性伸縮背景AIOps-大AIOps-大促突發(fā)流量變化：彈性伸縮AIOps-大促突發(fā)流量變化：彈性伸縮26AIOps-大促突發(fā)流量變化：彈性伸縮AIOps-大促突發(fā)流AIOps-資源碎片整理AIOps-資源碎片整理27AIOps-資源碎片整理AIOps-資源碎片整理27AIOps-日常化容量評(píng)估背景從1000+到10000+的業(yè)務(wù)規(guī)模爆炸業(yè)務(wù)變化是常態(tài)目標(biāo)自動(dòng)化申請(qǐng)合理的（成本低，安全）容器資源容量評(píng)估克隆仿真自動(dòng)化性能壓測(cè)平臺(tái)價(jià)格調(diào)控小規(guī)格實(shí)例提升資源分配率平衡CPU&Mem&Disk使用AIOps-日?；萘吭u(píng)估28AIOps-日?；萘吭u(píng)估AIOps-日?；萘吭u(píng)估28++c??gg????A??L??&EiM&e L???L基礎(chǔ)設(shè)施建設(shè)高效管控的執(zhí)行-