天工自動化運(yùn)維平臺介紹

1、天工自動化運(yùn)維平臺介紹內(nèi)容整體架構(gòu)資源管理數(shù)據(jù)平臺配置管理智能調(diào)度天工整體架構(gòu)CDN數(shù)據(jù)平臺智能調(diào)度基礎(chǔ)模塊配置管理監(jiān)控管理資產(chǎn)流程CDN資源管理資源池管理服務(wù)器上架部署下架回庫服務(wù)狀態(tài)智能IDC分布拓?fù)浞?wù)屬性實(shí)時(shí)匯報(bào)區(qū)域管理運(yùn)營商管理大區(qū)管理IP庫管理服務(wù)化服務(wù)樹管理流程工單系統(tǒng)應(yīng)用拓?fù)淞鞒坦蜗到y(tǒng)目標(biāo)承接所有運(yùn)維操作流程可靈活配置設(shè)計(jì): 基于角色的流程系統(tǒng)元素: 狀態(tài)、動作、角色關(guān)聯(lián): 狀態(tài)關(guān)聯(lián)角色，角色關(guān)聯(lián)動作，人員劃分入角色變遷: 動作觸發(fā)不同狀態(tài)的變遷管理: 角色跟部門關(guān)聯(lián)，由部門leader管理應(yīng)用服務(wù)器發(fā)貨、裝機(jī)、服務(wù)部署、配置推送、下架、報(bào)廢等服務(wù)器基礎(chǔ)信息(服務(wù)、部門)變更

2、權(quán)限申請軟件升級、配置同步服務(wù)樹服務(wù)樹層次結(jié)構(gòu)產(chǎn)品線、產(chǎn)品、服務(wù)、應(yīng)用服務(wù)器同服務(wù)掛鉤服務(wù)之間可關(guān)聯(lián)服務(wù)屬性所屬部門、負(fù)責(zé)人服務(wù)的各類腳本(系統(tǒng)初始化，服務(wù)初始化/清理)服務(wù)的public key列表應(yīng)用場景基于服務(wù)、產(chǎn)品、部門做費(fèi)用統(tǒng)計(jì)故障、報(bào)警可精確定位聯(lián)系人對接流程工單對接配置管理數(shù)據(jù)平臺數(shù)據(jù)平臺技術(shù)棧日志生產(chǎn)CDN訪問日志、用戶Pingback日志Agent: Zabbix、collectd日志收集技術(shù): syslog-ng、inotify、分布式存儲存儲:hdfs、gfs日志計(jì)算離線: 入hdfs - 切片/匯聚 -Hadoop/Spark計(jì)算-入庫實(shí)時(shí): 就地(同機(jī)房匯聚)計(jì)算，實(shí)

3、時(shí)上報(bào)核心指標(biāo)數(shù)據(jù)服務(wù)數(shù)據(jù)倉庫: Hive倉庫、opentsdb-api指標(biāo)數(shù)據(jù)數(shù)據(jù)接口數(shù)據(jù)源CDN 訪問日 志Zabbix監(jiān)控?cái)?shù)據(jù)Collectd監(jiān)控?cái)?shù)據(jù)App 匯報(bào)客戶端pingback日志日志收集HDFSGluster FSCache機(jī)(日志生產(chǎn))代理機(jī)中心機(jī)分布式存儲數(shù)據(jù)計(jì)算實(shí)時(shí)計(jì)算核心指標(biāo)就地計(jì)算實(shí)時(shí)匯報(bào)(http)實(shí)時(shí)匯聚實(shí)時(shí)展示離線計(jì)算先入分布式HadoopSpark構(gòu)建Hive倉庫數(shù)據(jù)匯聚調(diào)度策略推薦流量異常預(yù)警播放流暢度數(shù)據(jù)服務(wù)數(shù)據(jù)報(bào)表APIHive 倉庫交互式查詢河圖: 數(shù)據(jù)生產(chǎn)、展示、報(bào)告一體化服務(wù)配置管理基本架構(gòu)自動化部署CDN節(jié)點(diǎn)自動化編譯系統(tǒng)(ABS)自動化編譯系統(tǒng)

4、(ABS)SCM編譯Job預(yù)發(fā)布Job發(fā)布Job測試JobJenkinsCNC repoCT repoCM repo.天工Web (CMDB)CDN服務(wù)節(jié)點(diǎn)配置任務(wù)管理任務(wù)模塊任務(wù)拆分、狀態(tài)查詢?nèi)蝿?wù)管理: 重試核心任務(wù)文件分發(fā)分發(fā)特定文件到目標(biāo)主機(jī)流程可定義服務(wù)、App部署Initialize： 裝機(jī)始化、硬盤初始化、bond等Deploy: 服務(wù)部署狀態(tài)收集服務(wù)所屬App版本狀態(tài)服務(wù)器基礎(chǔ)信息(硬件、OS等)自動化部署OS初始化操作系統(tǒng)裝機(jī)、系統(tǒng)初始化Puppet Agent服務(wù)key 安裝服務(wù)部署視頻、靜態(tài)、調(diào)度等業(yè)務(wù)服務(wù)重啟、下線應(yīng)用變更升級、灰度升級軟件版本回滾配置變更配置同步配置回滾智能調(diào)度架構(gòu)實(shí)時(shí)IDC帶寬播放 流暢度數(shù)據(jù)中心準(zhǔn)實(shí)時(shí)APM探測分區(qū)域 資源池HTTP 調(diào)度DNS 調(diào)度配置 管理調(diào)度 策略 推送、任務(wù) 管理智能調(diào)度算法普通IDC 資源(用戶區(qū)域,