海量對(duì)象存儲(chǔ)運(yùn)維服務(wù)體系介紹

1、網(wǎng)易海量對(duì)象存儲(chǔ)運(yùn)維服務(wù)體系介紹技術(shù)創(chuàng)新 變革未來(lái)NOS簡(jiǎn)介NOS 運(yùn)維服務(wù)體系面向運(yùn)維的架構(gòu)面向運(yùn)維的平臺(tái)目錄NOS簡(jiǎn)介什么是NOS云存儲(chǔ)平臺(tái)，用戶可以通過(guò)簡(jiǎn)單的REST API，在全平臺(tái)上很容易地上傳、下載各 種大小的文件，并能方便查看資源使用統(tǒng)計(jì)，數(shù)據(jù)訪問情況等。安全存儲(chǔ)- 靜態(tài)資源托管全網(wǎng)加速-上傳下載全網(wǎng)加速）數(shù)據(jù)處理- 圖片、音視頻云端處理NOS簡(jiǎn)介應(yīng) 用 實(shí) 例NOS簡(jiǎn)介桶 1w+對(duì)象 400億+QPS 3w+容量 20PB+NOS運(yùn)維服務(wù)體系1234系統(tǒng)迭代版本發(fā)布、架構(gòu)升級(jí)、數(shù)據(jù)庫(kù)升級(jí)可用性保障監(jiān)控報(bào)警、故障切換、限流隔離、應(yīng)急預(yù)案安全保障數(shù)據(jù)安全、網(wǎng)絡(luò)安全、風(fēng)險(xiǎn)控制資源管理

2、元數(shù)據(jù)管理、配置中心、容量管理、擴(kuò)容縮 容、數(shù)據(jù)遷移NOS運(yùn)維服務(wù)體系HOW運(yùn)維自動(dòng)化平臺(tái)面向運(yùn)維架構(gòu)設(shè)計(jì)運(yùn)維流程規(guī)范NOS運(yùn)維服務(wù)體系流控、服務(wù)降級(jí)魯棒性全鏈路追蹤全局req ID、請(qǐng)求追溯擴(kuò)展性動(dòng)態(tài)擴(kuò)容、跨機(jī)房高可用數(shù)據(jù)隔離多存儲(chǔ)引擎、多租戶面向運(yùn)維- 架構(gòu)面向運(yùn)維-架構(gòu)NOS整體框架Openresty限流與隔離面向運(yùn)維-架構(gòu)面向運(yùn)維-架構(gòu)大文件下載優(yōu)化面向運(yùn)維-架構(gòu)多存儲(chǔ)引擎與數(shù)據(jù)隔離面向運(yùn)維-架構(gòu)元數(shù)據(jù)擴(kuò)容與同步NOS運(yùn)維服務(wù)體系專業(yè)運(yùn)維平臺(tái)Openresty運(yùn)維、NEFS運(yùn)維、CEPH運(yùn)維、容量評(píng)估DS+ELK日志平臺(tái)日志采集、清洗過(guò)濾、索引、聚合NSS哨兵監(jiān)控、報(bào)警、指令下發(fā)、采集

3、器OWL數(shù)據(jù)運(yùn)維數(shù)據(jù)庫(kù)管理、自助變更、數(shù)據(jù)備份、數(shù)據(jù)巡 檢發(fā)布變更、服務(wù)部署、模版管理NDP部署平臺(tái)CMDB服務(wù)器管理、資產(chǎn)管理、配置管理、集群管 理面向運(yùn)維- 平臺(tái)面向運(yùn)維-平臺(tái)自動(dòng)化容量評(píng)估面向運(yùn)維-平臺(tái)存儲(chǔ)容量評(píng)估模型模型線性回歸模型預(yù)測(cè)空間增長(zhǎng)與可用天數(shù) 最小二乘法(scipy )樣本采樣區(qū)間采樣區(qū)間不易太長(zhǎng)或太短， 存儲(chǔ)空間一般建議三個(gè)月修正去噪點(diǎn)原因：突發(fā)性的刪除或者 導(dǎo)入數(shù)據(jù)。依據(jù)方差、top n等條件篩 選面向運(yùn)維-平臺(tái)面向運(yùn)維-平臺(tái)進(jìn)程名、服務(wù)器等 元數(shù)據(jù)準(zhǔn)確性：對(duì)接發(fā)布平臺(tái)+形成閉 環(huán)基于規(guī)則的采集更正元數(shù)據(jù)日志格式標(biāo)準(zhǔn)化 一致性ID日志采集去除無(wú)用數(shù)據(jù) 注入模塊與環(huán)境等信息數(shù)據(jù)清洗根據(jù)查詢創(chuàng)建合適 的索引，如NO