版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
數(shù)據(jù)存儲2030 數(shù)字經(jīng)濟(jì)的發(fā)展推動人類社會即將進(jìn)入YB時代02數(shù)據(jù)存儲2030愿景及關(guān)鍵特征 先進(jìn)介質(zhì)應(yīng)用20以數(shù)據(jù)為中心的體系架構(gòu)27數(shù)據(jù)存儲原生安全31智能數(shù)據(jù)編織34數(shù)據(jù)即應(yīng)用38綠色低碳存儲41數(shù)據(jù)存儲2030倡議數(shù)據(jù)存儲2030倡議45464849數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書PART0110年前,人類社會剛剛進(jìn)入ZB數(shù)據(jù)時代,移動互聯(lián)網(wǎng)、云計算、大數(shù)據(jù)剛剛起步;今天,這些技術(shù)已經(jīng)深刻地改變?nèi)祟惿鐣?,而人工智能、區(qū)塊鏈、5G/6G、AR/VR、元宇宙等新技術(shù),進(jìn)一步推動社會進(jìn)入一個新的智能世界階段。2030年,人類將迎來YB數(shù)據(jù)時代[1],對比2020年,年新增數(shù)據(jù)增長23倍,通用算力增長10倍、人工智能算力增長500倍[2]。數(shù)字世界和物理世界無縫融合,人與機器實現(xiàn)感知、情感的雙向交互;人工智能無所不及,成為科學(xué)家的顯微鏡與望遠(yuǎn)鏡,讓我們的認(rèn)知跨越微小的夸克到廣袤的宇宙,千行萬業(yè)從數(shù)字化走向智能化;數(shù)字技術(shù)持續(xù)演進(jìn),幫助人類利用數(shù)字手段加速實現(xiàn)未來智能世界2030。未來十年,數(shù)字技術(shù)將幫助人類跨入智能世界,這是一個波瀾壯闊的史詩進(jìn)程,將開啟一個與大航海時代、工業(yè)革命時代、宇航未來數(shù)據(jù)存儲場景數(shù)據(jù)存儲2030展望住醫(yī)住數(shù)據(jù)存儲數(shù)據(jù)存儲2030食食全球通用存力總量將達(dá)29ZB同比2020年增長10全球通用存力總量將達(dá)29ZB同比2020年增長10倍AI計算存力總量將達(dá)63ZB相比2020年增長23倍同比2020年增長500倍相比2020年增長23倍過去的十年,是人類健康發(fā)展充滿“生命力”的十年,據(jù)WHO(worldhealthstatistic2021)報告顯示,全球人口預(yù)期壽命從2000年的66.8歲增加到2019年的73.3歲。伴隨著人口老齡化的加速,2030年全球60歲以上人口占比將達(dá)到16.5%,人類對醫(yī)療的需求也將激增[3]。WHO的2019數(shù)據(jù)顯示,全球衛(wèi)生費用支出占生產(chǎn)總值的10%,其增長快于全球經(jīng)濟(jì)增長。WHO也預(yù)測,2030年全球護(hù)士缺口高達(dá)570萬人,醫(yī)護(hù)人員總?cè)笨诟哌_(dá)1800萬人。全球的醫(yī)療資源與人口增長分布形成剪刀差。面向未來,如何降低醫(yī)療成本,豐富醫(yī)療資源和醫(yī)療形態(tài),創(chuàng)造新的預(yù)防和治療手段,將幫助解決看病貴,看病難的問題,讓人們少生病,讓生命更有質(zhì)量。在下一個十年,創(chuàng)新的解決思路正在不斷涌現(xiàn)。通過對健康狀態(tài)實時數(shù)據(jù)追蹤和建模,把防病與日0202數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書構(gòu)建知識圖譜,讓健康更靠譜得益于互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、AI等技術(shù)的發(fā)展,以及可穿戴設(shè)備、家用監(jiān)測設(shè)備等產(chǎn)品的普及,對個人健康建模不再是奢望[4]。通過實時分析用戶身體指標(biāo)數(shù)據(jù)、醫(yī)學(xué)臨床反應(yīng)、健康診療結(jié)果等,形成健康知識圖譜;通過對比分析,為用戶提供定制的健康解決方案;通過對營養(yǎng)、運動、睡眠等維度的干預(yù),幫助用戶逐漸改善不良生活方式,促進(jìn)個人形成健康的生活習(xí)慣。比如業(yè)界有公司嘗試構(gòu)建飲食和疾病之間關(guān)系的健康知識圖譜,可幫助用戶改善睡眠質(zhì)量,進(jìn)行有效的體重管理,全年接受健康管理的參與者平均每天睡眠增加35分鐘,體重減輕約1.5公斤,從而降低因不良生活方式導(dǎo)致的相關(guān)疾病的發(fā)生概率。傳染病蔓延軌跡預(yù)測,讓疾病預(yù)報更準(zhǔn)確利用自然語言處理等技術(shù),持續(xù)收集并分析全球范圍內(nèi)關(guān)于重大公共衛(wèi)生事件的新聞、報告和搜索引擎指數(shù),從中提取有效數(shù)據(jù),并進(jìn)行科學(xué)建模和智能化判斷分析,可以有效提升應(yīng)對公共衛(wèi)生事件的響應(yīng)速度和決策能力。比如說業(yè)界有公司使用自然語言處理和機器學(xué)習(xí),從官方公共衛(wèi)生組織、數(shù)字媒體、全球航空公司票務(wù)數(shù)據(jù)、牲畜健康報告和人口統(tǒng)計聲明等多種公共數(shù)據(jù)來源中,分析了數(shù)十億個數(shù)據(jù)點,可以24小時不間斷地分析疾病的傳播與蔓延情況。藥效精確評估,從“千人一藥”到“千人千藥”AI通過學(xué)習(xí)成千上萬的病理診療方案,并實時分析結(jié)合病人個體綜合差異,可以幫助醫(yī)生給出更具個性化的治療方案。新加坡研究機構(gòu)創(chuàng)建了以人工智能技術(shù)驅(qū)動的藥效精準(zhǔn)評估平臺,該平臺可以快速識別每位患者的歷史臨床數(shù)據(jù),針對患者自身情況給出建議的用藥劑量和聯(lián)合用藥方案,并在此基礎(chǔ)上對腫瘤大小或腫瘤生物標(biāo)志物水平進(jìn)行修正。此外,這些數(shù)據(jù)還可用于患者療程和后續(xù)治療方案的制定等。AI精準(zhǔn)識別靶區(qū),減少錯殺健康細(xì)胞個性化的精準(zhǔn)醫(yī)療的價值,也在幫助對抗人類的天敵-癌癥上。在傳統(tǒng)的癌癥放射治療過程中,放療的靶區(qū)設(shè)定范圍較大,消滅癌細(xì)胞的同時也誤傷了大量健康細(xì)胞。自適應(yīng)放療借助AI技術(shù),在放療過程中自動識別病灶位置變化,對放療靶區(qū)的影像進(jìn)行精密地勾畫,以實現(xiàn)精準(zhǔn)照射,從而減少對健康組織的損害。目前AI精準(zhǔn)識別靶區(qū),已實現(xiàn)CT、超聲、MRI等多種影像的靶區(qū)自動勾畫,將原來2-3小時的勾畫環(huán)節(jié)縮短至分秒級,使得放療對健康組織的損害量降低30%。面向2030年,人類可以依托高度靈敏的生物傳感器技術(shù)與智能硬件支持,實時跟蹤身體各項指標(biāo),并建立個人的健康知識突破,從而實現(xiàn)自0303未來數(shù)據(jù)存儲場景在ICT技術(shù)的驅(qū)動下,通過精密的軟硬件、強大的云邊端計算能力和穩(wěn)定的網(wǎng)絡(luò)覆蓋,使得便攜化的醫(yī)療設(shè)備可以普及到在各個基層醫(yī)院、社區(qū)、甚至家庭等多種場景,可以按需實時采集醫(yī)療數(shù)據(jù)并上傳至云端處理中心,在云端構(gòu)建大數(shù)據(jù)知識庫,通過AI調(diào)度,實現(xiàn)遠(yuǎn)程醫(yī)療聯(lián)動。構(gòu)建云端知識圖譜,需要數(shù)據(jù)存力的規(guī)華為預(yù)測到2030年,全球通用存力總量將達(dá)到37ZB,相比2020年增長10倍;AI相關(guān)存力總量占比63%,相比2020年增長500倍。民以食為天,實現(xiàn)“零饑餓”被聯(lián)合國列入2030可持續(xù)發(fā)展的目標(biāo)之一[5]。據(jù)統(tǒng)計,至今全球仍有超過6.9億人在挨餓,預(yù)計到2030年,受饑餓影響的人數(shù)將超過8.4億。農(nóng)業(yè)從事者長期流失:根據(jù)國際勞工組織的數(shù)據(jù),在全球范圍內(nèi),從事農(nóng)業(yè)工作的人的比例從1991年的43.699%下降到2019年的26.757%。人均耕地面積減少:據(jù)世界銀行數(shù)據(jù)顯示,在1968-2018這50年間,全球人均耕地已從0.323公頃下降至0.184公頃,下降43%。土壤農(nóng)藥污染嚴(yán)重:據(jù)統(tǒng)計,目前全球64%的農(nóng)業(yè)土地(大約2450萬平方公里)面臨著農(nóng)藥污染的風(fēng)險,其中31%的土地面臨著高風(fēng)險。與此同時,隨著消費的升級,人們對于飲食的需求越來越追求吃得健康,吃得放心。2018年,中國獲得食品行業(yè)綠色認(rèn)證的產(chǎn)品數(shù)量達(dá)到13,316個,2019年,這一數(shù)量增至14,699個,同比增長10.4%綠色認(rèn)證產(chǎn)品的背后是對種植環(huán)境和技術(shù)更高的要求。在邁向2030年的進(jìn)程中,科技和數(shù)據(jù)正在為農(nóng)業(yè)賦能,幫助突破種植條件的限制,全面提升糧食的產(chǎn)量,讓綠色食品進(jìn)入每個普正所謂“栽種有時,收獲有時”(atimetoplantandatimetopluckupthatwhichisplanted)。傳統(tǒng)農(nóng)業(yè)何時播種,何時施肥,何時除蟲,僅靠經(jīng)驗來判斷,會讓農(nóng)業(yè)生產(chǎn)有著極ICT技術(shù)賦能農(nóng)業(yè)能夠通過對土壤濕度、環(huán)境溫度、作物狀況、地形的特征、氣候預(yù)期、病蟲害程度等分析,獲得精準(zhǔn)數(shù)據(jù),通過精準(zhǔn)控制,讓土壤和作物處于最佳匹配狀態(tài)。以玉米為例,僅依據(jù)數(shù)據(jù)進(jìn)行的自適應(yīng)播種這一改變,就能帶來每公頃300-60004042030白皮書數(shù)據(jù)存儲2030白皮書數(shù)據(jù)存儲農(nóng)場數(shù)字工廠化,讓農(nóng)業(yè)生產(chǎn)不再受自然環(huán)農(nóng)業(yè)工廠化的一個典型案例就是在室內(nèi)種植的“垂直農(nóng)場”,即用數(shù)據(jù)構(gòu)建突破地域限制的標(biāo)準(zhǔn)化生長環(huán)境。在垂直農(nóng)場里,每個環(huán)節(jié)通過對光照、溫度、用水和營養(yǎng)輸送等的精確控制,為農(nóng)作物構(gòu)建起最為適宜的生長環(huán)境。垂直農(nóng)場無需農(nóng)藥,無需土壤,減低對農(nóng)業(yè)用水的浪費;不受環(huán)境氣候影響,始終確保新鮮農(nóng)產(chǎn)品的理想生長條件;創(chuàng)造全球可復(fù)制的智能農(nóng)業(yè)模式,利用同一套ICT控制系統(tǒng)和數(shù)據(jù)模型,可在世界上任何一個地方得到幾乎一致的生產(chǎn)效果。業(yè)界公司的嘗試顯示,在7,000平方米的空間里,可實現(xiàn)蔬菜每16天收割一次,達(dá)到每年90萬公斤的驚人產(chǎn)量。華為預(yù)測到2030年,全球每年產(chǎn)生的數(shù)據(jù)總量達(dá)1YB,相比2020年,增長23倍;未來隨著數(shù)據(jù)不斷在農(nóng)業(yè)中體現(xiàn),我們將逐步構(gòu)建一全球農(nóng)業(yè)每年產(chǎn)生的,數(shù)據(jù)總量達(dá)4ZB,相比2020年,增長23倍。隨著人們對居家體驗個性化追求的不斷增長,基于ICT技術(shù)的智能家居概念正被普及。據(jù)調(diào)研報告顯示,近80%的千禧一代和69.2%的嬰兒潮一代都對智能家居技術(shù)抱有積極的期待[6]。在英國,目前80%的消費者已經(jīng)意識到智能家居技術(shù),在消費者對技術(shù)趨勢的認(rèn)知度上僅次于移動支付,而互操作性已經(jīng)成為他們當(dāng)下最大的購買考慮因素。除此之外,打造數(shù)字化的商品目錄,通過自動配送,實隨著物聯(lián)網(wǎng)、萬兆光纖等新型基礎(chǔ)設(shè)施的觸達(dá),越多越多的新型社區(qū)理念不斷涌現(xiàn),為居民提供如社區(qū)虛擬團(tuán)建、寵物智能管控等全局化的服務(wù),促進(jìn)居民與社區(qū)的一體化融合。其中有一些新穎的設(shè)計理念,解決為你家里的物品建立一個數(shù)字目錄,甚至進(jìn)行3D掃描,將不常用的物品寄存在小區(qū)統(tǒng)一的倉庫中。比如在某個周末,你需要為即將參加的派對挑選一套晚禮服的時候,可以通過全息投影的方式,虛擬選擇一套合適的搭配。只需輕輕一個點擊,小區(qū)自動配送系統(tǒng),就會通過機器人或者0505未來數(shù)據(jù)存儲場景豐富的智能家居設(shè)備和傳感器,通過穩(wěn)定可靠、高聯(lián)接、高速全覆蓋的網(wǎng)絡(luò),將收集到的數(shù)據(jù)傳遞到家庭智慧大腦。其中的AI引擎,通過調(diào)節(jié)各類家居設(shè)備的運行和協(xié)同狀態(tài),以匹配用戶的實時體驗需求,最終給用戶帶來沉浸式、個性化、可成長的全場景智慧體驗。多種多樣的智能家居設(shè)備,通過不同的組合,形成多樣化的智能場景。比如智能睡眠輔助系統(tǒng),根據(jù)個體的生理健康特征和睡眠習(xí)慣,自動匹配床墊和枕頭的軟硬度;營造助眠的光環(huán)境,刺激褪黑素分泌;播放助眠音樂,舒緩心情;根據(jù)家庭環(huán)境中濕度、溫度、氧氣的濃度等指標(biāo),提供恒溫、恒2030年,人們的家中將遍布各類智能家居,生活、娛樂將被新的交互模式來重塑;樓宇將安裝各種智能管控設(shè)備;社區(qū)也將拓展更豐富的智慧功能。而這一切都需要通過大帶寬華為預(yù)測到2030年,萬兆家庭寬帶滲透率達(dá)23%,全球智能家居戶數(shù)達(dá)18億,年數(shù)據(jù)量達(dá)23ZB。當(dāng)下私家車出行成為人類活動的重要組成環(huán)節(jié),2020年全美車輛行駛里程為2.83萬億英里;在歐洲,每輛車每年行駛平均距離超過1萬2千公里。當(dāng)前的交通系統(tǒng)面臨著諸多挑戰(zhàn):交通變得擁堵,全球碳排放占比26%[7]。ICT技術(shù)和出行要素(車、信號燈、行人等)聯(lián)接起來,通過大數(shù)據(jù)提供決策支撐,從而實現(xiàn)出行變得更加智能和低碳。包括下自動駕駛汽車駛?cè)搿翱燔嚨馈彪S著自動駕駛汽車由L2、L3向L4、L5邁進(jìn),公交車、出租汽車、低速物流、垂直行業(yè)運輸(物流車、礦車)或?qū)⒙氏葘崿F(xiàn)自動低速開放道路:自動駕駛汽車在物流配送、清潔消殺、巡邏等領(lǐng)域取得了積極的成果。無人物流配送具備道路場景簡單、車速低、危險性小的優(yōu)勢,可以在公共道路提供安全的無人貨物配送服務(wù)。低速無人駕駛小車在抗擊疫情中為醫(yī)療物資運輸配送、清高速半封閉道路:重卡卡車司機成本高、易超負(fù)荷運載、超工時工作,因此重卡的自動化駕駛能夠迅速幫助行業(yè)降低成本,提高效率,易于形成立竿見影商業(yè)收益。據(jù)德勤《中國智慧物流發(fā)展報告》預(yù)測,無人卡車、人工智能等技術(shù)在未來十年左右逐步成特殊封閉道路:在礦山,港口等環(huán)境中,自動駕駛提升安全與效率,創(chuàng)造經(jīng)濟(jì)價值。在自動駕駛模式下,礦卡、挖掘機、推土機等多種機械工程車輛協(xié)同作業(yè),一旦發(fā)生故障或者危險時,指揮人員可在控制中心開啟遠(yuǎn)程接管模式,將車輛移至安全區(qū)域。在中國上海洋山港,“5G+L4級智能駕駛重卡”車速最高達(dá)到每小時80公里,隊列行駛間距縮短至15米。基于北斗系統(tǒng)厘米級定位,車輛在15秒內(nèi)可實現(xiàn)一次誤差僅為3厘米的精準(zhǔn)停車,單點裝卸效率提升了10%。06062030白皮書數(shù)據(jù)存儲2030白皮書數(shù)據(jù)存儲日常開放全新體驗:自動駕駛出租車(Robotaxi)是自動駕駛公司服務(wù)出行的必然選擇,據(jù)調(diào)研報告顯示,Robotaxi可取代63%的網(wǎng)約車/出租車和27%的公共交通。未來,自動駕駛技術(shù)將推動傳統(tǒng)車革新,打造迎合不同場景的移動第三空間,甚至?xí)嵏铂F(xiàn)有行業(yè)的商業(yè)模式。比如自動駕駛餐車可能是未來的標(biāo)配,你和親朋好友的聚餐可能是以全新的形式展開:預(yù)定好一頓午餐,自動駕駛餐車會準(zhǔn)時把你們依次接上,根據(jù)需求規(guī)劃好一條風(fēng)景優(yōu)美的行駛路線,在欣賞美景的同時,品嘗美食,暢聊人生,打造真正屬于你們包間。這樣既避免了往返餐廳的交通,未來,空域是城市交通發(fā)展的重要資源,可以搭建高效的空中城市交通網(wǎng)絡(luò),將極大程度的釋放路網(wǎng)資源,減少市民的出行時空中應(yīng)急救援系統(tǒng):在過去的十年間(2010-2020),摩天大樓如雨后春筍般涌現(xiàn)于全球各大城市,增添了安全隱患。高樓消防、高樓醫(yī)療救援成為未來城市的新難題之一。空中應(yīng)急救援系統(tǒng)的出現(xiàn),使得消防和醫(yī)療救援力量能夠快速到達(dá)高樓層實施滅火和人員救助,保障居民生命財產(chǎn)安全,成為空中巴士/空中出租車:便捷、高效的交通體驗已經(jīng)成為都市人的核心需求之一,eVOTL有望成為改善市內(nèi)交通體驗的利器,多家公司的四座飛行器都可以達(dá)到100公里左右的巡航里程。目前,空中客運試點已經(jīng)展開,2019年,該領(lǐng)域的中國科技公司,在浙江啟動了全球首個城市空中交通客運服務(wù),將原本需要40分鐘的道路交通行程縮短為5分鐘的空中之旅。為實現(xiàn)城市空中客運(UAM)這類的未來場景,需要高速穩(wěn)定的空天地一體化網(wǎng)絡(luò)連接和定位系統(tǒng)、低成本可靠的視覺傳感器和激光雷達(dá)、安全穩(wěn)定的自動飛行算法、以及高效實時的指揮調(diào)度平臺。未來出行是一個多維的創(chuàng)新系統(tǒng),通過電氣化、自主化、共享化、網(wǎng)聯(lián)化打造一個智能便捷低碳的出行體驗,重塑出行體驗,孵化創(chuàng)新的出行服務(wù),提升交通工具的共享效率,幫助緩解交通擁堵,降低出行帶來環(huán)境污染,讓不斷激增的出行需求和環(huán)境對低ii華為預(yù)測ii到2030年,全球電動汽車占所銷售汽車總量的比例達(dá)50%,中國自動駕駛新車滲透率達(dá)20%,整車存力超過500PB。0707未來數(shù)據(jù)存儲場景5G、云、AI、區(qū)塊鏈、智能傳感等各種新技術(shù)的快速進(jìn)步,給未來智慧城市的發(fā)展帶來了更多新的可能,城市場景也將成為各種新技術(shù)的最佳應(yīng)用創(chuàng)新場所與孵化基地。2020年,全球投入試點的智慧城市數(shù)量將近1000個。2020年相關(guān)投資接近1240億美金,同比增長18.9%[8]。城市數(shù)字化發(fā)展的基礎(chǔ)是數(shù)據(jù),而數(shù)據(jù)則來源于遍布在城市各個角落,各種各樣的傳感裝置,在所有的傳感技術(shù)之中,一種低成本、微型化的納米傳感器技術(shù)有望成為推動新一輪傳感技術(shù)革命的“顛覆性”技術(shù),美國《麻省理工學(xué)院技術(shù)評論》雜志把這種基于傳感器技術(shù)的“感知城市”列為2018年全球十大突破性技術(shù)之一。石墨烯納米氣敏傳感器:這是一種對氣味非常敏感的傳感器。美國一所大學(xué)研制成功利用石墨烯開發(fā)出新型的納米涂層,他們將這種納米薄膜集成到氣敏傳感器的電路中,與目前最好的使用碳基材料的傳感器相納米縫隙傳感器:是一種能夠識別特定頻段聲音的傳感器,納米裂縫傳感器的表現(xiàn)大大優(yōu)于傳統(tǒng)傳聲器,能夠?qū)⑻囟l段音源準(zhǔn)確地識別出來。當(dāng)把納米傳感器放置在小提琴的表面,它能夠精確的記錄樂曲中的每一個音符,并且將其“翻譯”給外接設(shè)備,輸出電子樂曲。當(dāng)把納米裂縫傳感器佩戴在手腕處,它甚至能精確地測量人體的心跳。可以預(yù)城市數(shù)字化轉(zhuǎn)型對海量的信息交換提出挑戰(zhàn),萬兆互聯(lián)的全光城市初步展現(xiàn)出了巨大發(fā)展?jié)摿εc價值。2021年4月,中國上海發(fā)布了“全光智慧城市全球第一城”以F5G光網(wǎng)為底座,構(gòu)建城市“1毫秒”時延圈,實現(xiàn)全市光高速樞紐布局,為后續(xù)城市智慧化發(fā)展打下了一個堅實的網(wǎng)全光接入:光聯(lián)接延伸至家庭、樓宇、企業(yè)、5G基站等城市全場景。全光傳輸向大型企業(yè)、樓宇、5G基站等末端延伸,支撐各行業(yè)數(shù)字化轉(zhuǎn)型,賦能F5G+X,5G2B等行業(yè)應(yīng)用擴(kuò)展。全光錨點:家庭寬帶、政企、5G、數(shù)據(jù)中心等業(yè)務(wù)的匯接點,由全光網(wǎng)08082030白皮書數(shù)據(jù)存儲2030白皮書數(shù)據(jù)存儲全光交換:城市光網(wǎng)一跳直達(dá)。通過全光交叉等技術(shù),打造立體化的全光網(wǎng)絡(luò),實現(xiàn)一跳全自動運維:實時感知網(wǎng)絡(luò)動態(tài),主動運維,并能夠進(jìn)行預(yù)測性運維,從而實現(xiàn)網(wǎng)絡(luò)資源彈性化,業(yè)務(wù)自動化、資源分配自動智慧中樞,城市從人治走向AI治理隨著城市全量數(shù)據(jù)的打通,融合,AI從局部的智能走向全場景的智慧,催生新的公共治理主體,未來的城市都需要一個強大的智慧中樞平臺,它一方面匯聚來自于城市各個角落的海量數(shù)據(jù),另一方面通過平臺把數(shù)據(jù)轉(zhuǎn)變成一種城市治理的先進(jìn)能力,普惠千行百業(yè),極大提升城市治理效率與用戶服務(wù)體驗。日本豐田公司的早期探索:在豐田未來城市的規(guī)劃中,每個房屋、建筑、車輛都配備有相應(yīng)的傳感器,這些數(shù)據(jù)會匯聚到一個城市的智慧中樞平臺,由AI分析人們所處環(huán)境狀況,通過人車分流,確保道路上機器識別技術(shù)的出現(xiàn)使得非接觸服務(wù)成為可能,今天在中國大多數(shù)發(fā)達(dá)省份,政務(wù)辦理已不再需要去政府的服務(wù)大廳,通過手機就能夠進(jìn)行遠(yuǎn)程的自助服務(wù),可以預(yù)見未來十年政務(wù)服務(wù)的數(shù)字化,智能化程未來隨著海量數(shù)據(jù)的不斷積累與匯聚,人工智能技術(shù)的不斷成熟,政務(wù)服務(wù)也必將會更多地向主動服務(wù),精準(zhǔn)服務(wù)的方向發(fā)展,大幅提升城市治理效率與市民的服務(wù)體驗。以智慧養(yǎng)老為例:上海的街道推行給獨居的老人安裝智能水表。在老人的同意下,通過實時監(jiān)測獨居老人的用水情況,12小時內(nèi)用水量一旦低于0.01立方米,街道的“一網(wǎng)統(tǒng)管”平臺,就會接收到報警信息,并及時通知社區(qū),社區(qū)志愿者就會第一時間上門查看老人的情況,通過這些智能設(shè)備的使用,使得社區(qū)對于獨居老人的關(guān)懷做到細(xì)微下一個十年,將是5G,光,AI,云,區(qū)塊鏈,智能傳感等ICT技術(shù)快速發(fā)展的十年,城市將會進(jìn)入到萬兆聯(lián)接的時代:萬兆的企城市與ICT技術(shù)的結(jié)合與聚變必將會在未來產(chǎn)生巨大的裂變效應(yīng),大幅提升城市資源的利用率,治理的效率,用戶的體驗,從而華為預(yù)測到2030年,城市帶來的數(shù)據(jù)占比達(dá)到96%,和城市基礎(chǔ)設(shè)施相關(guān)的資源監(jiān)控、調(diào)度、管理產(chǎn)生的數(shù)據(jù)達(dá)到42%。0909未來數(shù)據(jù)存儲場景未來十年,人口老齡化導(dǎo)致世界出現(xiàn)巨大的勞動力缺口。聯(lián)合國報告顯示,2030年65歲以上人口比例將超過12%,25歲以下人口占比從2020年的41%,下降至2030年的39%,全球勞動力短缺超過8,520萬人。以制造業(yè)為例,到2030年,全球制造業(yè)面臨790萬工人的短缺,影響實現(xiàn)產(chǎn)值6071.4億美元[9]。同時,消費需求的多樣化也在影響著生產(chǎn)模式的變化,倒逼企業(yè)進(jìn)行生產(chǎn)模式的革新,如基于“一人經(jīng)濟(jì)”的發(fā)展,快速調(diào)整產(chǎn)品形態(tài),推出一人食套餐、迷你家電,甚至迷你KTV等;還要能從情感維度主動激發(fā)消費者的購買欲望,對產(chǎn)品的外表、形象、此外,黑天鵝事件也在對企業(yè)生產(chǎn)的延續(xù)性提出了新的挑戰(zhàn)。如新冠疫情原因,2020年全球GDP損失了近3.94萬億美元的產(chǎn)出,供應(yīng)鏈中斷是企業(yè)增長的最大風(fēng)險。為此,如何利用數(shù)據(jù),保護(hù)數(shù)據(jù),重塑生產(chǎn)模式,增強產(chǎn)業(yè)鏈韌性的也成為尤為重要的協(xié)作機器人越來越多的企業(yè)受制于勞動力短缺的問題,需要企業(yè)通過新生產(chǎn)力來迅速補位。協(xié)作機器人是工業(yè)機器人的一種,最初目的是滿足中小企業(yè)的定制化和柔性制造需求,成為彌補勞動力短缺的重要補充力量。相比傳統(tǒng)的工業(yè)機器人,協(xié)作機器人更適合干人不更安全:協(xié)作機器人更加輕巧智能,攜帶的傳感器可以確保它一觸即更快速靈活地部署:協(xié)作機器人通過人性化的編程,如拖動示教,自然語言和視覺指導(dǎo),可以隨時投放在新的崗位上,快速完成編程和調(diào)試,更低的TCO,更短的ROI:協(xié)作機器人的售價和每年的維修成本遠(yuǎn)低于目前協(xié)作機器人在3C和汽車等制造領(lǐng)域應(yīng)用最為廣泛,同時,我們也看自主移動機器人(AMR)是制造業(yè)向柔性化、智能化發(fā)展的關(guān)鍵使能要素,改變企業(yè)的生產(chǎn)流程、倉儲物流等重要環(huán)節(jié)。自主移動機器人,具備豐富的環(huán)境感知能力、基于現(xiàn)場的動態(tài)路徑規(guī)劃能力、靈活避障能力、全局定位能力等。工業(yè)制造及物流領(lǐng)域的自主移動機器人,目前主要基于SLAM(simultaneouslocalizationandmapping,同步定位與地圖構(gòu)建)技術(shù)、利用激光導(dǎo)航、視覺導(dǎo)航以及衛(wèi)星定位等技術(shù),實現(xiàn)自主導(dǎo)航。自主移動機器人可實現(xiàn)產(chǎn)線物流的自動化與無人化,貨物的2030白皮書數(shù)據(jù)存儲2030白皮書數(shù)據(jù)存儲數(shù)字仿真,柔性生產(chǎn)為了能夠適應(yīng)多變的市場需求,以在激烈的競爭中取得優(yōu)勢地位,企業(yè)必須更為積極地?fù)肀碌纳a(chǎn)模式。柔性生產(chǎn)、柔性制造系統(tǒng)等概念正越來越受更多企業(yè)的青睞。柔性生產(chǎn)、柔性制造系統(tǒng)需要通過ICT技術(shù)進(jìn)行擬實生產(chǎn),包括運用仿真、建模、虛擬現(xiàn)實等技術(shù),對新產(chǎn)品的生產(chǎn)制造全過程進(jìn)行模擬,降低新品開發(fā)和設(shè)計的成本,更精準(zhǔn)地規(guī)劃生產(chǎn)線的調(diào)整成本和生產(chǎn)能力;同時柔性生產(chǎn)的智能任務(wù)調(diào)度系統(tǒng)會根據(jù)工廠的生產(chǎn)能力、訂單復(fù)雜度和交付時間需求,通過分析統(tǒng)籌安排生產(chǎn)任務(wù)的發(fā)放、生產(chǎn)物料和工具的調(diào)配,確保充分發(fā)揮出工廠中所有設(shè)備和人員的最大生產(chǎn)效率;柔性生產(chǎn)利用視覺編程、自然語言交互、行動捕獲等ICT技術(shù)能力,快速實現(xiàn)對生產(chǎn)設(shè)備功能的重新自動編程和定義,以滿足企業(yè)柔性化生產(chǎn)的需求;物流管理的柔性化利用ICT手段來有效地進(jìn)行倉儲和物流管理,避免漏發(fā)、發(fā)錯、發(fā)混。以家具企業(yè)為例,大規(guī)模的定制化下,所產(chǎn)生的每一塊板,裝飾條,把手等都可能需要有一個屬于它自己的識別碼或RFID,來協(xié)助自動化的打包和裝車規(guī)劃,以及運輸和配送環(huán)節(jié)的全流程跟打造有韌性的智能供應(yīng)系統(tǒng),幫助企業(yè)應(yīng)對突發(fā)性危機越來越多的企業(yè)將打造一個有韌性,智能的供應(yīng)鏈作為其最重要的戰(zhàn)略布局之一。供應(yīng)鏈可視化利用ICT技術(shù),采集、傳遞、存儲、分析供應(yīng)鏈中的上下游訂單、物流以及庫存等相關(guān)指標(biāo)信息,以圖形化的方式展現(xiàn)出來。供應(yīng)鏈可視化可以有效提高整條供應(yīng)鏈的透明度和可控性,從而大大降低供應(yīng)鏈風(fēng)險。對于上游供貨,通過對物料、設(shè)備等的追蹤,實時顯示其整體交付的程度,包括包裝、入庫、出庫、質(zhì)檢等工序的狀況,甚至可以追溯其生產(chǎn)流程中的各種狀態(tài)。幫助企業(yè)針對物流中可能出現(xiàn)突發(fā)事件,對倉庫運營環(huán)境信息的實時監(jiān)控,建立遠(yuǎn)程監(jiān)控系統(tǒng),通過各類傳感器,用圖像化呈現(xiàn)倉庫的溫度、濕度、灰塵、煙霧濃度等運維信息,一旦發(fā)生如火災(zāi)、漏水等前期征兆,可及時介入,避免物資的損失。對貨物出入庫信息的實時追蹤,隨著貨物的流通,通過IOT、RFID、二維碼等技術(shù),自動識別并登記物品的信息,可在遠(yuǎn)端實時調(diào)取貨物倉儲的狀態(tài)數(shù)據(jù)。面向2030年,數(shù)字化轉(zhuǎn)型推動企業(yè)的進(jìn)一步升級。利用人工智能、傳感器、物聯(lián)網(wǎng)、云計算、5G、AR/VR等技術(shù)來打造新生產(chǎn)未來,通過對產(chǎn)品設(shè)計、任務(wù)分配、設(shè)備功能、物流配送等環(huán)節(jié)的柔性化重塑,實現(xiàn)以人為中心的新生產(chǎn)模式。供應(yīng)鏈也將會在數(shù)字化的助力下,變得可視化、網(wǎng)狀化,增強企業(yè)的韌華為預(yù)測到2030年,企業(yè)數(shù)字化轉(zhuǎn)型將進(jìn)一步推動數(shù)據(jù)服務(wù)在企業(yè)中的應(yīng)用,數(shù)據(jù)服務(wù)的支出占比達(dá)87%,支撐智能制造的AI存力占企業(yè)IT投資比例達(dá)7%。未來數(shù)據(jù)存儲場景2015年《巴黎協(xié)定》在第21屆聯(lián)合國氣候變化大會上達(dá)成全球共識:將全球平均氣溫相比工業(yè)化前水平的增幅限制在遠(yuǎn)低于中國雙碳目標(biāo):力爭于2030年前二氧化碳排放達(dá)到峰值,并爭取2060年前實現(xiàn)碳中和。實現(xiàn)全球的氣候控制目標(biāo),需要從能源隨著能源網(wǎng)絡(luò)復(fù)雜性的提高和行業(yè)數(shù)字化的進(jìn)程的發(fā)展,ICT技術(shù)成為脫碳解決方案的重要組成部分。提高新能源的比例、適應(yīng)新的能源結(jié)構(gòu)、充分的發(fā)揮ICT技術(shù)和數(shù)據(jù),讓綠色能源更智能,實現(xiàn)經(jīng)濟(jì)可持續(xù)發(fā)展,支撐包括如下場景:海上風(fēng)能,潛在的主力新能源2020年,全球可再生能源裝機容量新增45%,達(dá)到280GW,其中風(fēng)能新增114GW,增長率達(dá)到90%以上。目前在歐洲部分國家,正在積極利用近海發(fā)電,其中英國和德國截至2020年海上風(fēng)電裝機容量超過18GW,占全球海上風(fēng)電的51%。即便如此,海上風(fēng)能當(dāng)前只提供全球電量的0.3%,還有巨大的發(fā)展空間。海上風(fēng)況優(yōu)于陸上,風(fēng)速通常比沿岸陸上高出25%。同時海上風(fēng)湍流強度小,具有穩(wěn)定的主導(dǎo)風(fēng)向,海上風(fēng)機的容量可以達(dá)到陸地風(fēng)機容量的3~4倍。海上很少有靜風(fēng)期,其發(fā)電時間往往能達(dá)到3000小時/年,更能有效利用風(fēng)電機組的容量。而伴隨著技術(shù)改進(jìn),海上風(fēng)電的裝機成本大幅降低,預(yù)計到2040年海上發(fā)電成本將比2019年下降60%。全球風(fēng)能理事會(GWEC)預(yù)測,到2030年,全球海上風(fēng)電裝機量將從現(xiàn)在的29.1GW升至234GW。未來五年海上風(fēng)電的增長率將達(dá)到31.5%,海上風(fēng)電迎來快漂浮光伏(FPV),光伏產(chǎn)業(yè)新趨勢據(jù)國際能源署(IEA)發(fā)布的《2020年全球光伏報告》,截止2020年底全球光伏累計裝機容量達(dá)到760.4GW。2020年,光伏約占所有新增可再生能源總發(fā)電量的42%,其中陸上大型光伏電站一直光伏產(chǎn)業(yè)的建站主要模式。但陸上光伏的發(fā)展也開始面臨土地獲取以及成本制約的問題,同時陸上光伏在高溫情況下會出現(xiàn)效率下降,漂浮光伏成為新的部署模式。與陸基光伏相比,漂浮光伏不但可以節(jié)省用于農(nóng)業(yè)用途的土地,而且相比路基遮陽障礙物更少,灰塵數(shù)量更少,同時自然冷卻潛力也會提高光伏的性能。2020年荷蘭烏得勒支大學(xué)的學(xué)者基于北海實際測試及研究論文表明,海上的漂浮光伏表觀溫度遠(yuǎn)低于陸基光伏,兩個點的光伏面板表面溫度差達(dá)到9.36攝氏度。全年發(fā)電量海上漂浮光伏比陸基光伏的年均產(chǎn)出能高出約12.96%。隨著技術(shù)的不斷成熟,漂浮光伏將迎來快速發(fā)展時期。2021年7月14日世界最大的內(nèi)陸漂浮光伏系統(tǒng)之一—新加坡勝科登格漂浮太陽能電站正式竣工投運,覆蓋水面面積45公頃(相當(dāng)于約45個足球場),覆蓋水面上累計安裝了12.2萬塊太陽能板,產(chǎn)能達(dá)60兆瓦。據(jù)RethinkEnergy預(yù)計,到2030年全球漂浮光伏的市場容量將超過60GW。而漂浮光伏的全球潛力達(dá)到400GW,足以將太陽能光伏的現(xiàn)有裝機容量翻一番,隨著技術(shù)的成熟,漂浮光伏的部署速度在加速,為可再生能源的全球擴(kuò)打開了2030白皮書數(shù)據(jù)存儲2030白皮書數(shù)據(jù)存儲據(jù)IEA研究報告顯示,自2010年以來,全球互聯(lián)網(wǎng)用戶數(shù)量翻了一番,全球互聯(lián)網(wǎng)流量增長了12倍,數(shù)據(jù)中心和傳輸網(wǎng)絡(luò)的耗電大幅上升,2019年全球數(shù)據(jù)中心電力需求約為200TWh,約占全球最終電力需求的0.8%;數(shù)據(jù)網(wǎng)絡(luò)消耗約250TWh,約占全球用電量的1%,其中移動網(wǎng)絡(luò)占三分之二。中國2030年數(shù)據(jù)中心用電預(yù)計將達(dá)突破4000億千瓦時,占全社會用電量的比重將升至3.7%。而PUE每優(yōu)化0.1,可節(jié)省用電250億度,減少碳排放約千萬噸,若全部使用綠電,碳排放每年可以減少3.2億噸。引入綠電和自然冷卻降低PUE成為低碳數(shù)據(jù)中心的關(guān)鍵舉措。除了引入可再生能源、自然冷卻實現(xiàn)數(shù)據(jù)中心高效、節(jié)能,另外一個重要手段就是人工智能的應(yīng)用。通過數(shù)據(jù)中心內(nèi)的傳感器收集溫度、電量、泵速、耗電率、設(shè)定值等各種數(shù)據(jù),通過AI算法調(diào)整數(shù)據(jù)中心的運行模式和控制閥值,從而實現(xiàn)降本增效。將人工智能用于數(shù)據(jù)中心冷卻,實現(xiàn)將用于冷卻的能量減少40%。據(jù)DCD的報告,歐盟Horison2020資助的位于瑞典BTDC研究項目,在自然冷卻的同時,通過人工智能算法實現(xiàn)冷卻系統(tǒng)、IT負(fù)載、服務(wù)器風(fēng)扇和溫度協(xié)同,PUE達(dá)到1.01的最高水平!隨著AI技術(shù)的進(jìn)一步成熟,配合綠電引入、自然冷卻段,數(shù)據(jù)中心和通信網(wǎng)絡(luò)將會更加省電、高到2030年,世界需要將排放量減少一半,以風(fēng)能、光伏為代表的新能源正加速部署實現(xiàn)生產(chǎn)側(cè)清潔替代,消費側(cè)通過電氣化實現(xiàn)電能替代。ICT作為一個行業(yè),除了自身需要節(jié)能減排以外,同時也在賦能其它行業(yè)來減少碳排放。ii華為預(yù)測ii到2030年,數(shù)據(jù)中心用電占全社會用電量的比重將升至3.7%,其中存儲系統(tǒng)用電占比將達(dá)25~32%,提升數(shù)據(jù)中心綠色能源比例未來數(shù)據(jù)存儲場景在數(shù)字化轉(zhuǎn)型的加速驅(qū)動下,組織與組織之間、組織與客戶之間以及組織內(nèi)部的互動從物理世界遷移至數(shù)字世界,由此而產(chǎn)生了寶貴數(shù)字資產(chǎn),建立數(shù)字信任成為組織最重要的戰(zhàn)略目標(biāo)之一。數(shù)字信任是一個復(fù)雜龐大的系統(tǒng),包含隱私、安全、身份、透明、數(shù)據(jù)完整性以及治理和合規(guī)等關(guān)鍵領(lǐng)域[11]。新的技術(shù)應(yīng)用,如區(qū)塊鏈、隱私增強技術(shù)、人工智能等,以及新的規(guī)則定義,將數(shù)字資產(chǎn)為組織和個人帶來了史無前例的快捷和便利,但同時也帶來被竊取和盜用的高風(fēng)險?;趨^(qū)塊鏈技術(shù)的智能合約以數(shù)字化的形式將合約條款寫入?yún)^(qū)塊鏈中,合約事務(wù)的保存和狀態(tài)處理都在區(qū)塊鏈上完成,由于區(qū)塊鏈的分布式特性,保障智能合約的存儲、讀取、執(zhí)行整個過程透明可跟蹤、且不可篡改?;趨^(qū)塊鏈技術(shù)的智能合約在物流、電子商務(wù)、金融保險等多個領(lǐng)域有著巨大的潛在市場應(yīng)用價值。據(jù)咨詢公司預(yù)測,智能合約能將美國的個人房貸成本降低480-960美元/年;在美國和歐洲,將銀行房近年來,針對過度收集數(shù)據(jù)的規(guī)則制定和訴訟探索在不斷推進(jìn)。在公平交易的數(shù)字戰(zhàn)略中,大數(shù)據(jù)背景下的個人信息的調(diào)動機制將會變得更加平衡,兼顧隱私權(quán)利和個人信息開發(fā)兩個目的,在傳統(tǒng)告知同意原則的基礎(chǔ)上,強調(diào)主體對于個人信息的控制權(quán)。2021年,《個人信息保護(hù)法》正式發(fā)布,作為中國首部關(guān)于個人信息保護(hù)的專門法律,重申了個人信息保護(hù)工作的多項基本原則,包括公開透明、目的明確、最小必要。未來,個人信息調(diào)動機制將從規(guī)則框架上繼續(xù)細(xì)化,為用戶明確數(shù)據(jù)收集的場景、用GDPR是目前世界上最嚴(yán)格的針對個人數(shù)據(jù)的隱私和安全法,由歐盟起草通過,正式生效于2018年5月25日。2020年,美國發(fā)布《聯(lián)邦數(shù)據(jù)戰(zhàn)略與2020年行動計劃》,旨在保護(hù)數(shù)據(jù)完整性、確保流通數(shù)據(jù)真實性、數(shù)據(jù)存儲安全性等基本原則。2020年5月27日,日本參議院正式通過《數(shù)字平臺交易透明化法案》,該法案旨在規(guī)制特定數(shù)字平臺,增加特定數(shù)字平臺的公開義務(wù)。由此可見,數(shù)據(jù)反壟斷趨勢正在全球蔓延。未來,在反壟斷法的不斷完善和應(yīng)用中,用戶和第三方企業(yè)將從行業(yè)巨頭手中獲得更多的數(shù)據(jù)主權(quán),避免大平臺對個人隱私數(shù)據(jù)進(jìn)行非法地獲取、濫用及交易等侵犯數(shù)字安全、破壞公平競爭的行為,從而促進(jìn)數(shù)字信共建數(shù)字可信的智能世界,面向2030年,人類可以借助區(qū)塊鏈、人工智能等技術(shù)更好地保護(hù)個人隱私和數(shù)字資產(chǎn),更精準(zhǔn)地打擊假新聞等數(shù)字造假行為,減少詐騙或數(shù)據(jù)盜用的隱患。隱私增強計算等技術(shù)為多方實現(xiàn)安全加密的數(shù)據(jù)共享,在不影響隱私安全i華為預(yù)測l到2030年,50%以上的計算場景將采用隱私增強計算技術(shù);85%的企業(yè)將采用區(qū)塊鏈技術(shù)。隱私增強計算、區(qū)塊鏈技術(shù)以及IPFS的應(yīng)用將極大增加不可壓縮的加密數(shù)據(jù)以及分布式賬本數(shù)據(jù),每年新增數(shù)據(jù)量將達(dá)到17ZB。數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書推動人類社會即將進(jìn)入YB時代2030年數(shù)字經(jīng)濟(jì)占比將達(dá)到60%,數(shù)據(jù)成為數(shù)字產(chǎn)業(yè)發(fā)展和產(chǎn)業(yè)數(shù)字化的基礎(chǔ)。當(dāng)今世界,科技革命和產(chǎn)業(yè)變革日新月異,數(shù)字經(jīng)濟(jì)蓬勃發(fā)展,深刻改變著人類生產(chǎn)生活方式,對各國經(jīng)濟(jì)社會發(fā)展、全球治理體系、人類文明進(jìn)程影響深遠(yuǎn)。中國信通院《全球數(shù)字經(jīng)濟(jì)新圖景(2020年)》報告稱,2019年全球數(shù)字經(jīng)濟(jì)規(guī)模達(dá)到31.8萬億美元,約占全球GDP的36%。數(shù)字經(jīng)濟(jì)保持快速增長,質(zhì)量效益明顯提升,數(shù)字經(jīng)濟(jì)增加值規(guī)模達(dá)到35.8萬億元,占國內(nèi)生產(chǎn)總值(GDP)比重達(dá)到36.2%,對GDP增長的貢獻(xiàn)率為67.7%。全球2030年數(shù)字化經(jīng)濟(jì)的占比將達(dá)到60%,數(shù)字產(chǎn)業(yè)本身的持續(xù)增長和傳統(tǒng)產(chǎn)業(yè)的數(shù)字化轉(zhuǎn)型在加速。數(shù)字產(chǎn)業(yè)到2030年的產(chǎn)值比重將達(dá)到9%,成為經(jīng)濟(jì)增長的加速器;傳統(tǒng)產(chǎn)業(yè)的數(shù)字化轉(zhuǎn)型,正在通過數(shù)字化的武器,指導(dǎo)傳統(tǒng)產(chǎn)業(yè)更加互聯(lián)網(wǎng)化、智能2030年產(chǎn)業(yè)的數(shù)字化滲透率達(dá)到45%,數(shù)字化進(jìn)程的深入讓我們更加理解這個世界,推動人工智能和智能制造的發(fā)展。在這個數(shù)據(jù)驅(qū)動的世界,人類、社會和地球資源的活動的正在越來越多的被以數(shù)據(jù)的形式觀察、記錄、監(jiān)聽、追蹤和處理,這使得我們可以比以往更加精確的理解、以至于描述這個世界。數(shù)據(jù)的大量積累和機器學(xué)習(xí)的技術(shù)發(fā)展催生的人工智能的成熟,人工智能會給業(yè)務(wù)、流程、溝通帶來更多的自動化,通過為客戶個人偏好提供量身定制產(chǎn)品把效率和數(shù)據(jù)的總量從175ZB到1003ZB,將進(jìn)入YB時代根據(jù)IDC和華為GIV團(tuán)隊預(yù)測,全球每年新產(chǎn)生的數(shù)據(jù)總量隨著數(shù)字化的發(fā)展快速增長,從2020年每年產(chǎn)生2ZB到2025年每年產(chǎn)生175ZB,2030年將達(dá)到1003ZB,即將進(jìn)入YB(1YottaBytes=1000ZettaBytes)時代。全球每年新產(chǎn)生的數(shù)據(jù)總量預(yù)測(ZB)1200120010008006004002000100310036704603252365826442033772015201620172018201920202021202220232024202520262027202820292030圖1-2全球每年新產(chǎn)生的數(shù)據(jù)總量預(yù)測未來數(shù)據(jù)存儲場景端邊云產(chǎn)生數(shù)據(jù)70%向數(shù)據(jù)中心集中,大規(guī)模集約化數(shù)據(jù)中心形成端(Endpoint):終端包含所有的在網(wǎng)絡(luò)邊緣的終端設(shè)備,包括PC、手機、工業(yè)傳感器、汽車、可穿戴設(shè)備等等。邊(Edge):邊緣是指用來處理企業(yè)級負(fù)載的服務(wù)器和設(shè)備,但其位置沒有放在核心數(shù)據(jù)中心,而是放在分支機構(gòu)的ServerRoom、工作場地、或是無線基站,以便靠近數(shù)據(jù)處理、減少網(wǎng)絡(luò)延遲。云(CoreDataCenter):核心數(shù)據(jù)中心是指大規(guī)模的數(shù)據(jù)中心、包括企業(yè)數(shù)據(jù)中心、IDC、以及公有云廠商的云數(shù)據(jù)中心。2030年數(shù)據(jù)的產(chǎn)生主要來自終端,未來邊緣和數(shù)據(jù)中心產(chǎn)生的比例將增加隨著端設(shè)備的增加,2030年數(shù)據(jù)產(chǎn)生依然主要來自終端設(shè)備。根據(jù)預(yù)測2030年智能汽車增長、可穿戴設(shè)備、工業(yè)IoT等大幅增長,端設(shè)備產(chǎn)生的數(shù)據(jù)將增長14倍,占比為為52%。2030年邊緣設(shè)備也將大幅增長,其中5GMEC、CDN、Robo、高新媒體處理器都將得到大幅應(yīng)用;家庭數(shù)字化處理中心也在形成雛形,未來每個家庭有一個數(shù)字化處理中心,連接所有家庭數(shù)字或智能化終端,如手機、可穿戴設(shè)備、智能冰箱等設(shè)備,存儲數(shù)據(jù)、處理數(shù)據(jù)、幫助管理生活。到2030年邊緣產(chǎn)生的數(shù)據(jù)增長22倍,占比達(dá)到21%。云(CoreDataCenter)是數(shù)據(jù)匯聚、處理、備份、復(fù)制、轉(zhuǎn)移的關(guān)鍵節(jié)點,每一種操作都將產(chǎn)生新的數(shù)據(jù),數(shù)據(jù)中心的對數(shù)據(jù)的操作有放大效應(yīng);未來隨著數(shù)據(jù)中心數(shù)據(jù)匯聚的越多,放大效應(yīng)越大。到2030年,數(shù)據(jù)中心產(chǎn)生的數(shù)據(jù)增長18倍、占比為27%。100%90%80%70%60%50%40%30%20%10%0%201020112012201320142015201620172018201920202021202220232024202520262027202820292030EdgeCoreEdgeCore圖1-3數(shù)據(jù)產(chǎn)生來源趨勢預(yù)測數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書2030年數(shù)據(jù)的存儲位置進(jìn)一步向數(shù)據(jù)中心集中,終端上產(chǎn)生的數(shù)據(jù)通過應(yīng)用系統(tǒng)、備份系統(tǒng)很大一部分被保存在數(shù)據(jù)中心。隨著網(wǎng)絡(luò)建設(shè)的發(fā)展和帶寬的增加,數(shù)據(jù)保存在數(shù)據(jù)中心更加方便和安全,網(wǎng)盤、照片、賬號、應(yīng)用數(shù)據(jù)都在數(shù)據(jù)中心保存。以各種應(yīng)用賬號為例,不同客戶端使用同一賬戶登錄,通過數(shù)據(jù)中心保留的賬號和狀態(tài)數(shù)據(jù),你到2030年,被存儲下來的數(shù)據(jù)約有65%被存放到數(shù)據(jù)中心,端設(shè)備無需長期保存數(shù)據(jù),定期備份到數(shù)據(jù)中心是未來趨勢。隨著對實時處理、低時延要求的應(yīng)用增長,邊緣存儲數(shù)據(jù)的場景也在增長,如智能駕駛訓(xùn)練終端、實時邊緣流處理、5GMEC、VR/AR邊緣中心等,邊緣處理數(shù)據(jù)比例在2030年達(dá)到10%。各種分散的數(shù)據(jù)向數(shù)據(jù)中心匯聚,讓我們更加有可能對數(shù)據(jù)價值進(jìn)行深度挖掘,成為數(shù)數(shù)據(jù)存儲2030愿景及關(guān)鍵特性PART02數(shù)據(jù)存儲2030未來10年,數(shù)據(jù)的年復(fù)合增長率接近40%,數(shù)據(jù)類型呈現(xiàn)多樣化,單一的存儲介質(zhì)難以滿足多樣化的數(shù)據(jù)存儲需求,需要多元化的介質(zhì)來應(yīng)對存儲成本高、功耗大、持久性差等挑戰(zhàn)。海量多樣化數(shù)據(jù)促進(jìn)多元化先進(jìn)介質(zhì)和介質(zhì)應(yīng)用發(fā)展,結(jié)合智能化數(shù)據(jù)縮高速增長的數(shù)據(jù)量與緩慢增長的數(shù)據(jù)處理能力已成為數(shù)據(jù)產(chǎn)業(yè)的基本矛盾,數(shù)據(jù)存力與數(shù)據(jù)發(fā)展嚴(yán)重失衡。經(jīng)典的以CPU為核心的架構(gòu)理念將難以支撐海量數(shù)據(jù)存儲和處理的需求,需要以數(shù)據(jù)為中心來實現(xiàn)整個架構(gòu)的重構(gòu)[12]。新體系架構(gòu)宏觀上存算分離,微觀上存算一體,通過高通量、超低時延和高擴(kuò)展的互聯(lián)總線,打破資源的邊界,形成處理器、內(nèi)存和存儲資源池化,以存補數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書日益復(fù)雜的存儲系統(tǒng)已無法滿足新興多云應(yīng)用的智能化數(shù)據(jù)業(yè)務(wù)需求,需要數(shù)據(jù)業(yè)務(wù)邏輯與數(shù)據(jù)智能解耦。在未來的數(shù)據(jù)基礎(chǔ)設(shè)施中,存儲將具備數(shù)據(jù)感知、數(shù)據(jù)理解的新能力,支撐數(shù)據(jù)服務(wù)走向千行百業(yè),數(shù)據(jù)持續(xù)增長的存儲能耗,與全球低碳發(fā)展要求仍存在差距,對存儲的綠色低碳能力提出了新的要求。新節(jié)能材料、以光代電和動態(tài)節(jié)能技術(shù)促進(jìn)芯片節(jié)能,新型液冷散熱和智能化的整機調(diào)控技術(shù)促進(jìn)整機節(jié)能,系統(tǒng)級多維度、智能化資源調(diào)控技術(shù)從數(shù)據(jù)全生命周期上實現(xiàn)減排,未來將 2030數(shù)據(jù)存儲原生安全圖2-1數(shù)據(jù)存儲2030六大關(guān)鍵特征綜上所述,未來存儲需要具備先進(jìn)介質(zhì)應(yīng)用、以數(shù)據(jù)為中心的體系架構(gòu)、數(shù)據(jù)存儲原生安全、智能數(shù)據(jù)編織、數(shù)據(jù)即應(yīng)用、綠色低碳存儲共數(shù)據(jù)存儲2030愿景及關(guān)鍵特性預(yù)計到2030年,全球每年新增1YB的數(shù)據(jù),其中有接近50ZB的價值數(shù)據(jù)需要存儲,相比2020年增長23倍,要求存儲介質(zhì)必須具備大容量、高性價比、低能耗,以及高可靠、高擴(kuò)展、長壽耐用和高安全性,同時要求存儲具有數(shù)據(jù)計算和分析能力,以便更魚與熊掌不可兼得,不同的介質(zhì)具有各自的優(yōu)劣勢,需要通過多種介質(zhì)組合來應(yīng)對挑戰(zhàn)。根據(jù)不同介質(zhì)的演進(jìn)趨勢,預(yù)計到2030年,介質(zhì)容量密度有望提升10倍,但相比存儲數(shù)據(jù)量23倍的增長仍存在較大差距,需要介質(zhì)應(yīng)用創(chuàng)新來填數(shù)字時代1990s2030s2000s2010s2020s1990s2030s互聯(lián)網(wǎng)2.0互聯(lián)網(wǎng)2.0云數(shù)字化轉(zhuǎn)型加速、元宇宙3D渲染90%70%50%10%30%個人PC數(shù)字化轉(zhuǎn)型加速、元宇宙3D渲染90%70%50%10%30%個人PC行業(yè)智能數(shù)字孿生GBZBTBEBPB純冷歸檔數(shù)據(jù)活動歸檔(溫冷)數(shù)據(jù)純冷歸檔數(shù)據(jù)活動歸檔(溫冷)數(shù)據(jù)應(yīng)用數(shù)據(jù)應(yīng)用數(shù)據(jù)存儲數(shù)據(jù)圖2-2數(shù)據(jù)量增長趨勢不同的數(shù)據(jù)對存儲介質(zhì)的要求不同,按訪問頻率可將存儲熱數(shù)據(jù):共占比約30%。其中,AIoT、邊緣計算、機器人和自動駕駛等實時處理需要納秒級數(shù)據(jù)訪問能力,屬于極熱數(shù)據(jù),占總存儲容量的1.5%左右,需要極高性能的內(nèi)存型介質(zhì);而銀行、電子商務(wù)等在線交易類業(yè)務(wù),以及EDA等工業(yè)制造類業(yè)務(wù)也需要頻繁實時訪問能力,屬于一般熱數(shù)據(jù),容量將增長超過35倍,需要高性能的存儲介質(zhì)。數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書溫數(shù)據(jù):HPDA等數(shù)據(jù)密集型業(yè)務(wù)需要對大量數(shù)據(jù)做分析,沒有很高的訪問頻率和實時性要求,但數(shù)據(jù)量占比達(dá)到60%,相比2020年預(yù)計增長超過25倍。這部分?jǐn)?shù)據(jù)存儲除了要求大容量介質(zhì)外,對成本、功耗也極其敏感,需要高性價比的存儲介質(zhì)。冷數(shù)據(jù):歷史文獻(xiàn)、國家檔案及其他一些法律規(guī)定的需要長期存儲的數(shù)據(jù),平時極少訪問,占比大約10%,容量增長預(yù)計接近20倍。由于需要長期存儲,可靠性要求變得更高多樣化的數(shù)據(jù)驅(qū)動存儲介質(zhì)多樣化發(fā)展,在不同的應(yīng)用領(lǐng)域構(gòu)建競爭力。其中,極熱數(shù)據(jù)內(nèi)存型介質(zhì)將以DRAM為主、SCM為輔,內(nèi)存的分級將成為新生態(tài);熱數(shù)據(jù)介質(zhì)將全部使用NANDFlash,F(xiàn)lash閃存技術(shù)則會繼續(xù)向高密度、低時延演進(jìn);在溫、冷數(shù)據(jù)介質(zhì)技術(shù)中,磁帶有望繼續(xù)向高密度、高并發(fā)方向演進(jìn),光盤則會走向更隨著數(shù)據(jù)密集型應(yīng)用的發(fā)展,需要處理的數(shù)據(jù)量將從當(dāng)前的GB級增長至當(dāng)前,DRAM占據(jù)內(nèi)存型介質(zhì)的主流地位,由于20nm以下制程工藝的容量密度提升空間有限,未來10年將在10nm級別持續(xù)發(fā)展。隨著大數(shù)據(jù)集對大內(nèi)存需求的增加,SCM等新介質(zhì)技術(shù)的發(fā)展推動內(nèi)存架構(gòu)走向多層次化,逐漸跟DRAM形成互補。2、SCM將持續(xù)開拓新場景基于新型材料和結(jié)構(gòu)的SCM能夠擁有與DRAM相媲美的性能,并具有持久化的新特征。在某些特定領(lǐng)域上,使用SCM實現(xiàn)的CIM內(nèi)存作為DRAM的補充,起到了很好的加速效果,并且未來圍繞SCM的新生態(tài)將不斷豐富。各種具有持久化能力的SCM介質(zhì)可以使高性能熱數(shù)據(jù)得到快速訪問?,F(xiàn)有存儲系統(tǒng)中,處理器經(jīng)?;ㄙM大量時間在IO等待上。未3、NANDFlash在3D堆疊的方向持續(xù)演進(jìn),加速替代HDD相比于HDD,SSD在性能、功耗、容量上具有明顯優(yōu)勢,在ToC場景下的HDD已經(jīng)被SSD替代,而在ToB的場景下的HDD也有望被加速替數(shù)據(jù)存儲2030愿景及關(guān)鍵特性業(yè)界采用增加堆疊層數(shù)的方式來實現(xiàn)SSD的代次演進(jìn),從而提升單位硅片面積的存儲容量,降低單位存儲空間的成本。但隨著堆疊層數(shù)的增加,堆疊memoryhole的深寬比(孔的深度與孔徑的比例)增大,對蝕刻以及沉積的工藝帶來了更高的挑戰(zhàn),從而限制了層數(shù)的持續(xù)增加。為了進(jìn)一步提升存儲密度,提升NAND陣列的有效面積占比,未來CMOS外圍電路與NAND陣列堆疊的YMTCXtackingTM圖2-33DNAND原理通過堆疊和3D立體架構(gòu),預(yù)計2030年單位芯片面積的容量密度相比2021年有望增加10倍。但受技術(shù)的復(fù)雜性、工藝良率等因素影響,SSD成本卻難以下降10倍。反而由于工藝的影響、內(nèi)部布線的干擾和密度的增加,SSD的底層誤碼率可能進(jìn)一步惡化,按照SSD和HDD的技術(shù)演進(jìn)趨勢,預(yù)計到2030年,HDD的成本優(yōu)勢依然存在,這使得HDD在注重性價比的溫數(shù)據(jù)存儲場景中依然是主流介質(zhì)[14]。HDD的技術(shù)主要向提升密度的方向演進(jìn),由于HDD的磁記錄只能附著在基板的表面,密度提升只能通過增加碟片數(shù)和提升磁密度來構(gòu)建,受HDD形態(tài)和超順磁性限制,當(dāng)前HDD的容量密度已經(jīng)接近極限,短期HDD密度的提升將向著突破形態(tài)限制和突破超順磁性限制的方向演進(jìn),比如超厚HDD,能量輔助磁記錄技術(shù)(HAMR、MAMR)等[15],長期技術(shù)演進(jìn)則包括磁記錄技術(shù)的到2030年,冷數(shù)據(jù)介質(zhì)將仍然以磁帶和光盤為主。光盤具備高可靠性、長壽命、對存儲環(huán)境要求低的特點,更適合做為超長周期冷數(shù)據(jù)的存儲,而磁帶則主要用于中長期的冷數(shù)據(jù)存儲。在數(shù)據(jù)驅(qū)動的智能世界時代,數(shù)據(jù)變得更熱,相應(yīng)的,對冷數(shù)據(jù)介質(zhì)也2222數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書磁帶記錄是通過磁帶介質(zhì)順序卷帶的方式實現(xiàn)數(shù)據(jù)存儲的一類技術(shù)。磁帶通常使用空間折疊方法實現(xiàn)容量擴(kuò)展。以LTO-9為例,其介質(zhì)記錄面積是同期HDD的100倍。當(dāng)前磁帶容量密度僅為HDD的1/100,未來有望通過突破磁疇微縮、高精度伺服控制和超低誤碼率的磁信道編碼技術(shù),實現(xiàn)其容量超過HDD約100倍以上。磁盤臂裝置磁盤臂裝置SupplyReelTake-UpReelSupplyReelTapeHubTapePlatters(BeneathTapePlatters(BeneathReels)CapstanEraseHeadRecordHeadEraseHeadRecordHeadIdlerrollerHead圖2-4磁存儲原理(磁盤、磁帶)磁帶的線性運動可以使用更多的磁頭并發(fā)讀寫,當(dāng)前LTO-932個磁頭并發(fā)帶寬已超越HDD1倍以上,未來有望實現(xiàn)超越HDD10倍以上。從工作原理上看,磁帶在順序讀寫方面有優(yōu)勢,但隨機讀寫時磁頭的定位時間隨容量而增加,影響數(shù)據(jù)實時性訪問[16]。未來,一方面可通過帶寬優(yōu)勢換取時間,另一方面可通過數(shù)據(jù)的布局和調(diào)度算法進(jìn)一步提升數(shù)據(jù)實時訪問性能。從材料上看,磁帶壽命受存儲環(huán)境溫度影響明顯,當(dāng)溫度處于35~40度時,磁帶存儲壽命會下降數(shù)倍,增加數(shù)據(jù)丟失風(fēng)險。未來需進(jìn)一步探索新2、光存儲介質(zhì)技術(shù)光存儲介質(zhì)技術(shù)未來將朝著大容量、低成本的方向發(fā)展。當(dāng)前光存儲的主流技術(shù)是藍(lán)光存儲,它最初用于消費領(lǐng)域,但容量只有500GB/disc,單個光頭吞吐率只有40+MB/s[17]。未來光存儲將在超分辨、多階、多維、鏡面超多層以及體材料等技術(shù)上實現(xiàn)突破,將光存儲容量提升到300~700TB/disc,將吞吐率提升到百MB/s。在20年內(nèi),單盤容量有望達(dá)到百TB。2323數(shù)據(jù)存儲2030愿景及關(guān)鍵特性超分辨光存儲技術(shù):光存儲通過激光照射記錄材料,使其發(fā)生物理化學(xué)變化來記錄信息??s減波長和提升數(shù)值孔徑可實現(xiàn)激光光斑變小,提升光存儲記錄密度,而波長和孔徑的大小受衍射極限的限制,未來有望通過多束光疊加干涉超越衍射極限,進(jìn)一步提多維/多階記錄光存儲:多維度光可突破單維度光只能記錄單bit的限制,實現(xiàn)多bits信息記錄。目前正在研究中的技術(shù)是由存儲介質(zhì)三維空間、偏振和光強度的五維光存儲,未來有望解決光信號的空間干擾問題,向六維及以上維度發(fā)展,實現(xiàn)容量密度的進(jìn)一圖2-5光存儲原理多層/體記錄光存儲:通過單光盤層數(shù)的疊加可實現(xiàn)光存儲密度提升,如藍(lán)光存儲已實現(xiàn)六層商用,未來有望解決層間光干擾問題,向數(shù)十上百層方向發(fā)展。全息光記錄采用相變體材料,可在存儲介質(zhì)體內(nèi)部實現(xiàn)不同層和不同角度的信息記錄,通過多層和體記錄技術(shù)疊加,光存儲可向更高密度演進(jìn),有望突破百TB/disc的容量密度。伺服驅(qū)動技術(shù):光驅(qū)包含激光器和光電調(diào)制設(shè)備,目前在多維光存儲中使用的飛秒激光器和光電調(diào)制設(shè)備成本較高。隨著飛秒激受半導(dǎo)體制造工藝和介質(zhì)結(jié)構(gòu)物理極限的限制,SSD、DRAM等介質(zhì)的集成度無法持續(xù)提升,未來可通過Wafer級創(chuàng)新、Chiplet級創(chuàng)新、接口和協(xié)議創(chuàng)新來進(jìn)一步提升介質(zhì)密度和壽命,降低介質(zhì)功耗,增強介質(zhì)的可靠性。Wafer級創(chuàng)新:Die-On-Board(DOB)技術(shù)可以將存儲顆粒或芯片集成到電路板上,提供更高的密度和更好的性能。Wafer-Scale技術(shù)直接使用多個NANDDie的晶圓而無需對晶圓進(jìn)行切割和封裝,實現(xiàn)更高密度、更快速度和更高可靠性。當(dāng)前Wafer-Scale技術(shù)還不成熟,需要解決超大芯片的制造、芯片的功能管理和監(jiān)控、跨芯片連接、芯片散熱、可靠性管理等問題。未來,有望采用先進(jìn)的工藝技術(shù)、創(chuàng)新的芯片設(shè)計方法、智能測試手段等,在保持高密度和低能耗優(yōu)勢的同時,實現(xiàn)更高容量和2424數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書Chiplet級創(chuàng)新:Chiplet可以將不同功能模塊集成在單獨封裝的芯片中,實現(xiàn)更好的靈活性和擴(kuò)展性、更優(yōu)秀的性能和功率效率。當(dāng)前Chiplet技術(shù)仍然面臨著芯片間通信和同步、緩存一致性、傳輸速率匹配等多方面的技術(shù)挑戰(zhàn)。未來,有望通過智能化控制算法、高效的芯片緩存一致性協(xié)議、存儲介質(zhì)內(nèi)部封裝處理器、異構(gòu)處理器和加速器等技術(shù),將計算芯片和介質(zhì)芯片封裝在一起,構(gòu)建存算一體的Chiplet介質(zhì),實現(xiàn)高性能、低功耗、易擴(kuò)展。接口和協(xié)議創(chuàng)新:隨著介質(zhì)走向多元化,多種介質(zhì)接口間數(shù)據(jù)傳輸存在較大的協(xié)議轉(zhuǎn)換開銷,在性能、安全、通用性上有較大的改進(jìn)空間。ZNS(ZoneNamespace)是用于閃存設(shè)備的高速存儲協(xié)議,支持基于更小數(shù)據(jù)塊的高效空間管理,緩解了SSD設(shè)備性能的不平衡問題,提高了SSD的垃圾回收和數(shù)據(jù)遷移等方面的性能,目前需要解決兼容性、應(yīng)用遷移等問題。Plog用于數(shù)據(jù)持久化的存儲管理,可跨越多種存儲介質(zhì),在不同存儲系統(tǒng)之間傳輸和處理數(shù)據(jù)。Plog協(xié)議通過自動重傳和自我修復(fù)機制,確保數(shù)據(jù)的一致性、可靠性和完整性,提高數(shù)據(jù)傳輸和訪問效率。未來,隨著多元化介質(zhì)技術(shù)的不斷發(fā)展,需要定義新型高性能接口數(shù)據(jù)編碼技術(shù)包含縮減數(shù)據(jù)量的壓縮編碼(Sayood,2017)、抗數(shù)據(jù)錯誤的糾錯編碼以及抗數(shù)據(jù)丟失的糾刪編碼(Peterson,Peterson,Weldon,&Weldon,1972),是支撐存的下(空間)以及存的久(時間)的核心技術(shù)之一。未來面對海量多元的存儲數(shù)據(jù)以及介質(zhì)融合的存儲系統(tǒng),通過智能化數(shù)據(jù)壓縮、聯(lián)合編碼、智能化數(shù)據(jù)分類,有望突破數(shù)據(jù)編碼技術(shù),實現(xiàn)存儲有效容量提H(p)+D(H(p)+D(pllq)≤Epl(x)<H(p)+D(pllq)+1圖2-6無損數(shù)據(jù)壓縮的理論2525數(shù)據(jù)存儲2030愿景及關(guān)鍵特性智能數(shù)據(jù)壓縮:數(shù)據(jù)壓縮是按照特定的編碼機制用短比特數(shù)據(jù)表示信息的過程。在數(shù)據(jù)存儲中,有損壓縮編碼和無損壓縮編碼并存。當(dāng)前的有損編碼還無法打破經(jīng)典的率失真理論,未來需要探索語義提取和語義壓縮技術(shù),擴(kuò)展率失真函數(shù),建立新的理論體系,實現(xiàn)有損壓縮的技術(shù)突破;業(yè)界主流的無損壓縮方法以LZ和熵編碼為核心,在面對非結(jié)構(gòu)化數(shù)據(jù)壓縮方面壓縮效果欠佳?;拇蟮膯栴},未來有望通過遷移學(xué)習(xí)、元學(xué)習(xí)、大模型等技術(shù)提升模型泛化能力和算法效率,實現(xiàn)存儲系統(tǒng)中縮減率數(shù)倍提升。1111221圖2-7數(shù)據(jù)重刪的基本原理數(shù)據(jù)重刪:重復(fù)數(shù)據(jù)刪除技術(shù)(簡稱“重刪”)是通過數(shù)據(jù)塊級別的內(nèi)容識別,實現(xiàn)重復(fù)數(shù)據(jù)塊刪除的一類技術(shù)。隨著處理器技術(shù)和新型存儲介質(zhì)的出現(xiàn),重刪技術(shù)正逐漸從離線走向在線處理,數(shù)據(jù)重刪的粒度也在不斷縮小,從早期的文件級重刪發(fā)展為近期的字節(jié)級相似重刪,對于系統(tǒng)的算力和IO吞吐率提出了更高的挑戰(zhàn)。面向海量多元化數(shù)據(jù)重刪,在高維數(shù)據(jù)場景相比結(jié)構(gòu)化數(shù)據(jù)場景重刪率還有數(shù)量級的差距,未來隨著應(yīng)用語義重刪技術(shù)的發(fā)展,有望從根本上解決非0101010101010101 1100110001100011 01010101010101010101重刪壓縮糾刪0101檢錯01010糾錯0101011 10101010101010101010 1010101001010011 10101010001100110011 0011001100011011 00110011 聯(lián)合編碼 圖2-8數(shù)據(jù)聯(lián)合編碼數(shù)據(jù)聯(lián)合編碼:香農(nóng)的分離理論(Shannon,1948)證明了在碼長趨于無窮的前提下信源編碼與信道編碼分開設(shè)計可達(dá)到整體系統(tǒng)最優(yōu),在有限碼長的場景下,聯(lián)合信源編碼與信道編碼可能取得增益(Jiang&Bruck,2008)。未來通過設(shè)計聯(lián)合編碼可實現(xiàn)更CacheCacheDRAMDRAMSCMFlashHDD/TAPE壓縮算法:ZSTD,LZMA,GZIPSCMFlashHDD/TAPE壓縮算法:ZSTD,LZMA,GZIP…糾錯算法:MDS,LDPC,BCH,CRC…糾刪算法:MDS,LRC…圖2-9智能分類2626數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書智能化數(shù)據(jù)分級分類:存儲是一個介質(zhì)多元化和層次化介質(zhì)的系統(tǒng),不同介質(zhì)的可靠性、延遲、帶寬和成本差異較大,需要選擇與之匹配的數(shù)據(jù)編碼算法(Kim,Gupta,Urgaonkar,Berman,&Sivasubramaniam,2011)(壓縮、糾錯、以及糾刪)。未來需要突破智能化的數(shù)據(jù)分類技術(shù)實現(xiàn)不同的數(shù)據(jù)編碼與介質(zhì)的最優(yōu)匹配,提升數(shù)據(jù)在大數(shù)據(jù)、人工智能、HPC、IOT等新型數(shù)據(jù)密集型應(yīng)用的推動下,數(shù)據(jù)量爆炸增長,年復(fù)合增長率近40%,其中熱數(shù)據(jù)占比將超過30%;另一方面,摩爾定律、Dennard縮放定律的放緩,CPU性能年化增長降低至3.5%。高速增長的數(shù)據(jù)與緩慢增長的數(shù)在傳統(tǒng)的以CPU為中心的數(shù)據(jù)中心架構(gòu)中,業(yè)務(wù)在空間、時間的不均勻性導(dǎo)致本地存儲資源利用率低,本地內(nèi)存、存儲閑置率超過50%[19]。另外,數(shù)據(jù)的移動、數(shù)據(jù)格式的反復(fù)轉(zhuǎn)換消耗了大量CPU時間,使得數(shù)據(jù)處理效率低下。CPUcoreL1/L2/L3CachecorecoreCPUcoreL1/L2/L3CachecorecoreCPUcoreL1/L2/L3CachecorecoreCPUcoreL1/L2/L3CachecorecoreDRAMDRAM(load/store)DRAMDRAM(load/store)DRAMDRAM(file(file&block)序列化/反序列化SSD/HDDSSD/HDDSSD/HDDSSD/HDDIP網(wǎng)絡(luò)圖2-10以CPU為中心的架構(gòu)現(xiàn)有數(shù)據(jù)中心架構(gòu)存儲、計算資源利用效率低下,為了提升數(shù)據(jù)處理效率和存儲資源利用率,未來數(shù)據(jù)中心架構(gòu)需要從“以CPU1)在宏觀上存算分離,計算、存儲資源獨立部署,通過高通量[20]數(shù)據(jù)總線互聯(lián),統(tǒng)一內(nèi)存語義訪問數(shù)據(jù),實現(xiàn)計算、存儲資源解2)在微觀上存算一體,圍繞數(shù)據(jù),近數(shù)據(jù)處理,減少數(shù)據(jù)非必要移動,在數(shù)據(jù)產(chǎn)生的邊緣、數(shù)據(jù)流動的網(wǎng)絡(luò)中、數(shù)據(jù)存儲系統(tǒng)中數(shù)據(jù)存儲2030愿景及關(guān)鍵特性存算分離不再局限于CPU與SSD、HDD外部存儲解耦,而是徹底打破各類計算存儲硬件資源的邊界,將其組建為彼此獨立的硬件資源池(例如CPU池、DPU池、內(nèi)存池、閃存池等),實現(xiàn)各類硬件的彈性擴(kuò)展及靈活共享。存算分離架構(gòu)具備三個特征:file、block@NOFKV、arrow@CXL直出容器FS和分布式EC,卸載本地布局fs、block@RDMA云硬盤分布式DB數(shù)據(jù)庫服務(wù)數(shù)倉搜索服務(wù)容器存儲辦公虛擬化云硬盤分布式DB數(shù)據(jù)庫服務(wù)數(shù)倉搜索服務(wù)容器存儲辦公虛擬化KVM/DockerBlockerBlockerAPPAPPLocalFSAPPAPPXXXXMySQLKV/FSHadoopSparkKVM/DockerBlockerBlockerAPPAPPLocalFSAPPAPPXXXXMySQLKV/FSHadoopSpark高通量數(shù)據(jù)總線高通量數(shù)據(jù)總線(對等互聯(lián)、統(tǒng)一協(xié)議、統(tǒng)一語義)CSICSICSICSICSICSICSICSICSICSICSICSIDPUDPUDPUDPUDPUDPUHDDDPUDPUDPUDPUDPUDPUHDD池圖2-11存算分離架構(gòu)新型存算分離架構(gòu)將服務(wù)器本地盤拉遠(yuǎn)構(gòu)成無盤化(diskless)服務(wù)器和遠(yuǎn)端存儲池,同時還通過遠(yuǎn)程內(nèi)存池擴(kuò)展本地內(nèi)存,實現(xiàn)了真正意義上的存算解耦,可極大提升存儲資源利用率。業(yè)務(wù)使用時,可根據(jù)應(yīng)用需求選擇不同性能、容量的虛擬盤及池化內(nèi)存空間。首先,存儲資源池化可以避免本地存儲空間超配造成的空間浪費;其次,資源池化可避免數(shù)據(jù)跨總線和跨設(shè)備流動,減少數(shù)據(jù)移動,提升性能,降低功耗;最后,當(dāng)服務(wù)器出現(xiàn)故障或通過NVMeoverRDMA網(wǎng)絡(luò)技術(shù),可以實現(xiàn)外存SDD池化,為遠(yuǎn)端訪問SSD提供本地一致的訪問性能。未來有望通過新型內(nèi)存型網(wǎng)絡(luò)(如CXL、UnifiedBus)、內(nèi)存介質(zhì)智能分級和內(nèi)存統(tǒng)一編址等技術(shù),實現(xiàn)內(nèi)存池化,十倍擴(kuò)展內(nèi)存容量,降低應(yīng)用2828數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書傳統(tǒng)應(yīng)用通過文件、對象、塊接口訪問數(shù)據(jù),IO棧協(xié)議厚重,IO開銷超過30%。采用內(nèi)存語義和內(nèi)存數(shù)據(jù)格式訪問接口,可實現(xiàn)IO零開銷、格式零轉(zhuǎn)換、數(shù)據(jù)零流動。當(dāng)前,內(nèi)存語義訪問仍面臨應(yīng)用數(shù)據(jù)訪問接口生態(tài)、內(nèi)存語義網(wǎng)絡(luò)標(biāo)準(zhǔn)化的挑戰(zhàn),未來有望形成統(tǒng)一的內(nèi)存語義標(biāo)準(zhǔn)協(xié)議,實現(xiàn)內(nèi)存語義的數(shù)傳統(tǒng)互聯(lián)總線以CPU為中心,CPU成為系統(tǒng)瓶頸,系統(tǒng)無法大規(guī)模擴(kuò)展;協(xié)議類型七國八制,協(xié)議反復(fù)轉(zhuǎn)換,影響系統(tǒng)效率;不同設(shè)備不同通信語義,數(shù)據(jù)格式反復(fù)轉(zhuǎn)換,造成額外開銷。需要定義高通量數(shù)據(jù)總線,支持設(shè)備對等互訪,消除協(xié)議轉(zhuǎn)換,簡1)對等互聯(lián):打破以CPU為中心的主從結(jié)構(gòu),CPU、DPU、存儲對等互聯(lián),數(shù)據(jù)訪問不再經(jīng)過CPU,異構(gòu)多樣數(shù)據(jù)處理設(shè)備2)統(tǒng)一協(xié)議:抽象設(shè)備內(nèi)、機柜內(nèi)、數(shù)據(jù)中心不同通信需求,制定統(tǒng)一基礎(chǔ)協(xié)議功能,實現(xiàn)在處理器與存儲、不同存儲設(shè)備之間3)統(tǒng)一語義:把不同訪問需求抽象成統(tǒng)一的訪問語義,支持實現(xiàn)跨系統(tǒng)、跨不同類型設(shè)備數(shù)據(jù)4)高通量:單盤SSD帶寬將演進(jìn)到25GB/s,內(nèi)存支持100GB/s寬帶,<50ns時延,新型總線需要實現(xiàn)SSD、內(nèi)存、處理器互聯(lián),以及擴(kuò)展到機架間互聯(lián),同時滿足大塊數(shù)據(jù)傳輸高帶寬和小塊數(shù)據(jù)傳輸?shù)蜁r延需求,未來總線需要支持TB/s級帶寬,10ns在以數(shù)據(jù)為中心處理范式中,數(shù)據(jù)處理由通用計算走向數(shù)據(jù)處理專業(yè)化,由數(shù)據(jù)搬移到處理器走向近數(shù)據(jù)布置算力,在靠近數(shù)據(jù)的地方,以最合適的算力來處理數(shù)據(jù),在數(shù)據(jù)產(chǎn)生的邊緣、在數(shù)據(jù)移動中、在數(shù)據(jù)存儲中就近完成數(shù)據(jù)處理。數(shù)據(jù)存儲作為數(shù)據(jù)載體,不僅提供數(shù)據(jù)存取服務(wù),還提供近數(shù)據(jù)處理加速服務(wù),數(shù)據(jù)就近處理有三種主要方式:多樣化存算融合、數(shù)據(jù)存儲與網(wǎng)絡(luò)應(yīng)用應(yīng)用應(yīng)用應(yīng)用減少90%數(shù)據(jù)移動DPU網(wǎng)存協(xié)同DPU網(wǎng)存協(xié)同ECEC存儲存儲圖2-12存算融合原理2929數(shù)據(jù)存儲2030愿景及關(guān)鍵特性存算融合是通過算子下推到存儲器內(nèi)部或存儲模塊上移到處理器內(nèi)部來減少數(shù)據(jù)搬移,解決網(wǎng)絡(luò)時延和帶寬瓶頸,提升數(shù)據(jù)處理效率的一類技術(shù)。存算融合包括存算集成和存算一體[21]。存算集成(SCI)是在存儲部件上,集成指令運算單元和算子單元,實現(xiàn)數(shù)據(jù)預(yù)處理。例如,在SSD內(nèi)、內(nèi)存上增加固化的數(shù)據(jù)預(yù)處理單元(如壓縮、編碼引擎),實現(xiàn)數(shù)據(jù)處理加速功能?;蛟谔幚砥鲀?nèi)部集成較大容量存儲器來減少數(shù)據(jù)訪問,最終提升數(shù)據(jù)處理效率。未來,面向前一種場景,如何定義高效的前向兼容指令集、新的算子抽象,仍面臨巨大挑戰(zhàn),有望通過共性指令集研究和自定義算子,實現(xiàn)通用場景下數(shù)據(jù)的高效處理。存算一體(CIM)是采用非馮諾依曼架構(gòu),基于存儲單元與計算邏輯合一,打破計算和存儲的邊界,實現(xiàn)數(shù)據(jù)處理過程中極少數(shù)據(jù)搬運,相比傳統(tǒng)馮諾依曼架構(gòu)提升十倍以上的能效。由于當(dāng)前承載介質(zhì)的局限性,在數(shù)模轉(zhuǎn)化的效率、計算的精度和規(guī)模上仍面臨巨大挑戰(zhàn),未來有望通通過網(wǎng)絡(luò)感知存儲的語義,實現(xiàn)數(shù)據(jù)存儲服務(wù)的卸載和數(shù)據(jù)流的調(diào)度,提升數(shù)據(jù)訪問性能,加速數(shù)據(jù)應(yīng)用服務(wù)。當(dāng)前已經(jīng)在存儲訪問協(xié)議卸載(文件協(xié)議、對象協(xié)議、KV鍵值卸載等)、加速存儲IO(數(shù)據(jù)直通、IO零拷貝)、卸載數(shù)據(jù)布局(索引卸載等)等方向上展示出巨大的應(yīng)用潛力。通過智能網(wǎng)卡可以實現(xiàn)靈活的存儲業(yè)務(wù)卸載,但仍面臨編程友好性和運行效率挑戰(zhàn),未來有望通過定義高效的存儲算子,實現(xiàn)靈活性和高性能兼得。通過與網(wǎng)絡(luò)協(xié)同,卸載主機數(shù)據(jù)處理的開銷,比如安全類數(shù)據(jù)處理(比如SHA256、格密碼)、數(shù)據(jù)壓縮類數(shù)據(jù)處理(ZSTD、LZ、CDC)、數(shù)據(jù)保護(hù)類(EC)、數(shù)據(jù)分析類(Scan、Filter、Merge等)等操作不再由通用處理器負(fù)責(zé),隨數(shù)據(jù)流卸載到專用數(shù)據(jù)處理器。以DPU為代表的專業(yè)數(shù)據(jù)處理器具備成本更低、功耗更低、即插即用、即換即用等獨特優(yōu)勢,數(shù)據(jù)流動中加速數(shù)據(jù)處理,釋放通用處理器算力,倍數(shù)級提升大數(shù)據(jù)、HPC、數(shù)據(jù)庫等應(yīng)用性能。3030數(shù)據(jù)存儲數(shù)據(jù)存儲2030白皮書數(shù)據(jù)作為新型生產(chǎn)要素價值日益凸顯,其作為高價值目標(biāo)所面臨的攻擊面和攻擊強度越來越大,當(dāng)前基于邊界的被動防御體系無法滿足未來數(shù)據(jù)安全的需求[22]。在數(shù)據(jù)價值釋放過程中,針對數(shù)據(jù)的隱私保護(hù)需求日益旺盛,圍繞數(shù)據(jù)“可用不可見、可見不可得”的隱私計算在充分保護(hù)數(shù)據(jù)和隱私安全的前提下,實現(xiàn)了數(shù)據(jù)價值的轉(zhuǎn)化與釋放。數(shù)據(jù)流轉(zhuǎn)是釋放數(shù)據(jù)價值的必要途徑和手段,由于數(shù)據(jù)可復(fù)制性、可共享、可無限供給,因此在流轉(zhuǎn)過程中如何保證數(shù)據(jù)所有權(quán)、使用權(quán)和控制權(quán)得到有效保護(hù),是當(dāng)前數(shù)據(jù)安全攻防態(tài)勢研究表明,當(dāng)前的被動防御安全體系無法有效抵御勒索等病毒攻擊,需要從數(shù)據(jù)安全態(tài)勢感知、數(shù)據(jù)時間線旅行、原生防篡改、多維聯(lián)動響應(yīng)等多個技術(shù)方向圖2-13主動數(shù)據(jù)保護(hù)數(shù)據(jù)安全態(tài)勢感知:數(shù)據(jù)安全態(tài)勢感知技術(shù)是在一定的時間范圍內(nèi)采集數(shù)據(jù)訪問行為、數(shù)據(jù)信息熵、數(shù)據(jù)內(nèi)在關(guān)聯(lián)、數(shù)據(jù)分布等特征,結(jié)合大數(shù)據(jù)分析技術(shù)動態(tài)度量與評估數(shù)據(jù)安全風(fēng)險和威脅,支撐后續(xù)自主防御決策和行動。當(dāng)前業(yè)界的主要痛點是如何做到高效精準(zhǔn)的威脅檢測與態(tài)勢感知能力、對威脅的動態(tài)評估能力不足等問題,未來有望通過海量數(shù)據(jù)的采樣理論、異構(gòu)數(shù)據(jù)的融合處理、不完全信息條件下的活動辨識等方向的研究,逐步提高檢測的準(zhǔn)確度和性能,數(shù)據(jù)時間線旅行:數(shù)據(jù)在遭到內(nèi)外部攻擊損壞后,數(shù)據(jù)基礎(chǔ)設(shè)施需要具備在最短時間內(nèi)將受損數(shù)據(jù)恢復(fù)到任意歷史時間點,實現(xiàn)數(shù)據(jù)零丟失的能力,同時為了實現(xiàn)攻擊溯源,必須具備最細(xì)粒度的數(shù)據(jù)重放能力,支撐數(shù)據(jù)安全策略的調(diào)整與優(yōu)化。當(dāng)前業(yè)界的主要挑戰(zhàn)是快速精確定位受損數(shù)據(jù)的時間點、自動化行為溯源等問題,未來有望通過IO級數(shù)據(jù)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025版集體土地上房屋買賣合同(含相關(guān)政策)2篇
- 2024年網(wǎng)絡(luò)安全人才培養(yǎng)項目信托貸款合同3篇
- 2024年度中介平臺房產(chǎn)租賃居間合同3篇
- 2024年適用餐飲服務(wù)合作協(xié)議樣本版B版
- 2024年股份回購合同示例
- 2024年狗咬傷責(zé)任賠償協(xié)議2篇
- 2024年教育機構(gòu)裝修工程委托物業(yè)管理合同3篇
- 2024年松柏木材購銷協(xié)議3篇
- 2024年物業(yè)續(xù)約協(xié)議法律文本指南版B版
- 2024年物業(yè)服務(wù)企業(yè)社區(qū)業(yè)主大會服務(wù)合同范本3篇
- 工藝裝備環(huán)保性與安全性的設(shè)計要點
- [玻璃幕墻施工方案]隱框玻璃幕墻施工方案
- 中聯(lián)QY100T汽車吊主臂起重性能表
- 支付寶手持承諾函
- 國航因私免折票系統(tǒng)
- 三相自耦變壓器設(shè)計模版
- 國家開放大學(xué)電大本科《管理案例分析》2023-2024期末試題及答案(試卷代號:1304)
- 生產(chǎn)安全事故的應(yīng)急救援預(yù)案
- 二面角的求法---三垂線法
- 煤礦井下供電設(shè)計課件
- 未婚承諾書模板
評論
0/150
提交評論