數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀_第1頁(yè)
數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀_第2頁(yè)
數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀_第3頁(yè)
數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀_第4頁(yè)
數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀_第5頁(yè)
已閱讀5頁(yè),還剩10頁(yè)未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

數(shù)據(jù)流復(fù)制管理軟件行業(yè)現(xiàn)狀數(shù)據(jù)復(fù)制軟件行業(yè)面臨的機(jī)遇與挑戰(zhàn)(一)數(shù)據(jù)復(fù)制軟件行業(yè)面臨的機(jī)遇近年來(lái)國(guó)家政策始終關(guān)注數(shù)據(jù)安全和大數(shù)據(jù)行業(yè)發(fā)展,如十四五規(guī)劃建議提出加快壯大包括新一代信息技術(shù)在內(nèi)的戰(zhàn)略性新興產(chǎn)業(yè),加快數(shù)字化發(fā)展,保障國(guó)家數(shù)據(jù)安全,加強(qiáng)個(gè)人信息保護(hù);十三五規(guī)劃提出強(qiáng)化信息安全保障,加強(qiáng)數(shù)據(jù)資源在采集、存儲(chǔ)、應(yīng)用和開(kāi)放等環(huán)節(jié)的安全保護(hù);《十三五國(guó)家信息化規(guī)劃》提出支持?jǐn)?shù)據(jù)存儲(chǔ)、分析處理、信息安全與隱私保護(hù)等領(lǐng)域技術(shù)產(chǎn)品研發(fā),推進(jìn)數(shù)據(jù)備份與恢復(fù)等數(shù)據(jù)安全技術(shù)研發(fā)及應(yīng)用。2021年11月30日,工信部陸續(xù)發(fā)布了《十四五軟件和信息技術(shù)服務(wù)業(yè)發(fā)展規(guī)劃》和《十四五大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃》,進(jìn)一步明確了發(fā)展災(zāi)備和大數(shù)據(jù)采集行業(yè)的主要任務(wù)?!妒奈遘浖托畔⒓夹g(shù)服務(wù)業(yè)發(fā)展規(guī)劃》提出豐富數(shù)據(jù)備份、災(zāi)難恢復(fù)、工業(yè)控制系統(tǒng)防護(hù)等安全軟件產(chǎn)品和服務(wù)。支持高性能采集、異構(gòu)數(shù)據(jù)管理、敏感信息實(shí)時(shí)監(jiān)測(cè)等關(guān)鍵技術(shù)創(chuàng)新?!妒奈宕髷?shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃》提出加快數(shù)據(jù)大體量匯聚,支持企業(yè)通過(guò)升級(jí)信息系統(tǒng)等方式,推動(dòng)研發(fā)、生產(chǎn)、經(jīng)營(yíng)、服務(wù)等全環(huán)節(jié)數(shù)據(jù)的采集。加強(qiáng)技術(shù)創(chuàng)新,重點(diǎn)提升數(shù)據(jù)生成、采集、存儲(chǔ)、加工、分析、安全與隱私保護(hù)等通用技術(shù)水平。在數(shù)據(jù)生成采集環(huán)節(jié),著重提升產(chǎn)品的異構(gòu)數(shù)據(jù)源兼容性、大規(guī)模數(shù)據(jù)集采集與加工效率。近年來(lái),我國(guó)加快實(shí)施核高基國(guó)家科技重大專項(xiàng),在戰(zhàn)略部署上強(qiáng)化應(yīng)用導(dǎo)向,以重大信息化應(yīng)用、系統(tǒng)整機(jī)為牽引,以重大產(chǎn)品為目標(biāo),突破服務(wù)器操作系統(tǒng)、桌面操作系統(tǒng)、網(wǎng)絡(luò)化操作系統(tǒng)、新型智能移動(dòng)終端操作系統(tǒng)、大型通用數(shù)據(jù)庫(kù)等重點(diǎn)領(lǐng)域關(guān)鍵技術(shù),形成產(chǎn)業(yè)化和市場(chǎng)競(jìng)爭(zhēng)能力。2016年以來(lái),面向重大行業(yè)領(lǐng)域應(yīng)用和信息安全保障需求,國(guó)家繼續(xù)加大力度支持操作系統(tǒng)、數(shù)據(jù)庫(kù)、中間件、辦公軟件等基礎(chǔ)軟件技術(shù)和產(chǎn)品研發(fā)和應(yīng)用,相關(guān)行業(yè)及產(chǎn)品得到了長(zhǎng)足發(fā)展。1、數(shù)據(jù)復(fù)制軟件行業(yè)數(shù)據(jù)及數(shù)據(jù)安全信息安全網(wǎng)絡(luò)安全重要性不斷提升近年由于各行業(yè)信息化、數(shù)據(jù)化水平不斷提高,尤其是社會(huì)生產(chǎn)步入云和大數(shù)據(jù)時(shí)代,數(shù)據(jù)在經(jīng)濟(jì)發(fā)展和社會(huì)生活中的重要性越來(lái)越高。網(wǎng)絡(luò)安全、信息安全以及數(shù)據(jù)安全是國(guó)家安全的重要組成部分,已經(jīng)上升到與經(jīng)濟(jì)安全、領(lǐng)土安全等并駕齊驅(qū)的戰(zhàn)略高度。2021年發(fā)布的十四五‘規(guī)劃和2035年遠(yuǎn)景目標(biāo)綱要多次提及數(shù)字化、數(shù)字經(jīng)濟(jì)、國(guó)家安全等熱點(diǎn)話題,數(shù)據(jù)相關(guān)產(chǎn)業(yè)已成為未來(lái)中國(guó)發(fā)展建設(shè)的重點(diǎn)部署領(lǐng)域,與此相關(guān)的數(shù)據(jù)安全十分引人關(guān)注。在現(xiàn)實(shí)需求的推動(dòng)和國(guó)家政策的引導(dǎo)下,近年來(lái)我國(guó)信息安全市場(chǎng)發(fā)展迅速。2019年我國(guó)信息安全市場(chǎng)規(guī)模約為69.5億美元,同比增長(zhǎng)25.7%,相比全球的市場(chǎng)規(guī)模增速遙遙領(lǐng)先,這主要是因?yàn)閲?guó)內(nèi)相關(guān)市場(chǎng)較國(guó)外發(fā)展起步晚,而信息安全的受重視程度則越來(lái)越高,目前我國(guó)信息安全市場(chǎng)正以20%左右的規(guī)模增速逐步成為全球相關(guān)市場(chǎng)不可或缺的一部分。2、數(shù)據(jù)復(fù)制軟件行業(yè)數(shù)字經(jīng)濟(jì)規(guī)模不斷擴(kuò)張,催生更多數(shù)據(jù)流動(dòng)需求人類社會(huì)幾千年來(lái)經(jīng)歷了農(nóng)業(yè)經(jīng)濟(jì)、工業(yè)經(jīng)濟(jì),如今已經(jīng)進(jìn)入到數(shù)字經(jīng)濟(jì)時(shí)代。根據(jù)聯(lián)合國(guó)《2019年數(shù)字經(jīng)濟(jì)報(bào)告》的統(tǒng)計(jì),數(shù)字經(jīng)濟(jì)的規(guī)模估計(jì)占全球生產(chǎn)總值的4.5%至15.5%之間,其中中國(guó)和美國(guó)是引領(lǐng)世界數(shù)字經(jīng)濟(jì)發(fā)展的核心。中國(guó)信通院2021年發(fā)布的《中國(guó)數(shù)字經(jīng)濟(jì)發(fā)展白皮書(shū)》指出,2020年我國(guó)數(shù)字經(jīng)濟(jì)增加值規(guī)模達(dá)39.2萬(wàn)億元,占GDP比重達(dá)38.6%,數(shù)字經(jīng)濟(jì)已成為中國(guó)經(jīng)濟(jì)增長(zhǎng)的新引擎,正在深刻改變?nèi)鐣?huì)的生產(chǎn)和生活方式。在數(shù)字經(jīng)濟(jì)的發(fā)展過(guò)程中,數(shù)據(jù)是關(guān)鍵的要素。數(shù)據(jù)不僅能驅(qū)動(dòng)企業(yè)生產(chǎn)效率的提升,還能促進(jìn)企業(yè)發(fā)展模式的轉(zhuǎn)變和產(chǎn)業(yè)生態(tài)的創(chuàng)新。隨著數(shù)字經(jīng)濟(jì)的不斷推進(jìn),各行各業(yè)對(duì)數(shù)據(jù)的采集、使用、共享與交換的需求也將大大提升,行業(yè)產(chǎn)品將迎來(lái)更加廣闊的應(yīng)用空間。(二)數(shù)據(jù)復(fù)制軟件行業(yè)面臨的挑戰(zhàn)1、數(shù)據(jù)復(fù)制軟件行業(yè)專業(yè)人才缺乏數(shù)據(jù)復(fù)制的基礎(chǔ)技術(shù)及相關(guān)軟件產(chǎn)品的研發(fā)對(duì)從業(yè)人員的技術(shù)水平和經(jīng)驗(yàn)要求較高,人才培養(yǎng)周期長(zhǎng),導(dǎo)致了相關(guān)研發(fā)人才隊(duì)伍建設(shè)不能充分滿足行業(yè)發(fā)展的需求。我國(guó)數(shù)據(jù)復(fù)制相關(guān)技術(shù)的研發(fā)起步較晚,經(jīng)驗(yàn)豐富、技術(shù)能力強(qiáng)的專業(yè)技術(shù)人才和管理人才較為缺乏。隨著行業(yè)的不斷發(fā)展,相關(guān)產(chǎn)品市場(chǎng)規(guī)模穩(wěn)步擴(kuò)大增長(zhǎng),專業(yè)人才缺乏的問(wèn)題將會(huì)更加突出。2、數(shù)據(jù)復(fù)制軟件行業(yè)與歐美知名企業(yè)競(jìng)爭(zhēng)壓力較大目前國(guó)外知名企業(yè)仍占據(jù)了數(shù)據(jù)復(fù)制軟件行業(yè)主要的市場(chǎng)份額,特別是在數(shù)據(jù)復(fù)制軟件經(jīng)典的災(zāi)備應(yīng)用領(lǐng)域,國(guó)外企業(yè)具有較強(qiáng)的先發(fā)優(yōu)勢(shì)。與國(guó)外知名企業(yè)相比,企業(yè)在品牌知名度、研發(fā)投入等方面仍存在一定的差距,競(jìng)爭(zhēng)壓力較大。同時(shí),由于數(shù)據(jù)復(fù)制軟件通常應(yīng)用于企業(yè)的核心業(yè)務(wù)系統(tǒng),用戶對(duì)產(chǎn)品的穩(wěn)定性和安全性有較高的要求,對(duì)更換供應(yīng)商較為謹(jǐn)慎,給行業(yè)市場(chǎng)開(kāi)拓來(lái)了進(jìn)一步挑戰(zhàn)。數(shù)據(jù)復(fù)制軟件行業(yè)發(fā)展情況數(shù)據(jù)復(fù)制軟件最早依托存儲(chǔ)硬件存在,是存儲(chǔ)硬件的重要附加功能。隨著技術(shù)的發(fā)展,存儲(chǔ)介質(zhì)不斷變化,數(shù)據(jù)復(fù)制的內(nèi)容及應(yīng)用場(chǎng)景也逐步拓寬。早期依托存儲(chǔ)硬件的數(shù)據(jù)復(fù)制是以數(shù)據(jù)的定時(shí)復(fù)制為主。該階段數(shù)據(jù)復(fù)制軟件基于存儲(chǔ)硬件而存在,是存儲(chǔ)的重要附加功能,存在備份窗口長(zhǎng)、重復(fù)數(shù)據(jù)量大、產(chǎn)品結(jié)構(gòu)單一、缺乏獨(dú)立性等缺陷。產(chǎn)品需求以成本低、容量大為主,應(yīng)用場(chǎng)景包括存儲(chǔ)磁帶庫(kù)的數(shù)據(jù)拷貝、搬遷等。數(shù)據(jù)的實(shí)時(shí)復(fù)制是隨著行業(yè)對(duì)持續(xù)數(shù)據(jù)保護(hù)、容災(zāi)、備份中心雙活等需求的不斷提升應(yīng)運(yùn)而生的。持續(xù)數(shù)據(jù)保護(hù)通過(guò)將變化的數(shù)據(jù)實(shí)時(shí)復(fù)制到目標(biāo)服務(wù)器的同時(shí),把數(shù)據(jù)的變化以日志方式記錄下來(lái),在系統(tǒng)故障時(shí)根據(jù)日志快速恢復(fù)至指定時(shí)間點(diǎn);容災(zāi)則需要通過(guò)數(shù)據(jù)的實(shí)時(shí)復(fù)制保證兩套或多套IT系統(tǒng)的數(shù)據(jù)一致性,才能實(shí)現(xiàn)故障情況下的切換;備份中心雙活則要求備份IT系統(tǒng)同時(shí)承擔(dān)業(yè)務(wù),對(duì)數(shù)據(jù)復(fù)制的實(shí)時(shí)性提出了更高的要求。隨著云計(jì)算和大數(shù)據(jù)時(shí)代的到來(lái),數(shù)據(jù)復(fù)制正在逐步走向下一個(gè)階段。云計(jì)算具有部署靈活、運(yùn)維成本低的特點(diǎn),數(shù)據(jù)復(fù)制的內(nèi)容開(kāi)始從本地?cái)?shù)據(jù)向云端數(shù)據(jù),數(shù)據(jù)復(fù)制軟件的產(chǎn)品形態(tài)也開(kāi)始由傳統(tǒng)的軟件向SaaS服務(wù)拓展。同時(shí),大數(shù)據(jù)時(shí)代下數(shù)據(jù)流動(dòng)性進(jìn)一步加強(qiáng),衍生出更多的應(yīng)用場(chǎng)景。大數(shù)據(jù)時(shí)代下數(shù)據(jù)復(fù)制軟件將起到打破數(shù)據(jù)孤島的作用,將大量冷數(shù)據(jù)安全且高效地輸送至大數(shù)據(jù)平臺(tái),為數(shù)據(jù)分析提供真實(shí)有效的源數(shù)據(jù),使數(shù)據(jù)價(jià)值最大化,為數(shù)字經(jīng)濟(jì)的發(fā)展保駕護(hù)航。數(shù)據(jù)復(fù)制軟件行業(yè)整體發(fā)展情況數(shù)據(jù)復(fù)制軟件的主要功能是將一組數(shù)據(jù)從一個(gè)數(shù)據(jù)源拷貝到一個(gè)或多個(gè)數(shù)據(jù)源,涵蓋數(shù)據(jù)的監(jiān)控、獲取、傳輸、存儲(chǔ)、校驗(yàn)等步驟。數(shù)據(jù)源所處層級(jí)可分為存儲(chǔ)硬件層、操作系統(tǒng)層和數(shù)據(jù)庫(kù)層。存儲(chǔ)硬件層的數(shù)據(jù)指存儲(chǔ)設(shè)備內(nèi)的所有數(shù)據(jù),可能對(duì)應(yīng)多個(gè)操作系統(tǒng)層的數(shù)據(jù)。操作系統(tǒng)層的數(shù)據(jù)是指由操作系統(tǒng)內(nèi)部的卷層和文件系統(tǒng)進(jìn)行組織和管理的數(shù)據(jù),可能存儲(chǔ)在若干存儲(chǔ)設(shè)備中。數(shù)據(jù)庫(kù)層的數(shù)據(jù)通常是業(yè)務(wù)系統(tǒng)及應(yīng)用程序儲(chǔ)存在數(shù)據(jù)庫(kù)中、需要隨時(shí)查詢或使用的數(shù)據(jù)。根據(jù)獲取數(shù)據(jù)的層級(jí)不同,數(shù)據(jù)復(fù)制軟件也可分為存儲(chǔ)硬件層數(shù)據(jù)復(fù)制軟件、操作系統(tǒng)層數(shù)據(jù)復(fù)制軟件和數(shù)據(jù)庫(kù)層數(shù)據(jù)復(fù)制軟件:存儲(chǔ)硬件層數(shù)據(jù)復(fù)制軟件從存儲(chǔ)設(shè)備中直接獲取數(shù)據(jù),并將其復(fù)制至新的存儲(chǔ)設(shè)備;操作系統(tǒng)層數(shù)據(jù)復(fù)制軟件是從操作系統(tǒng)中捕獲數(shù)據(jù),并將其復(fù)制至新的操作系統(tǒng);數(shù)據(jù)庫(kù)層數(shù)據(jù)復(fù)制軟件從數(shù)據(jù)庫(kù)捕獲數(shù)據(jù),并將其復(fù)制至新的數(shù)據(jù)庫(kù)。數(shù)據(jù)復(fù)制軟件經(jīng)典的應(yīng)用場(chǎng)景為災(zāi)備,包括備份和容災(zāi),用于保障用戶的數(shù)據(jù)安全和業(yè)務(wù)連續(xù)性。同時(shí),隨著信息技術(shù)的不斷發(fā)展,大數(shù)據(jù)逐漸開(kāi)始落地應(yīng)用,相關(guān)技術(shù)從海量數(shù)據(jù)的存儲(chǔ)、處理、分析等需求的核心技術(shù),延展到相關(guān)的管理、流通、安全等其他需求的周邊技術(shù)。數(shù)據(jù)復(fù)制軟件作為數(shù)據(jù)流通的基礎(chǔ)工具軟件,也越來(lái)越多地應(yīng)用于數(shù)據(jù)分發(fā)、共享、集成、治理等更多大數(shù)據(jù)領(lǐng)域。數(shù)據(jù)復(fù)制技術(shù)行業(yè)存儲(chǔ)硬件層復(fù)制技術(shù)發(fā)展概況存儲(chǔ)硬件層復(fù)制主要指基于存儲(chǔ)磁盤陣列之間的直接鏡像,是通過(guò)存儲(chǔ)系統(tǒng)內(nèi)建的固件或操作系統(tǒng),利用IP網(wǎng)絡(luò)或光纖等傳輸介質(zhì)連結(jié),將數(shù)據(jù)以同步或異步的方式復(fù)制到目標(biāo)端。存儲(chǔ)硬件層復(fù)制的優(yōu)勢(shì)在于復(fù)制工作僅在存儲(chǔ)硬件層面進(jìn)行,與操作系統(tǒng)層無(wú)關(guān),因此可以避免服務(wù)器的性能開(kāi)銷過(guò)大的問(wèn)題,適用于關(guān)鍵任務(wù)和高端交易應(yīng)用,也是目前最廣泛用于容災(zāi)場(chǎng)景的數(shù)據(jù)復(fù)制技術(shù)之一。存儲(chǔ)硬件層復(fù)制的劣勢(shì)在于主要適用于同品牌且同型號(hào)的同構(gòu)存儲(chǔ)系統(tǒng),并需配備低延遲和大帶寬的物理鏈路,成本較高,給異地復(fù)制帶來(lái)極大困難。存儲(chǔ)硬件層的復(fù)制技術(shù)通常依賴于特定存儲(chǔ)硬件,因此使用該技術(shù)的主要是存儲(chǔ)硬件廠商,代表產(chǎn)品為DELLEMC的SRDF軟件、IBM的PPRC軟件等。數(shù)據(jù)復(fù)制技術(shù)行業(yè)操作系統(tǒng)層復(fù)制技術(shù)概況根據(jù)數(shù)據(jù)捕獲環(huán)節(jié)的不同,操作系統(tǒng)層復(fù)制可以分為字節(jié)級(jí)復(fù)制和塊級(jí)復(fù)制。字節(jié)級(jí)復(fù)制技術(shù)是指對(duì)生產(chǎn)服務(wù)器文件系統(tǒng)的I/O操作信息進(jìn)行實(shí)時(shí)捕獲,生成序列化I/O操作日志并發(fā)送至目標(biāo)服務(wù)器,操作日志包括I/O操作發(fā)生的時(shí)間、發(fā)起的進(jìn)程、操作具體針對(duì)的文件、文件具體操作的位置以及操作的內(nèi)容。目標(biāo)服務(wù)器收到I/O操作日志后進(jìn)行數(shù)據(jù)的寫(xiě)入,完成數(shù)據(jù)復(fù)制。該技術(shù)具有對(duì)計(jì)算機(jī)資源占用小、復(fù)制顆粒度細(xì)等優(yōu)勢(shì),能夠?qū)崿F(xiàn)高實(shí)時(shí)性的數(shù)據(jù)復(fù)制,在容災(zāi)以及持續(xù)數(shù)據(jù)保護(hù)領(lǐng)域有較強(qiáng)的優(yōu)勢(shì)。塊級(jí)復(fù)制技術(shù)是指在生產(chǎn)服務(wù)器的文件系統(tǒng)之下和磁盤驅(qū)動(dòng)之上的卷層設(shè)置驅(qū)動(dòng)模塊,實(shí)現(xiàn)磁盤數(shù)據(jù)變化的捕捉。通過(guò)對(duì)生產(chǎn)服務(wù)器磁盤空間進(jìn)行劃分,構(gòu)建磁盤位圖,將發(fā)生數(shù)據(jù)變化的位圖信息發(fā)送至目標(biāo)服務(wù)器并與前次位圖信息進(jìn)行整合,實(shí)現(xiàn)數(shù)據(jù)的復(fù)制。和字節(jié)級(jí)復(fù)制相比,塊級(jí)復(fù)制顆粒度較粗,單次傳輸數(shù)據(jù)量較大,適用于具有海量文件的文件系統(tǒng)或者非標(biāo)準(zhǔn)化文件系統(tǒng)的場(chǎng)景,在定時(shí)備份領(lǐng)域具有較強(qiáng)的優(yōu)勢(shì)。操作系統(tǒng)層復(fù)制技術(shù)由于不受底層存儲(chǔ)型號(hào)的限制,可以實(shí)現(xiàn)跨物理、虛擬、云等復(fù)雜環(huán)境,是第三方數(shù)據(jù)復(fù)制軟件企業(yè)主要使用的技術(shù)。部分存儲(chǔ)硬件企業(yè)在發(fā)展過(guò)程中,通過(guò)不斷收購(gòu)第三方數(shù)據(jù)復(fù)制軟件企業(yè),也擁有了較成熟的操作系統(tǒng)層復(fù)制技術(shù)。數(shù)據(jù)復(fù)制技術(shù)發(fā)展趨勢(shì)數(shù)據(jù)復(fù)制技術(shù)最早是由存儲(chǔ)硬件及數(shù)據(jù)庫(kù)廠商開(kāi)發(fā),作為其存儲(chǔ)硬件或數(shù)據(jù)庫(kù)軟件的輔助工具,通常與存儲(chǔ)硬件或數(shù)據(jù)庫(kù)綁定,只能用于本公司的存儲(chǔ)硬件或數(shù)據(jù)庫(kù)之間的數(shù)據(jù)復(fù)制。其優(yōu)點(diǎn)在于對(duì)本公司的存儲(chǔ)或數(shù)據(jù)庫(kù)產(chǎn)品的兼容良好、穩(wěn)定性高、數(shù)據(jù)復(fù)制速度快,但在靈活性和可擴(kuò)展性。隨著信息技術(shù)的發(fā)展,各行業(yè)信息系統(tǒng)不斷升級(jí)和迭代,存儲(chǔ)及數(shù)據(jù)庫(kù)類型多樣化,數(shù)據(jù)量的提升也帶來(lái)了分級(jí)存儲(chǔ)、分級(jí)備份的需求,與硬件或數(shù)據(jù)庫(kù)綁定的復(fù)制技術(shù)功能單一、缺乏靈活性等缺點(diǎn)逐漸顯現(xiàn)。軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)可以實(shí)現(xiàn)不同存儲(chǔ)硬件、不同數(shù)據(jù)庫(kù)之間的數(shù)據(jù)復(fù)制,在信息系統(tǒng)升級(jí)、數(shù)據(jù)分級(jí)存儲(chǔ)等場(chǎng)景下具有較強(qiáng)的優(yōu)勢(shì),有望成為未來(lái)數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向。同時(shí),在國(guó)內(nèi)信息系統(tǒng)軟硬件安全可信的趨勢(shì)下,國(guó)產(chǎn)存儲(chǔ)設(shè)備和數(shù)據(jù)庫(kù)紛紛涌現(xiàn),軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)也將在信息系統(tǒng)國(guó)產(chǎn)化進(jìn)程中發(fā)揮重要作用,加速國(guó)產(chǎn)化進(jìn)程。云計(jì)算相較于傳統(tǒng)IT架構(gòu),具有資源配置效率高、運(yùn)維難度低等優(yōu)勢(shì)。隨著云計(jì)算技術(shù)和基礎(chǔ)設(shè)施的逐步成熟,越來(lái)越多的企業(yè)開(kāi)始遷移上云。數(shù)據(jù)復(fù)制技術(shù)也從本地?cái)?shù)據(jù)復(fù)制向云端數(shù)據(jù)復(fù)制發(fā)展。和本地IT架構(gòu)不同的是,云計(jì)算架構(gòu)將底層硬件設(shè)備虛擬化后形成統(tǒng)一的計(jì)算資源、存儲(chǔ)資源和網(wǎng)絡(luò)資源,企業(yè)在云端的業(yè)務(wù)系統(tǒng)均統(tǒng)一部署在數(shù)據(jù)中心的虛擬平臺(tái)上,因此云端復(fù)制和本地復(fù)制相比,傳輸環(huán)境存在較大的差異,云端復(fù)制的傳輸具有帶寬窄、傳輸不穩(wěn)定等特點(diǎn),對(duì)復(fù)制技術(shù)的壓縮能力、斷點(diǎn)續(xù)傳能力提出了更高的要求。同時(shí),云端復(fù)制還需兼顧數(shù)據(jù)隱私問(wèn)題,特別是在公有云的場(chǎng)景下,云供應(yīng)商有較大的權(quán)限,可以對(duì)數(shù)據(jù)進(jìn)行管理,因此在云端復(fù)制場(chǎng)景下,數(shù)據(jù)的脫敏、加密也是云端復(fù)制技術(shù)需要考慮的重要問(wèn)題。大數(shù)據(jù)平臺(tái)是為了滿足大數(shù)據(jù)的存儲(chǔ)、運(yùn)算、分析、展現(xiàn)的軟件平臺(tái),主要功能包括數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)存儲(chǔ)、查詢檢索、分析挖掘、數(shù)據(jù)集成等。大數(shù)據(jù)平臺(tái)擁有特殊的文件系統(tǒng)、數(shù)據(jù)庫(kù)及數(shù)據(jù)處理模塊,以適配大數(shù)據(jù)的查詢、存儲(chǔ)和計(jì)算。以Hadoop為例,Hadoop平臺(tái)采用HDFS分布式文件系統(tǒng)和HBase分布式數(shù)據(jù)庫(kù),通過(guò)Hive數(shù)據(jù)倉(cāng)庫(kù)進(jìn)行數(shù)據(jù)的存儲(chǔ)、查詢和分析,與傳統(tǒng)的數(shù)據(jù)庫(kù)結(jié)構(gòu)存在較大的差別,因此傳統(tǒng)的數(shù)據(jù)庫(kù)數(shù)據(jù)復(fù)制技術(shù)無(wú)法實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)間的數(shù)據(jù)實(shí)時(shí)復(fù)制,亦無(wú)法實(shí)現(xiàn)由傳統(tǒng)數(shù)據(jù)庫(kù)向大數(shù)據(jù)平臺(tái)的數(shù)據(jù)實(shí)時(shí)復(fù)制。隨著大數(shù)據(jù)技術(shù)不斷演進(jìn)和應(yīng)用持續(xù)深化,以數(shù)據(jù)為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)正在加速構(gòu)建。大數(shù)據(jù)平臺(tái)作為基礎(chǔ)工具,將隨著大數(shù)據(jù)行業(yè)應(yīng)用的不斷深化,得到越來(lái)越廣泛的應(yīng)用。同時(shí),傳統(tǒng)數(shù)據(jù)庫(kù)中的數(shù)據(jù)也將越來(lái)越多地匯聚至大數(shù)據(jù)平臺(tái),進(jìn)行數(shù)據(jù)分析挖掘等,以發(fā)揮更大地?cái)?shù)據(jù)價(jià)值。因此,大數(shù)據(jù)平臺(tái)實(shí)時(shí)復(fù)制技術(shù)是未來(lái)數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向之一。大數(shù)據(jù)采集行業(yè)發(fā)展情況和發(fā)展趨勢(shì)(一)大數(shù)據(jù)采集行業(yè)發(fā)展情況海量數(shù)據(jù)從生產(chǎn)到發(fā)揮價(jià)值,需要經(jīng)過(guò)采集、處理、分析等環(huán)節(jié),其中大數(shù)據(jù)采集與預(yù)處理作為大數(shù)據(jù)生命周期的第一環(huán)節(jié),是釋放數(shù)字價(jià)值的前提。數(shù)據(jù)復(fù)制軟件在大數(shù)據(jù)行業(yè)的應(yīng)用主要是作為數(shù)據(jù)采集的基礎(chǔ)工具,將來(lái)自不同數(shù)據(jù)庫(kù)、不同數(shù)據(jù)類型的數(shù)據(jù)實(shí)時(shí)傳輸至統(tǒng)一平臺(tái),為大數(shù)據(jù)分析提供實(shí)時(shí)、安全、可靠的數(shù)據(jù),屬于大數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)支撐層。與傳統(tǒng)的數(shù)據(jù)采集不同,大數(shù)據(jù)采集需要面對(duì)海量數(shù)據(jù)、多種數(shù)據(jù)類型和多樣化的終端類型,對(duì)采樣數(shù)據(jù)的實(shí)時(shí)性要求也越來(lái)越高。在大數(shù)據(jù)采集時(shí),需要通過(guò)計(jì)算機(jī)進(jìn)行規(guī)則配置、任務(wù)調(diào)度,實(shí)現(xiàn)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的預(yù)處理,為后續(xù)的實(shí)時(shí)分析決策、數(shù)據(jù)查詢、分發(fā)、計(jì)算和分析提供堅(jiān)實(shí)基礎(chǔ)。(二)大數(shù)據(jù)采集行業(yè)發(fā)展趨勢(shì)1、大數(shù)據(jù)行業(yè)應(yīng)用的深入促進(jìn)大數(shù)據(jù)采集需求日益增長(zhǎng)在政策和技術(shù)的雙重驅(qū)動(dòng)下,我國(guó)大數(shù)據(jù)產(chǎn)業(yè)規(guī)模快速增長(zhǎng),大數(shù)據(jù)應(yīng)用的行業(yè)也越來(lái)越廣泛,從互聯(lián)網(wǎng)行業(yè)向金融、醫(yī)療、教育等各行各業(yè)拓展。根據(jù)中國(guó)信通院發(fā)布的《大數(shù)據(jù)白皮書(shū)2020》,2019年我國(guó)以云計(jì)算、大數(shù)據(jù)技術(shù)為基礎(chǔ)的平臺(tái)類運(yùn)營(yíng)技術(shù)服務(wù)收入2.2萬(wàn)億元,其中,典型云服務(wù)和大數(shù)據(jù)服務(wù)收入達(dá)3284億元,提供服務(wù)的企業(yè)達(dá)2977家,大數(shù)據(jù)產(chǎn)業(yè)發(fā)展日益壯大。數(shù)據(jù)采集是大數(shù)據(jù)在各行各業(yè)應(yīng)用并且創(chuàng)造價(jià)值的前提。隨著大數(shù)據(jù)的行業(yè)應(yīng)用不斷深入,物聯(lián)網(wǎng)、智能家居等領(lǐng)域的大數(shù)據(jù)技應(yīng)用逐漸成熟,數(shù)據(jù)采集的需求也將被逐步激發(fā),帶動(dòng)數(shù)據(jù)采集軟件及服務(wù)的市場(chǎng)規(guī)模日益增長(zhǎng)。2、大數(shù)據(jù)采集環(huán)節(jié)更加注重異構(gòu)數(shù)據(jù)源兼容性隨著數(shù)據(jù)量的指數(shù)增長(zhǎng),數(shù)據(jù)的存儲(chǔ)、計(jì)算、部署等方式都在同步變化,各行業(yè)的業(yè)務(wù)系統(tǒng)也變得越來(lái)越復(fù)雜。以銀行為例,金融業(yè)是我國(guó)信息化程度最高、信息技術(shù)應(yīng)用最密集的行業(yè)之一,在數(shù)據(jù)爆發(fā)式增長(zhǎng)、數(shù)據(jù)庫(kù)、數(shù)據(jù)中心建設(shè)等大背景下,銀行的業(yè)務(wù)系統(tǒng)由單一系統(tǒng)逐漸演變成按業(yè)務(wù)、按部門劃分的復(fù)雜系統(tǒng)群,數(shù)據(jù)庫(kù)類型開(kāi)始由Oracle、DB2數(shù)據(jù)庫(kù)變得更加多元,數(shù)據(jù)中心規(guī)模持續(xù)擴(kuò)張、逐漸云化,最終形成了復(fù)雜而龐大的業(yè)務(wù)系統(tǒng)和數(shù)據(jù)架構(gòu)。日益復(fù)雜的業(yè)務(wù)系統(tǒng)和數(shù)據(jù)架構(gòu)形成了數(shù)據(jù)結(jié)構(gòu)、存取方式、形式不同的異構(gòu)數(shù)據(jù)源,對(duì)大數(shù)據(jù)采集的異構(gòu)兼容性提出了更高的要求。工信部發(fā)布的《十四五大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃》中明確提出,以構(gòu)建穩(wěn)定高效產(chǎn)業(yè)鏈為主要目標(biāo),在數(shù)據(jù)生成采集環(huán)節(jié),著重提升產(chǎn)品的異構(gòu)數(shù)據(jù)源兼容性、大規(guī)模數(shù)據(jù)集采集與加工效率。3、大數(shù)據(jù)采集的安全與隱私保護(hù)需求持續(xù)上漲近年來(lái),我國(guó)大數(shù)據(jù)的安全與隱私保護(hù)需求持續(xù)上漲,大數(shù)據(jù)采集過(guò)程中的安全流通和隱私計(jì)算技術(shù)也愈發(fā)得到重視。隨著大數(shù)據(jù)的不斷發(fā)展和應(yīng)用,越來(lái)越多的安全問(wèn)題隨之浮現(xiàn)。在數(shù)據(jù)采集過(guò)程中,第三方可能在采集傳輸數(shù)據(jù)過(guò)程中截獲、偽造數(shù)據(jù),不但造成了用戶隱私、敏感數(shù)據(jù)泄露的嚴(yán)重后果,同時(shí)也影響了政府、企業(yè)后臺(tái)數(shù)據(jù)分析的準(zhǔn)確性。因此,在大數(shù)據(jù)采集及預(yù)處理過(guò)程中,除了假流量數(shù)據(jù)清洗、正常數(shù)據(jù)補(bǔ)全、無(wú)效數(shù)據(jù)剔除外,還存在數(shù)據(jù)格式化、數(shù)據(jù)隔離、數(shù)據(jù)加密、數(shù)據(jù)脫敏和攻擊識(shí)別等需求。近年來(lái)我國(guó)網(wǎng)絡(luò)安全市場(chǎng)規(guī)模持續(xù)增長(zhǎng),從2016年的269.5億元增長(zhǎng)至2020年的531.9億元,2021年將達(dá)到649.7億元,有望帶動(dòng)大數(shù)據(jù)采集的安全與隱私保護(hù)市場(chǎng)的持續(xù)擴(kuò)容。數(shù)據(jù)復(fù)制軟件在各應(yīng)用場(chǎng)景備份是指對(duì)源數(shù)據(jù)形成一份同樣的拷貝,存放至其它設(shè)備中。在發(fā)生自然災(zāi)害、軟硬件故障、人為誤操作等原因?qū)е聰?shù)據(jù)失效時(shí),可通過(guò)恢復(fù)備份的方式重新找回失效數(shù)據(jù)。備份被認(rèn)為是數(shù)據(jù)保

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論