版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、 55/55企業(yè)云網(wǎng)盤解決方案目 錄 TOC o 1-3 h z u HYPERLINK l _Toc477114064 1.概述 PAGEREF _Toc477114064 h 6 HYPERLINK l _Toc477114065 1.1.建設(shè)背景 PAGEREF _Toc477114065 h 6 HYPERLINK l _Toc477114066 1.2.建設(shè)目標(biāo) PAGEREF _Toc477114066 h 6 HYPERLINK l _Toc477114067 2.業(yè)務(wù)總體需求 PAGEREF _Toc477114067 h 7 HYPERLINK l _Toc477114072
2、 2.1.數(shù)據(jù)的安全性和系統(tǒng)的高可靠性 PAGEREF _Toc477114072 h 7 HYPERLINK l _Toc477114073 2.2.系統(tǒng)的防病毒 PAGEREF _Toc477114073 h 7 HYPERLINK l _Toc477114074 2.3.系統(tǒng)的高性能 PAGEREF _Toc477114074 h 8 HYPERLINK l _Toc477114075 2.4.系統(tǒng)的可擴(kuò)展性/可擴(kuò)充性 PAGEREF _Toc477114075 h 8 HYPERLINK l _Toc477114076 2.5.靈活性和系統(tǒng)管理的簡(jiǎn)單性 PAGEREF _Toc4771
3、14076 h 9 HYPERLINK l _Toc477114077 2.6.數(shù)據(jù)共享要求 PAGEREF _Toc477114077 h 9 HYPERLINK l _Toc477114078 2.7.系統(tǒng)的功能要求 PAGEREF _Toc477114078 h 9 HYPERLINK l _Toc477114079 2.8.系統(tǒng)容量要求 PAGEREF _Toc477114079 h 10 HYPERLINK l _Toc477114080 3.云存儲(chǔ)平臺(tái) PAGEREF _Toc477114080 h 10 HYPERLINK l _Toc477114082 3.1.云存儲(chǔ)系統(tǒng)平臺(tái)設(shè)
4、計(jì) PAGEREF _Toc477114082 h 10 HYPERLINK l _Toc477114086 3.1.1.設(shè)計(jì)目標(biāo)與規(guī)劃 PAGEREF _Toc477114086 h 10 HYPERLINK l _Toc477114087 3.1.2.云存儲(chǔ)系統(tǒng)方案 PAGEREF _Toc477114087 h 11 HYPERLINK l _Toc477114088 3.1.3.系統(tǒng)優(yōu)勢(shì)和特點(diǎn) PAGEREF _Toc477114088 h 12 HYPERLINK l _Toc477114089 3.2.系統(tǒng)架構(gòu) PAGEREF _Toc477114089 h 13 HYPERLIN
5、K l _Toc477114091 3.2.1.系統(tǒng)基本組成 PAGEREF _Toc477114091 h 14 HYPERLINK l _Toc477114092 3.2.2.系統(tǒng)功能描述 PAGEREF _Toc477114092 h 16 HYPERLINK l _Toc477114093 3.3.工作機(jī)制 PAGEREF _Toc477114093 h 23 HYPERLINK l _Toc477114095 3.3.1.數(shù)據(jù)寫入機(jī)制 PAGEREF _Toc477114095 h 23 HYPERLINK l _Toc477114096 3.3.2.數(shù)據(jù)讀出機(jī)制 PAGEREF _
6、Toc477114096 h 24 HYPERLINK l _Toc477114097 3.4.關(guān)鍵技術(shù) PAGEREF _Toc477114097 h 25 HYPERLINK l _Toc477114099 3.4.1.負(fù)載自動(dòng)均衡技術(shù) PAGEREF _Toc477114099 h 25 HYPERLINK l _Toc477114100 3.4.2.高速并發(fā)訪問(wèn)技術(shù) PAGEREF _Toc477114100 h 25 HYPERLINK l _Toc477114101 3.4.3.高可靠性保證技術(shù) PAGEREF _Toc477114101 h 26 HYPERLINK l _Toc
7、477114102 3.4.4.高可用技術(shù) PAGEREF _Toc477114102 h 26 HYPERLINK l _Toc477114103 3.4.5.分級(jí)存儲(chǔ)技術(shù) PAGEREF _Toc477114103 h 27 HYPERLINK l _Toc477114104 3.5.接口描述 PAGEREF _Toc477114104 h 29 HYPERLINK l _Toc477114106 3.5.1.POSIX通用文件系統(tǒng)接口訪問(wèn) PAGEREF _Toc477114106 h 29 HYPERLINK l _Toc477114107 3.5.2.NFS接口訪問(wèn) PAGEREF
8、_Toc477114107 h 29 HYPERLINK l _Toc477114108 3.5.3.CIFS接口訪問(wèn) PAGEREF _Toc477114108 h 30 HYPERLINK l _Toc477114109 3.5.4.應(yīng)用程序API接口調(diào)用 PAGEREF _Toc477114109 h 30 HYPERLINK l _Toc477114110 3.6.本地容錯(cuò)與診斷技術(shù) PAGEREF _Toc477114110 h 30 HYPERLINK l _Toc477114112 3.6.1.cStor高可靠性 PAGEREF _Toc477114112 h 30 HYPERL
9、INK l _Toc477114113 3.6.2.cStor數(shù)據(jù)完整性 PAGEREF _Toc477114113 h 31 HYPERLINK l _Toc477114114 3.6.3.cStor快照技術(shù) PAGEREF _Toc477114114 h 31 HYPERLINK l _Toc477114115 3.7.異地容災(zāi)與恢復(fù)技術(shù) PAGEREF _Toc477114115 h 32 HYPERLINK l _Toc477114117 3.7.1.cStor數(shù)據(jù)備份與恢復(fù)系統(tǒng)功能 PAGEREF _Toc477114117 h 32 HYPERLINK l _Toc47711411
10、8 3.7.2.cStor異地文件恢復(fù) PAGEREF _Toc477114118 h 33 HYPERLINK l _Toc477114119 4.網(wǎng)絡(luò)云盤平臺(tái) PAGEREF _Toc477114119 h 33 HYPERLINK l _Toc477114121 4.1.網(wǎng)盤系統(tǒng)平臺(tái)設(shè)計(jì) PAGEREF _Toc477114121 h 33 HYPERLINK l _Toc477114124 4.1.1.技術(shù)選型 PAGEREF _Toc477114124 h 33 HYPERLINK l _Toc477114125 4.1.2.總體介紹 PAGEREF _Toc477114125 h
11、33 HYPERLINK l _Toc477114126 4.1.3.總體技術(shù)構(gòu)架 PAGEREF _Toc477114126 h 35 HYPERLINK l _Toc477114127 4.1.4.系統(tǒng)設(shè)計(jì)原則 PAGEREF _Toc477114127 h 36 HYPERLINK l _Toc477114128 4.1.5.系統(tǒng)優(yōu)勢(shì) PAGEREF _Toc477114128 h 37 HYPERLINK l _Toc477114129 4.2.文件同步管理系統(tǒng) PAGEREF _Toc477114129 h 37 HYPERLINK l _Toc477114131 4.2.1.系統(tǒng)概
12、述 PAGEREF _Toc477114131 h 37 HYPERLINK l _Toc477114132 4.2.2.功能描述 PAGEREF _Toc477114132 h 38 HYPERLINK l _Toc477114133 4.2.3.主要功能點(diǎn) PAGEREF _Toc477114133 h 39 HYPERLINK l _Toc477114134 4.2.4.主要特點(diǎn) PAGEREF _Toc477114134 h 41 HYPERLINK l _Toc477114135 4.3.文件分析系統(tǒng) PAGEREF _Toc477114135 h 42 HYPERLINK l _T
13、oc477114139 4.3.1.系統(tǒng)概述 PAGEREF _Toc477114139 h 42 HYPERLINK l _Toc477114140 4.3.2.功能描述 PAGEREF _Toc477114140 h 43 HYPERLINK l _Toc477114141 5.集群應(yīng)用技術(shù)架構(gòu) PAGEREF _Toc477114141 h 44 HYPERLINK l _Toc477114143 5.1.技術(shù)構(gòu)架 PAGEREF _Toc477114143 h 44 HYPERLINK l _Toc477114144 5.2.集群方案 PAGEREF _Toc477114144 h 4
14、6 HYPERLINK l _Toc477114148 5.2.1.企業(yè)內(nèi)部應(yīng)用場(chǎng)景 PAGEREF _Toc477114148 h 47 HYPERLINK l _Toc477114149 5.3.集群特點(diǎn) PAGEREF _Toc477114149 h 48 HYPERLINK l _Toc477114150 5.4.工作原理 PAGEREF _Toc477114150 h 48 HYPERLINK l _Toc477114151 6.服務(wù)器配置 PAGEREF _Toc477114151 h 52概述建設(shè)背景本次項(xiàng)目網(wǎng)盤平臺(tái)需要整合集成網(wǎng)絡(luò)硬盤私有云平臺(tái),給輕工業(yè)學(xué)院軟件學(xué)院老師提供網(wǎng)盤
15、服務(wù)。用戶可使用網(wǎng)盤服務(wù)隨時(shí)隨地的存儲(chǔ)和共享數(shù)據(jù),它可以使用戶方便的上傳、管理和共享照片、文檔、視頻。建設(shè)目標(biāo)一、實(shí)現(xiàn)云盤的存儲(chǔ),以企業(yè)業(yè)務(wù)需求為導(dǎo)向,通過(guò)云創(chuàng)的產(chǎn)品和技術(shù)結(jié)合企業(yè)安全管理的規(guī)定的要求,建設(shè)一套安全、便捷的私有云平臺(tái)系統(tǒng),實(shí)現(xiàn)以下功能:集中存儲(chǔ)用戶所有數(shù)據(jù),分類管理,配額控制,合理規(guī)劃企業(yè)用戶空間。數(shù)據(jù)同步和備份快捷的文件分享從數(shù)據(jù)傳輸?shù)桨踩鎯?chǔ),均采用最高級(jí)的安全策略,專為企業(yè)打造專有的存儲(chǔ)空間,確保企業(yè)數(shù)據(jù)安全可靠。二、為了滿足視頻點(diǎn)播系統(tǒng)的需求,需要提供用于直播數(shù)據(jù)流及視頻點(diǎn)播內(nèi)容保存的存儲(chǔ)空間。三、用于數(shù)據(jù)中心核心業(yè)務(wù)系統(tǒng)的存儲(chǔ)備份,采用目前成熟、先進(jìn)的云存儲(chǔ)技術(shù),構(gòu)建
16、基于數(shù)據(jù)集中模式的數(shù)據(jù)存儲(chǔ)、備份的信息基礎(chǔ)架構(gòu); 在此基礎(chǔ)架構(gòu)上設(shè)立數(shù)據(jù)中心,實(shí)現(xiàn)多個(gè)關(guān)鍵應(yīng)用系統(tǒng)實(shí)時(shí)數(shù)據(jù)的存儲(chǔ)和備份,確保各應(yīng)用系統(tǒng)在因誤操作(或邏輯錯(cuò)誤)而引發(fā)數(shù)據(jù)錯(cuò)誤時(shí)具備快速、可靠的恢復(fù)手段; 保障各種關(guān)鍵性業(yè)務(wù)應(yīng)用達(dá)到更高的連續(xù)性水平,為今后業(yè)務(wù)的長(zhǎng)期快速發(fā)展,提供有力的技術(shù)支持和保證。四、用于應(yīng)用系統(tǒng)現(xiàn)有數(shù)據(jù)的存儲(chǔ)。業(yè)務(wù)總體需求分析本次工程的實(shí)際情況,本項(xiàng)目的總體需求是以企業(yè)內(nèi)部網(wǎng)為基礎(chǔ),實(shí)現(xiàn)企業(yè)用戶數(shù)據(jù)的集中存儲(chǔ)。本項(xiàng)目的核心在于存儲(chǔ)系統(tǒng)和網(wǎng)盤系統(tǒng),存儲(chǔ)系統(tǒng)的可靠性,可用性和可擴(kuò)展性將直接影響整個(gè)系統(tǒng)的運(yùn)行,進(jìn)而影響到整個(gè)系統(tǒng)的正常運(yùn)做。并且,還要在此架構(gòu)的基礎(chǔ)上,做好數(shù)據(jù)容災(zāi)的
17、規(guī)劃。按照前述的需求分析,我們可以總結(jié)出未來(lái)的網(wǎng)盤解決方案的總體需求如下:數(shù)據(jù)的安全性和系統(tǒng)的高可靠性本系統(tǒng)負(fù)責(zé)完成對(duì)各業(yè)務(wù)系統(tǒng)的支持,對(duì)系統(tǒng)的高可靠性有著很高的要求。作為該系統(tǒng)核心的存儲(chǔ)平臺(tái)的高可靠性則更是重中之重。由于采用了集中存儲(chǔ)的方案,所有的信息存儲(chǔ),信息管理及信息共享均集中存儲(chǔ)于統(tǒng)一的平臺(tái)之上,存儲(chǔ)平臺(tái)的任何故障會(huì)造成巨大的影響。因此存儲(chǔ)平臺(tái)的數(shù)據(jù)安全性和系統(tǒng)高可靠性尤為重要。系統(tǒng)的防病毒計(jì)算機(jī)病毒形式及傳播途徑日趨多樣化,網(wǎng)絡(luò)防病毒工作已不再是簡(jiǎn)單的單臺(tái)計(jì)算機(jī)病毒的檢測(cè)及清除,需要建立多層次的、立體的病毒防護(hù)體系,而且要具備完善的管理系統(tǒng)來(lái)設(shè)置和維護(hù)病毒防護(hù)策略。這里的多層次病毒防
18、護(hù)體系是指在企業(yè)的每臺(tái)客戶端計(jì)算機(jī)上安裝防病毒系統(tǒng),在服務(wù)器上安裝基于服務(wù)器的防病毒系統(tǒng),在Internet網(wǎng)關(guān)安裝基于Internet網(wǎng)關(guān)的防病毒系統(tǒng)。對(duì)企業(yè)來(lái)說(shuō),防止病毒的攻擊并不是保護(hù)某一臺(tái)服務(wù)器或客戶端計(jì)算機(jī),而是從客戶端計(jì)算機(jī)到服務(wù)器到網(wǎng)關(guān)以至于每臺(tái)不同業(yè)務(wù)應(yīng)用服務(wù)器的全面保護(hù),這樣才能保證整個(gè)網(wǎng)絡(luò)不受計(jì)算機(jī)病毒的侵害。系統(tǒng)的高性能存儲(chǔ)系統(tǒng)要存儲(chǔ)大量的在線數(shù)據(jù)信息,支持更多服務(wù)器的在線業(yè)務(wù)并發(fā)寫要求。由于總的數(shù)據(jù)量會(huì)很大,如何在這么大數(shù)據(jù)量情況下滿足這么多客戶機(jī)的并發(fā)訪問(wèn),整個(gè)存儲(chǔ)系統(tǒng)的性能也是一個(gè)非常關(guān)鍵的要求。而且考慮到將來(lái)業(yè)務(wù)的增長(zhǎng),數(shù)據(jù)量還會(huì)持續(xù)增加,客戶機(jī)的數(shù)量也會(huì)繼續(xù)增加
19、,系統(tǒng)的性能還應(yīng)能很好的適應(yīng)未來(lái)的擴(kuò)充和擴(kuò)展的需要。系統(tǒng)的可擴(kuò)展性/可擴(kuò)充性作為集中存儲(chǔ)的基本要求,存儲(chǔ)系統(tǒng)應(yīng)能支持巨大的存儲(chǔ)容量,可以集中存儲(chǔ)不同平臺(tái)的企業(yè)數(shù)據(jù),從而使企業(yè)在保留分布式處理好處的同時(shí)實(shí)現(xiàn)核心信息的集中存儲(chǔ)和集中管理。隨著時(shí)間的推移、技術(shù)的發(fā)展以及環(huán)境的變化,業(yè)務(wù)系統(tǒng)的數(shù)據(jù)量會(huì)飛速增長(zhǎng),許多新業(yè)務(wù)系統(tǒng)會(huì)不斷產(chǎn)生,因此對(duì)存儲(chǔ)系統(tǒng)的可擴(kuò)展性有很高要求。盡管我們?cè)诒痉桨钢幸呀?jīng)充分考慮了系統(tǒng)存儲(chǔ)容量空間的預(yù)留,但隨著業(yè)務(wù)的發(fā)展,對(duì)存儲(chǔ)系統(tǒng)的可擴(kuò)展性要求仍將非常迫切。這主要表現(xiàn)在對(duì)存儲(chǔ)系統(tǒng)容量的平滑擴(kuò)充以及對(duì)新的主機(jī)(HOST)系統(tǒng)的平滑連接,以盡量減少對(duì)已有正常業(yè)務(wù)的影響。靈活性和系統(tǒng)
20、管理的簡(jiǎn)單性由于存儲(chǔ)系統(tǒng)的數(shù)據(jù)量比較大,如何有效的管理大量的數(shù)據(jù),包括數(shù)據(jù)備份/恢復(fù),都對(duì)存儲(chǔ)系統(tǒng)的管理提出了巨大的挑戰(zhàn)。系統(tǒng)管理人員需要有高效的方法實(shí)現(xiàn)全面的存儲(chǔ)系統(tǒng)監(jiān)控,包括實(shí)時(shí)數(shù)據(jù)性能監(jiān)視、錯(cuò)誤監(jiān)測(cè)、錯(cuò)誤狀態(tài)識(shí)別等等。另外作為集中的存儲(chǔ)平臺(tái),由于前端需要連接的服務(wù)器數(shù)量很多,如何在多個(gè)服務(wù)器平臺(tái)之間對(duì)容量進(jìn)行靈活的劃分和調(diào)度也是為存儲(chǔ)系統(tǒng)的管理提出了巨大的挑戰(zhàn)。數(shù)據(jù)共享要求統(tǒng)一的信息需要讓前端的多臺(tái)業(yè)務(wù)服務(wù)器共享存取,作為集中存儲(chǔ)的最大優(yōu)勢(shì)就是可以對(duì)集中后的信息進(jìn)行統(tǒng)一的信息管理,信息保護(hù)和信息共享.整個(gè)系統(tǒng)包括多個(gè)組成部分,所有這些子系統(tǒng)需要共享統(tǒng)一的集中存儲(chǔ)系統(tǒng)來(lái)建立流暢的工作流程,
21、保證業(yè)務(wù)部門工作的順利進(jìn)行。因此共享要求可以說(shuō)也是共享系統(tǒng)的一個(gè)核心要求。這一階段的網(wǎng)盤方案除了要滿足當(dāng)前應(yīng)用系統(tǒng)的需要外,還要為未來(lái)的的業(yè)務(wù)處理系統(tǒng)和信息處理系統(tǒng)打下一個(gè)良好的基礎(chǔ)。系統(tǒng)的功能要求用于視頻點(diǎn)播的存儲(chǔ)空間作為其他系統(tǒng)的應(yīng)用備份應(yīng)用系統(tǒng)的數(shù)據(jù)存儲(chǔ)文件/文件夾的操作(文件復(fù)制,創(chuàng)建文件夾,文件/文件夾刪除,文件/文件夾移動(dòng),重命名等)文件分享文件秒傳文件斷點(diǎn)續(xù)傳文件版本歷史管理按照文件名稱進(jìn)行搜索支持XP,Win7等主流Windows操作系統(tǒng)系統(tǒng)容量要求本項(xiàng)目初期建設(shè)要求系統(tǒng)可用容量為108TB,按照系統(tǒng)1:1副本備份方式,系統(tǒng)裸容量為54TB。云存儲(chǔ)平臺(tái)云存儲(chǔ)系統(tǒng)平臺(tái)設(shè)計(jì)設(shè)計(jì)目標(biāo)
22、與規(guī)劃采用業(yè)界成熟先進(jìn)的云平臺(tái)架構(gòu)思想,采用軟件實(shí)現(xiàn)對(duì)大量普通商用服務(wù)器存儲(chǔ)空間資源進(jìn)行虛擬化整合,實(shí)現(xiàn)軟硬件故障高度容錯(cuò),將系統(tǒng)控制流與數(shù)據(jù)流分離,同時(shí)使得數(shù)據(jù)在邏輯上集中、物理上分散,每臺(tái)服務(wù)器同時(shí)對(duì)外提供服務(wù),以達(dá)到多并發(fā)高吞吐量的性能要求,采用自注冊(cè)機(jī)制、故障自動(dòng)屏蔽、自動(dòng)冗余重建技術(shù)實(shí)現(xiàn)系統(tǒng)自我維護(hù)和平滑擴(kuò)展,系統(tǒng)服務(wù)724小時(shí)不間斷。云存儲(chǔ)系統(tǒng)方案采用業(yè)界已經(jīng)成熟的cStor云存儲(chǔ)資源管理系統(tǒng),在多臺(tái)普通商用服務(wù)器上構(gòu)建高性能高可靠云存儲(chǔ)系統(tǒng),作為本次網(wǎng)盤系統(tǒng)底層存儲(chǔ)平臺(tái),其應(yīng)用部署示意圖如下圖所示。cStor云存儲(chǔ)資源管理系統(tǒng)部署示意圖系統(tǒng)優(yōu)勢(shì)和特點(diǎn)cStor云存儲(chǔ)系統(tǒng)是一套軟件
23、與硬件相結(jié)合的系統(tǒng),其中專有技術(shù)和軟件是高附加值部分,可以廣泛應(yīng)用于需要存儲(chǔ)大量數(shù)據(jù)的應(yīng)用場(chǎng)合(如安防、廣電、電信、互聯(lián)網(wǎng)、銀行等領(lǐng)域)。該系統(tǒng)相比傳統(tǒng)存儲(chǔ)系統(tǒng)有如下技術(shù)優(yōu)勢(shì):高度可靠存儲(chǔ)系統(tǒng)采用云架構(gòu),數(shù)據(jù)被分塊存儲(chǔ)在不同的存儲(chǔ)節(jié)點(diǎn)上,數(shù)據(jù)采用先進(jìn)的1:1容錯(cuò)機(jī)制進(jìn)行容錯(cuò),可在任意損壞一個(gè)存儲(chǔ)服務(wù)器節(jié)點(diǎn)的情況下實(shí)現(xiàn)數(shù)據(jù)完整可靠,系統(tǒng)對(duì)外存儲(chǔ)訪問(wèn)服務(wù)不間斷。云存儲(chǔ)的管理節(jié)點(diǎn)采用了主備雙機(jī)鏡像熱備的高可用機(jī)制,在主管理節(jié)點(diǎn)出現(xiàn)故障時(shí),備管理節(jié)點(diǎn)自動(dòng)接替主管理節(jié)點(diǎn)的工作,成為新的主管理節(jié)點(diǎn),待故障節(jié)點(diǎn)修復(fù)并重啟服務(wù)后,它則成為新的備管理節(jié)點(diǎn),保障系統(tǒng)的724小時(shí)不間斷服務(wù)。優(yōu)異性能cStor采用控
24、制流與數(shù)據(jù)流分離的技術(shù),數(shù)據(jù)的存儲(chǔ)或讀取實(shí)際上是與各個(gè)存儲(chǔ)節(jié)點(diǎn)上并行讀寫,這樣隨著存儲(chǔ)節(jié)點(diǎn)數(shù)目的增多,整個(gè)系統(tǒng)的吞吐量和IO性能將呈線性增長(zhǎng)。同時(shí),cStor采用負(fù)載均衡技術(shù),自動(dòng)均衡各服務(wù)器負(fù)載,使得各存儲(chǔ)節(jié)點(diǎn)的性能調(diào)節(jié)到最高,實(shí)現(xiàn)資源優(yōu)化配置。無(wú)限容量系統(tǒng)容量?jī)H受限于卷管理服務(wù)器內(nèi)存,可支撐的容量接近無(wú)限,經(jīng)推算,理論容量為102410241024 PB (1G個(gè)PB容量)。在線伸縮cStor云存儲(chǔ)資源管理系統(tǒng)擴(kuò)容非常方便,支持不停止服務(wù)的情況下,動(dòng)態(tài)加入新的存儲(chǔ)節(jié)點(diǎn),無(wú)需任何操作,即實(shí)現(xiàn)擴(kuò)容;同時(shí),無(wú)需人為干預(yù),也可以摘下任意節(jié)點(diǎn),系統(tǒng)自動(dòng)縮小規(guī)模而不丟失數(shù)據(jù),存儲(chǔ)在此節(jié)點(diǎn)上的數(shù)據(jù)將會(huì)重
25、新備份到其他節(jié)點(diǎn)上。通用易用cStor云存儲(chǔ)系統(tǒng)提供符合POSIX標(biāo)準(zhǔn)的通用文件系統(tǒng)接口,無(wú)論是哪種操作系統(tǒng)下的應(yīng)用程序,都可以不經(jīng)修改將云存儲(chǔ)當(dāng)成自己的海量磁盤來(lái)使用。同時(shí),也提供專用的API接口,供開發(fā)人員調(diào)用。智能管理提供基于WEB的管理控制平臺(tái),所有的管理工作均由cStor管理模塊自動(dòng)完成,使用人員無(wú)需任何專業(yè)知識(shí)便可以輕松管理整個(gè)系統(tǒng)。通過(guò)管理平臺(tái),可以對(duì)cStor中的所有節(jié)點(diǎn)實(shí)行實(shí)時(shí)監(jiān)控,用戶通過(guò)監(jiān)控界面可以清楚地了解到每一個(gè)節(jié)點(diǎn)和磁盤的運(yùn)行情況;同時(shí)也可以實(shí)現(xiàn)對(duì)文件級(jí)別的系統(tǒng)監(jiān)控,支持損壞文件的查找和修復(fù)功能。系統(tǒng)提供用戶安全認(rèn)證及對(duì)不同用戶進(jìn)行配額設(shè)置與權(quán)限管理功能,滿足應(yīng)用的
26、日常維護(hù)和安全管理需求。系統(tǒng)架構(gòu)在本次網(wǎng)盤系統(tǒng)建設(shè)中,云存儲(chǔ)系統(tǒng)屬于基礎(chǔ)平臺(tái)支撐層,以用于數(shù)據(jù)集中存儲(chǔ)和共享,實(shí)現(xiàn)對(duì)數(shù)據(jù)的統(tǒng)一管理和高效應(yīng)用。將數(shù)據(jù)邏輯集中物理分散,以提供多并發(fā)高吞吐帶寬,最大程度降低系統(tǒng)訪問(wèn)瓶頸。下面具體說(shuō)明cStor云存儲(chǔ)資源管理系統(tǒng)的基本組成和主要功能。系統(tǒng)基本組成cStor云存儲(chǔ)資源管理系統(tǒng)采用分布式的存儲(chǔ)機(jī)制,將數(shù)據(jù)分散存儲(chǔ)在多臺(tái)獨(dú)立的存儲(chǔ)服務(wù)器上。它采用包括卷管理服務(wù)器、元數(shù)據(jù)管理服務(wù)器(Master Server)、數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)服務(wù)器(Chunk Server)和掛接訪問(wèn)客戶端以及管理監(jiān)控中心服務(wù)器的結(jié)構(gòu)構(gòu)成虛擬統(tǒng)一的海量存儲(chǔ)空間。在每個(gè)服務(wù)器節(jié)點(diǎn)上運(yùn)行cSto
27、r云存儲(chǔ)資源管理系統(tǒng)的相應(yīng)的軟件服務(wù)程序模塊。系統(tǒng)架構(gòu)框圖如下圖所示。cStor云存儲(chǔ)資源管理系統(tǒng)架構(gòu)其中,Master Server保存系統(tǒng)的元數(shù)據(jù),負(fù)責(zé)對(duì)整個(gè)文件系統(tǒng)的管理,Master Server在邏輯上只有一個(gè),但采用主備雙機(jī)鏡像的方式,保證系統(tǒng)的不間斷服務(wù);Chunk Server負(fù)責(zé)具體的數(shù)據(jù)存儲(chǔ)工作,數(shù)據(jù)以文件的形式存儲(chǔ)在Chunk Server上,Chunk Server的個(gè)數(shù)可以有多個(gè),它的數(shù)目直接決定了cStor云存儲(chǔ)系統(tǒng)的規(guī)模;掛接訪問(wèn)客戶端即為服務(wù)器對(duì)外提供數(shù)據(jù)存儲(chǔ)和訪問(wèn)服務(wù)的窗口,通常情況下,客戶端可以部署在Chunk Server上,每一個(gè)塊數(shù)據(jù)服務(wù)器,既可以作為
28、存儲(chǔ)服務(wù)器同時(shí)也可以作為客戶端服務(wù)器。由一對(duì)元數(shù)據(jù)服務(wù)器及其管理的存儲(chǔ)服務(wù)器節(jié)點(diǎn)所提供的存儲(chǔ)空間稱為一個(gè)卷空間,不同的卷空間由卷管理服務(wù)器虛擬化統(tǒng)一管理,對(duì)外可提供統(tǒng)一的海量存儲(chǔ)空間。管理監(jiān)控中心提供統(tǒng)一易用的WEB配置管理監(jiān)控平臺(tái),提供設(shè)備監(jiān)控、空間監(jiān)控、文件監(jiān)控、服務(wù)監(jiān)控、用戶認(rèn)證管理、配額管理、故障告警及預(yù)警等功能,實(shí)現(xiàn)智能化管理。這種分布式系統(tǒng)最大的好處是有利于存儲(chǔ)系統(tǒng)的擴(kuò)展和實(shí)現(xiàn),在小規(guī)模的數(shù)據(jù)擴(kuò)展時(shí),只需要添加具體的Chunk Server即可,而不需要添加整套設(shè)備。在實(shí)現(xiàn)大規(guī)模擴(kuò)展時(shí)也可方便地添加整個(gè)卷設(shè)備。cStor采用中心服務(wù)器模式來(lái)管理整個(gè)文件系統(tǒng),可以大大簡(jiǎn)化設(shè)計(jì),從而降
29、低實(shí)現(xiàn)難度。中心管理服務(wù)器模式如下圖:中心管理服務(wù)器模式圖系統(tǒng)功能描述cStor云存儲(chǔ)資源管理系統(tǒng)從功能上劃份為三大部分:cStor分布式文件系統(tǒng)分布式文件系統(tǒng)實(shí)現(xiàn)文件數(shù)據(jù)存儲(chǔ)、可靠性容錯(cuò)、可伸縮性保證、高可用保證、負(fù)載均衡和流量分擔(dān)等功能。存儲(chǔ)訪問(wèn)接口cStor提供符合POSIX規(guī)范的文件系統(tǒng)訪問(wèn)接口,通過(guò)cStor訪問(wèn)掛接程序可將云存儲(chǔ)空間掛接為本地目錄或磁盤。同時(shí)可提供專用的API接口,支持業(yè)務(wù)應(yīng)用層程序?qū)υ拼鎯?chǔ)系統(tǒng)的直接訪問(wèn)。管理監(jiān)控中心管理監(jiān)控中心提供帳戶管理、設(shè)備管理、系統(tǒng)監(jiān)控、卷管理、告警管理、故障管理等功能。下面逐一詳細(xì)介紹各部分系統(tǒng)功能。cStor分布式文件系統(tǒng)cStor分布
30、式文件系統(tǒng)包括卷管理、元數(shù)據(jù)管理、塊數(shù)據(jù)管理服務(wù)。參考上面系統(tǒng)架構(gòu)框圖左側(cè)部分。元數(shù)據(jù)是指文件的名稱、屬性、數(shù)據(jù)塊位置信息等,元數(shù)據(jù)管理通過(guò)元數(shù)據(jù)服務(wù)程序完成。因元數(shù)據(jù)訪問(wèn)頻繁,故系統(tǒng)將元數(shù)據(jù)加載緩存至內(nèi)存中管理,提高訪問(wèn)效率。由于元數(shù)據(jù)的重要性,元數(shù)據(jù)損壞或丟失則相當(dāng)于文件數(shù)據(jù)丟失,因此實(shí)現(xiàn)了元數(shù)據(jù)服務(wù)器主備雙機(jī)高可用,確保小時(shí)不間斷服務(wù)。通過(guò)元數(shù)據(jù)遠(yuǎn)程多機(jī)冗余備份功能,實(shí)現(xiàn)在多臺(tái)其它機(jī)器上備份元數(shù)據(jù),當(dāng)元數(shù)據(jù)服務(wù)器損壞,可以通過(guò)備份的元數(shù)據(jù)重新恢復(fù)服務(wù),切保數(shù)據(jù)可以完整找回。塊數(shù)據(jù)是指文件數(shù)據(jù)被按照一定大?。J(rèn)64MB)分割而成的多個(gè)數(shù)據(jù)塊,分布存儲(chǔ)到不同的存儲(chǔ)節(jié)點(diǎn)服務(wù)器上,并通過(guò)編解碼
31、容錯(cuò)算法產(chǎn)生相應(yīng)的冗余塊。塊數(shù)據(jù)服務(wù)是運(yùn)行在每個(gè)存儲(chǔ)節(jié)點(diǎn)服務(wù)器上的塊數(shù)據(jù)管理程序,負(fù)責(zé)使用存儲(chǔ)服務(wù)器上的磁盤空間存儲(chǔ)文件數(shù)據(jù)塊,并實(shí)現(xiàn)相應(yīng)的編解碼功能。相比較傳統(tǒng)業(yè)界的云存儲(chǔ)采用塊數(shù)據(jù)簡(jiǎn)單備份冗余容錯(cuò)機(jī)制,編解碼容錯(cuò)方式大大降低了硬件資源冗余度,提高了磁盤利用率。由一對(duì)主備元數(shù)據(jù)服務(wù)器及其所管理的塊數(shù)據(jù)服務(wù)器管理節(jié)點(diǎn)設(shè)備及其所提供的存儲(chǔ)空間稱為一個(gè)卷。卷管理服務(wù)器負(fù)責(zé)將多個(gè)卷虛擬化整合,對(duì)外提供統(tǒng)一的整體訪問(wèn)云存儲(chǔ)空間。文件系統(tǒng)采用中心服務(wù)器模式分布式存儲(chǔ)架構(gòu),控制流與數(shù)據(jù)流分離,通過(guò)增加存儲(chǔ)節(jié)點(diǎn)系統(tǒng)采用自動(dòng)注冊(cè)機(jī)制,實(shí)現(xiàn)系統(tǒng)高可伸縮性,增加或減少存儲(chǔ)節(jié)點(diǎn)規(guī)模,不影響系統(tǒng)正常提供存儲(chǔ)訪問(wèn)服務(wù)。
32、該系統(tǒng)架構(gòu)實(shí)現(xiàn)了統(tǒng)一調(diào)度,負(fù)載均衡和流量自動(dòng)分擔(dān)功能,多個(gè)存儲(chǔ)節(jié)點(diǎn)同時(shí)對(duì)外提供數(shù)據(jù)流服務(wù),系統(tǒng)根據(jù)磁盤空間使用比例進(jìn)行資源優(yōu)化配置。同時(shí)在多個(gè)不同的存儲(chǔ)節(jié)點(diǎn)之間實(shí)現(xiàn)根據(jù)空間比例進(jìn)行優(yōu)化配置,數(shù)據(jù)優(yōu)先存儲(chǔ)的空間利用比例相對(duì)較低的磁盤或存儲(chǔ)服務(wù)器上。cStor分布式文件系統(tǒng)具有自動(dòng)冗余重建功能,確保損壞的數(shù)據(jù)塊能夠被解碼或編碼后存儲(chǔ)到在線的正常的存儲(chǔ)服務(wù)器節(jié)點(diǎn)上。存儲(chǔ)訪問(wèn)接口cStor分布式文件系統(tǒng)提供符合POSIX規(guī)范的文件系統(tǒng)訪問(wèn)接口。支持Linux、Windows、MaxOS X等操作系統(tǒng)平臺(tái)??蓪⒃拼鎯?chǔ)系統(tǒng)提供的存儲(chǔ)空間掛接為本地目錄或本地盤符來(lái)使用。用戶操作云存儲(chǔ)空間和操作本地文件相同。
33、另外cStor提供專用的高速存取訪問(wèn)API接口,供性能要求很高的高端應(yīng)用程序?qū)邮褂?。管理監(jiān)控中心管理監(jiān)控中心為系統(tǒng)管理員配置和維護(hù)cStor云存儲(chǔ)資源管理系統(tǒng)的有效工具,充分體現(xiàn)了系統(tǒng)的可維護(hù)性。管理監(jiān)控中心提供帳戶管理、設(shè)備管理、系統(tǒng)監(jiān)控、卷管理、告警管理、故障管理等功能。以下為部分系統(tǒng)管理界面。設(shè)備管理系統(tǒng)監(jiān)控告警信息告警配置告警日志故障處理卷管理帳戶管理添加帳戶工作機(jī)制數(shù)據(jù)寫入機(jī)制數(shù)據(jù)寫入過(guò)程參考下圖:客戶端向元數(shù)據(jù)服務(wù)器請(qǐng)求寫入文件數(shù)據(jù),元數(shù)據(jù)服務(wù)器返回寫入服務(wù)器列表;客戶端進(jìn)行文件切塊寫入有塊數(shù)據(jù)服務(wù)器;客戶端每寫入一定量的塊數(shù)據(jù)后,通知元數(shù)據(jù)服務(wù)器,由元數(shù)據(jù)服務(wù)器啟動(dòng)一個(gè)編碼任務(wù)
34、,進(jìn)行編碼;而客戶端繼續(xù)寫數(shù)據(jù),真到寫完成為止;元數(shù)據(jù)服務(wù)器調(diào)度一個(gè)或多個(gè)塊數(shù)據(jù)服務(wù)器進(jìn)行編碼任務(wù);被調(diào)度的塊數(shù)據(jù)服務(wù)器,獲取需要的原始信息塊組進(jìn)行編碼,產(chǎn)生冗余數(shù)據(jù)塊;數(shù)據(jù)讀出機(jī)制數(shù)據(jù)讀出過(guò)程參考下圖:客戶端向元數(shù)據(jù)服務(wù)器請(qǐng)求讀出文件數(shù)據(jù),元數(shù)據(jù)服務(wù)器返回?cái)?shù)據(jù)塊位置列表;客戶端進(jìn)行數(shù)據(jù)塊讀出;客戶端進(jìn)行數(shù)據(jù)塊校驗(yàn);對(duì)未能讀出的數(shù)據(jù)塊或無(wú)效塊通過(guò)同編碼組內(nèi)其它數(shù)據(jù)塊進(jìn)行解碼,獲得完整正解的文件數(shù)據(jù)。關(guān)鍵技術(shù)負(fù)載自動(dòng)均衡技術(shù)采用中心服務(wù)器模式來(lái)管理整個(gè)云存儲(chǔ)文件系統(tǒng),所有元數(shù)據(jù)均保存在主管理服務(wù)器上,文件則劃分為多個(gè)節(jié)點(diǎn)存儲(chǔ)在不同的節(jié)點(diǎn)服務(wù)器上。主卷管理服務(wù)器維護(hù)了一個(gè)統(tǒng)一的命名空間,同時(shí)掌握整
35、個(gè)系統(tǒng)內(nèi)節(jié)點(diǎn)服務(wù)器的使用情況,當(dāng)客戶端向元數(shù)據(jù)服務(wù)器發(fā)送數(shù)據(jù)讀寫的請(qǐng)求時(shí),元數(shù)據(jù)服務(wù)器根據(jù)節(jié)點(diǎn)服務(wù)器的磁盤使用情況、網(wǎng)絡(luò)負(fù)擔(dān)等情況,選擇負(fù)擔(dān)最輕的節(jié)點(diǎn)服務(wù)器對(duì)外提供服務(wù),自動(dòng)均衡負(fù)載負(fù)擔(dān)。另外,當(dāng)某有一個(gè)節(jié)點(diǎn)服務(wù)器因?yàn)闄C(jī)器故障或者其他原因造成離線時(shí),主卷管理服務(wù)器會(huì)將此機(jī)器自動(dòng)屏蔽掉,不再將此節(jié)點(diǎn)服務(wù)器提供給客戶端使用,同時(shí)存儲(chǔ)在此節(jié)點(diǎn)服務(wù)器上的數(shù)據(jù)也會(huì)自動(dòng)的編碼冗余到其他可用的節(jié)點(diǎn)服務(wù)器上,自動(dòng)屏蔽節(jié)點(diǎn)服務(wù)器故障對(duì)系統(tǒng)的影響。高速并發(fā)訪問(wèn)技術(shù)客戶端在訪問(wèn)云存儲(chǔ)時(shí),首先訪問(wèn)主卷管理服務(wù)器節(jié)點(diǎn),獲取將要與之進(jìn)行交互的節(jié)點(diǎn)服務(wù)器信息,然后直接訪問(wèn)這些節(jié)點(diǎn)服務(wù)器完成數(shù)據(jù)存取??蛻舳伺c主卷管理服務(wù)器之
36、間只有控制流,而無(wú)數(shù)據(jù)流,這樣就極大地降低了主卷管理服務(wù)器的負(fù)載,使之不成為系統(tǒng)性能的一個(gè)瓶頸??蛻舳伺c節(jié)點(diǎn)服務(wù)器之間直接傳輸數(shù)據(jù)流,同時(shí)由于文件被分成多個(gè)節(jié)點(diǎn)進(jìn)行分布式存儲(chǔ),客戶端可以同時(shí)訪問(wèn)多個(gè)節(jié)點(diǎn)服務(wù)器,從而使得整個(gè)系統(tǒng)的I/O高度并行,系統(tǒng)整體性能得到提高。通常情況下,系統(tǒng)的整體吞吐率與節(jié)點(diǎn)服務(wù)器的數(shù)量呈正比。高可靠性保證技術(shù)對(duì)于元數(shù)據(jù),通過(guò)操作日志來(lái)提供容錯(cuò)功能,當(dāng)主管理服務(wù)器發(fā)生故障時(shí),在磁盤數(shù)據(jù)保存完好的情況下,可以迅速恢復(fù)以上元數(shù)據(jù)。為了防止主管理服務(wù)器徹底死機(jī)的情況,還提供了主管理服務(wù)器遠(yuǎn)程的實(shí)時(shí)備份,這樣在當(dāng)前的主管理服務(wù)器出現(xiàn)故障無(wú)法工作的時(shí)候,另外一臺(tái)備管理服務(wù)器可以迅
37、速接替其工作。對(duì)于節(jié)點(diǎn)服務(wù)器,采用編解碼的方式實(shí)現(xiàn)容錯(cuò),分布存儲(chǔ)在不同的節(jié)點(diǎn)服務(wù)器上。數(shù)據(jù)塊的分布策略考慮了多種因素,如網(wǎng)絡(luò)的拓?fù)?、機(jī)架的分布、磁盤的利用率等。在其后的過(guò)程中,如果相關(guān)的數(shù)據(jù)塊出現(xiàn)丟失或不可恢復(fù)等狀況,主管理服務(wù)器會(huì)自動(dòng)將該數(shù)據(jù)塊編解碼冗余到其他節(jié)點(diǎn)服務(wù)器,從而確保數(shù)據(jù)塊的一定的冗余容錯(cuò),進(jìn)行自動(dòng)冗余容錯(cuò)重建。在有多個(gè)節(jié)點(diǎn)服務(wù)器的情況下,任意損失一個(gè)節(jié)點(diǎn),數(shù)據(jù)都不會(huì)丟失,而且隨著節(jié)點(diǎn)服務(wù)器數(shù)目的增多,整個(gè)系統(tǒng)的可靠性越大。高可用技術(shù)系統(tǒng)中的所有服務(wù)節(jié)點(diǎn)均是通過(guò)網(wǎng)絡(luò)連接在一起,由于采用了高可靠的容錯(cuò)機(jī)制,系統(tǒng)增減節(jié)點(diǎn)不必停止服務(wù),可在線增減存儲(chǔ)節(jié)點(diǎn),存儲(chǔ)節(jié)點(diǎn)和元數(shù)據(jù)節(jié)點(diǎn)間通過(guò)注冊(cè)
38、管理機(jī)制自適應(yīng)管理,實(shí)現(xiàn)自動(dòng)伸縮。元數(shù)據(jù)服務(wù)器采用主備雙機(jī)熱備技術(shù),主機(jī)故障,備機(jī)自動(dòng)接替其工作,對(duì)外服務(wù)不停止;存儲(chǔ)節(jié)點(diǎn)采用編解碼冗余備份機(jī)制,如采用4:2編碼容錯(cuò),任意損失兩個(gè)節(jié)點(diǎn),數(shù)據(jù)不丟失,服務(wù)不停止。分級(jí)存儲(chǔ)技術(shù)分級(jí)存儲(chǔ)是根據(jù)數(shù)據(jù)的重要性、訪問(wèn)頻率、保留時(shí)間、容量、性能等指標(biāo),將數(shù)據(jù)采取不同的存儲(chǔ)方式分別存儲(chǔ)在不同性能的存儲(chǔ)設(shè)備上,通過(guò)分級(jí)存儲(chǔ)管理實(shí)現(xiàn)數(shù)據(jù)客體在存儲(chǔ)設(shè)備之間的自動(dòng)遷移。數(shù)據(jù)分級(jí)存儲(chǔ)的工作原理是基于數(shù)據(jù)訪問(wèn)的局部性。通過(guò)將不經(jīng)常訪問(wèn)的數(shù)據(jù)自動(dòng)移到存儲(chǔ)層次中較低的層次,釋放出較高成本的存儲(chǔ)空間給更頻繁訪問(wèn)的數(shù)據(jù),可以獲得更好的性價(jià)比。這樣,一方面可大大減少非重要性數(shù)據(jù)在一
39、級(jí)本地磁盤所占用的空間,還可加快整個(gè)系統(tǒng)的存儲(chǔ)性能。傳統(tǒng)的數(shù)據(jù)存儲(chǔ)一般分為在線(On-line)存儲(chǔ)和離線(Off-line)存儲(chǔ)兩級(jí)存儲(chǔ)方式。而在分級(jí)存儲(chǔ)系統(tǒng)中,一般分為在線(On-line)存儲(chǔ)、近線(Near-line)存儲(chǔ)和離線(Off-line)存儲(chǔ)三級(jí)存儲(chǔ)方式。(1)在線存儲(chǔ)是指將數(shù)據(jù)存放在高速的磁盤系統(tǒng)(如閃存存儲(chǔ)介質(zhì)、FC磁盤或SCSI磁盤陣列)等存儲(chǔ)設(shè)備上,適合存儲(chǔ)那些需要經(jīng)常和快速訪問(wèn)的程序和文件,其存取速度快,性能好,存儲(chǔ)價(jià)格相對(duì)昂貴。在線存儲(chǔ),是工作級(jí)的存儲(chǔ),其最大特征是存儲(chǔ)設(shè)備和所存儲(chǔ)的數(shù)據(jù)時(shí)刻保持“在線”狀態(tài),可以隨時(shí)讀取和修改,以滿足前端應(yīng)用服務(wù)器或數(shù)據(jù)庫(kù)對(duì)數(shù)據(jù)訪
40、問(wèn)的速度要求。(2)近線存儲(chǔ)是指將數(shù)據(jù)存放在低速的磁盤系統(tǒng)上,一般是一些存取速度和價(jià)格介于高速磁盤與磁帶之間的低端磁盤設(shè)備。近線存儲(chǔ)外延相對(duì)比較廣泛,主要定位于客戶在線存儲(chǔ)和離線存儲(chǔ)之間的應(yīng)用。就是指將那些并不是經(jīng)常用到(例如一些長(zhǎng)期保存的不常用的文件歸檔),或者說(shuō)訪問(wèn)量并不大的數(shù)據(jù)存放在性能較低的存儲(chǔ)設(shè)備上。但對(duì)這些設(shè)備的要求是尋址迅速、傳輸率高。因此,近線存儲(chǔ)對(duì)性能要求相對(duì)來(lái)說(shuō)并不高,但又要求相對(duì)較好的訪問(wèn)性能。同時(shí)多數(shù)情況下由于不常用的數(shù)據(jù)要占總數(shù)據(jù)量的較大比重,這也就要求近線存儲(chǔ)設(shè)備在需要容量上相對(duì)較大。近線存儲(chǔ)設(shè)備主要有SATA磁盤陣列、DVD-RAM光盤塔和光盤庫(kù)等設(shè)備。(3)離線
41、存儲(chǔ),指將數(shù)據(jù)備份到磁帶或磁帶庫(kù)上。大多數(shù)情況下主要用于對(duì)在線存儲(chǔ)或近線存儲(chǔ)的數(shù)據(jù)進(jìn)行備份,以防范可能發(fā)生的數(shù)據(jù)災(zāi)難,因此又稱備份級(jí)存儲(chǔ)。離線存儲(chǔ)通常采用磁帶作為存儲(chǔ)介質(zhì),其訪問(wèn)速度低,但價(jià)格低廉的海量存儲(chǔ)。(4)分級(jí)存儲(chǔ),是根據(jù)具體應(yīng)用可以變化的,這種存儲(chǔ)級(jí)別的劃分是相對(duì)的,可以分為多種級(jí)別。如可以采取FC磁盤SCSI磁盤SATA磁盤這種三級(jí)存儲(chǔ)結(jié)構(gòu),也可以采取SSD盤FC磁盤SCSI磁盤SATA磁盤磁帶這種五級(jí)存儲(chǔ)結(jié)構(gòu),具體采用哪些存儲(chǔ)級(jí)別需要根據(jù)具體應(yīng)用而定。cStor存儲(chǔ)系統(tǒng)采用了分級(jí)技術(shù),把存儲(chǔ)信息根據(jù)信息的重要性、訪問(wèn)頻率等對(duì)信息進(jìn)行了分級(jí)存儲(chǔ),將文件的元數(shù)據(jù)等訪問(wèn)頻繁的重要信息時(shí)
42、刻保持在線存儲(chǔ),開機(jī)后保存在內(nèi)存中,可以隨時(shí)讀取和修改,以滿足前端應(yīng)用服務(wù)器或數(shù)據(jù)庫(kù)對(duì)數(shù)據(jù)訪問(wèn)的速度要求。 將其它備份數(shù)據(jù)、冗余容錯(cuò)的數(shù)據(jù)等訪問(wèn)量小的數(shù)據(jù)等采用廉價(jià)的SATA硬盤存儲(chǔ)。對(duì)于訪問(wèn)量小的數(shù)據(jù)采用離線存儲(chǔ),一旦需要訪問(wèn)這些數(shù)據(jù)可以使用相應(yīng)的喚醒策略來(lái)實(shí)現(xiàn)將離線轉(zhuǎn)為在線,如通過(guò)網(wǎng)絡(luò)喚醒機(jī)制等。對(duì)于與時(shí)間緊密相關(guān)的數(shù)據(jù)(如新聞、電視等內(nèi)容信息)的存儲(chǔ),這些數(shù)據(jù)隨著時(shí)間的推移,它們的使用頻率越來(lái)越少,我們可以根據(jù)時(shí)間來(lái)對(duì)這些信息進(jìn)行分級(jí)動(dòng)態(tài)存儲(chǔ),如將前幾個(gè)月的歷史數(shù)據(jù)存放到離線存儲(chǔ)設(shè)備上,它們的元數(shù)據(jù)信息也不需要存儲(chǔ)在元數(shù)據(jù)服務(wù)器的內(nèi)存中,直接存放在元數(shù)據(jù)服務(wù)器的硬盤中,如果需要訪問(wèn)時(shí)可以
43、將其調(diào)入內(nèi)存中。對(duì)于這些存儲(chǔ)這些過(guò)時(shí)信息的存儲(chǔ)節(jié)點(diǎn)可以讓其一直處于待機(jī)狀態(tài),一旦要使用可以通過(guò)網(wǎng)絡(luò)喚醒讓其工作起來(lái)。接口描述作為云平臺(tái)基礎(chǔ)架構(gòu)層的cStor云存儲(chǔ)系統(tǒng),主要支持兩種訪問(wèn)方式:POSIX通用文件系統(tǒng)接口訪問(wèn);通過(guò)專用API訪問(wèn)。具體描述如下。POSIX通用文件系統(tǒng)接口訪問(wèn)cStor客戶端掛接程序支持Linux/Unix/Windows/MacOS等操作系統(tǒng),并且支持POSIX接口規(guī)范,通過(guò)客戶端將云存儲(chǔ)系統(tǒng)掛載成本地目錄或磁盤后,用戶可以如同操作本地目錄或磁盤一樣使用云存儲(chǔ)空間。同時(shí),對(duì)于基于本地文件系統(tǒng)的應(yīng)用程序,可以不加修改,直接應(yīng)用在云存儲(chǔ)系統(tǒng)上。通常情況下,可以通過(guò)在客戶
44、端的基礎(chǔ)上部署FTP、NFS等服務(wù)器的方式,對(duì)外提供基于FTP和NFS的數(shù)據(jù)存儲(chǔ)訪問(wèn)。NFS接口訪問(wèn)支持NFS v3/v4,具有文件的讀、寫、創(chuàng)建、刪除等接口(操作)。具體來(lái)說(shuō),NFS服務(wù)器提供的接口都是和普通用戶所熟悉的本地文件系統(tǒng)的文件操作是類似的,即NFS提供文件的查找、創(chuàng)建、移除、讀取、寫入、重命名等基本操作。CIFS接口訪問(wèn)支持CIFS/SMB v1/v2協(xié)議,可以訪問(wèn)遠(yuǎn)程Internet計(jì)算機(jī)上的文件并要求此計(jì)算機(jī)的服務(wù)。CIFS 使用客戶/服務(wù)器模式??蛻舫绦蛘?qǐng)求遠(yuǎn)在服務(wù)器上的服務(wù)器程序?yàn)樗峁┓?wù),服務(wù)器獲得請(qǐng)求并返回滿足招標(biāo)要求。應(yīng)用程序API接口調(diào)用cStor云存儲(chǔ)系統(tǒng)對(duì)外
45、提供應(yīng)用程序API訪問(wèn)接口,可以根據(jù)實(shí)際應(yīng)用的需要編寫應(yīng)用程序,通過(guò)調(diào)用相應(yīng)的接口直接訪問(wèn)cStor云存儲(chǔ)系統(tǒng)。本地容錯(cuò)與診斷技術(shù)cStor高可靠性快速恢復(fù)不管如何終止服務(wù),元數(shù)據(jù)服務(wù)器和存儲(chǔ)服務(wù)器都會(huì)在幾秒鐘內(nèi)恢復(fù)狀態(tài)和運(yùn)行。實(shí)際上,我們不對(duì)正常終止和不正常終止進(jìn)行區(qū)分,服務(wù)器進(jìn)程都會(huì)被切斷而終止??蛻魴C(jī)和其他的服務(wù)器會(huì)經(jīng)歷一個(gè)小小的中斷,然后它們的特定請(qǐng)求超時(shí),重新連接重啟的服務(wù)器,重新請(qǐng)求。數(shù)據(jù)塊恢復(fù)每個(gè)數(shù)據(jù)塊都會(huì)被備份到放到的不同存儲(chǔ)服務(wù)器上。對(duì)不同的目錄和文件,用戶可以設(shè)置不同的備份級(jí)別。在存儲(chǔ)服務(wù)器掉線或是數(shù)據(jù)被破壞時(shí),元數(shù)據(jù)服務(wù)器會(huì)按照需要來(lái)復(fù)制數(shù)據(jù)塊。元數(shù)據(jù)備份元數(shù)據(jù)服務(wù)器采用
46、雙機(jī)熱備技術(shù),在主元數(shù)據(jù)服務(wù)器發(fā)生異常中斷時(shí),能夠在秒級(jí)內(nèi)切換到備元數(shù)據(jù)服務(wù)器,而不會(huì)中斷業(yè)務(wù)。另外還可以采用冷備份機(jī)制,單獨(dú)將元數(shù)據(jù)備份到另外第3臺(tái)機(jī)器中,從而確保萬(wàn)無(wú)一失。cStor數(shù)據(jù)完整性每個(gè)存儲(chǔ)服務(wù)器都利用校驗(yàn)和來(lái)檢驗(yàn)存儲(chǔ)數(shù)據(jù)的完整性。在讀數(shù)據(jù)時(shí),存儲(chǔ)服務(wù)器首先檢查與被讀內(nèi)容相關(guān)部分的校驗(yàn)和,因此,服務(wù)器不會(huì)傳播錯(cuò)誤的數(shù)據(jù)。如果所檢查的內(nèi)容和校驗(yàn)和不符,服務(wù)器就會(huì)給數(shù)據(jù)請(qǐng)求者返回一個(gè)錯(cuò)誤的信息,并把這個(gè)情況報(bào)告給元數(shù)據(jù)服務(wù)器??蛻魴C(jī)就會(huì)讀其他的服務(wù)器來(lái)獲取數(shù)據(jù),而元數(shù)據(jù)服務(wù)器則會(huì)從其他的拷貝來(lái)復(fù)制數(shù)據(jù),等到一個(gè)新的拷貝完成時(shí),元數(shù)據(jù)服務(wù)器就會(huì)通知報(bào)告錯(cuò)誤的服務(wù)器刪除出錯(cuò)的數(shù)據(jù)塊。寫數(shù)
47、據(jù)時(shí)的校驗(yàn)和計(jì)算優(yōu)化了,因?yàn)檫@時(shí)主要的寫操作。我們只是更新增加部分的校驗(yàn)和。在空閑時(shí)間,服務(wù)器會(huì)檢查不活躍數(shù)據(jù)塊的校驗(yàn)和,這樣可以檢查出不經(jīng)常讀的數(shù)據(jù)的錯(cuò)誤。一旦錯(cuò)誤被檢查出來(lái),服務(wù)器會(huì)拷貝一個(gè)正確的數(shù)據(jù)塊來(lái)代替錯(cuò)誤的。cStor快照技術(shù)快照操作幾乎在瞬間構(gòu)造一個(gè)文件和目錄樹的副本,同時(shí)將正在進(jìn)行的其他修改操作對(duì)它的影響減至最小。異地容災(zāi)與恢復(fù)技術(shù)隨著企業(yè)規(guī)模的擴(kuò)展,用戶原有意識(shí)中的數(shù)據(jù)備份已經(jīng)無(wú)法滿足關(guān)鍵業(yè)務(wù)對(duì)系統(tǒng)的可用性、實(shí)時(shí)性、安全性的需要。更重要的是備份的數(shù)據(jù)往往會(huì)因?yàn)楦鞣N因素而遭到毀壞,如地震、火災(zāi)、丟失等。所以需要異地容災(zāi)備份技術(shù),從而進(jìn)一步提高數(shù)據(jù)抵抗各種可能安全因素的容災(zāi)能力。
48、cStor數(shù)據(jù)備份與恢復(fù)系統(tǒng)功能自動(dòng)備份用戶可根據(jù)工作需要進(jìn)行備份策略的設(shè)置,根據(jù)用戶設(shè)定的策略自動(dòng)備份需要備份的文件,備份過(guò)程無(wú)須人工干預(yù)。持續(xù)備份可以連續(xù)實(shí)時(shí)捕獲所需備份文件的數(shù)據(jù)變化,并自動(dòng)保存變化的數(shù)據(jù)和時(shí)間戳(即表示數(shù)據(jù)變化的時(shí)間節(jié)點(diǎn)),在此基礎(chǔ)上可以實(shí)現(xiàn)過(guò)去任意時(shí)間點(diǎn)的數(shù)據(jù)恢復(fù)。完全備份將備份集所包含的全部文件備份到“黑方”服務(wù)器。增量備份首次的完全備份結(jié)束后,針對(duì)用戶設(shè)定的備份集,自動(dòng)進(jìn)行增量備份,在捕獲到文件修改事件消息后,實(shí)時(shí)備份新修改的文件。差異備份即差量備份,針對(duì)具體的文件而言,為了減少存儲(chǔ)空間的占用,采用差異備份,每次文件修改操作被捕獲后,僅備份相對(duì)于初始完全備份后所變
49、化的文件數(shù)據(jù)內(nèi)容。定時(shí)備份設(shè)定好定時(shí)備份的時(shí)間點(diǎn)后,到了設(shè)定的時(shí)間點(diǎn),程序自動(dòng)備份目標(biāo)文件。cStor異地文件恢復(fù)用戶可以使用恢復(fù)功能將文件從異地cStor備份系統(tǒng)下載到本地硬盤,也可以進(jìn)行批量恢復(fù),尤其是可以按照設(shè)定時(shí)間(年、月、日、時(shí)、分、秒)恢復(fù)所需文件。網(wǎng)絡(luò)云盤平臺(tái)網(wǎng)盤系統(tǒng)平臺(tái)設(shè)計(jì)技術(shù)選型在技術(shù)選型方面,本系統(tǒng)采用企業(yè)網(wǎng)盤系統(tǒng),該系統(tǒng)同步存儲(chǔ)服務(wù)在業(yè)務(wù)處于領(lǐng)先地位,其底層存儲(chǔ)采用cStor云存儲(chǔ)系統(tǒng),cStor云存儲(chǔ)系統(tǒng)已經(jīng)積累了大量的客戶,以及實(shí)際運(yùn)營(yíng)規(guī)模網(wǎng)絡(luò)集群和存儲(chǔ)服務(wù)的經(jīng)驗(yàn)和能力??傮w介紹企業(yè)網(wǎng)盤系統(tǒng)包括:【文件同步管理系統(tǒng)】、【文件存儲(chǔ)服務(wù)系統(tǒng)】、【文件分析系統(tǒng)】。企業(yè)網(wǎng)盤系
50、統(tǒng)提供了一套完整的用戶數(shù)據(jù)應(yīng)用、管理、監(jiān)控的應(yīng)用系統(tǒng)。企業(yè)網(wǎng)盤系統(tǒng)作為基礎(chǔ)數(shù)據(jù)應(yīng)用系統(tǒng),為企業(yè)員工提供個(gè)人數(shù)據(jù)存儲(chǔ)、分享、檢索等服務(wù)同時(shí)保護(hù)數(shù)據(jù)安全。企業(yè)網(wǎng)盤提供完整的同步云盤解決方案。為企業(yè)員工提供包括:Windows PC客戶端、Android手機(jī)端、iPhone版本、網(wǎng)頁(yè)版云盤產(chǎn)品。具備基本文件上傳下載、圖片音頻視頻在線瀏覽、文件分享等基礎(chǔ)功能,同時(shí)也包含了目錄共享、文件歷史版本恢復(fù)、文件秒傳等特色功能,幫助企業(yè)員工有效解決文件多終端同步訪問(wèn)并備份的需求。企業(yè)網(wǎng)盤系統(tǒng)采用自主界面設(shè)計(jì),使用多種技術(shù)幫助用戶快速、高效完成文件的同步與備份。傳統(tǒng)的存儲(chǔ)系統(tǒng)通常只提供小容量、簡(jiǎn)單、功能單一的數(shù)據(jù)
51、服務(wù),而忽視了用戶數(shù)據(jù)應(yīng)用的功能,存在過(guò)程繁瑣、成本高昂、后期運(yùn)維難度大等諸多弊端。該云同步存儲(chǔ)檢索系統(tǒng)的一體化解決方案可以實(shí)現(xiàn)快速實(shí)施、快速維護(hù)、簡(jiǎn)單易用、便于維護(hù)、存儲(chǔ)容量快速擴(kuò)展、數(shù)據(jù)內(nèi)容分析等諸多優(yōu)勢(shì)。企業(yè)網(wǎng)盤的完整需求,是在多設(shè)備和云計(jì)算的時(shí)代,幫助企業(yè)員工更好地獲取,更好地更新和消費(fèi)數(shù)據(jù)??傮w技術(shù)構(gòu)架系統(tǒng)采用基于云存儲(chǔ)的平臺(tái)設(shè)計(jì)模式,打造的同步存儲(chǔ)檢索云。企業(yè)網(wǎng)盤系統(tǒng)包括:【文件同步管理系統(tǒng)】、【文件存儲(chǔ)服務(wù)系統(tǒng)】、【文件分析系統(tǒng)】。文件存儲(chǔ)服務(wù)系統(tǒng)是指通過(guò)集群應(yīng)用、網(wǎng)格技術(shù)或分布式文件系統(tǒng)等功能,將網(wǎng)絡(luò)中大量各種不同類型的存儲(chǔ)設(shè)備通過(guò)應(yīng)用軟件集合起來(lái)協(xié)同工作,共同對(duì)外提供數(shù)據(jù)存儲(chǔ)
52、和業(yè)務(wù)訪問(wèn)功能的一個(gè)系統(tǒng)。文件同步管理系統(tǒng)是指以云存儲(chǔ)系統(tǒng)為基礎(chǔ),通過(guò)多種智能設(shè)備終端收集數(shù)據(jù),將數(shù)據(jù)同步到統(tǒng)一存儲(chǔ)云上。文件分析系統(tǒng)是指在已有數(shù)據(jù)的基礎(chǔ)上,通過(guò)全文索引,按照權(quán)限劃分等方式對(duì)存儲(chǔ)系統(tǒng)中的各種類型數(shù)據(jù)進(jìn)行全文檢索,同時(shí)對(duì)視頻等相關(guān)文件進(jìn)行格式轉(zhuǎn)換,供員工進(jìn)行在線瀏覽。 文件同步管理系統(tǒng)應(yīng)用示意圖文件存儲(chǔ)服務(wù)系統(tǒng)采用cStor云存儲(chǔ)系統(tǒng),為文件管理服務(wù)端提供底層數(shù)據(jù)存儲(chǔ)及管理服務(wù)??梢宰鳛闃?biāo)準(zhǔn)的存儲(chǔ)系統(tǒng)為網(wǎng)盤應(yīng)用系統(tǒng)提供標(biāo)準(zhǔn)的數(shù)據(jù)存儲(chǔ)。存儲(chǔ)系統(tǒng)應(yīng)用示意圖系統(tǒng)設(shè)計(jì)原則1. 高可用性原則:7x24小時(shí)不間斷可用性; 2. 高性能原則:具有較高實(shí)用性,有效實(shí)現(xiàn)萬(wàn)級(jí)別用戶服務(wù);3. 高性
53、價(jià)比原則; 4. 據(jù)用戶及業(yè)務(wù)規(guī)模作出最合理的配置方案;5. 高可管理性原則;6. 統(tǒng)一前端、分布中端、統(tǒng)一后端存儲(chǔ)架構(gòu) 7. 先進(jìn)性/可擴(kuò)展性原則;8. 采用先進(jìn)架構(gòu)及技術(shù),可升級(jí)、易擴(kuò)容,可持續(xù);系統(tǒng)優(yōu)勢(shì)企業(yè)網(wǎng)盤系統(tǒng)旨在方便企業(yè)員工對(duì)自己文件的備份,保存。在使用企業(yè)網(wǎng)盤中可讓企業(yè)員工體會(huì)到如下優(yōu)勢(shì):便于攜帶:將常用文件存入網(wǎng)絡(luò)硬盤,在需要的時(shí)候既可以用來(lái)展示,還可以給其他人發(fā)送電子郵件等,同時(shí)也避免了攜帶太多文件的麻煩。便于保管:可以將個(gè)人電腦中的重要文件存入網(wǎng)絡(luò)硬盤,防止因?yàn)殡娔X以外造成的文件丟失。便于共享:將想要共享的文件、照片、視頻等進(jìn)行外鏈分享,方便同事等對(duì)這些珍貴文件進(jìn)行查看。利
54、于文件珍藏:由于個(gè)人電腦硬盤空間有限,可以將喜歡的文件存入網(wǎng)盤即可。節(jié)省時(shí)間:將自己常用的軟件及電腦驅(qū)動(dòng)軟件存入網(wǎng)盤,即節(jié)約本地硬盤空間,也省去了尋找相關(guān)軟件的麻煩。保護(hù)隱私:可將自己電腦中的隱私文件存入私人網(wǎng)盤,并設(shè)置訪問(wèn)密碼和訪問(wèn)權(quán)限,從而有效地保護(hù)私人秘密。操作直觀方便簡(jiǎn)單:根據(jù)所使用的網(wǎng)絡(luò)硬盤直接在網(wǎng)上注冊(cè)使用。安全可靠。使用備份技術(shù)對(duì)數(shù)據(jù)備份,即使一塊數(shù)據(jù)損壞還存在多個(gè)備份。文件同步管理系統(tǒng)系統(tǒng)概述企業(yè)網(wǎng)盤系統(tǒng)是針對(duì)用戶文件管理混亂且易丟失的情況,且不斷增長(zhǎng)的情況下,造成用戶文檔管理低效而開發(fā)的云存儲(chǔ)云盤軟件,提供多終端無(wú)縫訪問(wèn),不改變用戶使用習(xí)慣的前提下,為企業(yè)員工提供高效文檔管理
55、利器。企業(yè)網(wǎng)盤系統(tǒng)還提供的目錄共享、文件歷史版本恢復(fù)、文件外鏈、目錄操作歷史等特色功能,讓用戶更方便協(xié)作、為文檔編輯提供補(bǔ)償機(jī)制、提供API文檔與外部接口,同時(shí)提供豐富的插件來(lái)滿足不同用戶的個(gè)性化需求。同時(shí)提供用戶自主注冊(cè)功能描述基于云存儲(chǔ)平臺(tái)的多終端數(shù)據(jù)同步服務(wù),為為企業(yè)員工提供個(gè)性化的數(shù)據(jù)管理方式。系統(tǒng)提供了一套完整的數(shù)據(jù)應(yīng)用、管理、監(jiān)控的解決方案。同時(shí),同步管理系統(tǒng)作為數(shù)據(jù)應(yīng)用系統(tǒng),為為企業(yè)員工提供個(gè)人數(shù)據(jù)存儲(chǔ)、分享服務(wù),保護(hù)數(shù)據(jù)安全等基礎(chǔ)服務(wù)。此外,靈活的空間管理、集中的賬戶配置、實(shí)時(shí)的日志審計(jì)方便系統(tǒng)管理者實(shí)現(xiàn)全方位的管理和監(jiān)控。系統(tǒng)整體部署圖滿足員工安全訪問(wèn)特性,通過(guò)防火墻的控制,
56、可以達(dá)到安全訪問(wèn)的要求,同時(shí)對(duì)用戶數(shù)據(jù)集進(jìn)行模塊化分析,防止用戶數(shù)據(jù)被盜用。主要功能點(diǎn)收集數(shù)據(jù)集中存儲(chǔ)為為企業(yè)員工提供安全可靠的數(shù)據(jù)集中存儲(chǔ)環(huán)境。避免數(shù)據(jù)不必要丟失。隨時(shí)隨地訪問(wèn)數(shù)據(jù)。提供基于PC、web、Android、iPhone/iPad等終端設(shè)備的數(shù)據(jù)同步客戶端。多種格式數(shù)據(jù)收集通訊錄:備份通訊錄聯(lián)系人,快速整理通訊錄。短信:手機(jī)端增量備份短信,網(wǎng)頁(yè)實(shí)時(shí)查看搜索。視頻:本地視頻同步上傳,在線視頻同步播放。圖片:手機(jī)端wifi智能圖片同步。文件:各種格式文件快速同步。筆記備份同步:手機(jī)端添加記事筆記,實(shí)時(shí)同步。統(tǒng)一管理提供子賬號(hào)功能,并可對(duì)子賬戶進(jìn)行權(quán)限分配。元/流分離設(shè)計(jì)模式,支持秒傳
57、機(jī)制,版本歷史,事件列表等。安全可靠基于OAuth協(xié)議,保證數(shù)據(jù)傳輸安全??梢灾С志W(wǎng)絡(luò)銀行SSL加密技術(shù),文件加密存儲(chǔ)和傳輸。 同步管理系統(tǒng)通過(guò)模塊化機(jī)制擴(kuò)展出了非常豐富的功能模塊。同步管理系統(tǒng)Web操作Android/iPhonePc端支持IE/Chrome等文件上傳、下載文件修改、刪除重命名、移動(dòng)文件歷史版本操作歷史文件排序文件標(biāo)簽縮略圖國(guó)際化打包下載Office在線瀏覽文本在線編輯文件上傳、下載文件修改、刪除重命名、移動(dòng)文件手動(dòng)排序文件秒傳文件分享備注縮略圖國(guó)際化自動(dòng)更新離線模式權(quán)限機(jī)制自動(dòng)同步文件上傳、下載文件修改、刪除文件重命名文件秒傳斷點(diǎn)續(xù)傳沖突機(jī)制選擇性同步代理設(shè)置虛擬盤符國(guó)際化
58、監(jiān)控目錄權(quán)限響應(yīng)在線瀏覽等很多通過(guò)模塊化的實(shí)用功能同步系統(tǒng)與存儲(chǔ)系統(tǒng)結(jié)合從兩個(gè)方面降低IT成本:大幅減低存儲(chǔ)資源:在同等備份情況下,采用同步系統(tǒng)存儲(chǔ)方式,可以節(jié)省存儲(chǔ)資源70%以上,系統(tǒng)采用去重、差分編碼、壓縮等機(jī)制,相比傳統(tǒng)文件的備份與存儲(chǔ),可大量節(jié)省服務(wù)端空間的占用,大幅減少存儲(chǔ)資源的使用:去重:用戶文件同步到服務(wù)端時(shí),會(huì)自動(dòng)進(jìn)行識(shí)別與過(guò)濾,如果服務(wù)器上已經(jīng)存在相同哈希值的文件,平臺(tái)會(huì)瞬間將文件上傳完成,體驗(yàn)“零秒上傳”,同時(shí)也重復(fù)占用服務(wù)器存儲(chǔ)空間差分編碼:系統(tǒng)采用輕量級(jí)差分編碼技術(shù),如果用戶修改文件后生成新版本與歷史版本有差異時(shí),通過(guò)差分編碼技術(shù),只是同步差異部分的數(shù)據(jù)塊即可,可減少對(duì)
59、存儲(chǔ)資源的占用。壓縮:傳統(tǒng)文件備份時(shí),一般不進(jìn)行壓縮,該存儲(chǔ)在云端的文件,都是經(jīng)過(guò)高倍壓縮的,能更好的節(jié)省云端空間。主要特點(diǎn)元/流分開設(shè)計(jì)模式,支持秒傳,去重復(fù)文件的描述信息和文件內(nèi)容本身分開存儲(chǔ),將描述信息存儲(chǔ)到數(shù)據(jù)庫(kù),文件內(nèi)容存到任cStor云存儲(chǔ)系統(tǒng)。如果服務(wù)器存在相同內(nèi)容的文件,則使用服務(wù)器上已經(jīng)存儲(chǔ)的副本,省去再次上傳的消耗。提供標(biāo)準(zhǔn)REST風(fēng)格 API企業(yè)網(wǎng)盤系統(tǒng)開放了rest風(fēng)格的API,以便開發(fā)者使用。企業(yè)網(wǎng)盤系統(tǒng)使用的客戶端/移動(dòng)端均是基于API進(jìn)行開發(fā)的?;贠Auth2.0的用戶驗(yàn)證機(jī)制Oauth是安全的,用戶登錄完成之后,客戶端/移動(dòng)端將都不在保存用戶的帳號(hào)信息(用戶名
60、和密碼),為之后的API服務(wù)提供了簡(jiǎn)單的、標(biāo)準(zhǔn)的訪問(wèn)方式。插件機(jī)制企業(yè)網(wǎng)盤系統(tǒng)提供插件機(jī)制,即可以動(dòng)態(tài)的添加或者刪除一些功能。到目前為止,我們提供了40多個(gè)功能各異的插件,另外,企業(yè)開發(fā)如有相關(guān)需求也可以開發(fā)一些插件以滿足個(gè)性化需求??梢浦残云髽I(yè)網(wǎng)盤系統(tǒng)支持跨平臺(tái),可以在Windows、Linux、MAC OS等平臺(tái)上運(yùn)行,用戶可以根據(jù)自己的需求選擇不同的服務(wù)器平臺(tái)。方便與現(xiàn)有系統(tǒng)集成提供AD(LDAP)域驗(yàn)證以及CAS驗(yàn)證方式, 可和現(xiàn)有系統(tǒng)方便集成。文件分析系統(tǒng)系統(tǒng)概述隨著信息化的普及,員工可收集文檔途徑增多,同時(shí)對(duì)員工有益的內(nèi)容也越來(lái)越多,員工收集到信息存儲(chǔ)后,怎么讓員工方便快捷的查找文
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025年度建筑工程專用磚采購(gòu)協(xié)議書3篇
- 二零二五年度智能穿戴設(shè)備承債式股權(quán)收購(gòu)協(xié)議3篇
- 二零二五年度儲(chǔ)能設(shè)備箱涵項(xiàng)目施工交通疏導(dǎo)勞務(wù)分包協(xié)議3篇
- 2025年度交通運(yùn)輸行業(yè)工傷賠償協(xié)議書3篇
- 二零二五年茶樓茶葉休閑旅游產(chǎn)品開發(fā)合同范本3篇
- 2025年高端住宅電梯購(gòu)置與保養(yǎng)服務(wù)合同4篇
- 二零二五年度個(gè)性化打印產(chǎn)品定制合同3篇
- 2025版子公司增資擴(kuò)股協(xié)議范本:金融科技領(lǐng)域股權(quán)重組方案3篇
- 二零二五版影視制作公司演員勞動(dòng)合同范本3篇
- 二零二五版精裝修公寓房購(gòu)買及家居配置合同3篇
- 2025年上半年江蘇連云港灌云縣招聘“鄉(xiāng)村振興專干”16人易考易錯(cuò)模擬試題(共500題)試卷后附參考答案
- DB3301T 0382-2022 公共資源交易開評(píng)標(biāo)數(shù)字見(jiàn)證服務(wù)規(guī)范
- 人教版2024-2025學(xué)年八年級(jí)上學(xué)期數(shù)學(xué)期末壓軸題練習(xí)
- 江蘇省無(wú)錫市2023-2024學(xué)年八年級(jí)上學(xué)期期末數(shù)學(xué)試題(原卷版)
- 俄語(yǔ)版:中國(guó)文化概論之中國(guó)的傳統(tǒng)節(jié)日
- 2022年湖南省公務(wù)員錄用考試《申論》真題(縣鄉(xiāng)卷)及答案解析
- 婦科一病一品護(hù)理匯報(bào)
- 2024年全國(guó)統(tǒng)一高考數(shù)學(xué)試卷(新高考Ⅱ)含答案
- 移動(dòng)商務(wù)內(nèi)容運(yùn)營(yíng)(吳洪貴)任務(wù)四 引起受眾傳播內(nèi)容要素的掌控
- 繪本《汪汪的生日派對(duì)》
- 助產(chǎn)護(hù)理畢業(yè)論文
評(píng)論
0/150
提交評(píng)論