集群式對(duì)象存儲(chǔ)

集群式對(duì)象存儲(chǔ)傳統(tǒng)存儲(chǔ)應(yīng)用程序只看到Posix接口(Open,Read,Write…)，且通過(guò)Posix接口訪問(wèn)文件文件系統(tǒng)有兩個(gè)工作：負(fù)責(zé)文件在硬盤(pán)上的存儲(chǔ)，并負(fù)責(zé)向上層的應(yīng)用程序提供文件訪問(wèn)服務(wù)硬盤(pán)內(nèi)容=

元數(shù)據(jù)(目錄)+數(shù)據(jù)(文件內(nèi)容)

對(duì)象存儲(chǔ)應(yīng)用程序只看到Posix接口(Open,Read,Write…)，且通過(guò)Posix接口訪問(wèn)文件文件系統(tǒng)(客戶(hù)端)負(fù)責(zé)向上層應(yīng)用程序提供文件訪問(wèn)服務(wù)，文件系統(tǒng)(存儲(chǔ)管理)負(fù)責(zé)文件在硬盤(pán)上的存儲(chǔ)，即文件系統(tǒng)(客戶(hù)端)不關(guān)心文件是如何存儲(chǔ)的文件系統(tǒng)(客戶(hù)端)和文件系統(tǒng)(存儲(chǔ)管理)通過(guò)對(duì)象接口交互。很容易實(shí)現(xiàn)網(wǎng)絡(luò)化的客戶(hù)-服務(wù)器服務(wù)模式硬盤(pán)內(nèi)容=

元數(shù)據(jù)(目錄)+數(shù)據(jù)(文件內(nèi)容)集群式對(duì)象存儲(chǔ)應(yīng)用程序只看到Posix接口(Open,Read,Write…)，且通過(guò)Posix接口訪問(wèn)文件文件系統(tǒng)(客戶(hù)端)負(fù)責(zé)向上層應(yīng)用程序提供文件訪問(wèn)服務(wù)文件系統(tǒng)(存儲(chǔ)管理)=文件系統(tǒng)(元數(shù)據(jù)管理)+文件系統(tǒng)(數(shù)據(jù)管理)元數(shù)據(jù)服務(wù)器的硬盤(pán)內(nèi)容=

元數(shù)據(jù)(目錄)。元數(shù)據(jù)服務(wù)器可擴(kuò)展為多個(gè)對(duì)象存儲(chǔ)設(shè)備的硬盤(pán)內(nèi)容=數(shù)據(jù)(文件內(nèi)容)。對(duì)象存儲(chǔ)設(shè)備可擴(kuò)展為多個(gè)集群式對(duì)象存儲(chǔ)文件是如何在集群式對(duì)象存儲(chǔ)上存儲(chǔ)的？對(duì)象存儲(chǔ)設(shè)備，本質(zhì)上就是服務(wù)器10臺(tái)服務(wù)器，每一臺(tái)服務(wù)器有5個(gè)硬盤(pán)集群式對(duì)象存儲(chǔ)文件是按文件塊(約為1MB或4MB)分布在不同服務(wù)器的不同硬盤(pán)上由于任何一個(gè)服務(wù)器或硬盤(pán)存在失效的可能，所以，每一個(gè)文件有一個(gè)或多個(gè)副本注意：文件塊的存儲(chǔ)策略，還能基于不同的機(jī)架，或不同的數(shù)據(jù)中心集群式對(duì)象存儲(chǔ)文件A和文件B在集群式對(duì)象存儲(chǔ)中的分布元數(shù)據(jù)(目錄)服務(wù)器負(fù)責(zé)提供文件系統(tǒng)的目錄信息文件A和文件B的分布情況存儲(chǔ)在元數(shù)據(jù)(目錄)服務(wù)器中，且受元數(shù)據(jù)服務(wù)器的管理集群式對(duì)象存儲(chǔ)1、文件系統(tǒng)(客戶(hù)端)通過(guò)元數(shù)據(jù)服務(wù)器知道文件A在集群式對(duì)象存儲(chǔ)上的分布2、文件系統(tǒng)(客戶(hù)端)逐次訪問(wèn)不同的對(duì)象存儲(chǔ)設(shè)備，獲取文件A的內(nèi)容每一個(gè)服務(wù)器(包括硬件和軟件)的健康狀態(tài)被系統(tǒng)監(jiān)控元數(shù)據(jù)服務(wù)器負(fù)責(zé)文件在對(duì)象存儲(chǔ)設(shè)備上的存儲(chǔ)分布，以及調(diào)整(如增加、減少、遷移)集群式對(duì)象存儲(chǔ)自動(dòng)備份當(dāng)文件被寫(xiě)入時(shí)，元數(shù)據(jù)服務(wù)器會(huì)根據(jù)給定的策略，指示文件塊如何被寫(xiě)入策略包括：1)文件有幾個(gè)副本;2)副本是否存在不同的地方(如不同的數(shù)據(jù)中心、不同的機(jī)架、不同的服務(wù)器、不同的硬盤(pán))集群棋式對(duì)惡象存標(biāo)儲(chǔ)自動(dòng)缺恢復(fù)當(dāng)系免統(tǒng)發(fā)移現(xiàn)一糾個(gè)服止務(wù)器味或服墨務(wù)器運(yùn)上的布一個(gè)嚷硬盤(pán)灰失效回時(shí)，盾會(huì)指便示元這數(shù)據(jù)您服務(wù)斗器把扔該失龜效設(shè)缸備上紅的數(shù)顧據(jù)再燈次備桂份，識(shí)保證歇文件滾的可元靠性集群珠式對(duì)悠象存漫儲(chǔ)自動(dòng)滑恢復(fù)當(dāng)系畢統(tǒng)發(fā)墨現(xiàn)一牧個(gè)服塵務(wù)器飯或服見(jiàn)務(wù)器棟上的射一個(gè)愈硬盤(pán)重失效親時(shí)，游會(huì)指爺示元活數(shù)據(jù)基服務(wù)械器把餃該失虜效設(shè)呈備上惰的數(shù)小據(jù)再固次備維份，擦保證萄文件董的可俊靠性充。系統(tǒng)中自愈嚇是自看動(dòng)的倒，不井需要導(dǎo)管理簡(jiǎn)員的由參與集群哄式對(duì)絲式象存次儲(chǔ)高性慚能文件緒是按隔塊從救不同含服務(wù)隱器的秒不同污硬盤(pán)峽上訪誦問(wèn)的--匹->1)很難蹦有熱闊點(diǎn)效景應(yīng)(動(dòng)態(tài)觸調(diào)整)2)翻I/賴(lài)O帶寬污是聚碼合的自動(dòng)核的負(fù)陣載均舌衡只需潔要元瓜數(shù)據(jù)掃服務(wù)贏器按排一定合的條驚件調(diào)標(biāo)整文聞件塊慨的分芳布集群嶼式對(duì)倡象存摟儲(chǔ)把文巡壽件系想統(tǒng)的括目錄爐信息兩獨(dú)立奶出來(lái)下，由決元服臘務(wù)器告來(lái)提隱供(均連埋接到筐其上)，帶憑來(lái)以拜下好棍處：1)統(tǒng)一泉的名討字空擺間，脆有利腐于應(yīng)洽用之她間的究數(shù)據(jù)染共享2)在線馳擴(kuò)展化，有眨利于疏系統(tǒng)搬的擴(kuò)眨展3)其他爬的：斧聚合付性能線、自斧動(dòng)負(fù)系載均菠衡、桐自動(dòng)粘恢復(fù)見(jiàn)、自悉動(dòng)備奴份集群不式對(duì)肆象存尤儲(chǔ)集群域式對(duì)竄象存枝儲(chǔ)優(yōu)點(diǎn)1)海量顆存儲(chǔ):支持PB級(jí)的逼存儲(chǔ)賤空間皇，可例高效勁管理桃上百挖億個(gè)領(lǐng)文件巧對(duì)象垂，單芹目錄恥可以傲有效座支持服千萬(wàn)技級(jí)的關(guān)文件仁數(shù)量炊。2)虛擬羞化存跪儲(chǔ):統(tǒng)一租的命叼名空銜間，已所有勾應(yīng)用茅服務(wù)再器看基到一疾致視昏圖，末方便媽全局若文件甘系統(tǒng)蚊的部浩署和裙擴(kuò)展皮，同蚊時(shí)確瓜保數(shù)倉(cāng)據(jù)中您心內(nèi)炊部應(yīng)聾用系壯統(tǒng)的伯可靠吸性和岔容錯(cuò)僻能力魚(yú)。3)高性吃能:具有債高效落數(shù)據(jù)鮮讀寫(xiě)巾技術(shù)杠和文押件查材詢(xún)技糟術(shù)，翅能夠濤提供深高達(dá)繩幾十墻個(gè)GB的穩(wěn)劣定聚納合帶暴寬(并行I/亂O,直接介訪問(wèn))，每田秒數(shù)斧十萬(wàn)你個(gè)的炸文件具查詢(xún)柳效率(元服茫務(wù)器尖是集言群)。4)高可貌用:自動(dòng)蛇故障競(jìng)探測(cè)新和高采效的蝦自動(dòng)柔恢復(fù)測(cè)和容念錯(cuò)技壤術(shù)，廢保證蔥系統(tǒng)播的高變可用識(shí)特性域。結(jié)構(gòu)餡上--咐->對(duì)象貝服務(wù)戴器+元服登務(wù)器爭(zhēng)；數(shù)睬據(jù)上--洗->多副歸本。5)易擴(kuò)聯(lián)展:支持街在線悟擴(kuò)容呼功能飽，擴(kuò)竟容過(guò)宋程無(wú)艱需中圣斷上補(bǔ)層應(yīng)泡用的背正常狂運(yùn)行漁，同做時(shí)系仗統(tǒng)的僻總體IO帶寬過(guò)隨著稈規(guī)模泳的擴(kuò)闖大成藍(lán)線性小增長(zhǎng)逝。6)低成過(guò)本:標(biāo)準(zhǔn)方的服慨務(wù)器7)支持蹈異質(zhì)即結(jié)構(gòu):無(wú)縫嫩集成歪已有釘?shù)拇鏌齼?chǔ)系虜統(tǒng)8)自適足應(yīng)的喊負(fù)載征均衡耐：I/熊O性能喘和存棕儲(chǔ)分漲配FC掛S為AN叫(光纖暮通道疊式存龍儲(chǔ)區(qū)鉛域網(wǎng))SA因N1)抽SA談N，存咽儲(chǔ)區(qū)喪域網(wǎng)訴絡(luò)，謙是一醒種通婚過(guò)網(wǎng)味絡(luò)方偵式連若接存騾儲(chǔ)設(shè)嘆備和課應(yīng)用紡服務(wù)團(tuán)器的騎存儲(chǔ)按構(gòu)架憐，這其個(gè)網(wǎng)跪絡(luò)專(zhuān)姜用于霞主機(jī)鋒和存前儲(chǔ)設(shè)冶備之乎間的悲訪問(wèn)酸。當(dāng)心有數(shù)耀據(jù)的撤存取抗需求部時(shí)，狼數(shù)據(jù)美可以宏通過(guò)鋒存儲(chǔ)苗區(qū)域肯網(wǎng)絡(luò)忌在服湊務(wù)器南和后獄臺(tái)存媽儲(chǔ)設(shè)螺備之握間高挪速傳千輸2)分S傷AN是存尋儲(chǔ)網(wǎng)被絡(luò)架義構(gòu)，碑與設(shè)燥備類(lèi)槳型和畏協(xié)議醫(yī)無(wú)關(guān)影：FC絮S養(yǎng)AN和IP廟S礦AN3)耀SA林N是塊橋級(jí)的FC燃S錫ANFC協(xié)議豬先于跪以太枕網(wǎng)支剖持千文兆帶彈寬，肺所以謝先有FC姐S馬ANFC平S卡AN洽(光纖彩通道屢式存健儲(chǔ)區(qū)晨域網(wǎng))SA躺N的優(yōu)叔點(diǎn)1)設(shè)備快整合由。多填臺(tái)服羊務(wù)器暴可以愿通過(guò)開(kāi)存儲(chǔ)錘網(wǎng)絡(luò)睜同時(shí)鐘訪問(wèn)請(qǐng)后端少存儲(chǔ)抬系統(tǒng)既，不褲必為攝每臺(tái)憐服務(wù)鳥(niǎo)器單盡獨(dú)購(gòu)衰買(mǎi)存券儲(chǔ)設(shè)珍備，詞降低憶存儲(chǔ)嫩設(shè)備泳異構(gòu)拘化程濁度，珠減輕因維護(hù)士工作童量，遙降低體維護(hù)成費(fèi)用2)數(shù)據(jù)腦集中悶。不哈同應(yīng)金用和臨服務(wù)何器的家數(shù)據(jù)厭實(shí)現(xiàn)買(mǎi)了物付理上偷的集趕中，否空間段調(diào)整荷和數(shù)寄據(jù)復(fù)睬制等澇工作腔可以互在一怕臺(tái)設(shè)漁備上擊完成械，大豈大提娛高了堂存儲(chǔ)岔資源溝利用尿率3)高擴(kuò)抱展性術(shù)。存斬儲(chǔ)網(wǎng)果絡(luò)架瘡構(gòu)使憤得服竹務(wù)器胳可以襖方便塵的接臟入現(xiàn)姨有SA岔N環(huán)境按，較羽好的鄙適應(yīng)口應(yīng)用惜變化勒的需捆求總結(jié)戶(hù)：總窗體擁濫有成躁本低冷，存久儲(chǔ)設(shè)貝備的不整合菌和數(shù)堵?lián)恢泄茉＠?，雅大大緒降低持了重月復(fù)投窯資率囑和長(zhǎng)買(mǎi)期管瓦理維前護(hù)成盟本注意帥：相榆對(duì)于DA細(xì)S(直連上存儲(chǔ))而言FC萬(wàn)S鍛AN啄(光纖撤通道較式存拴儲(chǔ)區(qū)表域網(wǎng))FC級(jí)S干AN的缺辱點(diǎn)1)兼容封性差賢。FC協(xié)議答發(fā)展必時(shí)間欠短，蒸開(kāi)發(fā)坐和產(chǎn)聽(tīng)品化全的大申廠商澤較少虹，而院且廠輔商之冊(cè)間各卷自遵龜循內(nèi)川部標(biāo)擺準(zhǔn)，策導(dǎo)致緣瑞不同宣廠商釋的FC產(chǎn)品找之間那兼容許性和恥互操跑作差尼，即奮使同聰一廠布商的該不同雁版本孤不同住型號(hào)遵的FC產(chǎn)品靜也存你在類(lèi)匪似的繁問(wèn)題2)成本膠高昂計(jì)。FC的S迫AN的成刃本包豬括先圈期設(shè)忽備成筋本和制長(zhǎng)期按維護(hù)挪成本擱，由齊于FC協(xié)議然在成儉熟度哲和互很聯(lián)性陰上無(wú)防法與劫以太旱網(wǎng)相連比，塌導(dǎo)致FC協(xié)議濱只能舅局限表于存冤儲(chǔ)系虜統(tǒng)應(yīng)妹用，拿無(wú)法愉實(shí)現(xiàn)偉大規(guī)禁模推范廣，蝕這直飲接導(dǎo)挺致了FC產(chǎn)品捏價(jià)格書(shū)的昂釋貴；訪同樣雷與FC斬-S繩AN相關(guān)頑的所璃有產(chǎn)纖品（FC硬盤(pán)贏、備錄份軟范件）慰都身團(tuán)價(jià)高帥昂；由另外狐兼容碼性差吩也導(dǎo)紅致了鋼用戶(hù)遣無(wú)法憐自己赴維護(hù)FC設(shè)備痛，必稅須購(gòu)鴉買(mǎi)昂誰(shuí)貴的禮廠商大服務(wù)宿。以5年計(jì)貨算，隨整個(gè)原服務(wù)選費(fèi)用壁支出票與系叼統(tǒng)采戒購(gòu)達(dá)提到1:弟13)擴(kuò)展氏能力橫差。FC滑-S碗AN高昂驅(qū)的成出本和指協(xié)議撫封閉牛，使關(guān)得產(chǎn)壞品的夠開(kāi)發(fā)注、升震級(jí)、逼擴(kuò)容麥代價(jià)頃高昂4)異構(gòu)映化嚴(yán)墾重。拜各廠獵商按兆照自嘗有標(biāo)救準(zhǔn)開(kāi)梯發(fā)各性種功鈴能，銹如快待照、硬復(fù)制殺、鏡昨像等臘，導(dǎo)犬致不六同廠孫商存班儲(chǔ)設(shè)吳備之家間功朗能無(wú)丈法互日通，叮結(jié)果爪又出礦現(xiàn)的DA昌S方式凱的各沉種問(wèn)閃題，暈重復(fù)書(shū)投資百、難詳以管芹理的縮慧局面IP裂S贏AN燈(基于IP的存征儲(chǔ)區(qū)揮域網(wǎng))特點(diǎn)將數(shù)敏據(jù)塊圾和SC貞SI指令機(jī)通過(guò)TC倍P/旅IP協(xié)議榮承載(i愛(ài)SC持SI抓)，通厘過(guò)千摟兆/萬(wàn)兆雄專(zhuān)用灑的以聰太網(wǎng)跨絡(luò)連帥接應(yīng)麥用服針務(wù)器卸和存狡儲(chǔ)設(shè)侍備IP缺S扁AN歉(基于IP的存枯儲(chǔ)區(qū)燃域網(wǎng))IP浴S坦AN優(yōu)點(diǎn)1)實(shí)現(xiàn)借彈性神擴(kuò)展巖的存阿儲(chǔ)網(wǎng)勾絡(luò)，顯能自摔適應(yīng)跪應(yīng)用口的改嗚變。2)已經(jīng)哪驗(yàn)證焦的傳浸輸設(shè)猾備保辨證運(yùn)福行的恩可靠怕性3)以太您網(wǎng)從1G向10饞G及更穗高速騙過(guò)渡車(chē)，只容需通袋過(guò)簡(jiǎn)賽單的劣升級(jí)墓便可婚得到寺極大昂的性鬧能提肢升，預(yù)并保描護(hù)投群資4)裁IP跨長(zhǎng)油距離貌擴(kuò)展塞能力界，輕兼松實(shí)甚現(xiàn)遠(yuǎn)韻程數(shù)始據(jù)復(fù)標(biāo)制和閑災(zāi)難省恢復(fù)5)大量索熟悉堂的網(wǎng)殲絡(luò)技略術(shù)和暑管理屆的人謹(jǐn)才減陶少培頭訓(xùn)和真人力李成本IP足S卡AN缺點(diǎn)1)存儲(chǔ)師設(shè)備馬是專(zhuān)井用的蜓，必句須符楊合iS渴CS么I標(biāo)準(zhǔn)--鏟->成本愚不可涌控2)械SA銳N是塊塌級(jí)，握所以階，受邊本地垃文件雷系統(tǒng)狡的限巧制，黎不適果合海箱量文剩件管富理。3)走SA弊N的高附效，鋸不意插味著沾文件搬系統(tǒng)箏的高張效--疊->應(yīng)用挪獲得箱的性認(rèn)能問(wèn)偷題4)數(shù)據(jù)孫難以熊共享簡(jiǎn)，服腳務(wù)器碎和SA廊N存儲(chǔ)況是一舊一綁笨定的何，不旬同服屋務(wù)器尖之間丸的數(shù)尺據(jù)共交享很做困難5)兼容阻性問(wèn)固題，閑不同SA莊N廠家凱的產(chǎn)儲(chǔ)品的拼集成錢(qián)問(wèn)題NA央S(網(wǎng)絡(luò)擴(kuò)附加煤存儲(chǔ))特點(diǎn)NA障S(網(wǎng)絡(luò)油附加襪存儲(chǔ))，是午一種銹文件緊共享塊服務(wù)記。擁崗有自階己的取文件做系統(tǒng)氣，通患過(guò)NF滔S或CI悅FS，充飛當(dāng)遠(yuǎn)透程文抱件服滿(mǎn)務(wù)器勝，對(duì)牲外提紛供文防件訪眾問(wèn)服間務(wù)。NA注S優(yōu)點(diǎn)1)佳NA日S可以晃即插嬌即用吹。2)蛾NA爬S通過(guò)TC尤P/植IP網(wǎng)絡(luò)必連接雹到應(yīng)鞋用服掃務(wù)器消，因供此可淡以基滲于已巴有的驗(yàn)企業(yè)陣網(wǎng)絡(luò)岔方便旬連接估。3)專(zhuān)用搖的操類(lèi)作系紫統(tǒng)支蓬持不畝同的絨文件虜系統(tǒng)即，提番供不務(wù)同操促作系踐統(tǒng)(應(yīng)用)間的樸文件揀共享岔。NA餅S與集送群式蒜對(duì)象西存儲(chǔ)邁的不草同不同鄭：在肉對(duì)象請(qǐng)存儲(chǔ)微中元烏數(shù)據(jù)隔和文享件數(shù)位據(jù)是紛獨(dú)立鼓的，峰且文本件是干按文返件塊殘存儲(chǔ)雅在不波同的聾服務(wù)側(cè)器上皂的NA墨S(網(wǎng)絡(luò)月附加深存儲(chǔ))NA進(jìn)S缺點(diǎn)1)集中校式存永儲(chǔ):適用鄰于某遣些IO性能賄要求女不高復(fù)，并峽且應(yīng)棗用服淺務(wù)器園數(shù)量坑較少哥的場(chǎng)妄景2)性能種瓶頸:文件枕不是甩分塊副存儲(chǔ)俯的，摩所以削，NA欲S的性親能受戶(hù)限于NA退S服務(wù)把器和IO總線掉的能韻力，剖只能己提供涂數(shù)量旨有限主的客撇戶(hù)端途并發(fā)釣讀寫(xiě)朱，一串旦并氣發(fā)的惑請(qǐng)求柔較多臣塞滿(mǎn)礙了IO總線遷，NA邀S就成療為了祖系統(tǒng)違的瓶堂頸。3)難以呀無(wú)縫旨擴(kuò)展:N很AS的容蜘量和丹性能塊都難必以進(jìn)王行無(wú)能縫擴(kuò)斬展。薄如果步要添葬加容秩量或黨者提眼高性蜂能，獵唯一馬的辦齡法就棵是另龜外購(gòu)反買(mǎi)多軋?zhí)转?dú)損立的NA局S存儲(chǔ)狐系統(tǒng)炎和相艱應(yīng)的訊服務(wù)鍵器，護(hù)然后致將數(shù)迎據(jù)分稅別存待入到聞不同職的NA沙S存儲(chǔ)社系統(tǒng)現(xiàn)中。4)存在蜓單點(diǎn)特故障:單臺(tái)NA叼S所提摩供的晶數(shù)據(jù)匆共享每服務(wù)淋存在溉單點(diǎn)墓故障羅，一蝕旦NA搭S出現(xiàn)巷軟硬幸件故菌障將蕉導(dǎo)致給存儲(chǔ)漢服務(wù)增中斷扮，前恰端的驚業(yè)務(wù)臟也就牲隨著派中斷對(duì)象泥存儲(chǔ)限和NA機(jī)S、SA土N的比煉較文件姻系統(tǒng)偶的元見(jiàn)數(shù)據(jù)攜是否譜分離膀出來(lái)蝴，獨(dú)伐立于挺文件糞數(shù)據(jù)懲？NA晴S：文繡件是宴否以群分塊熔的