大數(shù)據(jù)實(shí)驗(yàn)室規(guī)格配置

大數(shù)據(jù)實(shí)驗(yàn)室規(guī)格配置本次給出一期項(xiàng)目所需軟硬件平臺(tái)配置，可同時(shí)滿足150個(gè)學(xué)生進(jìn)行大數(shù)據(jù)實(shí)驗(yàn)，按150個(gè)用戶的云桌面；教學(xué)云盤按照2000人，每人5GB容量存儲(chǔ)計(jì)算，預(yù)計(jì)需要10TB的可用容量。采用分布式云存儲(chǔ)模式，系統(tǒng)裸容量達(dá)到24TB，做1:1冗余，實(shí)際可用容量達(dá)到12TB。以下為初步配置，具體配置需要根據(jù)學(xué)校實(shí)際需求進(jìn)行調(diào)整。產(chǎn)品名稱產(chǎn)品模塊產(chǎn)品型號(hào)產(chǎn)品描述數(shù)量單位大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)管理節(jié)點(diǎn)cServerC1208管理底層后臺(tái)的資源分配，管理各個(gè)處理節(jié)點(diǎn)的容器生命周期，協(xié)調(diào)各個(gè)處理節(jié)點(diǎn)的容器分配，提供對(duì)外統(tǒng)一訪問查詢接口，存儲(chǔ)處理節(jié)點(diǎn)容器基本元數(shù)據(jù)，存儲(chǔ)處理節(jié)點(diǎn)所需容器鏡像，提供容器高可用功能。雙路IntelE512核處理器，128GB內(nèi)存，150G固態(tài)硬盤，480G固態(tài)硬盤*2，4TSATA7200RPM企業(yè)盤*2，1+1冗余電源。3臺(tái)處理節(jié)點(diǎn)cServerC1208提供節(jié)點(diǎn)容器接口，提供容器運(yùn)行環(huán)境并監(jiān)控容器運(yùn)行生命周期，回報(bào)容器生存情況并參與資源協(xié)調(diào)工作，提供容器內(nèi)服務(wù)的端口映射。雙路IntelE512核處理器，128GB內(nèi)存，150G固態(tài)硬盤，480G固態(tài)硬盤*2，4TSATA7200RPM企業(yè)盤*2，1+1冗余電源。15臺(tái)大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)管理平臺(tái)BDRackV1.01.可管理系統(tǒng)內(nèi)的一體化實(shí)驗(yàn)平臺(tái)的資源控制和各個(gè)角色對(duì)后臺(tái)的訪問。可提供用戶開啟集群，銷毀集群等操作，可實(shí)時(shí)監(jiān)控集群使用量并進(jìn)行調(diào)整。對(duì)于科研：系統(tǒng)可以對(duì)服務(wù)器資源進(jìn)行調(diào)度，調(diào)整系統(tǒng)資源重新分配以支撐對(duì)科研工作的需求?？商峁?0個(gè)學(xué)生同時(shí)進(jìn)行大數(shù)據(jù)實(shí)驗(yàn)，提供30個(gè)學(xué)生的同時(shí)實(shí)驗(yàn)許可，為每個(gè)學(xué)生分配包含5個(gè)虛擬機(jī)的集群，共150個(gè)虛擬機(jī)。2.實(shí)驗(yàn)平臺(tái)采用B/S架構(gòu)，支持谷歌，火狐、360極速瀏覽器。3.軟件管理平臺(tái)作為大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)的支撐平臺(tái)，需具備用戶管理功能(包括管理員、老師、學(xué)生三級(jí)角色管理)，并且老師角色由管理員注冊(cè)，老師角色具備注冊(cè)學(xué)生用戶的權(quán)限。4.管理和控制整個(gè)系統(tǒng)的各種設(shè)備和資源。5.允許在使用量上的部分超額，平臺(tái)通知后臺(tái)自動(dòng)進(jìn)行調(diào)度，對(duì)資源優(yōu)化管理。6.實(shí)時(shí)展示系統(tǒng)內(nèi)集群使用情況，人數(shù)上限和當(dāng)前使用量。7.提供用戶對(duì)自身容器集群生命周期的管理，可以自行的開啟和關(guān)閉容器。8.支持管理員和老師遠(yuǎn)程關(guān)閉所管理學(xué)生的容器資源，學(xué)生也可以自行關(guān)閉申請(qǐng)資源。9.系統(tǒng)支持初始按照硬件參數(shù)指定用戶同時(shí)分配集群的并發(fā)上限。實(shí)時(shí)展示系統(tǒng)內(nèi)集群使用情況，人數(shù)上限和當(dāng)前使用量。系統(tǒng)支持在并發(fā)上限的基礎(chǔ)上按照硬件資源實(shí)際使用情況允許一定程度的超額使用。10.系統(tǒng)支持初始按照硬件參數(shù)指定用戶同時(shí)分配集群的并發(fā)上限。實(shí)時(shí)展示系統(tǒng)內(nèi)集群使用情況，人數(shù)上限和當(dāng)前使用量。系統(tǒng)支持在并發(fā)上限的基礎(chǔ)上按照硬件資源實(shí)際使用情況允許一定程度的超額使用。11.實(shí)驗(yàn)平臺(tái)支持對(duì)外提供集群內(nèi)容器資源的申請(qǐng)和訪問入口以及相關(guān)集群端口資源的訪問。12.可提供容器ssh登陸端口密碼，通過OpenVPN訪問容器資源。13.提供系統(tǒng)所需其他客戶端軟件的下載，如xshell，chrome瀏覽器等。14.每個(gè)用戶可以隔離安全的使用獨(dú)立的大數(shù)據(jù)集群，每個(gè)用戶的操作互不影響，系統(tǒng)按照服務(wù)器性能指定可以同時(shí)運(yùn)行的集群個(gè)數(shù)。15.用戶既可以手動(dòng)安裝自行編排集群方案，也支持使用一鍵部署功能，快速構(gòu)筑Hadoop、Spark、Storm、Hive、Hbase等集群，跳過手工部署階段。16.管理平臺(tái)需具備SDN（SoftwareDefinedNetwork）功能。平臺(tái)內(nèi)部需使用虛擬網(wǎng)絡(luò)，將網(wǎng)絡(luò)設(shè)備控制面與數(shù)據(jù)面分離，實(shí)現(xiàn)網(wǎng)絡(luò)流量的靈活控制。1套大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)容器調(diào)度系統(tǒng)cSchedulev1.01.實(shí)時(shí)監(jiān)視服務(wù)器資源并進(jìn)行調(diào)度2.提供容器資源訪問接口，如容器資源的開啟，關(guān)閉，狀態(tài)查詢等。3.將容器指定端口(如ssh服務(wù)端口)映射到特定服務(wù)器的端口提供容器對(duì)外登陸功能4.后臺(tái)實(shí)時(shí)監(jiān)控容器的生命周期。5.系統(tǒng)可提供各處理節(jié)點(diǎn)硬件資源的實(shí)時(shí)調(diào)控，自動(dòng)將故障節(jié)點(diǎn)移出集群，計(jì)算節(jié)點(diǎn)故障不會(huì)影響容器正常使用。6.提供基于http協(xié)議的restfulAPI接口，可以供第三方工具調(diào)用顯示監(jiān)控?cái)?shù)據(jù)。7.調(diào)度系統(tǒng)支持十萬級(jí)別并發(fā)處理。8.支持負(fù)載均衡處理負(fù)載較重的API接口，使得API請(qǐng)求處理控制在毫秒級(jí)別。9.支持秒級(jí)創(chuàng)建資源：即從用戶在頁面點(diǎn)擊“創(chuàng)建”按鈕，到容器資源成功創(chuàng)建完成所花費(fèi)時(shí)間不能超過5秒鐘。1套大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)鏡像倉庫cRegistryv1.01.提供容器所需鏡像倉庫的存儲(chǔ)，調(diào)度，查詢等操作2.提供教學(xué)所需的鏡像資源。包括hadoop組件，hbase組件，spark，storm等大數(shù)據(jù)組件。3.支持1T以上的鏡像資源存儲(chǔ)。4.鏡像倉庫可靠性不低于99.9%。5.內(nèi)部數(shù)據(jù)網(wǎng)絡(luò)支持千兆帶寬，上傳下載速度不低于100MB/s。6.支持AUFS(全稱AdvancedMultilayeredUnificationFileSystem，即高級(jí)聯(lián)合文件系統(tǒng))。AUFS是一種分層、輕量級(jí)并且高性能的文件系統(tǒng)，它支持對(duì)文件系統(tǒng)的修改作為一次提交來一層層的疊加，同時(shí)可以將不同目錄掛載到同一個(gè)虛擬文件系統(tǒng)下。容器通過共享基礎(chǔ)的文件系統(tǒng)層，同時(shí)再加上自己獨(dú)有的改動(dòng)層，提高了存儲(chǔ)的效率。1套大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)資源監(jiān)控系統(tǒng)—實(shí)時(shí)監(jiān)控整個(gè)平臺(tái)內(nèi)集群資源使用相關(guān)數(shù)據(jù)：1.已創(chuàng)建的集群總數(shù)量，方便用戶掌控資源使用情況，合理安排學(xué)生同時(shí)學(xué)習(xí)時(shí)間。2.已創(chuàng)建集群的類型：Spark/Hadoop/Storm/Hive等，隨時(shí)掌握每個(gè)實(shí)驗(yàn)的學(xué)生學(xué)習(xí)情況。3.已創(chuàng)建集群各類型的數(shù)量：方便教師管理統(tǒng)計(jì)某個(gè)具體課程（Hadoop/Storm/Hive等）的學(xué)生的學(xué)習(xí)進(jìn)度。4.已創(chuàng)建集群的使用者：方便教師統(tǒng)計(jì)學(xué)習(xí)人數(shù)和單個(gè)學(xué)生的學(xué)習(xí)進(jìn)度。5.同一類型使用者創(chuàng)建的集群數(shù)量：方便教師管理統(tǒng)計(jì)整體學(xué)生的學(xué)習(xí)進(jìn)度。6.集群使用者的詳細(xì)信息：統(tǒng)計(jì)具體學(xué)生使用情況，方便教師針對(duì)性教學(xué)。7.剩余可創(chuàng)建集群數(shù)量：幫助教師掌控是否資源足夠，方便管理者決策是否需要升級(jí)更高版本或者增加物理資源。大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)軟件倉庫—提供實(shí)驗(yàn)過程中需要學(xué)習(xí)和使用的多種軟件，如：1.可擴(kuò)展開發(fā)平臺(tái)：通過安裝我們提供的訂制化插件，可支持大數(shù)據(jù)應(yīng)用開發(fā)。2.Hadoop插件：針對(duì)Hadoop訂制化開發(fā)插件，幫助用戶快速開發(fā)Hadoop程序。3.Storm插件：針對(duì)Storm訂制化開發(fā)插件，幫助用戶快速開發(fā)Storm程序。4.HBase插件：針對(duì)HBase訂制化開發(fā)插件，幫助用戶快速開發(fā)HBase程序。5.Hive插件：針對(duì)Hive訂制化開發(fā)插件，幫助用戶快速開發(fā)Hive程序。大數(shù)據(jù)實(shí)驗(yàn)學(xué)生許可—最大可同時(shí)支持150個(gè)學(xué)生進(jìn)行大數(shù)據(jù)實(shí)驗(yàn)150個(gè)華為交換機(jī)S5700-28C-SIS5700-28C-SI24個(gè)10/100/1000Base-T以太網(wǎng)端口，4個(gè)復(fù)用的千兆ComboSFP，上行支持4×1000Base-XSFP、2×10GESFP+、4×10GESFP+插卡可插拔雙電源，支持交流或者直流供電包轉(zhuǎn)發(fā)率：102Mpps交換容量：256Gbps含堆疊卡、擴(kuò)展卡（2端口萬兆SFP+光接口板）、2個(gè)多模光模塊、2對(duì)10M多模光纖2臺(tái)機(jī)柜+PDUK3604219’國(guó)際標(biāo)準(zhǔn)、42U、600*1000，含PDU1臺(tái)大數(shù)據(jù)資源包c(diǎn)Resources1.01.提供180本大數(shù)據(jù)實(shí)驗(yàn)教材2.提供實(shí)驗(yàn)教材相配套的PPT3.提供綜合85個(gè)大數(shù)據(jù)實(shí)驗(yàn)的實(shí)驗(yàn)手冊(cè)及配套85個(gè)基礎(chǔ)實(shí)驗(yàn)的高清視頻課程3.1涵蓋原理驗(yàn)證、綜合應(yīng)用、自主設(shè)計(jì)及創(chuàng)新的多層次實(shí)驗(yàn)內(nèi)容3.2每個(gè)實(shí)驗(yàn)呈現(xiàn)詳細(xì)的實(shí)驗(yàn)?zāi)康?、?shí)驗(yàn)內(nèi)容、實(shí)驗(yàn)原理和實(shí)驗(yàn)流程指導(dǎo)3.3配套相應(yīng)的實(shí)驗(yàn)數(shù)據(jù)和高清視頻課程，參照手冊(cè)即可輕松完成每個(gè)實(shí)驗(yàn)4.提供大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)實(shí)驗(yàn)手冊(cè)配套視頻，每個(gè)實(shí)驗(yàn)配套一個(gè)相應(yīng)的學(xué)習(xí)視頻5.提供大數(shù)據(jù)實(shí)驗(yàn)所需要的海量數(shù)據(jù)，包括交通數(shù)據(jù)、氣象數(shù)據(jù)、環(huán)境數(shù)據(jù)、災(zāi)害數(shù)據(jù)、地理數(shù)據(jù)"1套大數(shù)據(jù)服務(wù)包c(diǎn)Services1.01.提供現(xiàn)場(chǎng)安裝實(shí)施2.提供3年7x24小時(shí)電話、網(wǎng)站和郵件支持，技術(shù)服務(wù)人員現(xiàn)場(chǎng)支持3.提供7天技術(shù)培訓(xùn)服務(wù)4.每年集中提供多次大數(shù)據(jù)師資培訓(xùn)"5天桌面虛擬化云桌面服務(wù)器cServerC12082*E5-2650v3，12*16GBMemory，2*240GBSSD；2個(gè)千兆口，8Gb/sFC*1(含光模塊),2U,含導(dǎo)軌。4臺(tái)集中共享存儲(chǔ)rStor-7024D2U24盤位高性能的冗余雙控制器+2U/24盤位擴(kuò)展柜*2；支持6GbSAS/SATAII企業(yè)級(jí)硬盤；支持RAID0、1、3、5、6、10、30、50、60、NRAID級(jí)別；4*8GB緩存；4個(gè)8Gb光纖主機(jī)接口；4個(gè)1GbISCSI主機(jī)接口；企業(yè)級(jí)900GB*48。1臺(tái)云終端雙核x86架構(gòu)；2GBMemory,16GBSSD,2LANports(4x10BaseT/100BaseTX/1000BaseT),USB*4,VGA*1,HDMI*1150臺(tái)交換機(jī)（接入）S6700-48-EI48個(gè)10/100/1000Base-T以太網(wǎng)端口，包轉(zhuǎn)發(fā)率：102Mpps交換容量：256Gbp2臺(tái)交換機(jī)（核心）S5700-28C-SI24個(gè)10/100/1000Base-T以太網(wǎng)端口，支持交流或者直流供電包轉(zhuǎn)發(fā)率，102Mpps交換容量：256Gbps含堆疊卡。2臺(tái)云桌面軟件150用戶license150套顯示器顯示器150臺(tái)鍵鼠套裝鍵盤鼠標(biāo)等配套設(shè)備150套機(jī)柜K3604219’國(guó)際標(biāo)準(zhǔn)、42U、600*1000，含PDU1臺(tái)教學(xué)云盤云存儲(chǔ)控制服務(wù)器cServer1208提供云存儲(chǔ)系統(tǒng)元數(shù)據(jù)的管理和維護(hù)，對(duì)外提供統(tǒng)一命名空間；同時(shí)提供對(duì)存儲(chǔ)資源分配、負(fù)載均衡調(diào)度，以及用戶認(rèn)證、存儲(chǔ)集群監(jiān)控管理等。支持?jǐn)?shù)據(jù)快照、精簡(jiǎn)配置、用戶配額管理等功能。采用雙路IntelE58核處理器，64GB緩存，2*1Gb數(shù)據(jù)接口，2*480GBSSD，熱拔插（1+1）冗余電源,1*機(jī)架角軌套件1套云存儲(chǔ)節(jié)點(diǎn)服務(wù)器cServer1212提供用戶數(shù)據(jù)的存儲(chǔ)和管理，支持?jǐn)?shù)據(jù)塊跨節(jié)點(diǎn)間的容錯(cuò)和恢復(fù)，對(duì)外響應(yīng)用戶的讀寫訪問請(qǐng)求，存儲(chǔ)系統(tǒng)的性能隨節(jié)點(diǎn)數(shù)量增加線性增長(zhǎng)。采用雙路IntelE56核處理器，16GB緩存，2*1Gb數(shù)據(jù)接口，2*150GSSD系統(tǒng)盤，12*3.5''SATA/SAS熱拔插盤位，熱拔插（1+1）冗余電源，1*機(jī)架角軌套件。1套分布式存儲(chǔ)軟件cStorV2.0采用分布式云存儲(chǔ)架構(gòu)，支持存儲(chǔ)系統(tǒng)在線PB級(jí)Scale-out擴(kuò)展，其性能隨存儲(chǔ)節(jié)點(diǎn)數(shù)量增加線性擴(kuò)展，支持任意1個(gè)磁盤或節(jié)點(diǎn)失效而不影響系統(tǒng)的使用以及數(shù)據(jù)的完整性。1套每TB容量管理許可—每TB容量管理許可24TB網(wǎng)盤基礎(chǔ)平臺(tái)軟件V2.0xx網(wǎng)盤，私有云的安全，公有云的便利，為用戶構(gòu)建私有云平臺(tái)，為用戶提供了安全、穩(wěn)定、高效、性價(jià)比高的數(shù)據(jù)管理服務(wù)。1套網(wǎng)盤用戶licensecPanV2.0用戶數(shù)許可。20