項目A標段科學與工程計算中心一期工程超算設備招標要求

1、項目A標段科學與工程計算中心一期工程超算設備招標要求一、總體要求1. 集群平臺包括計算節(jié)點、管理節(jié)點、登錄節(jié)點、IO節(jié)點、計算網絡、管理網絡、機柜和KVM系統(tǒng)（含顯示器、鍵盤和鼠標,可通過KVM-over-IP方式對所有計算結點進行遠程管理）、各種線纜，操作系統(tǒng)、集群管理軟件、并行環(huán)境、開發(fā)工具、函數庫、作業(yè)調度軟件，所有的軟硬件必須完全匹配。2. 操作系統(tǒng)64位 Enterprise Linux 最新版。3. 計算網絡采用56 Gb IB交換機連接，實現(xiàn)所有節(jié)點間雙向全線速的互聯(lián)。4. 管理和監(jiān)控網絡采用千兆以太網，保證所有節(jié)點間通信全線速互聯(lián)。5. 培訓與技術支持提供使用本套集群系統(tǒng)所必須

2、的各種軟硬件技術培訓。6. 售后服務提供5年免費人工、部件，7×24小時響應，4小時帶備件上門原廠服務；并標明免費服務期滿后每年續(xù)保的服務費用。7. 技術指標給出HPC集群系統(tǒng)理論計算能力和集群系統(tǒng)總的電源功耗。二、設備清單序號機型配置描述數量單位HPC集群系統(tǒng)硬件1服務器機箱詳見“具體技術指標要求”按需配置套2計算節(jié)點一詳見“具體技術指標要求”90臺3計算節(jié)點二詳見“具體技術指標要求”2臺4計算節(jié)點三詳見“具體技術指標要求”8臺5管理節(jié)點詳見“具體技術指標要求”1臺6I/O節(jié)點詳見“具體技術指標要求”1臺7存儲I/O節(jié)點詳見“具體技術指標要求”1臺8IB核心交換機詳見“具體技術指標

3、要求”按需配置套9以太網交換機詳見“具體技術指標要求”按需配置臺10存儲系統(tǒng)詳見“具體技術指標要求”1套HPC集群系統(tǒng)軟件（1套）11操作系統(tǒng)企業(yè)級Linux操作系統(tǒng)x64按需配置套編譯器基于64操作系統(tǒng)并兼容32位系統(tǒng)的Intel 并行Fortran、C、C+編譯器；GNU系列開發(fā)工具，含GNU Fortran、C、C+、Python等編譯系統(tǒng)按需配置套并行開發(fā)環(huán)境安裝Intel MPI、OpenMP、PVM等并行編程環(huán)境與調試開發(fā)工具按需配置套數學庫Intel 并行BLAS、 LAPACK；Intel集群CMKL（含BLAS、SCALAPACK）等；Goto數學庫按需配置套集群管理軟件商用

4、集群管理軟件1套作業(yè)調度軟件商用軟件套件1套(含 Web門戶，作業(yè)調度標準功能，集群管理，配額管理和監(jiān)控功能，報表功能等) HPC實施服務12HPC技術服務原廠商支持及安裝服務1套其他13輔助設備詳見“具體技術指標要求”2臺簡易備份設備詳見“具體技術指標要求”2塊三、具體技術指標要求1. 計算節(jié)點100個1.1 計算節(jié)點一，90臺套* 刀片架構，非Twins架構；* 刀片機箱數量按需配置；* 2×Intel Xeon E5-2680 v2 10核處理器(2.8GHz)；* 64GB DDR3 1600 MHz ECC REG內存；* 1×56Gb Infiniband接口；

5、* 熱插拔SAS硬盤1塊，單塊容量250G；SAS RAID控制器，高速緩存512MB，支持RAID 0/1/1E/5/6/10/50/60和熱備盤；2×1000M以太網接口；* 滿配熱插拔電源模塊和散熱模塊；配置相應的網絡交換模塊；管理監(jiān)控功能：支持IPMI或類似功能；1.2 計算節(jié)點二，2臺套機架式架構，小于等于2U；* 2×Intel Xeon E5-2680v2 10核處理器(2.8GHz)；* 64GB DDR3 1600 MHz ECC REG內存；* 2×Intel Xeon Phi Coprocessor 5110p；* 1×56Gb I

6、nfiniband 接口；* 熱插拔SAS硬盤2塊，單塊容量250G；SAS RAID控制器，高速緩存512MB，支持RAID 0/1/1E/5/6/10/50/60和熱備盤；冗余熱插拔電源；冗余冷卻風扇；2×1000M以太網卡；1.3計算節(jié)點三，8臺套機架式架構； * 4×Intel Xeon E5-4620 8核處理器 (2.2GHz)； * 128GB DDR3 1600MHz ECC REG內存；  * 1*56Gb Infiniband卡；* 熱插拔SAS硬盤1塊，單塊容量250G；SAS RAID控制器，高速緩存512MB，支持RA

7、ID 0/1/1E/5/6/10/50/60和熱備盤；2×千兆以太網網卡；冗余熱插拔電源；冗余冷卻風扇；2. 登錄管理節(jié)點2個2.1 管理節(jié)點,1臺套2U機架式；* 2×Intel Xeon E5-2680v2 10核處理器(2.8GHz)；* 64GB DDR3 1600 MHz ECC REG內存；* 熱插拔SAS硬盤2塊，單塊容量250G；SAS RAID控制器，高速緩存512MB，帶電池保護，支持RAID 0/1/1E/5/6/10/50/60和熱備盤；* 1×56Gb Infiniband卡；4×1000M以太網接口；冗余熱插拔電源；冗余冷卻風

8、扇；DVD-ROM驅動器；管理監(jiān)控功能：獨立遠程管理端口，支持帶外遠程開關機；遠程安裝操作系統(tǒng)，支持IPMI或類似功能。2.2 I/O節(jié)點，1臺套2U機架式；* 2×Intel Xeon E5-2680v2 10核處理器(2.8GHz)；* 64GB DDR3 1600 MHz ECC REG內存；* 熱插拔SAS硬盤6塊，單塊容量600G；* 1×56Gb Infiniband卡；4×1000M以太網接口；DVD-ROM驅動器；冗余熱插拔電源；冗余冷卻風扇；管理監(jiān)控功能：獨立遠程管理端口，支持帶外遠程開關機遠程安裝操作系統(tǒng)，支持IPMI或類似功能。3. 存儲I/

9、O節(jié)點系統(tǒng)，1臺套* Raid：支持RAID0、1、3、5、6、10等，支持全局熱備盤；* 熱插拔SAS 15Krpm硬盤；* 硬盤總容量：不低于20TB；* 光纖、萬兆網或Infiniband接口；專業(yè)存儲系統(tǒng)，不接受類服務器產品；與服務器同一品牌，不接受OEM產品；冗余熱插拔電源；冗余冷卻風扇；4. 網絡系統(tǒng)4.1 IB計算網絡，1套* Mellanox 36口FDR Infininiband交換機；* 單端口無阻塞傳輸速率：56 Gb；交換機數量按需配置；通訊連接介質：銅纜，IB交換機原廠線纜。4.2 管理網絡，1套 規(guī)格：1U機架式千兆以太網交換機，數量按需配置。4.3監(jiān)控網絡，1套要

10、求可以切換顯示管理登錄節(jié)點、計算節(jié)點等所有節(jié)點。規(guī)格：1U機架式千兆以太網交換機，數量按需配置。4.4 局域網絡，1臺規(guī)格：1U機架式24個10/100/1000BASE-T (RJ45)交換機。5. 軟件系統(tǒng)5.1 操作系統(tǒng)64位 Enterprise Linux 最新版。5.2 編譯器基于64操作系統(tǒng)并兼容32位系統(tǒng)的Intel 并行Fortran、C、C+編譯器GNU系列開發(fā)工具，含GNU Fortran、C、C+、Python等編譯系統(tǒng)。5.3 并行開發(fā)環(huán)境投標商必須提供下述并行軟件開發(fā)環(huán)境，并負責安裝與調試，費用包含在投標總價中： 提供Intel并行開發(fā)環(huán)境，包括Intel C/C+

11、，Intel Fortran，Intel MKL，Intel MPI； 提供調試工具、性能分析與優(yōu)化工具； 并行調試工具能夠支持64進程或更大規(guī)模的并行程序調試； 編譯器支持多核處理器內的自動并行化與優(yōu)化功能； 支持MPI 1.2/2.0、PVM 并行環(huán)境，支持OpenMP，支持MPI與OpenMP的混合編程； 提供相應數學庫、診斷工具庫和圖形軟件庫等，如BLAS、LAPACK、ScaLAPACK、FFT等；5.4 數學庫Intel 并行BLAS、 LAPACKIntel集群CMKL（含BLAS、SCALAPACK）等Goto數學庫5.5 集群管理軟件集群管理和作業(yè)調度軟件基本要求：1）國內、

12、國際知名品牌須提供商業(yè)作業(yè)調度系統(tǒng)軟件的原廠投標授權函，提供與高性能計算系統(tǒng)硬件數量相匹配的作業(yè)調度系統(tǒng)的license；實現(xiàn)高性能計算系統(tǒng)全部軟/硬件資源統(tǒng)一管理。2）軟件基本功能：成熟的商業(yè)軟件平臺與管理模式,調度策略,支持多種調度算法,支持基于網絡拓撲結構的智能調度,強大的作業(yè)與集群管理,支持在瀏覽器上實現(xiàn)基于X Window的應用程序圖形交互,支持顯示資源使用狀況,管理員可以定制應用程序模板,支持文件系統(tǒng)自動監(jiān)視,支持許可證異常處理,支持實時告警管理，可根據需要定制告警的方式和發(fā)送策略,提供Web自服務門戶平臺,支持用戶應用程序集成和工作負載提交,提供安全的應用程序訪問,提供設置管理權

13、限功能,為用戶提供共享的分布式計算環(huán)境中運行和管理關鍵業(yè)務工作流的工具,具備強大的可視化能力。5.6 集群管理及作業(yè)提交要求總體要求：集群原廠商需協(xié)助甲方建立規(guī)范的集群管理制度及作業(yè)提交流程，協(xié)助甲方建立“書面申請、審批開戶、定期審閱”的集群管理制度，賬號的申請、權限的變更、空間的擴容、賬號的禁用等都需要經過申請和審批。管理員要求：集群原廠商協(xié)助甲方管理員根據用戶申請信息及審批意見，對用戶賬號及權限進行相應的變更操作；協(xié)助甲方管理員定期審閱用戶是否妥善保管自己的賬號和密碼，是否將賬號借給他人或從事課題以外的活動。優(yōu)先級劃分：根據用戶及其研究內容設定用戶作業(yè)及其使用計算資源的優(yōu)先級。6. 輔助及

14、簡易備份設備HPC計算系統(tǒng)監(jiān)視運行機器（一體機），2臺套 屏幕尺寸：24英寸 CPU型號：Intel 奔騰雙核G645 內存容量：4GB DDR3硬盤容量：1TB光驅類型：DVD刻錄機 Rambo千兆網卡移動硬盤：2TB （備份系統(tǒng)及工具軟件等），2個四、系統(tǒng)計算能力和總的電源功耗1.系統(tǒng)理論計算峰值浮點運算能力；2.供電系統(tǒng)要求和HPC系統(tǒng)總功耗。五、高性能計算設備驗收標準1.通過用戶的VASP應用程序；2.單用戶程序運行，系統(tǒng)計算加速比不低于512個核心。項目B標段科學與工程計算中心一期工程智能一體化機房招標要求一、總體要求要求投標人提供一套易管理、易維護、便于擴展、高效節(jié)能的機柜級制冷、

15、配電、布線及監(jiān)控系統(tǒng)一體化機房解決方案，與高性能計算IT設備配套集成一站式服務。適應高性能計算應用對機房基礎設施的節(jié)能性、擴展性、智能性及建設周期的新要求。IT設備總功耗小于等于60KW，設備裝機空間大于等于150U。根據IT設備功耗及裝機空間需求，配置機柜、機柜行級空調、行級配電及監(jiān)控系統(tǒng)，確保設備散熱良好、氣流組織有序、系統(tǒng)高效節(jié)能、易于控制管理。所有強電、弱電電纜采用頂部橋架進線，以適應簡易機房環(huán)境。二、具體技術指標要求1. 機柜系統(tǒng)機房共配置不低于8臺標準機柜位，其中不低于4臺作為設備機柜、2個空調柜、1臺作為列頭機柜和1個除塵除濕柜。全封閉式機柜，采用機柜排內部冷熱通道隔離的方式，配

16、合空調實現(xiàn)高密度制冷；雙側走線單元，方便高度密度線纜有序管理；標配頂部一體化電源/數據線槽，更方便于走線；表面采用靜電粉末噴涂處理，效果美觀；強度高、重量輕、結構堅固；占地面積不超過寬600mm×深1365mm；單機柜有效空間：42U；前后立柱最大間距：650mm（適合于標準服務器導軌、托軌）；機柜開門方式為紅外感應，帶超溫自動開門功能，機柜電磁鎖等?？傒d承重不低于1000kg（靜載）。機柜系統(tǒng)應配備專用液晶顯示器、鍵盤、鼠標、KVM套件，連接所有服務器、計算節(jié)點和監(jiān)控設備。2 溫控系統(tǒng)要求采用行間空調為集群設備制冷，行間空調與機柜左右并柜安裝，機柜排內部冷熱通道隔離，空調為水平送風

17、方式。2.1 行間空調室內機外形尺寸與機柜系統(tǒng)完全匹配；室內機框架尺寸與機柜系統(tǒng)完全匹配；單臺顯冷量不低于30KW；數量不低于2臺，總制冷量不低于60KW。單臺室內機最大風量不低于6000m3/h；單臺室內機電源消耗不高于2.5KW；溫度控制精度：±2.5；單機室外機電源消耗不高于18KW；每臺室外機內壓縮機應為冗余設計，且其中1臺為數碼渦旋壓機或變頻壓機，保證冷量輸出穩(wěn)定。2.2 除塵除濕一體機 1臺外形尺寸與機柜系統(tǒng)完全配套；除濕量不低于5Kg/h；控制精度：±5%RH；過濾效率：99.99%，亞高效過濾；單臺最大運行功耗不高于2.5KW；3. UPS系統(tǒng)采用模塊化UP

18、S，不低于100KVA；UPS僅給設備供電，空調系統(tǒng)接入市電。UPS電池在所有設備滿負載情況下延遲30分鐘。UPS模塊數量不低于4個，且支持熱插拔。4. 配電系統(tǒng)機柜排配置列頭配電柜，便于分區(qū)控制管理。列頭配電柜柜體要求和機柜風格統(tǒng)一，要求設置電量監(jiān)測儀，可監(jiān)控三相電流、電壓、功率因數、有功功率、無功功率等參數；具備RS485接口，無償提供通訊協(xié)議。嵌入式、一體化PDU設計，要求為服務器原廠同一品牌。每臺機柜設置2路32A 380V獨立電源，采用防水插座（工業(yè)連接器）+PDU方式與設備連接，不能采用地板下普通插座、地插或機柜接線端子排等簡單的連接方式。PDU輸入采用三相五線制供電，輸出接口為單相三線制，A、B、C三相均分的供電方式，方便通過三進單出PDU后在機柜中進行三相負荷平衡分配。5. 監(jiān)控管理系統(tǒng)機柜內配置監(jiān)控傳感器，系統(tǒng)配置數據采集器統(tǒng)一采集實現(xiàn)監(jiān)控管理，數據采集器能夠上傳信號至上層的集群設備管理軟件，在同一監(jiān)控平臺下實現(xiàn)遠程監(jiān)控管理。機柜具有超溫報警和自動開門安全保護功能，提高系統(tǒng)整體安全系數。監(jiān)控采集上