版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
1、數(shù)據(jù)中心建設(shè)考量要素及案例分析科技創(chuàng)新,變革未來19數(shù)據(jù)中心定義及分類1數(shù)據(jù)中心建設(shè)考量要素2典型案例3數(shù)據(jù)中心趨勢及展望4目錄4定義數(shù)據(jù)中心、互聯(lián)網(wǎng)數(shù)據(jù)中心和云計(jì)算數(shù)據(jù)中心數(shù)據(jù)中心(Data Center,簡稱DC),即一個(gè)組織或單位用以集中放置計(jì)算機(jī)系統(tǒng)和諸如通信和存儲(chǔ)這樣的相關(guān)設(shè)備的基 礎(chǔ)設(shè)施;也可能是以外包方式讓許多其他公司存放它們的設(shè)備或數(shù)據(jù)的地方。互聯(lián)網(wǎng)數(shù)據(jù)中心(Internet Data Center, 簡稱IDC)是指一種擁有完善的設(shè)備(包括高速互聯(lián)網(wǎng)接入帶寬、高性能局域網(wǎng)絡(luò)、安全可靠的機(jī)房環(huán)境等)、專業(yè)化的 管理、完善的應(yīng)用的服務(wù)平臺(tái),與數(shù)據(jù)中心的區(qū)別在于有網(wǎng)絡(luò)的接入,且對外
2、提供服務(wù)。云計(jì)算數(shù)據(jù)中心是指可適應(yīng)云計(jì) 算的數(shù)據(jù)中心,通過軟件定義數(shù)據(jù)中心,并對外提供彈性服務(wù)。因?yàn)楠M義的IDC產(chǎn)業(yè)只出租到機(jī)柜層級,而服務(wù)器和存儲(chǔ) 由客戶自己提供,因此云計(jì)算數(shù)據(jù)中心和傳統(tǒng)互聯(lián)網(wǎng)數(shù)據(jù)中心的差異主要體現(xiàn)在網(wǎng)絡(luò)設(shè)備和網(wǎng)絡(luò)架構(gòu)上,以滿足云計(jì)算數(shù) 據(jù)中心內(nèi)部流量(東西向流量)大于外部流量(南北向流量)的特點(diǎn)。云計(jì)算數(shù)據(jù)中心具有以下特點(diǎn):一般與大規(guī)模數(shù) 據(jù)中心相伴,因此細(xì)節(jié)的優(yōu)化意義重大。將軟硬件資源全部抽象為服務(wù),靈活、彈性、可擴(kuò)展。加速了基礎(chǔ)設(shè)施的技 術(shù)演進(jìn)。數(shù)據(jù)中心、互聯(lián)網(wǎng)數(shù)據(jù)中心 和云計(jì)算數(shù)據(jù)中心關(guān)系數(shù)據(jù)中心互聯(lián)網(wǎng)數(shù)據(jù)中心云計(jì)算數(shù)據(jù)中心2016-2021年傳統(tǒng)數(shù)據(jù)中心和 云數(shù)據(jù)
3、中心工作負(fù)載實(shí)例數(shù)199.4262.4331.0393.3459.2533.742.141.440.839.136.232.9201620172018云數(shù)據(jù)中心實(shí)例數(shù)(百萬)來源:Cisco。201920202021e傳統(tǒng)數(shù)據(jù)中心實(shí)例數(shù)(百萬)分類4C級B級A級T1T2T3T4可用性(%)99.671%99.749%99.981%99.995%年宕機(jī)時(shí)間(小時(shí)/年)28.822.01.60.4冗余主干路徑?jīng)]有,N沒有,N+1有,N+1有,2(N+1)冗余接入運(yùn)營商否否是是供電電源兩回線路供電兩個(gè)電源供電兩個(gè)電源供電兩個(gè)電源供電變壓器冗余NM(1+1)M(1+1)M(1+1)UPS冗余及時(shí)間N,
4、 15minN+1, 30minN+1, 30min2N, 30min發(fā)電機(jī)規(guī)格滿足計(jì)算機(jī)和電信滿足計(jì)算機(jī)和電信滿足計(jì)算機(jī)和電信+1備用全建筑負(fù)荷+1備用發(fā)電機(jī)冗余及儲(chǔ)油量N, 8hN, 24hN+1, 72hN+1, 96h機(jī)房專用空調(diào)冗余NN+1N+X2N建設(shè)周期(月)33-615-2015-20按規(guī)模分和按級別分?jǐn)?shù)據(jù)中心規(guī)模,按標(biāo)準(zhǔn)機(jī)架數(shù)量,可分中小型(n3000)、大型(3000n10000)和超大型(n10000)。數(shù)據(jù)中 心可用性,可按GB50147-2017數(shù)據(jù)中心設(shè)計(jì)規(guī)范分為A級、B級和C級,業(yè)內(nèi)也常按TIA-942標(biāo)準(zhǔn)分為T1、T2、T3和 T4。也有數(shù)據(jù)中心服務(wù)商的宣傳材料
5、中,宣稱級別為“n星級”或者“Tn+”,均為非標(biāo)準(zhǔn)說法。數(shù)據(jù)中心級別劃分?jǐn)?shù)據(jù)中心業(yè)務(wù)模式零售型批發(fā)型目標(biāo)客戶中小型客戶,類型多元大型客戶,當(dāng)前主要為互聯(lián)網(wǎng)(含云計(jì)算)廠商,電信運(yùn)營商客戶集中度低高租期通常為1年通常為5年及以上用戶流動(dòng)性較高極低銷售單位單機(jī)柜起租單模塊起租單機(jī)柜價(jià)格較高較低平均單機(jī)柜電力和制冷密度低(2-3.5KW)高(4.5-8KW)數(shù)據(jù)中心啟用到滿租時(shí)間一般2-4年1年上架率取決于地段和運(yùn)營能力取決于大客戶能效不確定一般較高區(qū)位綜合考慮,一般選擇一線城市核心區(qū)域, 近年向一線城市周邊及二線城市延伸成本優(yōu)先,一般選擇一線城市周 邊或偏遠(yuǎn)地區(qū)定制性較低較高來源:參考數(shù)據(jù)港招股說
6、明書,及IDC運(yùn)營企業(yè)訪談資料。5定制/代建/整體售賣以模塊為單位批發(fā)以機(jī)柜為單位零售以單元為單位零售批發(fā)和零售數(shù)據(jù)中心的業(yè)務(wù)模式包括批發(fā)型和零售型兩種。批發(fā)型主要針對大客戶,一般以模塊為最小出租單位。針對超大型客戶的 訂制型數(shù)據(jù)中心可以看作是批發(fā)型的延伸,近幾年發(fā)展較為迅速。零售型主要針對小客戶,一般以機(jī)柜為最小出租單位, 早期也有服務(wù)商以機(jī)柜單元(U)為出租單位服務(wù)微型客戶,但目前這種微型客戶多以web自助服務(wù)的形式,轉(zhuǎn)向公有云。 一般來說,批發(fā)型考驗(yàn)的是資源整合能力、快速建設(shè)和擴(kuò)張能力,而零售型考驗(yàn)的是精細(xì)運(yùn)維及運(yùn)營能力。從國內(nèi)外廠商 來看,批發(fā)和零售均可取得成功。目前國內(nèi),受新基建政策
7、等影響,批發(fā)型更受快進(jìn)快出的資本市場青睞。但從長期看, 零售型更具有成長的韌性。機(jī)柜租售的不同形式2020年中國批發(fā)型和零售型數(shù)據(jù)中心對比數(shù)據(jù)中心業(yè)務(wù)屬性場地層設(shè)施層IT硬件樓宇市電消防變電制冷機(jī)柜服務(wù)器操作系統(tǒng)虛擬軟件云平臺(tái)IT屬 性地 產(chǎn) 屬 性地產(chǎn)屬性和IT屬性數(shù)據(jù)中心同時(shí)具有地產(chǎn)屬性和IT屬性,因此業(yè)內(nèi)常稱其為“IT中最像地產(chǎn)的,地產(chǎn)中最像IT的”。地產(chǎn)屬性即場地和風(fēng)火 水電,IT屬性即計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)和三者的軟件定義。兩種屬性具有統(tǒng)一和對立的特點(diǎn):一般情況下,IT屬性會(huì)受地產(chǎn)屬 性的限制,如云計(jì)算數(shù)據(jù)中心和大規(guī)模數(shù)據(jù)中心相結(jié)合更具有意義。另一方面,IT屬性也會(huì)反作用于地產(chǎn)屬性,如采用
8、高 性能芯片的整體機(jī)柜,在未來有可能使得數(shù)據(jù)中心面積的需求大幅降低。數(shù)據(jù)中心的四層架構(gòu)和兩種屬性IT軟件磁盤陣列6交換機(jī)廣義IDC混合云MSP數(shù)據(jù)中心與云計(jì)算關(guān)系規(guī)模擴(kuò)大:大型或超大型數(shù)據(jù)中心成為主流選擇。 服務(wù)質(zhì)量:服務(wù)和運(yùn)維管理將會(huì)更受客戶重視。 新增需求:云計(jì)算帶來的數(shù)據(jù)量大增引發(fā)對數(shù)據(jù)中 心新增需求。效率提升:整體運(yùn)維、監(jiān)控環(huán)境更加自動(dòng)化、智能 化,提高運(yùn)營效率。故障降低:減少數(shù)據(jù)中心停機(jī)時(shí)間以及勞動(dòng)力。 沖擊有限:核心數(shù)據(jù)仍會(huì)優(yōu)先放在數(shù)據(jù)中心,非核 心數(shù)據(jù)轉(zhuǎn)移至私有云或?qū)S性啤T捳Z權(quán)降低:數(shù)據(jù)中心話語權(quán)降低,可能會(huì)帶來 毛利率的進(jìn)一步下降。市場格局變化:云廠商數(shù)據(jù)中心大多技術(shù)先進(jìn),
9、規(guī)模較大,整體實(shí)力較弱和應(yīng)變能力差的數(shù)據(jù)中 心將會(huì)面臨淘汰。專業(yè)人才緊缺:云化運(yùn)維更加復(fù)雜,高端技術(shù)研 發(fā)和運(yùn)維管理人才緊缺。需求對沖:部分企業(yè)開始將自己的數(shù)據(jù)從自建數(shù) 據(jù)中心遷移到第三方云計(jì)算服務(wù)商提供的私有云。傳統(tǒng)IDC云計(jì)算終端 客戶批發(fā)云計(jì)算IaaS是其下游客戶,但長期看仍有競爭當(dāng)前,數(shù)據(jù)中心的主要客戶為互聯(lián)網(wǎng)客戶(含云計(jì)算廠商),其次為金融、政企等。云計(jì)算的高速發(fā)展,致使數(shù)據(jù)中心的 需求量和上架率都大幅提升,機(jī)柜租金也穩(wěn)中有升。因此,短期來看,云計(jì)算對數(shù)據(jù)中心產(chǎn)業(yè)是利好要素。但從長期看, 兩者仍存在競爭:目前微型客戶(指租不滿單機(jī)柜,只租用幾個(gè)U的客戶)已經(jīng)大量從傳統(tǒng)數(shù)據(jù)中心轉(zhuǎn)向公有
10、云,未來, 隨著公有云服務(wù)質(zhì)量和服務(wù)能力的逐漸提升,以及規(guī)模優(yōu)勢的逐漸顯現(xiàn),可能會(huì)有更多、更大規(guī)模的客戶選擇公有云。當(dāng) 前,國內(nèi)由于市場形態(tài)和政策影響,企業(yè)一旦上規(guī)模(如美團(tuán)、字節(jié)跳動(dòng)和快手等),仍會(huì)租用、建設(shè)數(shù)據(jù)中心,政務(wù)、 金融等也會(huì)謹(jǐn)慎使用公有云,但在美國,存在大型企業(yè)直接完全使用公有云(如Netflix使用AWS)的先例,這有可能成為 未來中國IT的發(fā)展方向。此時(shí),公有云會(huì)擠壓傳統(tǒng)IDC的市場空間。目前,國內(nèi)已有不少IDC廠商,通過Openstack或 Kubernetes積極布局專有云、混合云和云MSP。當(dāng)然,根據(jù)電信分類目錄(2015版),IDC產(chǎn)業(yè)包括IT資源協(xié)作業(yè)務(wù),而 云計(jì)算
11、需要該類業(yè)務(wù)許可,因此廣義的IDC包括云計(jì)算。數(shù)據(jù)中心和云計(jì)算的關(guān)系利好:云計(jì)算、邊緣計(jì)算帶來新增需求不利:企業(yè)上云減少數(shù)據(jù)中心使用7生命周期及產(chǎn)業(yè)鏈數(shù)據(jù)中心運(yùn)營土建及工程土建裝修電氣空調(diào)弱電及智能布局用電量計(jì)算冷負(fù)荷計(jì)算綜合布線結(jié)構(gòu)承重配電系統(tǒng)氣流組織線纜與路徑分部裝修UPS配電系統(tǒng)空調(diào)選型監(jiān)控系統(tǒng)其他裝修空調(diào)供電系統(tǒng)新風(fēng)、排風(fēng)安全防范照明給排水顯示大屏接地與防雷數(shù)據(jù)中心規(guī)劃數(shù)據(jù)中心設(shè)計(jì)IaaS大 型 互 聯(lián) 網(wǎng) 客 戶,廠 商、電 信 運(yùn) 營 商PaaS/SaaS中 小 型 互 聯(lián) 網(wǎng) 客 戶,廠 商,政 企 客 戶數(shù)據(jù)中心建設(shè)政府/園區(qū)土地設(shè)備IT設(shè)備連接件:光纖/光模塊/銅連接網(wǎng)絡(luò)芯片
12、交換機(jī)/路由器 計(jì)算芯片服務(wù)器存儲(chǔ)芯片/介質(zhì)存儲(chǔ)設(shè)備電力公司電力電信運(yùn)營商網(wǎng)絡(luò)非IT設(shè)備供配電設(shè)備UPS/HVDC/巴拿馬電源蓄電池、變壓器、配電柜、發(fā)電機(jī)、 機(jī)柜配電單元溫控設(shè)備冷源設(shè)備、室內(nèi)空調(diào)、新風(fēng)系統(tǒng)、 液冷設(shè)備廠商工程公司軟件(DCIM、SDN/NFV、虛擬化、操作系統(tǒng))規(guī)劃、設(shè)計(jì)、建設(shè)和運(yùn)營數(shù)據(jù)中心按自身的生命周期可以分為規(guī)劃、設(shè)計(jì)、建設(shè)和運(yùn)營四個(gè)階段,在每個(gè)階段,均有不同的產(chǎn)業(yè)鏈上下游,其中, 建設(shè)階段涉及面較廣,包含用地、用電、用水、用網(wǎng)、IT設(shè)備、非IT設(shè)備、土建及其他工程、軟件系統(tǒng)等多個(gè)方面。2020年中國數(shù)據(jù)中心產(chǎn)業(yè)鏈OPEXCAPEXTCO8產(chǎn)業(yè)鏈圖譜公有云IDC運(yùn)營C
13、DN和視頻云存儲(chǔ)介質(zhì)存儲(chǔ)設(shè)備計(jì)算芯片服務(wù)器交換機(jī)UPS/HVDC/巴拿馬電源柴油發(fā)電機(jī)空調(diào)/液冷規(guī)劃/設(shè)計(jì)/建設(shè)/EPC/運(yùn)維互 聯(lián) 網(wǎng) 客 戶,政 企 客 戶,金 融 客 戶2020年中國IDC產(chǎn)業(yè)圖譜注釋:Logo順序不代表企業(yè)排名。919數(shù)據(jù)中心定義及分類1數(shù)據(jù)中心建設(shè)考量要素2典型案例3數(shù)據(jù)中心趨勢及展望4目錄需求端:宏觀長期看,整體需求旺盛;短期看,仍需定位明確數(shù)據(jù)中心是否已過剩,是諸多資本方、大型國企和地方政府關(guān)心的問題。從長期、整體來看,數(shù)據(jù)中心機(jī)房面積與數(shù)據(jù)流 量相關(guān),而數(shù)據(jù)流量又與人口數(shù)量和經(jīng)濟(jì)發(fā)展相關(guān)。對比中美人均機(jī)房面積,中國仍有相當(dāng)大的差距,因此,從整體來看, 數(shù)據(jù)中心
14、仍有較強(qiáng)的需求。但是,這并非意味著短期、局部的不過剩。在訪談及調(diào)研中,仍有大量的數(shù)據(jù)中心定位不明確, 在建設(shè)完成1年之后,上電率仍不能超過40%,從而使得投資回報(bào)率并不高。來源:全國數(shù)據(jù)中心應(yīng)用發(fā)展指引(2019)。來源:信通院。2019年中國數(shù)據(jù)中心需求驅(qū)動(dòng)力調(diào)查地區(qū)資源情況價(jià)格水平北京市、上海市 廣州市、深圳市供應(yīng)緊張總體較高北京市、上海市 廣州市、深圳市 周邊地區(qū)供應(yīng)相對充 足比北京市、上海市、廣州市、深圳 市低 20%-30%中西部地區(qū)供應(yīng)充分比北京市、上海市、廣州市、深圳市 低約50%東北地區(qū)供應(yīng)相對充足比北京市、上海市、廣州市、深圳市低約50%不同地區(qū)數(shù)據(jù)中心租用價(jià)格33.1%11
15、74.4%22.2%30.0%33.3%37.8%72.2%其他物聯(lián)網(wǎng)及云計(jì)算信息化進(jìn)程加快電子商務(wù)浪潮在線游戲流媒體應(yīng)用互聯(lián)網(wǎng)用戶增長迅速需求端:C端流量用戶量和用戶時(shí)長穩(wěn)步增長,數(shù)據(jù)量快速增長數(shù)據(jù)中心需求量與數(shù)據(jù)流量相關(guān)。當(dāng)前C端的主要數(shù)據(jù)流量來自于(娛樂性)長視頻和短視頻、游戲和電商,在疫情背景 下,協(xié)同辦公和在線教育也有較大幅度的增長。未來,超高清視頻、云游戲、云VR都將進(jìn)一步促使流量快速增長。來源:CNNIC來源:華為WirelessXlabs。內(nèi)容類型起步階段舒適體驗(yàn)階段理想體驗(yàn)階段云游戲6Mbps20Mbps40Mbps超高清視頻6Mbps30Mbps80Mbps云VR40Mbp
16、s90Mbps360Mbps不同類型視頻及游戲碼率513105640061758648756882673125771988285138.3%42.1%45.8%47.9%50.3%53.2%55.8%59.6%20112012201320142015201620172018網(wǎng)民數(shù)(萬人)互聯(lián)網(wǎng)普及率(%)122011-2018年中國網(wǎng)民規(guī)模和互聯(lián)網(wǎng)普及率需求端:B端流量37%34%46%25%19%2%9%6%1%21%2015非娛樂圖像數(shù)據(jù)娛樂數(shù)據(jù)注釋:全球數(shù)據(jù)圈是衡量給定年份全球范圍內(nèi)采集、創(chuàng)建和復(fù)制的所有新數(shù)據(jù)。 來源:IDC。生產(chǎn)力數(shù)據(jù)2025eIoT語音數(shù)據(jù)13B端數(shù)據(jù)蓄勢待發(fā),但當(dāng)
17、下仍不宜賭注5G網(wǎng)絡(luò)的峰值速率、流量密度、連接密度等顯著優(yōu)于4G,且原生標(biāo)準(zhǔn)支持網(wǎng)絡(luò)切片以便企業(yè)獨(dú)立組網(wǎng)。IPv6使得每一個(gè) 元器件都可以擁有獨(dú)立的IP地址,兩者使得工業(yè)互聯(lián)網(wǎng)和物聯(lián)網(wǎng)得以落地。未來,B端的生產(chǎn)性數(shù)據(jù),占比將會(huì)大幅提升。 但考慮數(shù)據(jù)中心的投資回報(bào)周期、折舊速度和整個(gè)生命周期等,當(dāng)下仍不宜將全部賭注押在制造等B端流量,短期內(nèi)互聯(lián) 網(wǎng)客戶仍為絕對主力。若從長期產(chǎn)業(yè)布局考慮,而不考慮短期上電率,則可積極布局。2015&2025年中國數(shù)據(jù)圈數(shù)據(jù)類型份額需求端:客戶占比及需求特征互聯(lián)網(wǎng)企業(yè)仍為主要客戶,各行業(yè)需求不同IDC數(shù)據(jù)中心主要終端客戶有互聯(lián)網(wǎng)、云廠商、金融行業(yè)、制造行業(yè)、政府機(jī)構(gòu)
18、等客戶。目前互聯(lián)網(wǎng)客戶(含云計(jì)算廠商) 仍為主要客戶群體,占60%以上份額?;ヂ?lián)網(wǎng)企業(yè)數(shù)據(jù)量多,終端用戶規(guī)模龐大,對機(jī)房規(guī)模、設(shè)備等級、選址集中、低 時(shí)延等各方面指標(biāo)要求均較高。大型金融企業(yè)一般擁有自己的數(shù)據(jù)中心,外采僅作為“兩地三中心”的備用機(jī)房;中小型 數(shù)據(jù)中心一般采用長期合作的、有豐富運(yùn)維、運(yùn)營經(jīng)驗(yàn)的IDC服務(wù)商以及T3及以上級別的機(jī)房。政府機(jī)構(gòu)、制造業(yè)數(shù)據(jù)中 心特點(diǎn)為數(shù)量多、規(guī)模小,且政務(wù)類一般有默認(rèn)的“數(shù)據(jù)不出省、不出市”規(guī)則,數(shù)據(jù)中心在當(dāng)?shù)亟ㄔO(shè)。來源:研究院根據(jù)企業(yè)訪談及公開資料自主研究及繪制。2019年中國IDC服務(wù)下游客戶結(jié)構(gòu) 60%20%3% 7%10%互聯(lián)網(wǎng)廠商金融業(yè)政府機(jī)
19、關(guān)制造業(yè)其他14不同類型客戶對IDC服務(wù)的需求特征客戶類型機(jī)房規(guī)模設(shè)備等級價(jià)格敏感度選址集中度低時(shí)延互聯(lián)網(wǎng)行業(yè)云廠商金融行業(yè)制造行業(yè)政府機(jī)構(gòu)視頻/媒體游戲行業(yè)24供給端:用電來源:研究院根據(jù)企業(yè)訪談及公開資料自主研究及繪制。年平均氣溫()PUE要求北京12.3原有1.4,新建1.3上海16.6改建1.4,新建1.3廣州22.0優(yōu)先支持1.3以下深圳22.61.4以上的數(shù)據(jù)中心不享有能源消費(fèi)的支持;低于1.25可享有能源消費(fèi)量40%以上的支持杭州16.5新建1.4,改造1.6天津12.7武漢16.6成都16.1南京15.5新建1.5西安13.7濟(jì)南14.7新建1.3,至2022年存量改造1.4青
20、島12.7新建1.3,至2022年存量改造1.4張北3.7烏蘭察布4.3大型1.4貴安15.3中衛(wèi)8.6廊坊12.0南通15.3新建1.5IT設(shè)備能耗制冷系統(tǒng)能耗各地用電量、PUE標(biāo)準(zhǔn)、電價(jià)和用電指標(biāo)均有差異數(shù)據(jù)中心2020年用電量約占全社會(huì)總用電量的2.7%,隨著數(shù)據(jù)中心投產(chǎn)規(guī)模的增加,這一占比將持續(xù)上升。數(shù)據(jù)中心能耗主要包括四部分:IT設(shè)備能耗、制冷系統(tǒng)能耗、供配電系統(tǒng)能耗、照明及其他能耗??偰芎谋菼T設(shè)備能耗,即為PUE值。即使采用相同技術(shù),數(shù)據(jù)中心在各地的能耗也不相同,年平均氣溫較低區(qū)域,用于制冷系統(tǒng)的能耗大幅降低,PUE值較低。另外,各地的PUE要求也不同,一線城市和東部地區(qū)更為嚴(yán)格
21、。除PUE外,不同地區(qū)電價(jià)也不相同。對數(shù)據(jù)中心約束性最 強(qiáng)的是用電指標(biāo),一線城市的新規(guī)劃數(shù)據(jù)中心往往難以拿到該指標(biāo),不管PUE多低、電價(jià)多高。因此,從電力單要素考慮, 向一線城市周邊區(qū)域、邊遠(yuǎn)區(qū)域發(fā)展是大勢所趨。除大型互聯(lián)網(wǎng)公司外,傳統(tǒng)IDC(尤其是零售型)向外布局仍有阻力:客戶上架、運(yùn)維都更復(fù)雜,客戶與其他數(shù)據(jù)中心聯(lián)動(dòng)復(fù)雜,政務(wù)客戶等受不出省限制,等等。傳統(tǒng)數(shù)據(jù)中心能耗構(gòu)成(PUE=2)部分城市的年平均氣溫和數(shù)據(jù)中心PUE要求照明及其他能耗供配電系統(tǒng)能耗來源:研究院根據(jù)企業(yè)訪談及公開資料自主研究及繪制。25供給端:網(wǎng)絡(luò)來源:網(wǎng)絡(luò)時(shí)延對數(shù)據(jù)中心布局的影響研究,研究院繪制。業(yè)務(wù)種類時(shí)延 要求地域
22、范圍網(wǎng)絡(luò)時(shí)延要求較高的業(yè)務(wù), 如網(wǎng)絡(luò)游戲、 付費(fèi)結(jié)算等10ms以內(nèi)骨干直聯(lián)點(diǎn)城 市或周邊200千 米范圍內(nèi)網(wǎng)絡(luò)時(shí)延要求中等的業(yè)務(wù), 如網(wǎng)頁瀏覽、 視頻播放等50ms以內(nèi)骨干直聯(lián)點(diǎn)城市或省級節(jié)點(diǎn) 周邊400千米范 圍內(nèi)網(wǎng)絡(luò)時(shí)延要求 及較低的業(yè)務(wù), 如數(shù)據(jù)備份存 儲(chǔ)、大數(shù)據(jù)運(yùn) 算處理等200ms以 內(nèi)或 更長骨干直聯(lián)點(diǎn)城 市或省級節(jié)點(diǎn) 周邊1000千米 范圍內(nèi)影響因素時(shí)延信號傳輸時(shí)延每1000千米產(chǎn)生10ms網(wǎng)絡(luò)時(shí)延同一運(yùn)營商網(wǎng)絡(luò) 內(nèi)部跳轉(zhuǎn)每次跳轉(zhuǎn)產(chǎn)生2- 3ms網(wǎng)絡(luò)時(shí)延不同運(yùn)營商骨干 網(wǎng)間跳轉(zhuǎn)時(shí)延每次跳轉(zhuǎn)產(chǎn)生10ms網(wǎng)絡(luò)時(shí)延不同運(yùn)營商城域 網(wǎng)間跳轉(zhuǎn)每次跳轉(zhuǎn)產(chǎn)生40ms網(wǎng)絡(luò)時(shí)延受物理距離和節(jié)點(diǎn)時(shí)延
23、影響從供給側(cè)看,數(shù)據(jù)的傳送時(shí)延包括傳輸時(shí)延和傳輸節(jié)點(diǎn)時(shí)延,而傳輸節(jié)點(diǎn)時(shí)延與單根據(jù)節(jié)點(diǎn)時(shí)延和節(jié)點(diǎn)數(shù)量有關(guān)。從需求 側(cè)看,根據(jù)業(yè)務(wù)敏感度,可以分為高時(shí)延敏感業(yè)務(wù)、中時(shí)延敏感業(yè)務(wù)和低時(shí)延敏感業(yè)務(wù)。對于中低時(shí)延敏感業(yè)務(wù),可以從 成本出發(fā),選擇建立在邊遠(yuǎn)地區(qū)的大規(guī)模、超大規(guī)模數(shù)據(jù)中心。而對于高時(shí)延業(yè)務(wù),則選擇位于核心城市核心地段的數(shù)據(jù) 中心,或選擇離用戶側(cè)更近的邊緣數(shù)據(jù)中心。目前,如果將業(yè)務(wù)進(jìn)行分級,則核心城市、核心地段的數(shù)據(jù)中心可以滿足金 融等業(yè)務(wù)需求,因此邊緣計(jì)算的風(fēng)口尚未真正來臨。當(dāng)前一線城市數(shù)據(jù)中心搶手,更多是從上架、運(yùn)維、資源協(xié)調(diào)性、高可靠性等多方面考慮,并非單獨(dú)從時(shí)延考慮。從長期看,隨著自動(dòng)
24、駕駛、工業(yè)互聯(lián)網(wǎng)、醫(yī)療等發(fā)展,邊緣計(jì)算有較大發(fā)展 機(jī)會(huì)。不同類型業(yè)務(wù)對應(yīng)可選數(shù)據(jù)中心的范圍不同因素對時(shí)延的影響傳送時(shí)延傳輸節(jié)點(diǎn)時(shí)延單節(jié)點(diǎn)轉(zhuǎn)發(fā)時(shí)延傳輸時(shí)延(受制于物理距離)設(shè)備類型設(shè)備 技術(shù)波分平臺(tái) FEC算法 業(yè)務(wù)類型 映射方式節(jié)點(diǎn)數(shù)量網(wǎng)絡(luò)層次網(wǎng)絡(luò)結(jié)構(gòu) 業(yè)務(wù)需求傳輸系統(tǒng)能力影響傳送時(shí)延的要素26供給端:成本來源:Bloomberg數(shù)據(jù)中心運(yùn)營成本拆分(OPEX)56.7%25.6%7.7%3.7% 3.1%3.4%電力成本折舊 房租設(shè)備租賃 人工費(fèi)其他23.0%20.0%18.0%8.0%8.0%7.0%4.0%6.0%3.0%3.0%柴油發(fā)電機(jī)組電力用戶站 UPS電源設(shè)備 配電柜冷水機(jī)組精密
25、空調(diào) 機(jī)柜列頭柜靜電地板 冷卻塔數(shù)據(jù)中心建設(shè)成本拆分(CAPEX)電力支出與折舊費(fèi)用占成本支出的最大比重?cái)?shù)據(jù)中心整體成本(TCO)分為建設(shè)支出(CAPEX)和運(yùn)營支出(OPEX)兩部分。建設(shè)支出指前期必要的建設(shè)投資及一 段期限折舊后的再投資,一般指一次性投入。運(yùn)營支出指的是每月運(yùn)行設(shè)備的實(shí)際花費(fèi),主要包括電費(fèi)支出、折舊、房租、 設(shè)備租賃,以及現(xiàn)場工作人員的工資等。對IDC服務(wù)商而言,電力成本占整體運(yùn)營支出中的一半以上。每種設(shè)備的不同選 型都會(huì)影響數(shù)據(jù)中心的成本,動(dòng)態(tài)近似評估可參考在線版的“施耐德數(shù)據(jù)中心成本計(jì)算模型”。來源:Bloomberg19數(shù)據(jù)中心定義及分類1數(shù)據(jù)中心建設(shè)考量要素2典型案
26、例3數(shù)據(jù)中心趨勢及展望4目錄世紀(jì)互聯(lián)中國領(lǐng)先的中立數(shù)據(jù)中心與混合云服務(wù)世紀(jì)互聯(lián)是中國領(lǐng)先的中立數(shù)據(jù)中心與混合云服務(wù)提供商,致力于提供業(yè)界領(lǐng)先的超大規(guī)模數(shù)據(jù)中心定制業(yè)務(wù)和新一代數(shù) 據(jù)中心零售服務(wù),打造具有核心技術(shù)、超大規(guī)模運(yùn)營能力、高附加值的網(wǎng)絡(luò)空間基礎(chǔ)設(shè)施運(yùn)營平臺(tái)。 作為中國新基建產(chǎn)業(yè) 的核心龍頭企業(yè),世紀(jì)互聯(lián)全方位構(gòu)建新基建產(chǎn)業(yè)版圖,在中國區(qū)域內(nèi)運(yùn)營以京津冀、長三角、粵港澳三大經(jīng)濟(jì)圈為核心 的的規(guī)?;瘮?shù)據(jù)中心產(chǎn)業(yè)集群,旗下在運(yùn)營數(shù)據(jù)中心超過50個(gè),服務(wù)于全球6000余家優(yōu)質(zhì)企業(yè),所涉行業(yè)不僅包含金融、 在線教育、互聯(lián)網(wǎng)、電子商務(wù)、游戲等,還包括近兩年發(fā)展勢頭迅猛的新零售、物聯(lián)網(wǎng)、云服務(wù)等。世
27、紀(jì)互聯(lián)數(shù)據(jù)中心核心優(yōu)勢6000+20+20+50+51000+1000G+2000G+優(yōu)質(zhì)客戶年運(yùn)營經(jīng)驗(yàn)城市數(shù)據(jù)中心機(jī)柜高速云專線互聯(lián)網(wǎng)帶寬19世紀(jì)互聯(lián)SD-WAN云連接骨干網(wǎng)BGP定制DC網(wǎng)絡(luò)安全設(shè)備計(jì)算存儲(chǔ)EvDC企業(yè)虛擬數(shù)據(jù)中心交付BMS裸金屬云交付EHPC企業(yè)托管專有云交付混合云解決方案阿里云云遷移7x24服務(wù)臺(tái)MSP精益運(yùn)營VMware超融合裸金屬開源架構(gòu)HIT服務(wù)基礎(chǔ)架構(gòu)服務(wù)精品機(jī)“互聯(lián)”服務(wù)數(shù)據(jù)中心SaaS服務(wù)門戶 智能運(yùn)維云災(zāi)備中國領(lǐng)先的中立數(shù)據(jù)中心與混合云服務(wù)世紀(jì)互聯(lián)擁有豐富的產(chǎn)品服務(wù)能力:通過與電信運(yùn)營商、互聯(lián)網(wǎng)內(nèi)容提供商、云服務(wù)提供商建立高速網(wǎng)絡(luò)連接,實(shí)現(xiàn)了自 有數(shù)據(jù)中心
28、之間的互聯(lián)互通;與國內(nèi)領(lǐng)先的公有云服務(wù)商合作,建立大容量、高可靠、彈性擴(kuò)展的云交換網(wǎng)絡(luò),提供自主 可控、按需定制的企業(yè)級混合IT解決方案,滿足企業(yè)核心業(yè)務(wù)應(yīng)用和靈活便捷IT擴(kuò)展的雙重需求,幫助企業(yè)提高交付效率、 降低運(yùn)維成本;應(yīng)對復(fù)雜業(yè)務(wù)場景、實(shí)現(xiàn)智能化運(yùn)營管理和分析,全面助力企業(yè)輕松上云;為滿足客戶對于云計(jì)算服務(wù)的 需求,推出包括EvDC、EHPC、混合IT服務(wù)、多云管理平臺(tái)、DevOps等多項(xiàng)云服務(wù),并基于這些云服務(wù)構(gòu)建了面向各行 業(yè)的解決方案;裸金屬服務(wù)器為企業(yè)用戶提供性能高效、安全獨(dú)享的云端物理服務(wù)器,綜合傳統(tǒng)托管主機(jī)的穩(wěn)定性與云上 資源高度彈性,滿足核心應(yīng)用場景對高性能及穩(wěn)定性的需求
29、,可與虛擬私有云等其他云服務(wù)靈活的結(jié)合使用。世紀(jì)互聯(lián)產(chǎn)品服務(wù)體系20數(shù)訊信息客戶需求 高度穩(wěn)定性及時(shí)響應(yīng)性24 * 7 實(shí)時(shí)性產(chǎn)品服務(wù) 數(shù)訊優(yōu)勢 高標(biāo)準(zhǔn)T i e r 4 標(biāo)準(zhǔn)建造, 全冗余設(shè)計(jì), 滿足 高端用戶對數(shù)據(jù)中心要求國家信息安全等級保護(hù)三級認(rèn)證高穩(wěn)定性不同局向市電接入全冗余的電力架構(gòu)采用國際知名品牌電力S L A 9 9 . 9 9 5 %高保障樓宇監(jiān)控系統(tǒng)V E S D A + 煙烙 燼消防偵測 優(yōu)越地理位置位于浦東新區(qū), 臨近陸家嘴, 可實(shí)現(xiàn)對金融行業(yè)客戶 的快速響應(yīng) 實(shí)時(shí)支持高度專業(yè)和標(biāo)準(zhǔn)化的運(yùn)維管理團(tuán)隊(duì),提供 7 * 2 4 小時(shí)的實(shí)時(shí)服務(wù)I D X 數(shù)據(jù)中心I D X S
30、H 2 I D X S H 3 I D X S H 4 I D X B J 2云服務(wù)C I Y E E c l o u d C I Y E X c l o u d C I Y EC o n n e c t增值服務(wù)B G P 及其他網(wǎng)絡(luò)服務(wù) 微云服務(wù)管理B C P 及坐席租賃服務(wù) 客戶服務(wù) S e r v i c e D e s kC S M專注零售型IDC,為金融等行業(yè)客戶提供高質(zhì)量服務(wù)數(shù)訊作為中國領(lǐng)先的數(shù)據(jù)中心服務(wù)提供商,主要專注于金融及其他行業(yè)的零售型數(shù)據(jù)中心服務(wù)。金融行業(yè)是高資金流動(dòng)行 業(yè),對風(fēng)險(xiǎn)的容忍度較低,因此要求機(jī)房機(jī)柜的高穩(wěn)定性和維運(yùn)團(tuán)隊(duì)及時(shí)的響應(yīng)。此外,由于金融市場高頻次的操作
31、模式, 還需要提供商維運(yùn)團(tuán)隊(duì)做到24*7全天候的服務(wù)。針對客戶需求,數(shù)訊推出高標(biāo)準(zhǔn)、高穩(wěn)定性、高保障的IDX數(shù)據(jù)中心服務(wù), 做到低風(fēng)險(xiǎn)、高安全。同時(shí),數(shù)訊還具有地理位置和高水平團(tuán)隊(duì)的優(yōu)勢,可以做到快速響應(yīng),滿足客戶各種需求。數(shù)訊商業(yè)模式21數(shù)訊信息SDS數(shù)訊云互聯(lián)企業(yè)需求跨云搬站多云互聯(lián)托管IDC不允許拉專線降低多云/遷云中的成本快速上云彈性/臨時(shí)帶寬需求帶寬靈活調(diào)整50+NNI合作伙伴100GE帶寬接入國內(nèi)外主流 公有云連接SDN網(wǎng)絡(luò)解 決方案支持國際鏈路多鏈路接入, 網(wǎng)絡(luò)冗余中立第三方 運(yùn)營商針對多云、混合云市場環(huán)境,解決云互聯(lián)痛點(diǎn)當(dāng)今企業(yè)大多使用多云或者混合云進(jìn)行云部署,其之間的互聯(lián)產(chǎn)品
32、就成為云與云之間的關(guān)鍵紐帶。而以往企業(yè)通過客戶 IDC、VPN、公網(wǎng)連接私有云與公有云的方法具有穩(wěn)定性差、安全隱患、費(fèi)用昂貴、速度慢、規(guī)制制約的缺點(diǎn),不能很好 地解決互聯(lián)問題。數(shù)訊云互聯(lián)以SDN技術(shù)為核心,基于廣泛的底層網(wǎng)絡(luò)覆蓋,為企業(yè)提供IDC to Cloud、Cloud to Cloud 之間靈活、彈性及可視的云連接服務(wù)。而且數(shù)訊SDS云互聯(lián)專線使用已有線路,不需要額外布線和專有接入設(shè)備,只需要 使用通常的路由器,因此大大降低了企業(yè)多云/遷云中的成本。數(shù)訊SDS云互聯(lián)產(chǎn)品結(jié)構(gòu)22中電科太極數(shù)據(jù)中心多種商務(wù)合作模式滿足客戶個(gè)性化需求快速交付解決方案設(shè)計(jì)研發(fā)端標(biāo)準(zhǔn)化, 實(shí)施 部署端模塊化數(shù)據(jù)
33、中心一體化網(wǎng)絡(luò)在全國構(gòu)建“ 三恒星+ 多 行星+ 滿天星” 的數(shù)據(jù)中 心一體化網(wǎng)絡(luò), 在全國范 圍內(nèi)為客戶提供高質(zhì)量的 海量數(shù)據(jù)傳輸服務(wù)高保障信息系統(tǒng)災(zāi)難誒分 與恢復(fù)服務(wù)資質(zhì)(一級) I S O 2 0 0 0 0 I T 服務(wù)管理體系認(rèn)證全生命周期服務(wù)建立自己的管理方法論, 打通各 個(gè)環(huán)節(jié)壁壘, 確保溝通時(shí)效, 降 低風(fēng)險(xiǎn)因素012302030405數(shù)據(jù)中心全生命周期服務(wù)提供商網(wǎng)絡(luò)信息體系的發(fā)展需求是全面的,成本的低廉、搭建的高效、收益的可觀均是合作的關(guān)鍵目標(biāo)。面對客戶需求,中電科 數(shù)據(jù)中心提供了全生命周期服務(wù)模式下的多種個(gè)性化服務(wù),提供咨詢規(guī)劃、設(shè)計(jì)、管理實(shí)施、運(yùn)營運(yùn)維、系統(tǒng)測評節(jié)能改 造
34、、增值服務(wù)等,在保證效率的前提下,實(shí)現(xiàn)安全、穩(wěn)定、高質(zhì)量。中電科太極數(shù)據(jù)中心優(yōu)勢中電科太極數(shù)據(jù)中心提供多種商務(wù)合作模式,解決數(shù)據(jù)中心行業(yè)痛點(diǎn)面對開闊的市場,多種企業(yè)頻繁出入,同時(shí)技術(shù)、運(yùn)維、人才儲(chǔ)備方面沒有保障,帶給合作很多不確定性。而中電科數(shù)據(jù) 中心作為值得信賴的“大廠”,面向用戶提供多種商務(wù)合作模式,從傳統(tǒng)模式、共建模式到全生命周其服務(wù)模式等,多種 模式以供選擇,在保證產(chǎn)品穩(wěn)定、安全的前提下,實(shí)現(xiàn)合作的高效、低成本、高收益。中電科數(shù)據(jù)中心服務(wù)模式強(qiáng)大的采購供應(yīng)鏈模塊化、預(yù)制化、強(qiáng)計(jì)劃、重執(zhí)行PMO系統(tǒng)管理可視化深化設(shè)計(jì)BIM先行傳統(tǒng)模式共建模式EPC總承包模式產(chǎn)業(yè)園運(yùn)營模式全生命周期服務(wù)模
35、式2419數(shù)據(jù)中心定義及分類1數(shù)據(jù)中心建設(shè)考量要素2典型案例3數(shù)據(jù)中心趨勢及展望4目錄技術(shù)趨勢:非IT類26UPS高壓直流相較于UPS,HVDC 在備份、工作原理、擴(kuò)容以及蓄電池掛靠等方面存在顯著的技術(shù)優(yōu)勢,因而具有運(yùn)行效率高、占地面 積少、投資成本和運(yùn)營成本低的特點(diǎn)。來源:電力信息與通信技術(shù)。來源:騰訊數(shù)據(jù)中心。項(xiàng)目HVDC( 240V)UPS(220V/360V)輸出波形直線正弦波/方波輸出參數(shù)高低輸出電壓240V220V/360V系統(tǒng)結(jié)構(gòu)模塊化程度高模塊化程度低控制可自主控制輸出對控制模塊依賴度高蓄電池供電直接經(jīng)逆變器并機(jī)條件極性、電壓相同極性、電壓、相位、頻率相同并機(jī)復(fù)雜程度可在直流側(cè)
36、簡單 并接不可簡單并接單點(diǎn)故障少多在線擴(kuò)容可行性大可行性小可維護(hù)性較高較低設(shè)備類型400KVA 2N UPS1200A 直流 240VHVDC單套電源系統(tǒng)設(shè)備配 置1主輸入+2柜整流逆變+1主機(jī) 輸出1交流輸入+2整流+1直流 輸出1.變壓器低壓輸出柜800A柜2臺(tái),每臺(tái)2框架斷路 器800A柜0.5臺(tái)1框架,5*250A柜1臺(tái)造價(jià)及占地面積15*2=30萬(雙框架)占地面 積:2配電柜8+5=13萬(但框架)占 地面積1.5配電柜2不間斷電源系統(tǒng)2套 400KVA UPS主機(jī)1套240VHVDC主機(jī)造價(jià)及占地面積24*2=48萬,占地面積:8個(gè) 配電柜22*1=22萬元,占地面積4個(gè)機(jī)柜3不
37、間斷電源輸出配 電柜2套UPS主輸出+2套之路配電0造價(jià)及占地面積(8+5)*2=26萬,占地面積:4個(gè)配電柜04.末端配電柜數(shù)量5套交流10套交直流末端配電投資10*5=50萬,占地面積:2.5個(gè)配電柜10*5+5*5=75萬,占地面 積:5個(gè)配電柜5.線纜數(shù)量多輸出配電及維修旁路線纜等單項(xiàng)直流線纜比三相交流 線纜稍貴占地面積(不含電池 室且交直流分開)16.5面柜10.5面柜一次性投資成本154萬(不含配套濾波)110萬技術(shù)趨勢:非IT類風(fēng)冷液冷在能耗占比中,溫控系統(tǒng)是除IT系統(tǒng)外最大的一部分,直接關(guān)系到PUE值的高低,以及整體運(yùn)營成本。在選址時(shí),不少數(shù) 據(jù)中心選擇溫度更低區(qū)域,如北極圈(
38、Facebook)、張北(阿里巴巴,騰訊)、海底(微軟)、湖邊(阿里巴巴千島湖數(shù) 據(jù)中心)、山洞中(貴安),但這些選址本身即受到嚴(yán)格限制,除張北、貴安外,其他TCO也并不更低,一般IDC運(yùn)營商 難以借鑒。從常規(guī)節(jié)能技術(shù)來看,空調(diào)機(jī)組逐漸由風(fēng)冷型和水冷型向冷凍水型、雙冷源型轉(zhuǎn)化,從氣流組織看,冷熱通道 分離已廣為普及,并從機(jī)房級細(xì)化到機(jī)柜級。從長期看,最具有革命性的節(jié)能技術(shù)為液冷技術(shù),其中浸沒式液冷技術(shù)可以 將PUE降到1.2以下,聯(lián)合其他技術(shù),可以趨近于1。目前國內(nèi)已有、綠色云圖(網(wǎng)宿子公司)、聯(lián)想、浪潮和華 為等涉足液冷領(lǐng)域。目前,由于適應(yīng)場景、冷卻液價(jià)格和改造成本,液冷技術(shù)并未大面積普及。未來隨著GPU運(yùn)算占比的 增加和服務(wù)器密度的不斷增加,液冷將是代替風(fēng)冷的必然選擇。來源:Green Grid。來源:綠色數(shù)據(jù)中心白皮書2019。37030979605散熱功率(KW)每年電費(fèi)(KEUR
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2024年二手住宅買賣合同:權(quán)利與義務(wù)明確
- 2024互聯(lián)網(wǎng)汽車銷售服務(wù)合同
- 2024年地緣政治變化:國際市場政治風(fēng)險(xiǎn)評估合同
- 2023年麗水市蓮都區(qū)教育局教育人才引進(jìn)考試真題
- 2024醫(yī)療健康數(shù)據(jù)共享與分析合作協(xié)議
- 2024年工業(yè)廠房屋面瓦安裝協(xié)議
- 2024年工程合同管理與風(fēng)險(xiǎn)防控手冊
- 2024兩家企業(yè)關(guān)于聯(lián)合研發(fā)新能源汽車的協(xié)議
- 2024含有知識產(chǎn)權(quán)保護(hù)的門店承包合同
- 2024年勞動(dòng)合同:某企業(yè)與員工之間的全職勞動(dòng)合同
- Unit7大單元整體教學(xué)設(shè)計(jì)人教版英語八年級年級上冊
- 9.1+創(chuàng)新是引領(lǐng)發(fā)展的第一動(dòng)力(高效教案)-【中職專用】中職思想政治《哲學(xué)與人生》(高教版2023基礎(chǔ)模塊)
- 列管式換熱器的設(shè)計(jì)計(jì)算
- 跳繩 單元作業(yè)設(shè)計(jì)
- 數(shù)據(jù)庫學(xué)生成績管理系統(tǒng)ER圖
- 麻山藥栽培管理技術(shù)課件
- 小學(xué)英語外研版三起點(diǎn)五年級上冊-Module-1-單元整體教學(xué)設(shè)計(jì)
- 消化內(nèi)科常用藥物介紹-課件
- 哈工程實(shí)驗(yàn)報(bào)告封皮
- LED照明知識培訓(xùn)
- 網(wǎng)店運(yùn)營與推廣
評論
0/150
提交評論