智慧電子政務(wù)云-大數(shù)據(jù)處理平臺建設(shè)方案

1、電子政務(wù)云整體解決方案 智慧電子政務(wù)云大數(shù)據(jù)處理平臺建設(shè)方案目 錄 TOC o 1-3 h z u HYPERLINK l _Toc528863708 第一章電子政務(wù)云概述 PAGEREF _Toc528863708 h 2 HYPERLINK l _Toc528863709 1.電子政務(wù)云發(fā)展背景 PAGEREF _Toc528863709 h 2 HYPERLINK l _Toc528863710 2.業(yè)務(wù)需求分析 PAGEREF _Toc528863710 h 4 HYPERLINK l _Toc528863711 3.項目建設(shè)的必要性 PAGEREF _Toc528863711 h 6

2、 HYPERLINK l _Toc528863712 第二章電子政務(wù)云設(shè)計方案 PAGEREF _Toc528863712 h 9 HYPERLINK l _Toc528863713 1.總體設(shè)計方案 PAGEREF _Toc528863713 h 9 HYPERLINK l _Toc528863714 1.1電子政務(wù)云總體架構(gòu) PAGEREF _Toc528863714 h 9 HYPERLINK l _Toc528863715 1.2電子政務(wù)云部署架構(gòu) PAGEREF _Toc528863715 h 11 HYPERLINK l _Toc528863716 1.3電子政務(wù)云技術(shù)架構(gòu) PAG

3、EREF _Toc528863716 h 14 HYPERLINK l _Toc528863717 1.4電子政務(wù)云網(wǎng)絡(luò)分區(qū) PAGEREF _Toc528863717 h 16 HYPERLINK l _Toc528863718 1.5電子政務(wù)云運營架構(gòu) PAGEREF _Toc528863718 h 17 HYPERLINK l _Toc528863719 2.大數(shù)據(jù)處理平臺建設(shè) PAGEREF _Toc528863719 h 18 HYPERLINK l _Toc528863720 2.1大數(shù)據(jù)平臺建設(shè)必要性 PAGEREF _Toc528863720 h 18 HYPERLINK l

4、_Toc528863721 2.2大數(shù)據(jù)平臺建設(shè)目標 PAGEREF _Toc528863721 h 23 HYPERLINK l _Toc528863722 2.3大數(shù)據(jù)平臺總體設(shè)計 PAGEREF _Toc528863722 h 25 HYPERLINK l _Toc528863723 2.4大數(shù)據(jù)平臺惠民示范應(yīng)用 PAGEREF _Toc528863723 h 62 HYPERLINK l _Toc528863724 第三章項目管理和實施 PAGEREF _Toc528863724 h 71 HYPERLINK l _Toc528863725 1.項目管理方案 PAGEREF _Toc5

5、28863725 h 71 HYPERLINK l _Toc528863726 1.1項目管理原則 PAGEREF _Toc528863726 h 71 HYPERLINK l _Toc528863727 1.2項目開發(fā)工作總結(jié)制度 PAGEREF _Toc528863727 h 71 HYPERLINK l _Toc528863728 1.3項目進度管理 PAGEREF _Toc528863728 h 72 HYPERLINK l _Toc528863729 1.4項目成本管理 PAGEREF _Toc528863729 h 73 HYPERLINK l _Toc528863730 1.5項

6、目風(fēng)險管理 PAGEREF _Toc528863730 h 73 HYPERLINK l _Toc528863731 1.6項目的需求變更管理 PAGEREF _Toc528863731 h 74 HYPERLINK l _Toc528863732 1.7項目的交流制度 PAGEREF _Toc528863732 h 76 HYPERLINK l _Toc528863733 1.8項目的獎懲制度 PAGEREF _Toc528863733 h 76 HYPERLINK l _Toc528863734 1.9項目實施的安全管理 PAGEREF _Toc528863734 h 76 HYPERLI

7、NK l _Toc528863735 2.項目質(zhì)量控制方案 PAGEREF _Toc528863735 h 77 HYPERLINK l _Toc528863736 2.1質(zhì)量控制目標 PAGEREF _Toc528863736 h 77 HYPERLINK l _Toc528863737 2.2質(zhì)量控制保證 PAGEREF _Toc528863737 h 77 HYPERLINK l _Toc528863738 2.3質(zhì)量控制措施 PAGEREF _Toc528863738 h 78 HYPERLINK l _Toc528863739 3.項目運維管理方案 PAGEREF _Toc52886

8、3739 h 80 HYPERLINK l _Toc528863740 3.1綜合運營平臺運維體系 PAGEREF _Toc528863740 h 80 HYPERLINK l _Toc528863741 3.2基礎(chǔ)設(shè)施管理 PAGEREF _Toc528863741 h 81 HYPERLINK l _Toc528863742 3.3運營項目管理 PAGEREF _Toc528863742 h 83 HYPERLINK l _Toc528863743 3.4測試項目管理 PAGEREF _Toc528863743 h 84 HYPERLINK l _Toc528863744 3.5云服務(wù)項目

9、管理 PAGEREF _Toc528863744 h 86 HYPERLINK l _Toc528863745 3.6事件管理 PAGEREF _Toc528863745 h 86電子政務(wù)云概述電子政務(wù)云發(fā)展背景隨著近年信息技術(shù)持續(xù)迅猛發(fā)展，公眾對政府管理與服務(wù)模式變革的期望急劇攀升，各國電子政務(wù)建設(shè)面臨極大挑戰(zhàn)。電子政務(wù)方面走在前列的國家積極制定和出臺新的發(fā)展戰(zhàn)略和設(shè)施計劃，如美國“開放政府”行動、“數(shù)據(jù)中心整合”行動；英國的“智慧政府”戰(zhàn)略和ICT戰(zhàn)略；澳大利亞的“Government 2.0”戰(zhàn)略規(guī)劃等。其共同特點是體現(xiàn)集約高效、開放共享的發(fā)展方向，代表了電子政務(wù)發(fā)展的最新趨勢。我國電子

10、政務(wù)建設(shè)歷史可追溯到20世紀80年代中期，至今經(jīng)歷了3個發(fā)展階段：20世紀80年代的起步階段、90年代的重點推進階段和2000年后的加速發(fā)展階段。20世紀80年代以來，我國政府投入了萬億元巨資推進信息化建設(shè)，特別是“兩網(wǎng)、一站、四庫、十二金”等大型項目的建設(shè)實施取得了顯著成效，在聯(lián)合國開展的電子政務(wù)調(diào)查中，我國在世界范圍內(nèi)的排名逐年上升，電子政務(wù)發(fā)展水平呈現(xiàn)出較好的發(fā)展趨勢。國家電子政務(wù)總體框架（2006）的發(fā)布進一步推動了我國電子政務(wù)建設(shè)的整體發(fā)展進程和各部門的電子政務(wù)發(fā)展。我國主要地區(qū)電子政務(wù)建設(shè)正從覆蓋政府業(yè)務(wù)階段向與政府業(yè)務(wù)融合、全面支撐服務(wù)型政府建設(shè)階段過渡。從基礎(chǔ)電子政務(wù)網(wǎng)絡(luò)而言，

11、中央級傳輸骨干網(wǎng)開通，國家電子政務(wù)外網(wǎng)投入運行，促進了全國范圍內(nèi)橫向和縱向電子政務(wù)網(wǎng)絡(luò)的互聯(lián)互通。從電子政務(wù)應(yīng)用而言，中央政府門戶網(wǎng)站和各級政府網(wǎng)站建立并提供對外一站式服務(wù)，進一步推進了政務(wù)公開和政府與公眾的廣泛互動。政務(wù)信息系統(tǒng)建設(shè)覆蓋各領(lǐng)域各部門，為政務(wù)部門履行“經(jīng)濟調(diào)節(jié)、市場監(jiān)管、社會管理、公共服務(wù)”等職能提供了重要支撐。電子政務(wù)安全體系建設(shè)方面，公安部等四部委聯(lián)合出臺信息系統(tǒng)等級保護有關(guān)技術(shù)標準和規(guī)范、國家保密局出臺涉密信息系統(tǒng)分級保護的有關(guān)技術(shù)標準和規(guī)范，圍繞信息系統(tǒng)建設(shè)的信息安全保障工作正在逐步健全和完善。電子政務(wù)系統(tǒng)規(guī)劃與頂層設(shè)計是新生事物，在國內(nèi)沒有成熟的案例供借鑒，各地區(qū)的發(fā)

12、展不平衡，國家電子政務(wù)總體存在的共性問題：單項規(guī)劃好、整體規(guī)劃差；表面應(yīng)用好、基礎(chǔ)標準差；縱向應(yīng)用好、橫向整合差；獨立應(yīng)用好、一體應(yīng)用差；國外應(yīng)用好、國產(chǎn)應(yīng)用差；非密應(yīng)用好、涉密應(yīng)用差?？傮w上地方電子政務(wù)還是傳統(tǒng)的離散型、項目建設(shè)式的發(fā)展方式，需向集約化、效能化的發(fā)展方式轉(zhuǎn)變?！笆濉逼陂g，地方電子政務(wù)需要圍繞政府職能轉(zhuǎn)變、管理創(chuàng)新和經(jīng)濟發(fā)展方式轉(zhuǎn)變的要求，全面轉(zhuǎn)變電子政務(wù)發(fā)展方式。重點由傳統(tǒng)的辦公自動化系統(tǒng)，轉(zhuǎn)向民生服務(wù)、社會管理和決策支持類信息系統(tǒng)，服務(wù)方式由面向政府和領(lǐng)導(dǎo)，向部門管理對象、行業(yè)以及轄區(qū)內(nèi)公民轉(zhuǎn)變，管理方法從自建自營向統(tǒng)一規(guī)劃、統(tǒng)籌建設(shè)轉(zhuǎn)變，推進方式從基本建設(shè)工程項目實施

13、向政府預(yù)算基本支出和績效評價轉(zhuǎn)變。今后電子政務(wù)新系統(tǒng)將從無序規(guī)劃、建設(shè)與應(yīng)用向“統(tǒng)一規(guī)劃、統(tǒng)籌整合、統(tǒng)一標準、技術(shù)復(fù)用、互聯(lián)治理、規(guī)范建設(shè)、信息共享、自主創(chuàng)新”轉(zhuǎn)變，這將成為我國電子政務(wù)發(fā)展的新趨勢。從技術(shù)發(fā)展趨勢上看，隨著智慧城市、智能社區(qū)、云計算/存儲服務(wù)、綠色數(shù)據(jù)中心、3G通信、微博等新技術(shù)與社會經(jīng)濟活動的深度融合，全國各地正在以移動政務(wù)、云計算、物聯(lián)網(wǎng)、綠色數(shù)據(jù)中心作為電子政務(wù)技術(shù)創(chuàng)新的主攻方向。業(yè)務(wù)需求分析電子政務(wù)發(fā)展急切轉(zhuǎn)型在當前智慧城市建設(shè)背景下，對電子政務(wù)建設(shè)提出了更高的要求，促使電子政務(wù)建設(shè)朝著集約型、合作化建設(shè)方向發(fā)展，推動服務(wù)型、智慧型政府建設(shè)。一是電子政務(wù)建設(shè)模式轉(zhuǎn)型。

14、當前各級政府的信息化系統(tǒng)建設(shè)大多處于粗放式發(fā)展階段，各部門各自為政，各自提出基于部門職能的系統(tǒng)建設(shè)要求，分散投資、分散建設(shè)，缺乏以區(qū)域為單位、著眼全局的統(tǒng)籌規(guī)劃。由于分散購置、分散管理，設(shè)備與投資不能共享，業(yè)務(wù)系統(tǒng)難以形成規(guī)模，整體使用效率很低，資源浪費嚴重。二是電子政務(wù)運維模式轉(zhuǎn)型。目前各部門分散的運維管理導(dǎo)致了較高的人員、技術(shù)需求，產(chǎn)生高運維成本，在智慧城市建設(shè)背景下，當前項目的運維模式變得不可持續(xù)。三是電子政務(wù)業(yè)務(wù)內(nèi)容轉(zhuǎn)型。電子政務(wù)建設(shè)將從以部門職能建設(shè)向以公共服務(wù)為主、寓管理于服務(wù)的電子政務(wù)轉(zhuǎn)型。以公眾為中心的電子政務(wù)服務(wù)需要更多考慮公眾的需求，打破原有基于部門職能分工的組織體系，實現(xiàn)

15、數(shù)據(jù)、渠道、服務(wù)的有效整合，滿足公眾的個性化、一站式服務(wù)需要。基礎(chǔ)設(shè)施資源亟需擴展在當前大數(shù)據(jù)時代下，文本、音頻、視頻等非結(jié)構(gòu)化政務(wù)數(shù)據(jù)規(guī)模急劇增長，各單位現(xiàn)有的網(wǎng)絡(luò)、計算和存儲等硬件基礎(chǔ)設(shè)施已無法滿足當前智慧應(yīng)用的需求，成了制約應(yīng)用系統(tǒng)運行效率的瓶頸。一方面是存儲設(shè)備需要擴展。對于某些需要實時存儲信息的應(yīng)用系統(tǒng)，其1年存儲量超過200TB。對于綜合智慧應(yīng)用項目建設(shè)，預(yù)計未來兩年存儲量達到PB級。當政務(wù)數(shù)據(jù)量接近存儲能力極限時，各應(yīng)用系統(tǒng)會無法充分發(fā)揮其設(shè)計功效。另一方面是計算資源需要擴展。在存儲大量政務(wù)數(shù)據(jù)的同時，各應(yīng)用系統(tǒng)需要對所存儲的政務(wù)數(shù)據(jù)進行處理、分析。數(shù)據(jù)融合共享迫在眉睫數(shù)據(jù)是電子

16、政務(wù)云計算中心的核心資源，也是未來各大智慧應(yīng)用發(fā)揮功效的驅(qū)動力。由于各部門政務(wù)系統(tǒng)相互獨立，缺乏整體布局，制約我市智慧城市建設(shè)。一是需要建立統(tǒng)一的數(shù)據(jù)架構(gòu)體系。人口、法人、自然資源和空間地理等基礎(chǔ)數(shù)據(jù)庫建設(shè)正逐步完善，但各基礎(chǔ)數(shù)據(jù)庫仍相互獨立，即使在獨立的法人及人口基礎(chǔ)數(shù)據(jù)庫的內(nèi)部，來自各部門的數(shù)據(jù)也未能形成有效的關(guān)聯(lián)關(guān)系。除基礎(chǔ)數(shù)據(jù)庫之外，還有大量政務(wù)數(shù)據(jù)分散在各職能部門，沒有實現(xiàn)集中部署和標準統(tǒng)一，電子政務(wù)數(shù)據(jù)交換邏輯架構(gòu)體系非常復(fù)雜。二是需要促進數(shù)據(jù)全面深入有效融合?，F(xiàn)階段，全市各部門只利用數(shù)據(jù)交換平臺實現(xiàn)政務(wù)數(shù)據(jù)交換，政務(wù)數(shù)據(jù)分散且獨立，數(shù)據(jù)的準確性和完整性無法保證，沒有形成全市電子政

17、務(wù)數(shù)據(jù)深入融合，未能發(fā)揮政務(wù)數(shù)據(jù)的功效。只有在數(shù)據(jù)融合的基礎(chǔ)上，才能有效的針對應(yīng)用主題進行數(shù)據(jù)挖掘，獲取數(shù)據(jù)背后深層次的信息，為市領(lǐng)導(dǎo)對城市綜合重大事項進行決策參考時提供輔助支撐。三是需要制定數(shù)據(jù)交換共享保障措施。目前,我市電子政務(wù)數(shù)據(jù)交換僅是靠部門需求推動，沒有形成固定數(shù)據(jù)交換共享機制，往往某個部門需要的數(shù)據(jù)無法獲取或獲取的數(shù)據(jù)不準確、不完整，大大影響數(shù)據(jù)需求部門應(yīng)用系統(tǒng)建設(shè)。二次開發(fā)渠道仍需拓展當前許多職能部門提供了基于各自部門職能的應(yīng)用服務(wù)，但是大多數(shù)應(yīng)用是完全封閉的，限制了應(yīng)用系統(tǒng)的功效。目前需要各應(yīng)用系統(tǒng)開放部分系統(tǒng)二次開發(fā)工具及服務(wù)，供其它部門使用，方便其它部門應(yīng)用系統(tǒng)建設(shè)，減少重

18、復(fù)投資和浪費。應(yīng)用系統(tǒng)建設(shè)還需豐富當前，隨著智慧城市熱潮的驅(qū)動下，各級省市建設(shè)了大量信息化應(yīng)用系統(tǒng)，也都發(fā)揮了相當作用，但現(xiàn)階段城市發(fā)展加快，政府職能轉(zhuǎn)型加速，涌現(xiàn)許多新的政務(wù)服務(wù)職能，因此衍生出一些新的業(yè)務(wù)需求，促使各職能部門要新建符合當前職能的信息化工具和應(yīng)用系統(tǒng)。項目建設(shè)的必要性電子政務(wù)云是在全國智慧城市建設(shè)逐步推進的大環(huán)境下，適合各級省市實際情況，運用云計算架構(gòu)建立的一個具有基礎(chǔ)性、公共性的電子政務(wù)服務(wù)平臺。建設(shè)電子政務(wù)云，對突破電子政務(wù)發(fā)展體制性障礙、提高政府行政能力、降低行政成本、提高電子政務(wù)安全保障能力及推進智慧城市建設(shè)等方面都具有十分重要的意義。有利于推動電子政務(wù)的統(tǒng)一建設(shè)云計

19、算集中建設(shè)、統(tǒng)一服務(wù)的核心理念，有利于突破部門職能分割造成的條塊分割的體制制約，有利于推廣統(tǒng)一建設(shè)的模式。云計算的建設(shè)和服務(wù)架構(gòu)，能將城市所有的業(yè)務(wù)管理與服務(wù)系統(tǒng)納入一個統(tǒng)一的系統(tǒng)框架，真正實現(xiàn)“一盤棋”效應(yīng)，改變傳統(tǒng)管理體制下各自為政的局面，打破“信息孤島”，為建立新的開放式、交互式、協(xié)同式城市管理與民生服務(wù)格局提供信息化技術(shù)支持，從而有效提高政府機關(guān)的整體工作效能。有利于提升電子政務(wù)安全保障能力云計算的技術(shù)架構(gòu)更加健全，它綜合運用多種安全手段和容災(zāi)備份手段，具有高度容錯機制，可以實現(xiàn)嚴格、有效的控制、配置與管理，使系統(tǒng)的連續(xù)性和數(shù)據(jù)的安全性更有保障。建設(shè)統(tǒng)一的政務(wù)云計算中心，將在全省范圍統(tǒng)

20、一部署數(shù)據(jù)中心的軟硬件和數(shù)據(jù)資源，并統(tǒng)一部署安全設(shè)施，將更有利于集中力量，提高安全部署等級，采取完備的安全策略，配備強大的專業(yè)隊伍，從而有效提高電子政務(wù)的整體信息安全保障能力。有利于降低電子政務(wù)的總體成本電子政務(wù)分散建設(shè)模式存在建設(shè)費用大、維護成本高和資源利用率低等問題，而云計算通過資源整合、統(tǒng)一管理和高效的資源流轉(zhuǎn)，可以有效降低電子政務(wù)的成本。一是降低投資成本。云計算模式將以往的分散建設(shè)變成集中建設(shè)，最大限度地實現(xiàn)資源共建共享，相對傳統(tǒng)的數(shù)據(jù)中心，硬件投資至少下降30%以上。同時，通過分時共享或者分區(qū)共享可使同樣的資源發(fā)揮更大的作用，將資源的有效負載提高2倍以上，有效降低設(shè)備的投資規(guī)模。二是

21、降低日常運營成本。云計算可以實現(xiàn)有效的綠色節(jié)能，將空閑的資源關(guān)閉或轉(zhuǎn)入節(jié)能模式，經(jīng)過實際驗證，這種節(jié)能模式可以節(jié)約電能70%，同時，電力、制冷、空間和帶寬等成本通過資源集中化可以得到大幅度的降低。三是降低管理維護成本。云計算通過資源集中和統(tǒng)一管理，降低了各部門的日常維護工作，大量的工作都轉(zhuǎn)移到后臺專業(yè)人員完成，從而有效降低了管理維護成本。有利于有效提高電子政務(wù)的效能政務(wù)云計算中心的核心是在技術(shù)層面構(gòu)建了統(tǒng)一的政府底層信息技術(shù)基礎(chǔ)結(jié)構(gòu)，基于云計算的服務(wù)給電子政務(wù)提供了一個嶄新的管理模式，可促進現(xiàn)有政府行政管理職能的一體化融合和服務(wù)體系的高效整合，提升政府管理服務(wù)能力。在政務(wù)云計算環(huán)境下，政府將通

22、過管理手段的革新，不斷調(diào)整行政職能、組織結(jié)構(gòu)、決策方式、管理行為、運行模式和工作流程，及時創(chuàng)造、收集、分析、利用、傳播和發(fā)送信息，切實提高政府管理水平和工作透明度，為政府服務(wù)民眾、促進經(jīng)濟發(fā)展和社會和諧提供重要的技術(shù)保障。有利于布局智慧城市建設(shè)智慧城市是以多行業(yè)、多應(yīng)用、復(fù)雜系統(tǒng)組成的綜合體，需要強大的信息處理中心進行各類信息的處理，其中電子政務(wù)是這個復(fù)雜體系的核心。隨著智慧城市的發(fā)展，業(yè)務(wù)應(yīng)用和數(shù)據(jù)正從分散部署走向大集中，單純的交換方式的互聯(lián)互通已不能滿足流程整合后的業(yè)務(wù)持續(xù)發(fā)展需求。而政務(wù)云計算中心具備傳統(tǒng)數(shù)據(jù)中心、單應(yīng)用系統(tǒng)無法比擬的優(yōu)勢，在應(yīng)用方式、信息內(nèi)容獲取和數(shù)據(jù)開發(fā)利用上更具便捷

23、性和智慧性，將加快消除信息“孤島”及利益、技術(shù)“壁壘”，真正實現(xiàn)數(shù)據(jù)和應(yīng)用物盡其用、協(xié)調(diào)發(fā)展，有利于布局智慧城市建設(shè)電子政務(wù)云設(shè)計方案總體設(shè)計方案電子政務(wù)云總體架構(gòu)電子政務(wù)云建設(shè)總體架構(gòu)設(shè)計如下圖所示：圖: 電子政務(wù)云建設(shè)總體架構(gòu)設(shè)計圖基礎(chǔ)設(shè)施層：提供基礎(chǔ)的計算、存儲、網(wǎng)絡(luò)服務(wù)；服務(wù)于只希望共享計算、存儲、網(wǎng)絡(luò)的項目，這個服務(wù)主要針對原有已建成系統(tǒng)的遷移，在這個層次上，除了可享受基礎(chǔ)資源的虛擬化服務(wù)外，還通過資源的池化，實現(xiàn)資源的動態(tài)分配、再分配和回收。基礎(chǔ)設(shè)施層資源池主要包括計算資源池、存儲資源池和網(wǎng)絡(luò)資源池，為上層軟件和數(shù)據(jù)等資源池提供支撐。信息資源層：利用數(shù)據(jù)共享交換平臺，構(gòu)建全市統(tǒng)一的

24、數(shù)據(jù)融合服務(wù)樞紐，通過數(shù)據(jù)的比對、處理、融合和共享，為全市智慧應(yīng)用、綜合管理服務(wù)系統(tǒng)、產(chǎn)業(yè)經(jīng)濟管理服務(wù)系統(tǒng)及各委辦局的專業(yè)應(yīng)用提供統(tǒng)一的數(shù)據(jù)支撐。應(yīng)用支撐層：主要提供應(yīng)用開發(fā)、測試和運行的平臺。通過應(yīng)用支撐層用戶可以進行應(yīng)用的快速開發(fā)、測試和部署運行；依托于云計算基礎(chǔ)架構(gòu)，把基礎(chǔ)架構(gòu)資源變成平臺環(huán)境提供給用戶和應(yīng)用；為業(yè)務(wù)信息系統(tǒng)提供軟件開發(fā)和測試環(huán)境，同時可以將各業(yè)務(wù)信息系統(tǒng)功能納入一個集中的SOA平臺上，有效地復(fù)用和編排組織內(nèi)部的應(yīng)用服務(wù)構(gòu)件，以便按需組織這些服務(wù)構(gòu)件。應(yīng)用層：面向各委辦局單位提供軟件服務(wù)，通過遷移或者新建項目部署在電子政務(wù)云里面進行托管，各終端客戶更多精力對各自業(yè)務(wù)范圍和

25、流程進行梳理，用戶通過使用客戶端，例如使用瀏覽器來訪問所需軟件。在電子政務(wù)云建設(shè)的過程中，軟件即服務(wù)層的建設(shè)是一個逐步開發(fā)完善的過程。電子政務(wù)云管理規(guī)范體系：電子政務(wù)云的良好運營需要管理規(guī)范和技術(shù)標準體系進行保障。云計算中心的管理規(guī)范涉及到對云計算中心基礎(chǔ)設(shè)施的維護、對數(shù)據(jù)的管理、對應(yīng)用系統(tǒng)開發(fā)的監(jiān)管、對運維體系的管理、對應(yīng)用系統(tǒng)效果的評價等方面；而技術(shù)標準體系包括了云計算中心基礎(chǔ)設(shè)施、數(shù)據(jù)和應(yīng)用的標準規(guī)范。電子政務(wù)云運營運維體系：為保障政務(wù)云計算中心的正常運行，提供資源管理、調(diào)度管理、監(jiān)控管理等運維功能，以及業(yè)務(wù)管理、流程管理、訂單管理等運營功能以及相應(yīng)的組織制度保障措施。門戶Portal包

26、括運維管理門戶和運營管理門戶，是電子政務(wù)云對外提供服務(wù)的界面。電子政務(wù)云部署架構(gòu)電子政務(wù)云部署架構(gòu)如下圖：圖：電子政務(wù)云整體架構(gòu)依據(jù)電子政務(wù)云建設(shè)的總體需求，勾畫項目的整體部署架構(gòu)，指導(dǎo)項目整體建設(shè)。電子政務(wù)云部署架構(gòu)主要包括幾個層面：計算資源池建設(shè)、云運營管理區(qū)建設(shè)、數(shù)據(jù)庫區(qū)建設(shè)、存儲資源池建設(shè)、大數(shù)據(jù)處理區(qū)建設(shè)、備份區(qū)建設(shè)等。從整體架構(gòu)來看：計算資源池可以基于支撐的上層電子政務(wù)業(yè)務(wù)應(yīng)用的不同特性及對于接入網(wǎng)絡(luò)安全性的不同需求，計算資源池可以分為：政務(wù)應(yīng)用云資源支撐區(qū)：主要通過虛擬化的方式，以虛擬機的形態(tài)支撐電子政務(wù)應(yīng)用，如：政務(wù)信息管理系統(tǒng)、信息報送系統(tǒng)、政府協(xié)同辦公平臺等電子政務(wù)應(yīng)用系統(tǒng)

27、。在政務(wù)應(yīng)用云資源支撐區(qū)里，可以再根據(jù)電子政務(wù)應(yīng)用在處理數(shù)據(jù)類型、業(yè)務(wù)方式以及對網(wǎng)絡(luò)需求等方面區(qū)分為不同的業(yè)務(wù)應(yīng)用資源區(qū)，未來隨著政務(wù)信息化發(fā)展，業(yè)務(wù)系統(tǒng)增加，資源區(qū)之間可以實現(xiàn)線性擴展，資源區(qū)內(nèi)部也可以實現(xiàn)線性擴展。大數(shù)據(jù)應(yīng)用資源支撐區(qū)：主要通過虛擬化的方式，以虛擬機的形態(tài)支撐大數(shù)據(jù)分析處理類前端應(yīng)用系統(tǒng)，如：公共交通運力分析系統(tǒng)、全市居民健康狀況分析系統(tǒng)等。DMZ區(qū)：主要通過虛擬化的方式，以虛擬機的形態(tài)支撐Web發(fā)布類的相關(guān)應(yīng)用系統(tǒng)。計算資源池構(gòu)建主要采用高端多核心X86服務(wù)器作為服務(wù)器基礎(chǔ)支撐，通過虛擬化技術(shù)實現(xiàn)底層物理資源的虛擬化，通過云運營管理中心進行虛擬機的創(chuàng)建、動態(tài)分配、遷移及管

28、理，形成統(tǒng)一的計算資源池。云運營管理區(qū)基于HA架構(gòu)建設(shè)，通過部署云操作系統(tǒng)，實現(xiàn)底層虛擬化的管理，實現(xiàn)云計算資源的運營以及云計算服務(wù)門戶建設(shè)。數(shù)據(jù)庫區(qū)建設(shè)主要采用物理機支撐，因為要考慮電子政務(wù)云計算的安全性、可靠性及重要性，而且能夠保證整個數(shù)據(jù)庫的穩(wěn)定、高I/O吞吐和訪問。數(shù)據(jù)庫區(qū)主要通過高端X86高性能服務(wù)器通過集群技術(shù)進行部署，支撐電子政務(wù)外網(wǎng)和內(nèi)網(wǎng)相關(guān)業(yè)務(wù)數(shù)據(jù)的存儲和管理。存儲資源池基于不同的數(shù)據(jù)類型采用差異化的資源池方式建設(shè)，數(shù)據(jù)類型主要包括結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。針對結(jié)構(gòu)化的重要業(yè)務(wù)數(shù)據(jù)主要通過Oracle/DB2/SQL Server/MySQL等數(shù)據(jù)庫進行數(shù)據(jù)管理，結(jié)構(gòu)化數(shù)據(jù)存

29、儲利用統(tǒng)一云存儲來支撐，在未來需要對存儲容量進行擴展時可方便的橫向縱向擴展；非結(jié)構(gòu)化數(shù)據(jù)采用分布式存儲系統(tǒng)來支撐，虛擬機的鏡像數(shù)據(jù)也存放在分布式存儲系統(tǒng)中，通過多副本機制實現(xiàn)數(shù)據(jù)的安全可靠，通過高性價比的組成部件實現(xiàn)系統(tǒng)整體TCO的降低，通過線性擴展特性實現(xiàn)隨著系統(tǒng)數(shù)據(jù)節(jié)點增加系統(tǒng)性能也隨之線性增加，整個系統(tǒng)不存在性能瓶頸。大數(shù)據(jù)處理區(qū)實現(xiàn)海量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一分析處理，通過對導(dǎo)入系統(tǒng)中的電子政務(wù)相關(guān)數(shù)據(jù)進行挖掘分析處理，提供對上層計算資源池大數(shù)據(jù)應(yīng)用支撐區(qū)中運行的相關(guān)大數(shù)據(jù)處理業(yè)務(wù)系統(tǒng)的支撐。備份區(qū)通過構(gòu)建軟硬一體化的數(shù)據(jù)備份系統(tǒng)，通過設(shè)置靈活的備份策略對關(guān)鍵數(shù)據(jù)庫系統(tǒng)數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)

30、等進行備份，可避免數(shù)據(jù)邏輯錯誤。電子政務(wù)云技術(shù)架構(gòu)圖：電子政務(wù)云技術(shù)架構(gòu)電子政務(wù)云技術(shù)架構(gòu)設(shè)計如上圖，整個架構(gòu)從下往上包括云計算基礎(chǔ)設(shè)施層、云計算平臺資源層、云計算業(yè)務(wù)數(shù)據(jù)層、云計算管理層和云計算服務(wù)層。其中：云計算基礎(chǔ)設(shè)施層：主要包括云計算中心的物理機房環(huán)境。云計算平臺資源層：在云計算中心安全的物理環(huán)境基礎(chǔ)上，采用虛擬化、分布式存儲等云計算技術(shù)，實現(xiàn)服務(wù)器、網(wǎng)絡(luò)、存儲的虛擬化，構(gòu)建計算資源池、存儲資源池和網(wǎng)絡(luò)資源池，實現(xiàn)基礎(chǔ)設(shè)施即服務(wù)。云計算業(yè)務(wù)數(shù)據(jù)層：主要為實現(xiàn)業(yè)務(wù)數(shù)據(jù)的安全存儲，同時針對云平臺的各個虛擬機鏡像數(shù)據(jù)和模板數(shù)據(jù)進行共享存儲，推動虛擬機的動態(tài)遷移和數(shù)據(jù)的遷移；實現(xiàn)部門間數(shù)據(jù)共享

31、與交換；實現(xiàn)業(yè)務(wù)應(yīng)用接入。云計算管理層：在云基礎(chǔ)設(shè)施的基礎(chǔ)上，為了實現(xiàn)動態(tài)資源池的構(gòu)建，通過虛擬化技術(shù)對基礎(chǔ)設(shè)施（網(wǎng)絡(luò)、服務(wù)器和存儲設(shè)備等）進行資源池化，通過自主可控的云計算操作系統(tǒng)，實現(xiàn)云計算中心的服務(wù)管理及業(yè)務(wù)管理的統(tǒng)一管理，提高運維及運營的效率。云計算服務(wù)層：是云計算中心與最終用于交互的接口和平臺，通過該平臺能夠?qū)崿F(xiàn)云計算中心統(tǒng)一對外提供服務(wù)，為客戶人員提供整體的云應(yīng)用和服務(wù)。電子政務(wù)云通過統(tǒng)一的云計算平臺對外提供服務(wù)。電子政務(wù)云網(wǎng)絡(luò)分區(qū)圖：電子政務(wù)云網(wǎng)絡(luò)分區(qū)架構(gòu)電子政務(wù)云建設(shè)基于以物理分區(qū)為基本單元的設(shè)計理念，整個云計算中心可分為：核心交換區(qū)、管理區(qū)、DMZ區(qū)、業(yè)務(wù)應(yīng)用區(qū)以及云存儲區(qū)。

32、其中：核心交換區(qū)：負責(zé)網(wǎng)絡(luò)交換。DMZ區(qū)：考慮云計算中心整體安全性，設(shè)置專門的DMZ區(qū)，承載各業(yè)務(wù)部門的業(yè)務(wù)應(yīng)用系統(tǒng)的WEB發(fā)布，同時支撐云計算中心互聯(lián)網(wǎng)的接入，該區(qū)可采用全虛擬機進行支撐。業(yè)務(wù)應(yīng)用區(qū)包括三部分：數(shù)據(jù)庫邏輯分區(qū)、政務(wù)應(yīng)用云資源支撐區(qū)和大數(shù)據(jù)應(yīng)用資源支撐區(qū)。其中：數(shù)據(jù)庫分區(qū)主要建設(shè)支撐各應(yīng)用系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)庫，考慮到數(shù)據(jù)庫數(shù)據(jù)量的龐大和系統(tǒng)對數(shù)據(jù)的訪問I/O吞吐，該區(qū)建議采用高端物理機進行支撐；政務(wù)應(yīng)用云資源支撐區(qū)和大數(shù)據(jù)應(yīng)用資源支撐區(qū)采用虛擬化支撐，根據(jù)業(yè)務(wù)部門的不同業(yè)務(wù)需求決定相應(yīng)虛擬機的規(guī)格。未來，隨著電子政務(wù)云業(yè)務(wù)量增加和復(fù)雜度增加，可以按照相同的架構(gòu)進行節(jié)點的擴展，

33、達到整個政務(wù)云平臺的可擴展性和伸縮性。電子政務(wù)云運營架構(gòu)圖：電子政務(wù)云運營架構(gòu)整個云計算中心設(shè)計采用業(yè)務(wù)區(qū)域的理念。業(yè)務(wù)區(qū)域（即以服務(wù)器集群為核心的物理資源區(qū)域，不同的業(yè)務(wù)區(qū)域設(shè)備配置可以不同）是系統(tǒng)的基本硬件組成單元，整個系統(tǒng)共包括若干個業(yè)務(wù)區(qū)域。系統(tǒng)規(guī)模的擴大可以通過增加業(yè)務(wù)區(qū)域方式，使得整個系統(tǒng)具有很好的可擴展性。業(yè)務(wù)區(qū)域的業(yè)務(wù)網(wǎng)絡(luò)交換機通過萬兆方式上聯(lián)到核心交換區(qū)，通過核心交換區(qū)與其他業(yè)務(wù)區(qū)域和域外系統(tǒng)互聯(lián)。在每個業(yè)務(wù)區(qū)域內(nèi)，通過云運營管理中心的云計算運營中心節(jié)點實現(xiàn)在X86業(yè)務(wù)節(jié)點上部署Hypervisor，并形成一個或多個獨立的邏輯資源池，提供給應(yīng)用使用；通過云計算虛擬化管理中心在

34、邏輯資源池內(nèi)可實現(xiàn)資源的共享和動態(tài)分配。每個業(yè)務(wù)區(qū)域包括：云計算虛擬化管理中心節(jié)點、業(yè)務(wù)節(jié)點、業(yè)務(wù)網(wǎng)絡(luò)、管理網(wǎng)絡(luò)、心跳網(wǎng)絡(luò)、本地鏡像存儲；業(yè)務(wù)區(qū)域根據(jù)各自的業(yè)務(wù)需要訪問FC存儲或并行存儲等業(yè)務(wù)數(shù)據(jù)存儲區(qū)域。云計算平臺配置多臺云計算服務(wù)門戶節(jié)點，為最終用戶的系統(tǒng)管理員提供自助門戶服務(wù)。采用以上設(shè)計理念，使得整個系統(tǒng)具有超高的可擴展性，可使整個系統(tǒng)擴展到上千臺物理服務(wù)器規(guī)模。大數(shù)據(jù)處理平臺建設(shè)大數(shù)據(jù)平臺建設(shè)必要性城市信息化的建設(shè)必然帶來數(shù)據(jù)的爆發(fā)式增長，而大數(shù)據(jù)就像人的血液一樣遍布交通、醫(yī)療、教育等城市民生建設(shè)的各個領(lǐng)域。對大數(shù)據(jù)進行分類、重組分析、再利用等一系列的智慧化處理后，建立大數(shù)據(jù)平臺具有

35、重大價值，從政府決策到人們的衣食住行，從創(chuàng)建節(jié)約型社會到以人為本，信息惠民，都將在大數(shù)據(jù)的支撐下走向智慧化，大數(shù)據(jù)平臺是上海超算中心的重要組成部分，未來將成為上海城市發(fā)展的重要引擎。國家信息惠民工程建設(shè)需求2014年1月15日，中國國家發(fā)展和改革委員會（發(fā)改委）、工業(yè)和信息化部等12個部門聯(lián)合印發(fā)關(guān)于加快實施信息惠民工程有關(guān)工作的通知（以下簡稱通知），實施信息惠民工程，將重點解決社保、醫(yī)療、教育、養(yǎng)老、就業(yè)、公共安全、食品藥品安全、社區(qū)服務(wù)、家庭服務(wù)等九大領(lǐng)域突出問題。當前是我國全面建設(shè)小康社會的關(guān)鍵時期，也是在重大民生問題和民生需求上實現(xiàn)突破的重要戰(zhàn)略機遇期，既面臨社會流動性和開放性日益增強

36、，以及民生訴求多樣化、利益多元化、服務(wù)個性化、方式便利化的新形勢，又迫切需要有效破解民生領(lǐng)域公共服務(wù)資源短缺失衡、區(qū)域城鄉(xiāng)差距擴大、均等化普惠化水平不高等老問題。實施信息惠民工程，拉消費、促發(fā)展、惠民生，是以信息化帶動和促進民生領(lǐng)域跨越發(fā)展的戰(zhàn)略選擇，是提供廣覆蓋、多層次、差異化、高品質(zhì)公共服務(wù)的有效途徑，有助于優(yōu)化社會資源配置、創(chuàng)新公共服務(wù)供給模式、提升均等化普惠化水平，也將有助于培育新型業(yè)態(tài)和新的經(jīng)濟增長點，對促進信息消費、提升基本公共服務(wù)水平、加強和創(chuàng)新社會管理、構(gòu)建和諧社會等具有重要意義。民生大數(shù)據(jù)信息惠民需求健康醫(yī)療信息惠民需求圍繞解決看病就醫(yī)難題，以便利醫(yī)療服務(wù)、惠及城鄉(xiāng)居民、壯大

37、健康產(chǎn)業(yè)為目標，以醫(yī)療服務(wù)信息標準化、檢查檢驗結(jié)果全國互認為基礎(chǔ)，推廣遠程醫(yī)療，建立和完善重大公共衛(wèi)生、傳染病等健康信息監(jiān)測預(yù)警體系，促進優(yōu)質(zhì)資源共享和衛(wèi)生服務(wù)普惠，建立完善電子病歷、電子健康檔案，逐步實現(xiàn)全國范圍跨機構(gòu)、跨區(qū)域、跨衛(wèi)生業(yè)務(wù)的健康信息、就診信息共享和一卡通用，積極推進應(yīng)用居民健康卡與社會保障卡、金融IC卡、市民服務(wù)卡等公共服務(wù)卡的應(yīng)用集成。健康醫(yī)療領(lǐng)域的需求主要包括居民健康卡發(fā)放、基層衛(wèi)生機構(gòu)信息化建設(shè)、婦兒保健信息化、遠程醫(yī)療和健康體檢信息查詢等內(nèi)容。優(yōu)質(zhì)教育信息惠民需求以促進教育公平，提高教育質(zhì)量，加快縮小區(qū)域、城鄉(xiāng)、校際之間的教育差距為目標，推進優(yōu)質(zhì)教育資源共享，深化信息

38、技術(shù)在教育教學(xué)中的應(yīng)用。建設(shè)完善教育信息基礎(chǔ)設(shè)施，縮小不同地區(qū)學(xué)校數(shù)字鴻溝。建立擴大優(yōu)質(zhì)教育資源覆蓋面的有效機制，繼續(xù)推進國家精品開放課程共享，加快建立教育資源公共服務(wù)體系。教育領(lǐng)域的主要工作需求包括：完善智慧教育平臺、建設(shè)優(yōu)質(zhì)數(shù)字教育資源平臺和優(yōu)質(zhì)數(shù)字教育資源庫。養(yǎng)老服務(wù)信息惠民需求以滿足養(yǎng)老服務(wù)需求、釋放養(yǎng)老消費潛力、促進養(yǎng)老服務(wù)業(yè)發(fā)展為目標，建立養(yǎng)老服務(wù)機構(gòu)、醫(yī)療護理機構(gòu)等網(wǎng)絡(luò)互聯(lián)、信息共享的服務(wù)機制，重點推進養(yǎng)老服務(wù)機構(gòu)信息化建設(shè)，推廣遠程健康監(jiān)測，拓展養(yǎng)老機構(gòu)專業(yè)化服務(wù)的惠及面，推進養(yǎng)老、保健、醫(yī)療服務(wù)一體化發(fā)展。先期在200個養(yǎng)老服務(wù)機構(gòu)開展試點，大幅提升養(yǎng)老信息服務(wù)水平。養(yǎng)老服務(wù)

39、領(lǐng)域需求主要包括整合各類養(yǎng)老機構(gòu)、養(yǎng)老服務(wù)站點、家政服務(wù)企業(yè)、120等信息資源，構(gòu)建能夠惠及于民的養(yǎng)老服務(wù)信息系統(tǒng)。社會保障服務(wù)信息惠民需求依托上海超級計算中心電子政務(wù)數(shù)據(jù)交換平臺，整合人社局社會保障信息系統(tǒng)資源，利用提供實用便捷、優(yōu)質(zhì)高效的服務(wù)，為信息惠民工程提供社會保障相關(guān)信息數(shù)據(jù)，提升社會保障智慧化和信息惠民水平。主要工作需求工作包括實施社會保障一卡通和智慧人社建設(shè)。食品藥品安全信息惠民需求以形成社會綜合治理格局,切實提高食品藥品安全保障水平為目標，利用物聯(lián)網(wǎng)技術(shù)、溯源技術(shù)、防偽技術(shù)、條碼技術(shù)、云計算等技術(shù)，加快食品藥品安全信息系統(tǒng)建設(shè)，強化食品藥品電子追溯，方便信息公開查詢。規(guī)范互聯(lián)網(wǎng)

40、食品藥品交易行為，試點藥品網(wǎng)上陽光直購。主要需求包括：拓展完善食品藥品監(jiān)管信息系統(tǒng)應(yīng)用，完善建立食品藥品生產(chǎn)經(jīng)營企業(yè)基本信息數(shù)據(jù)庫和檢驗檢測數(shù)據(jù)庫，實現(xiàn)基于GIS系統(tǒng)的食品藥品安全監(jiān)管移動執(zhí)法，建立健全食品藥品突發(fā)事件應(yīng)急預(yù)案和響應(yīng)機制。建立食品藥品遠程監(jiān)控系統(tǒng)，建設(shè)藥品（含醫(yī)療器械、保健食品、化妝品）流通監(jiān)控、藥品存儲與運輸遠程監(jiān)測系統(tǒng)，實現(xiàn)藥械生產(chǎn)環(huán)節(jié)的非現(xiàn)場監(jiān)管。建立食品藥品安全信息智能查詢系統(tǒng)，加強對監(jiān)管數(shù)據(jù)的挖掘利用，實現(xiàn)公眾對食藥企業(yè)綜合信用信息、食藥產(chǎn)品真?zhèn)涡畔⒌闹悄懿樵?。推進食藥企業(yè)內(nèi)部安全追溯系統(tǒng)建設(shè)，逐步實現(xiàn)公眾對產(chǎn)品流向信息、溯源信息的智能查詢。社區(qū)服務(wù)信息惠民需求以創(chuàng)新

41、基層社會管理方式、增強社區(qū)服務(wù)群眾能力、擴大社會力量參與、完善社區(qū)信息消費環(huán)境為目標，以社區(qū)養(yǎng)老為切入點，推進社區(qū)信息化建設(shè)。以為公眾提供便利化服務(wù)為導(dǎo)向，以街道（鄉(xiāng)鎮(zhèn)）或社區(qū)為基本單元，應(yīng)用城市統(tǒng)一政府公共服務(wù)信息平臺，避免社區(qū)、街道、區(qū)（縣）單獨建設(shè)。重點依托城市統(tǒng)一政府公共服務(wù)信息平臺拓展直接面向社區(qū)的信息化應(yīng)用系統(tǒng)，實現(xiàn)公共服務(wù)一站式受理和基礎(chǔ)信息資源集中采集，避免重復(fù)采集、多頭采集。同時，要統(tǒng)籌推進基層一體化公共服務(wù)設(shè)施建設(shè)，積極推進通過服務(wù)網(wǎng)站和集中服務(wù)大廳為公眾提供“一站式”服務(wù)，減少各行業(yè)、各部門單獨建設(shè)服務(wù)設(shè)施，避免重復(fù)投資、重復(fù)建設(shè)。積極吸納社區(qū)志愿服務(wù)和商業(yè)服務(wù)資源，制定

42、系統(tǒng)接入和信息共享標準，優(yōu)先支持居家和社區(qū)養(yǎng)老服務(wù)項目，健全社區(qū)服務(wù)需求表達和反饋機制。城市發(fā)展和社會創(chuàng)新管理需求通過上海超算中心大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，可進一步加強服務(wù)型政府建設(shè)，提升全市信息便民利民和公平普惠水平，改進公共服務(wù)模式和提供方式，推動公共服務(wù)向基層延伸，縮小城鄉(xiāng)區(qū)域差距，促進基本公共服務(wù)均等化，達到提升公共服務(wù)整體水平。通過民生領(lǐng)域大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，可實現(xiàn)政務(wù)部門社會管理模式創(chuàng)新，完善各級黨委、政府與社會力量聯(lián)動的社會管理網(wǎng)絡(luò)。強化多部門聯(lián)合監(jiān)管，治理、管理和應(yīng)急處置相結(jié)合，提高決策預(yù)見性和管理效能，通過充分利用信息化手段，鼓勵社會資本

43、以多種方式參與，改善全市民生領(lǐng)域的公共服務(wù)，增強多層次供給能力，滿足群眾多樣化需求，實現(xiàn)社會管理進一步加強和創(chuàng)新。通過民生領(lǐng)域大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，進一步促進全市多部門合力解決社會難題，推進政府多部門業(yè)務(wù)協(xié)同和信息共享，創(chuàng)新行政運行機制，優(yōu)化行政業(yè)務(wù)流程，發(fā)揮信息化對提高多部門協(xié)同水平和監(jiān)測、決策、服務(wù)的信息能力的作用，支撐部門履行職能，提升政務(wù)效能，助力行政管理體制改革，全面提升政府行政效能。通過民生領(lǐng)域大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，進一步促進全市依法行政、政民互動等模式創(chuàng)新。利用多種方式推進政務(wù)信息公開，以及政府和公眾的雙向互動，提升政府開放度和透明性，拓寬

44、公眾參與渠道，解決群眾合法合理訴求，發(fā)揮互聯(lián)網(wǎng)通達社情民意新渠道作用，積極主動回應(yīng)社會關(guān)切，促進公共政策制定的科學(xué)性和民主性，提升依法行政水平。引導(dǎo)促進全市公眾加強自我管理和自我服務(wù)意識，激發(fā)社會活力，構(gòu)建和諧社會。通過民生領(lǐng)域大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，促進公共信息資源對社會公眾的開放共享和創(chuàng)新應(yīng)用，提升人口、法人、空間地理等基礎(chǔ)數(shù)據(jù)的真實性、準確性、完整性、及時性和開放性，引導(dǎo)帶動社會對公共信息資源的增值性、公益性開發(fā)和創(chuàng)新應(yīng)用，促進信息化在傳統(tǒng)產(chǎn)業(yè)的廣泛融合式應(yīng)用，促進信息內(nèi)容服務(wù)、電子商務(wù)、現(xiàn)代物流以及文化、教育、健康等民生領(lǐng)域的信息服務(wù)，有效滿足公眾個性化、多樣化的服務(wù)

45、需求。激發(fā)市場創(chuàng)新活力，培育新型業(yè)態(tài)和新的經(jīng)濟增長點，以信息服務(wù)促進信息消費發(fā)展。總之，上海超算中心通過大數(shù)據(jù)平臺建設(shè)，以大數(shù)據(jù)技術(shù)促進民生工作，推進全市信息惠民工作，落實國家信息惠民工程，可加速全市社會民生工作進一步發(fā)展，提升發(fā)展競爭力，進一步落實黨的“十八大”報告提出的加強社會建設(shè)，加快健全基本公共服務(wù)體系，加強和創(chuàng)新社會管理，推動社會主義和諧建設(shè)的總體要求，進而加快實現(xiàn)上海城市發(fā)展的“四個中心”建設(shè)，即國際經(jīng)濟中心、國際金融中心、國際貿(mào)易中心和國際航運中心、協(xié)調(diào)推進中提升城市綜合競爭力，努力建設(shè)國際一流中心城市的工作目標。大數(shù)據(jù)平臺建設(shè)目標大數(shù)據(jù)平臺以上海超算中心為基礎(chǔ)建設(shè)信息惠民工程，

46、以解決信息城鄉(xiāng)發(fā)展不均衡、提升城市精細化管理水平和個性化民生服務(wù)水平為目標。大數(shù)據(jù)平臺工作重點是解決公共服務(wù)、社會保障、醫(yī)療、教育、養(yǎng)老、食品藥品安全、社區(qū)服務(wù)、家庭服務(wù)等八大領(lǐng)域的突出問題，按照精細化管理和個性化服務(wù)的要求，提高跨層級、跨部門信息共享和業(yè)務(wù)協(xié)同水平,具體包含如下幾方面：首先，通過創(chuàng)建大數(shù)據(jù)平臺，積極探索解決在公共服務(wù)、社會保障、醫(yī)療、教育、養(yǎng)老等八大領(lǐng)域重大民生問題、滿足民生需求的有效辦法和有效途徑，大幅提升市區(qū)、鄉(xiāng)鎮(zhèn)（街道、社區(qū)）等級政府的服務(wù)能力和服務(wù)水平，基本消除數(shù)字鴻溝，全面提升政府公共服務(wù)水平，提高社會滿意度和民眾幸福指數(shù)。其次，通過創(chuàng)建大數(shù)據(jù)平臺，在創(chuàng)新社會管理方

47、面適應(yīng)社會流動性和開放性日益增強趨勢，引入優(yōu)質(zhì)社會服務(wù)資源，按照全域城市化的要求，切實加強農(nóng)村地區(qū)和海島的信息化建設(shè)，實現(xiàn)跨層級、跨部門信息共享、業(yè)務(wù)協(xié)同的常態(tài)化、實時化。探索利用良好的基礎(chǔ)環(huán)境進行機制體制創(chuàng)新和服務(wù)模式創(chuàng)新，推動基本公共服務(wù)向基層延伸，滿足社會管理全人群覆蓋和社會服務(wù)全天候受理的需要。最后，通過創(chuàng)建大數(shù)據(jù)平臺，在促進信息消費方面以挖掘消費潛力、增強供給能力、激發(fā)市場活力、改善消費環(huán)境為核心任務(wù)，提高信息網(wǎng)絡(luò)安全保障、網(wǎng)絡(luò)信任服務(wù)和個人信息保護能力，進一步加強完善誠信體系建設(shè)，按照市場配置資源、政府購買服務(wù)的模式積極培育信息消費需求，引導(dǎo)信息消費市場健康活躍發(fā)展，逐步形成信息惠

48、民可持續(xù)發(fā)展模式，努力形成新的經(jīng)濟增長點。大數(shù)據(jù)平臺總體設(shè)計總體設(shè)計思路過去政務(wù)信息化建設(shè)任務(wù)主要由各個業(yè)務(wù)主管部門自己承擔(dān)。這種煙囪式的建設(shè)方式導(dǎo)致了信息孤島問題，大量蘊含價值的公共數(shù)據(jù)得不到充分的利用。上海超算中心是城市信息中心，各業(yè)務(wù)部門的數(shù)據(jù)及應(yīng)用系統(tǒng)將統(tǒng)一的部署到上海超算中心當中，實現(xiàn)數(shù)據(jù)物理上的整合。大數(shù)據(jù)平臺將在此基礎(chǔ)上，引入其他社會信息資源，如社交網(wǎng)站、移動終端數(shù)據(jù)、社會門戶網(wǎng)站數(shù)據(jù)等。通過將不同數(shù)據(jù)源的數(shù)據(jù)進行集成，然后進一步深入數(shù)據(jù)進行挖掘分析和加工，形成面向各類民生工程的決策支持知識。面向各類型民生工程的大數(shù)據(jù)應(yīng)用不完全由政府開發(fā)。在大數(shù)據(jù)平臺建設(shè)上，政府主要致力于數(shù)據(jù)的

49、集成以及初步的分析處理，政府通過完善的數(shù)據(jù)管理制度面向社會開放數(shù)據(jù)，利用社會力量充分挖掘這些公共數(shù)據(jù)的價值。另外，政府還將就關(guān)鍵應(yīng)用進行示范工程建設(shè)，以帶動社會力量加快數(shù)據(jù)價值的實現(xiàn)。大數(shù)據(jù)平臺架構(gòu)整個方案設(shè)計分為4個層次，即數(shù)據(jù)源、數(shù)據(jù)預(yù)處理層（數(shù)據(jù)抽取、轉(zhuǎn)換、脫敏、加載、規(guī)約等）、大數(shù)據(jù)支撐平臺（數(shù)據(jù)存儲，數(shù)據(jù)處理）、信息惠民大數(shù)據(jù)應(yīng)用層等。數(shù)據(jù)由數(shù)據(jù)源經(jīng)過統(tǒng)一的數(shù)據(jù)抽取和轉(zhuǎn)換平臺對數(shù)據(jù)進行抽取、格式轉(zhuǎn)換、脫敏等操作。通過數(shù)據(jù)抽取、轉(zhuǎn)換和加載工具，將清洗好的數(shù)據(jù)加載到大數(shù)據(jù)平臺中進行存儲，由于匯聚了多個源的數(shù)據(jù)，通常數(shù)據(jù)量非常大，所以大數(shù)據(jù)平臺需要具有良好的可擴展性。加載到大數(shù)據(jù)平臺中的數(shù)

50、據(jù)將被用于進行最終的數(shù)據(jù)分析和數(shù)據(jù)挖掘，同時還可以根據(jù)具體的分析和挖掘需求，設(shè)計自己的查詢?nèi)蝿?wù)流及更多的應(yīng)用系統(tǒng)。最后大數(shù)據(jù)應(yīng)用層通過建模對大數(shù)據(jù)平臺中經(jīng)過初步加工的數(shù)據(jù)進行進一步的分析挖掘，然后通過大數(shù)據(jù)可視化工具對分析挖掘結(jié)果進行展現(xiàn)，展現(xiàn)形式豐富多樣，可以是圖表，也可以是文檔等易于人們理解的形式，這樣數(shù)據(jù)就轉(zhuǎn)化為信息，進而由信息轉(zhuǎn)化為可供決策支持的知識。系統(tǒng)整體邏輯架構(gòu)如下圖所示。圖 上海超級計算中心大數(shù)據(jù)平臺邏輯架構(gòu)數(shù)據(jù)源層主要有三部分數(shù)據(jù)來源：為保存在各委辦局的政務(wù)信息化數(shù)據(jù)。這些數(shù)據(jù)的特點是物理上和邏輯上分散孤立，彼此間難以進行數(shù)據(jù)共享。另外，這些信息主要為結(jié)構(gòu)化數(shù)據(jù)，保存在數(shù)據(jù)庫

51、中。保存于上海超算中心的政務(wù)信息化數(shù)據(jù)。上海超級計算中心建成后，很多委辦局將不再單獨建設(shè)數(shù)據(jù)中心，而是將數(shù)據(jù)和業(yè)務(wù)系統(tǒng)部署到超算中心來。這些數(shù)據(jù)在物理上實現(xiàn)了統(tǒng)一存儲，然而在邏輯上仍相對獨立。相比各委辦局過去的業(yè)務(wù)系統(tǒng)數(shù)據(jù)，這些數(shù)據(jù)呈現(xiàn)出更加豐富的多樣化，文本、圖片、視頻、音頻等形式的文件進一步增多。大量的社會數(shù)據(jù)。這些數(shù)據(jù)完美地體現(xiàn)了大數(shù)據(jù)時代的數(shù)據(jù)特征。它們形式豐富多樣，有結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)，如數(shù)據(jù)庫、郵件、文檔、網(wǎng)頁、xml文件、視頻文件、音頻文件、圖像文件等等；它們來源豐富，有論壇、微博、微信、SNS網(wǎng)站、社會門戶網(wǎng)站、移動終端等等；它們數(shù)據(jù)量大，由于互聯(lián)網(wǎng)、云計算

52、、物聯(lián)網(wǎng)等技術(shù)的飛速發(fā)展，現(xiàn)今社會每個人每時每刻都在不斷地產(chǎn)生數(shù)據(jù)，這個數(shù)據(jù)量是非常龐大的，根據(jù)IDC（國際數(shù)據(jù)公司）的監(jiān)測統(tǒng)計，2011年全球數(shù)據(jù)總量已經(jīng)達到1.8ZB（1024MB=1GB；1024GB=1TB；1024TB=1PB；1024PB=1EB；1024EB=1ZB，1ZB等于1萬億GB，1.8ZB也就相當于18億個1TB的移動硬盤），而這個數(shù)值還在以每兩年翻一番的速度增長，預(yù)計到2020年全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量，增長近20倍。這些來自于不同數(shù)據(jù)源的數(shù)據(jù)最終將通過網(wǎng)絡(luò)接入層接入大數(shù)據(jù)平臺。數(shù)據(jù)預(yù)處理層數(shù)據(jù)挖掘之前對數(shù)據(jù)的處理工作要占全過程60%的工作量。主要包括數(shù)據(jù)集成、

53、數(shù)據(jù)清理、數(shù)據(jù)轉(zhuǎn)換和數(shù)據(jù)規(guī)約等步驟。這些數(shù)據(jù)處理過程對于提高數(shù)據(jù)挖掘模式的質(zhì)量和結(jié)果的準確性。研究發(fā)現(xiàn)，數(shù)據(jù)挖掘出現(xiàn)錯誤結(jié)果多半是由數(shù)據(jù)源的質(zhì)量引起的。因此，重視原始數(shù)據(jù)的獲取，從源頭上盡量減少錯誤和誤差，尤其是減少人為誤差，尤為重要。數(shù)據(jù)挖據(jù)前的數(shù)據(jù)處理需要的時間是必不可少的。數(shù)據(jù)集成數(shù)據(jù)集成是將多個數(shù)據(jù)源中的數(shù)據(jù)（數(shù)據(jù)庫、數(shù)據(jù)立方體或者一般文件）結(jié)合起來存放到一個一致的數(shù)據(jù)存儲中的過程。數(shù)據(jù)集成的主要目的是對數(shù)據(jù)進行匯總和數(shù)據(jù)概化。由于不同學(xué)科方面的數(shù)據(jù)集成涉及不同的理論依據(jù)和規(guī)則，而不同數(shù)據(jù)格式的定義差異也是比較大的，因此，數(shù)據(jù)集成可以說是數(shù)據(jù)預(yù)處理中比較需要專業(yè)知識的一個步驟。數(shù)據(jù)集成

54、中包括如下兩個部分。數(shù)據(jù)集成：將多個不同數(shù)據(jù)源的數(shù)據(jù)整合到一個一致的存儲中。模式集成：整合不同數(shù)據(jù)源中的元數(shù)據(jù)。舉個簡單的例子，如兩個數(shù)據(jù)源中，一個是以“男”和“女”來區(qū)別性別，而另一個是以“F”和“M”來表示。那么在集成的時候，我們需要把兩個數(shù)據(jù)源的數(shù)據(jù)變成一致的。而更常見的是關(guān)于日期的格式，在有的數(shù)據(jù)源中，日期是一個數(shù)值；而有的數(shù)據(jù)源中，日期是以“XXXX年X月X日”的字符串方式存儲；還有的是以“YY/MM/DD”的格式組成的。數(shù)據(jù)清理數(shù)據(jù)清理是通過填寫缺失的值、光滑噪聲數(shù)據(jù)、識別或刪除離群點并解決不一致性來“清理”數(shù)據(jù)。主要是達到如下目標：格式標準化，異常數(shù)據(jù)清除，錯誤糾正，重復(fù)數(shù)據(jù)的清

55、除。數(shù)據(jù)清理能解決數(shù)據(jù)文件中的認為誤差，以及數(shù)據(jù)文件中一些對統(tǒng)計分析結(jié)果影響較大的特殊數(shù)值。對原始數(shù)據(jù)中的缺失數(shù)據(jù)、重復(fù)數(shù)據(jù)、異常數(shù)據(jù)進行處理，提高數(shù)據(jù)質(zhì)量的過程包括四個環(huán)節(jié)，如圖所示處理缺失數(shù)據(jù)。數(shù)據(jù)并不總是完整的，例如，數(shù)據(jù)倉庫的表中，很多條記錄的對應(yīng)字段沒有相應(yīng)值，比如銷售表中的關(guān)于顧客的信息除了名字外，其他的各個屬性都可能是缺失的。處理重復(fù)數(shù)據(jù)。除了真正重復(fù)的數(shù)據(jù)外，這里還包括屬性冗余和屬性數(shù)據(jù)的冗余。去除了重復(fù)記錄后，我們可以提高挖掘的速度和質(zhì)量。處理噪聲數(shù)據(jù)。所謂噪聲數(shù)據(jù)是指數(shù)據(jù)中存在錯誤或異常的數(shù)據(jù)。一個測試數(shù)據(jù)變量中的隨機錯誤或者偏差引起不正確屬性值，噪聲可能是由誤差造成的。對

56、有些常有錯誤的數(shù)據(jù)元組，結(jié)合數(shù)據(jù)所反映的實際問題進行分析進行更改或刪除或忽略。同時也可以結(jié)合模糊數(shù)學(xué)的隸屬函數(shù)尋找約束函數(shù)，根據(jù)前一段歷史趨勢對當前數(shù)據(jù)進行修正。處理異常數(shù)據(jù)。在大規(guī)模數(shù)據(jù)集中，通常存在著不遵循數(shù)據(jù)模型的普遍行為的樣本。這些樣本和其他部分數(shù)據(jù)有很大不同或不一致。這些不一致的數(shù)據(jù)點不一定是噪聲。我們需要盡量剔除真正不正常的數(shù)據(jù)，而保留雖然看起來不正常，但實際上是真實的數(shù)據(jù)。數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)轉(zhuǎn)換根據(jù)數(shù)據(jù)對象不同可以分成兩類對于傳統(tǒng)常規(guī)數(shù)據(jù)的數(shù)據(jù)變換和對于非常規(guī)數(shù)據(jù)的數(shù)據(jù)變換：常規(guī)數(shù)據(jù)轉(zhuǎn)換通常通過線性或者非線性的數(shù)學(xué)變換方法等數(shù)據(jù)規(guī)范化方法有最小-最大規(guī)范化、Z-score規(guī)范化也就是零

57、-均值規(guī)范化、小數(shù)定標規(guī)范化等。非常規(guī)數(shù)據(jù)的數(shù)據(jù)變換，根據(jù)數(shù)據(jù)的特性會有比較多的形式各異的轉(zhuǎn)換方式。比如把音頻和視頻數(shù)據(jù)轉(zhuǎn)換成系統(tǒng)指定的格式等。和數(shù)據(jù)規(guī)約不同，數(shù)據(jù)轉(zhuǎn)換基本上都是無損的，而數(shù)據(jù)規(guī)約對原始數(shù)據(jù)通常都是有損的。常規(guī)數(shù)據(jù)轉(zhuǎn)換采用線性或非線性的數(shù)子變換方法消除它們在空間、屬性、時間及精度等特征表現(xiàn)的差異。常見的常規(guī)數(shù)據(jù)變換方法有以下幾種，而具體采用哪種變換方法應(yīng)根據(jù)涉及的相關(guān)數(shù)據(jù)的屬性特點，根據(jù)研究目的可把定性問題定量化，也可把定量問題定型化進行數(shù)據(jù)操作變換。為減少數(shù)據(jù)復(fù)雜度，用高層概念替換底層概念；專注于數(shù)據(jù)規(guī)范化，使數(shù)據(jù)按比例縮放，落入特定區(qū)域；做屬性構(gòu)造，通過一個或者多個屬性的變

58、換計算構(gòu)造出新的屬性等。數(shù)據(jù)轉(zhuǎn)換對數(shù)據(jù)挖掘模型和輸入數(shù)據(jù)集的要求有較強的依賴，針對不同的數(shù)據(jù)挖掘模型需要進行不同類型的轉(zhuǎn)換。在數(shù)據(jù)轉(zhuǎn)換階段，我們通過一些數(shù)據(jù)轉(zhuǎn)換工具來變換數(shù)據(jù)到我們可以做后續(xù)處理的范圍內(nèi)，或者說把數(shù)據(jù)標準化。所謂數(shù)據(jù)標準化是把區(qū)間較大的數(shù)據(jù)整合到一個相對較規(guī)則的區(qū)間中，包含標準差標準化、極籌標準化和極差正規(guī)化等。數(shù)據(jù)規(guī)約對于大部分數(shù)據(jù)集，一般的數(shù)據(jù)預(yù)處理已經(jīng)足夠，而且數(shù)據(jù)倉庫的存在就是為了保存大量的數(shù)據(jù)。但有些數(shù)據(jù)挖掘算法比較復(fù)雜，即使在少量數(shù)據(jù)上進行挖掘分析仍然需要很長的時間，在大型數(shù)據(jù)集全集上做數(shù)據(jù)分析需要的時間是天文數(shù)字，不可能實現(xiàn)。在這樣的情況下，在應(yīng)用數(shù)據(jù)挖掘技術(shù)以前

59、，可能需要采取一個中間的、額外的步驟來做數(shù)據(jù)規(guī)約。數(shù)據(jù)規(guī)約技術(shù)可以用來得到數(shù)據(jù)集的規(guī)約表示。在規(guī)約之后的數(shù)據(jù)集相比原始數(shù)據(jù)集小得多，但仍然接近于保持原數(shù)據(jù)的完整性，并且結(jié)果與規(guī)約前結(jié)果相同或者幾乎相同。我們盡量不使用數(shù)據(jù)規(guī)約的原因時數(shù)據(jù)規(guī)約對于原始數(shù)據(jù)通常都是有損的。采用維數(shù)消減模型將多維度數(shù)據(jù)壓縮成較少維數(shù)的數(shù)據(jù)，這類方法雖然對原始數(shù)據(jù)通常都是有損的，但其結(jié)果往往具有更大的實用性。數(shù)據(jù)規(guī)約的主要問題是是否可在沒有犧牲成果質(zhì)量的前提下，丟棄這些已準備和預(yù)處理的數(shù)據(jù)。能否在適量的時間和空間里檢查已準備的數(shù)據(jù)和已建立的子集。數(shù)據(jù)規(guī)約算法會有以下這些結(jié)果。更少的數(shù)據(jù)，提高挖掘效率；更高的數(shù)據(jù)挖掘處理

60、精度；簡單的數(shù)據(jù)挖掘處理結(jié)果；更少的數(shù)據(jù)特征。大數(shù)據(jù)支撐平臺大數(shù)據(jù)支撐平臺提供結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一存儲和處理，支持數(shù)據(jù)劃分，索引，檢索，統(tǒng)計分析。數(shù)據(jù)加載方面，可通過編程接口實現(xiàn)數(shù)據(jù)實時接入，通過加載工具由其他數(shù)據(jù)源（例如文件等）導(dǎo)入可實現(xiàn)海量數(shù)據(jù)的離線批量導(dǎo)入。數(shù)據(jù)查詢方面，通過查詢工具可實現(xiàn)數(shù)據(jù)的在線和離線提取，為海量數(shù)據(jù)的在線和離線分析提供條件；通過標準查詢編程接口，可實現(xiàn)更加靈活可定制的數(shù)據(jù)提取方式；通過數(shù)據(jù)比對工具，為數(shù)據(jù)分析提供便利；查詢結(jié)果可視化。為了分離業(yè)務(wù)開發(fā)與大數(shù)據(jù)平臺，允許接入外部數(shù)據(jù)挖掘分析系統(tǒng)。在接入的方式上，可按照類標準SQL語句的方式，組織外部數(shù)據(jù)挖掘系統(tǒng)的