2014年大數(shù)據(jù)面臨的幾道難關(guān)

1、精選文檔2014年大數(shù)據(jù)面臨的幾道難關(guān) 大數(shù)據(jù)從“概念”走向“價值”，基于大數(shù)據(jù)的推舉與猜測逐步流行，數(shù)據(jù)科學(xué)將興起，平安與隱私成為重要問題，大數(shù)據(jù)產(chǎn)業(yè)成為戰(zhàn)略性產(chǎn)業(yè)這是中國計算機(jī)學(xué)會大數(shù)據(jù)專家委員會對“大數(shù)據(jù)”2014年十大趨勢猜測中的內(nèi)容。在這份猜測中，還包括數(shù)據(jù)商品化與數(shù)據(jù)共享聯(lián)盟化，大數(shù)據(jù)生態(tài)環(huán)境逐步進(jìn)展等。同時，大數(shù)據(jù)專家委員會猜測，2014年，互聯(lián)網(wǎng)和電子商務(wù)、金融（股市猜測、金融分析）、健康醫(yī)療（流行病監(jiān)控和猜測等），生物信息、制藥等方面將會有令人矚目的應(yīng)用。剛剛過去的2013年，大數(shù)據(jù)在醫(yī)療、金融、電子商務(wù)和城市管理等方面應(yīng)用較多。“大數(shù)據(jù)”從2012年預(yù)熱，到2013年被各行

2、各業(yè)所提及，各種輿論聲音紛雜，有人認(rèn)為這是一個機(jī)遇，也有人認(rèn)為這會是一場“泡沫”。2014年，大數(shù)據(jù)將面臨的問題有哪些？數(shù)據(jù)開放仍是大問題數(shù)據(jù)應(yīng)用的前提是數(shù)據(jù)開放，這已經(jīng)是共識。中國工程院院士、中國互聯(lián)網(wǎng)協(xié)會理事長鄔賀銓指出，中國人口居世界首位，但2010年中國新存儲的數(shù)據(jù)為250PB，僅為日本的60%和北美的7%。目前我國一些部門和機(jī)構(gòu)擁有大量數(shù)據(jù)但寧愿自己不用也不愿供應(yīng)應(yīng)有關(guān)部門共享，導(dǎo)致信息不完整或重復(fù)投資。2012年中國的數(shù)據(jù)存儲量達(dá)到64EB，其中55%的數(shù)據(jù)需要肯定程度的愛護(hù)，然而目前只有不到一半的數(shù)據(jù)得到愛護(hù)。去年12月14日，在中國計算機(jī)學(xué)會青年科學(xué)家論壇（YOCSEF）上，中

3、科院地理科學(xué)與資源爭辯所爭辯員、中國工程院院士孫九林先生回顧了我國科學(xué)數(shù)據(jù)開放共享歷程：2003年，科技部在財政部的支持下設(shè)立了科技基礎(chǔ)條件平臺建設(shè)專項，科學(xué)數(shù)據(jù)共享工程作為重要組成部分納入科技基礎(chǔ)條件平臺建設(shè)；2008年，科技部發(fā)布973方案資源環(huán)境領(lǐng)域數(shù)據(jù)匯交管理方法；2009年，第一批科學(xué)數(shù)據(jù)共享項目驗收，轉(zhuǎn)入運(yùn)行服務(wù)階段；2011年，國家科技基礎(chǔ)條件平臺組織首批認(rèn)定。孫九林介紹了美國在數(shù)據(jù)開放方面的做法。美國政府供應(yīng)政策和經(jīng)費(fèi)保障，使數(shù)據(jù)信息中心群成為國家信息生產(chǎn)和服務(wù)基地，保障數(shù)據(jù)信息供應(yīng)不斷，利用網(wǎng)絡(luò)把數(shù)據(jù)和信息最便捷、準(zhǔn)時地送到包括科學(xué)家、政府職員、公司職員、學(xué)校師生在內(nèi)全部公民

4、的桌上和家庭中，把全社會帶進(jìn)了信息化時代?！白屆恳晃还裨跀?shù)據(jù)、信息、學(xué)問、理論、決策、效益的各個環(huán)節(jié)上發(fā)揮才華，讓民眾把數(shù)據(jù)信息流淌過程中和應(yīng)用過程中的各種價值充分挖掘出來，國家為他們才華的發(fā)揮和價值的挖掘帶好路、服務(wù)好、制造好環(huán)境。”孫九林認(rèn)為這就是美國政府選擇的數(shù)據(jù)信息共享的“大循環(huán)”道路。該思路在利益安排上的基本點(diǎn)就是讓全社會受益，讓整個國家受益。目前，我國還沒有國家層面的特地適合數(shù)據(jù)共享的國家法律，只有相關(guān)的條例、法規(guī)、章程、意見等。針對于大數(shù)據(jù)利用的前端數(shù)據(jù)共享的問題，孫九林認(rèn)為，十多年的數(shù)據(jù)共享取得了很大的成效，特殊是全社會的共享理念得到共識，但存在的問題仍舊很突出：缺少國家層面

5、的政策，已有分散的若干意見約束力不夠，高層管理人員對數(shù)據(jù)開放共享的深刻意義的生疏有待提高；現(xiàn)有國家數(shù)據(jù)共享平臺難以滿足國家進(jìn)展和科技創(chuàng)新對數(shù)據(jù)資源的需求；缺少數(shù)據(jù)開放共享的專職隊伍和相應(yīng)的數(shù)據(jù)專家以及管理人才；缺少對專職數(shù)據(jù)共享服務(wù)人員的合理評價機(jī)制和標(biāo)準(zhǔn)等等。急需“國家大數(shù)據(jù)戰(zhàn)略”宏觀統(tǒng)籌“不要被大數(shù)據(jù)（Big Data）的 Big 誤導(dǎo)，大數(shù)據(jù)更強(qiáng)調(diào)的不是數(shù)據(jù)大，而是數(shù)據(jù)挖掘?！痹诘谑畬脟倚畔⒒瘜＜艺搲?，鄔賀銓院士指出，大數(shù)據(jù)需要更強(qiáng)調(diào)數(shù)據(jù)挖掘利用，關(guān)鍵的是要有國家大數(shù)據(jù)戰(zhàn)略。鄔賀銓提出，需要制定國家大數(shù)據(jù)進(jìn)展戰(zhàn)略，大數(shù)據(jù)是一個應(yīng)用驅(qū)動性很強(qiáng)的服務(wù)，其標(biāo)準(zhǔn)和產(chǎn)業(yè)格局尚未形成，這是我國跨

6、越進(jìn)展的機(jī)會，但切忌一哄而起在目的不明的狀況下處處建設(shè)大數(shù)據(jù)中心，處處搞“數(shù)據(jù)房地產(chǎn)”，而是需要從戰(zhàn)略上重視大數(shù)據(jù)的開發(fā)利用，將它作為轉(zhuǎn)變經(jīng)濟(jì)增長方式的有效抓手。同時，我國需要盡快制定“信息愛護(hù)法”和“信息公開法”，既要鼓舞面對群體而且服務(wù)于社會的數(shù)據(jù)挖掘，又要防止針對個體侵害隱私的行為，提倡數(shù)據(jù)共享又要防止數(shù)據(jù)被濫用。中國計算機(jī)學(xué)會專家委員會指出：大數(shù)據(jù)時代有兩點(diǎn)格外有利于中國信息產(chǎn)業(yè)的進(jìn)展，第一是大數(shù)據(jù)技術(shù)發(fā)開源為主，迄今為止沒有形成技術(shù)壟斷；其次點(diǎn)，中國的人口和經(jīng)濟(jì)規(guī)模打算了中國的數(shù)據(jù)資產(chǎn)規(guī)模全球最大。因此，政府、學(xué)界、產(chǎn)業(yè)界和資本市場應(yīng)當(dāng)通力合作，在確保國家數(shù)據(jù)平安的前提下，最大程度地

7、開放數(shù)據(jù)資產(chǎn)，釋放大數(shù)據(jù)的巨大價值。目前已經(jīng)有一批企業(yè)開頭用數(shù)據(jù)創(chuàng)業(yè)。在國外已經(jīng)有不少用數(shù)據(jù)供應(yīng)服務(wù)、做數(shù)據(jù)分析、進(jìn)行可視化爭辯的公司，有些已經(jīng)取得不錯的業(yè)績，甚至有很好的前景而拒絕大公司收購。有人猜測，假如國內(nèi)互聯(lián)網(wǎng)創(chuàng)業(yè)者，能從海量的“垃圾”信息中嗅出些端倪，找到某個切入點(diǎn)，沒準(zhǔn)能成為行業(yè)的佼佼者。不過，現(xiàn)在在國內(nèi)找出個像樣的“大數(shù)據(jù)”初創(chuàng)公司并非易事；但也有人認(rèn)為，正是有這樣的空白存在，才讓人看到機(jī)遇。各國大數(shù)據(jù)人才緊缺大數(shù)據(jù)人才無疑是緊缺人才。Gartner詢問公司猜測，大數(shù)據(jù)將為全球帶來440萬個IT新崗位和上千萬個非IT崗位。麥肯錫公司估計，美國到2018年深度數(shù)據(jù)分析人才缺口將達(dá)1

8、4萬19萬人，能夠分析數(shù)據(jù)掛念公司獲得經(jīng)濟(jì)效益的技術(shù)及管理人才有150萬人的缺口。中國能理解與應(yīng)用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。IDC（互聯(lián)網(wǎng)數(shù)據(jù)中心）發(fā)布猜測報告稱，2017年大數(shù)據(jù)技術(shù)和服務(wù)市場將增至324億美元，實(shí)現(xiàn)27%的年復(fù)合增長率。此外還猜測基于大數(shù)據(jù)的決策解決方案將開頭取代或影響學(xué)問工作者角色，這勢必引發(fā)人才轉(zhuǎn)型。面對大數(shù)據(jù)人才的短缺，各國如何在培育數(shù)據(jù)科學(xué)家和數(shù)據(jù)工程師？2013中國大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)進(jìn)展白皮書是由中國計算機(jī)學(xué)會大數(shù)據(jù)專家委員會歷時半年多編寫的，其中特地梳理了對大數(shù)據(jù)人才的培育。在我國，香港中文高校從2008年起設(shè)立“數(shù)據(jù)科學(xué)商業(yè)統(tǒng)計”科學(xué)碩士學(xué)位；復(fù)旦高校從2007年起開設(shè)數(shù)據(jù)科學(xué)爭辯班，2010年開頭招收數(shù)據(jù)科學(xué)博士爭辯生，并從2013年起開設(shè)數(shù)據(jù)科學(xué)課程；北京航空航天高校于2012年設(shè)立大數(shù)據(jù)工程碩士學(xué)位。在美國，加州高校伯克利分校從2011年開設(shè)數(shù)據(jù)科學(xué)導(dǎo)論；伊利諾伊高校香檳分校從2011年起舉辦“數(shù)據(jù)科學(xué)暑期爭辯班”；哥倫比亞高校從2013年起開設(shè)應(yīng)用數(shù)據(jù)科學(xué)課程，并從2013年起開設(shè)相關(guān)培訓(xùn)項目，還方案從2014年起設(shè)立碩士學(xué)位，2015年設(shè)立博士學(xué)位；紐約高校從2013年秋季起設(shè)立“數(shù)據(jù)科學(xué)”碩士學(xué)位在英國，鄧迪高校從2013年起設(shè)立“數(shù)據(jù)科