大數(shù)據(jù)時代帶來的機(jī)遇和挑戰(zhàn)

1、大數(shù)據(jù)時代帶來的機(jī)遇和挑戰(zhàn)讀大數(shù)據(jù)時代的心得體會互聯(lián)網(wǎng)高端技術(shù)的創(chuàng)新與發(fā)展，給人類社會帶來了巨大變化。今后20年全球?qū)⒉饺氪髷?shù)據(jù)新時代。高端互聯(lián)網(wǎng)將再鑄新世界。我們正處在一個數(shù)據(jù)爆發(fā)增長的時代。移動互聯(lián)網(wǎng)、移動終端和 數(shù)據(jù)感應(yīng)器的由現(xiàn)，使數(shù)據(jù)以超生人們想象的速度在快速增長。 我通過近一段時間在市委管理干部培訓(xùn)班的學(xué)習(xí)，同時，又拜讀 了維克托邁爾-舍恩伯格的大數(shù)據(jù)時代，深受裨益，特此將感 悟心得記下，與大家分享。一、大數(shù)據(jù)時代的意義本書作者維克托邁爾-舍恩伯格被譽(yù)為“大數(shù)據(jù)時代的預(yù)言 家”，整本書分為三個部分，分別是大數(shù)據(jù)時代的思維變革、商 業(yè)變革和管理變革。大數(shù)據(jù)時代的思維變革分為 “不是隨機(jī)

2、樣本，而是全體數(shù)據(jù)”、 “不是精確性，而是混雜性”、“不是因果關(guān)系，而是相關(guān)關(guān)系”三部分，分別講述了大數(shù)據(jù)時代，數(shù)據(jù)在數(shù)量、性質(zhì)和關(guān)系方面 的變革。當(dāng)數(shù)據(jù)處理技術(shù)得到了較大的發(fā)展之后，數(shù)據(jù)分析就采 取了全數(shù)據(jù)模式，樣本=總體，比如淘寶進(jìn)行用戶行為分析時會就 一個用戶在淘寶里的所有行為進(jìn)行技術(shù)分析，而谷歌對流感的預(yù)測則是對所有相關(guān)詞匯搜索行為進(jìn)行技術(shù)分析。書里說，只有5% 的數(shù)據(jù)是結(jié)構(gòu)化且能適用于數(shù)據(jù)庫的，如果不接收混亂，剩下的95%的非結(jié)構(gòu)化數(shù)據(jù)都無法被利用。用戶在互聯(lián)網(wǎng)上的行為，其 實(shí)就是一種數(shù)據(jù)，比如鼠標(biāo)停留位置、搜索輸入語言、項(xiàng)目點(diǎn)擊 次數(shù)等，但是這些數(shù)據(jù)其實(shí)都不是標(biāo)準(zhǔn)化、結(jié)構(gòu)化的，用戶

3、搜索 板藍(lán)根、感冒靈、吃什么水果治感冒等都說明用戶可能感冒了， 但是其輸入的搜索文字確實(shí)不一樣的，如果要精準(zhǔn)地按照感冒兩 個字來判斷用戶是否感冒，其數(shù)據(jù)分析結(jié)果和實(shí)際結(jié)果應(yīng)該會存 在比較大的差距。大數(shù)據(jù)時代的商業(yè)變革分為內(nèi)容數(shù)據(jù)化、數(shù)據(jù)價值實(shí)現(xiàn)、數(shù) 據(jù)公司類型三部分，隨著信息技術(shù)的變革，我們將文字、方位、 溝通甚至是世間萬物都變成數(shù)據(jù)，然后通過數(shù)據(jù)的再利用、重組、 擴(kuò)展等實(shí)現(xiàn)價值，創(chuàng)造大數(shù)據(jù)公司。同時，根據(jù)所提供價值的數(shù) 據(jù)本身、技能和思維三種不同來源，分別由現(xiàn)了基于這三種來源 的互聯(lián)網(wǎng)公司，而谷歌、亞馬遜等則是包含三者，全面發(fā)展的大 數(shù)據(jù)公司。大數(shù)據(jù)時代的管理變革則分為大數(shù)據(jù)的風(fēng)險和自由度掌

4、控。 大數(shù)據(jù)帶來的風(fēng)險主要包括個人生活的監(jiān)視、隱私的泄露、預(yù)測 懲罰以及數(shù)據(jù)獨(dú)裁，對此，通過一定的管理變革，比如個人隱私 保護(hù)從個人許可到讓數(shù)據(jù)使用者承擔(dān)責(zé)任，預(yù)測分析并不決定個 人動因及相應(yīng)懲罰，避免數(shù)據(jù)獨(dú)裁而培養(yǎng)大數(shù)據(jù)算法師以及反數(shù) 據(jù)壟斷大亨等，來限制大數(shù)據(jù)的發(fā)展不超過我們可以控制的范圍大數(shù)據(jù)時代作者拋由了大數(shù)據(jù)時代處理數(shù)據(jù)理念上的三 大轉(zhuǎn)變：要全體不要抽樣，要效率不要絕對精確，要相關(guān)不要因 果；從萬事萬物數(shù)據(jù)化和數(shù)據(jù)交叉復(fù)用的巨大價值兩個方面，講 述驅(qū)動大數(shù)據(jù)戰(zhàn)車在材質(zhì)和智力方面向前滾動的最根本動力；大 數(shù)據(jù)帝國前夜的脆弱與不安，包括產(chǎn)業(yè)生態(tài)環(huán)境、數(shù)據(jù)安全隱私、 信息公正公開等問題”。

5、二、對大數(shù)據(jù)的感悟思考書中對大數(shù)據(jù)的價值的分析，主要是站在數(shù)據(jù)處理角度，分 析數(shù)據(jù)的再利用、重組數(shù)據(jù)、可擴(kuò)展數(shù)據(jù)、數(shù)據(jù)的折舊值、數(shù)據(jù) 廢氣、開放數(shù)據(jù)等帶來的數(shù)據(jù)創(chuàng)新價值，而我的思考方向則是從 互聯(lián)網(wǎng)行業(yè)角度由發(fā)，分析開放平臺、社交網(wǎng)絡(luò)、電子商務(wù)等利 用大數(shù)據(jù)后所獲得的改革優(yōu)勢。（一）大數(shù)據(jù)與開放平臺大數(shù)據(jù)時代到來之際，開放平臺確實(shí)面臨著機(jī)遇和挑戰(zhàn)。開 放平臺的核心價值是分配流量和消費(fèi)資源給開發(fā)商和應(yīng)用，同時 提高平臺本身用戶的活躍度和粘度，怎么把平臺的流量和用戶更 好地分配給第三方應(yīng)用，把平臺效率最大化是一個巨大的挑戰(zhàn)， 而大數(shù)據(jù)是解決這個挑戰(zhàn)的重要手段。開放平臺收集了大量的用戶數(shù)據(jù)，隨著大數(shù)

6、據(jù)的由現(xiàn)，數(shù)據(jù) 的總和比部分更有價值，當(dāng)我們將多個數(shù)據(jù)集的總和重組在一起 時，重組總和本身的價值也比單個總和更大。由于開放平臺在信 息價值鏈中的特殊位置， 能收集流向每一個 API接口的用戶數(shù)據(jù)， 尋找各個API接口數(shù)據(jù)之間的聯(lián)系，通過數(shù)據(jù)重組尋找數(shù)據(jù)間聯(lián) 系，創(chuàng)造數(shù)據(jù)價值。平臺通過數(shù)據(jù)再利用和數(shù)據(jù)重組所獲得的數(shù) 據(jù)分析結(jié)果，可以預(yù)測用戶的喜好，決定對用戶的應(yīng)用推薦種類 和先后關(guān)系，對平臺流量和用戶的流向起到一定的引導(dǎo)作用，有 助于實(shí)現(xiàn)效率的最大化。（二）大數(shù)據(jù)與社交網(wǎng)絡(luò)大數(shù)據(jù)的價值體現(xiàn)在可以挖掘用戶的行為習(xí)慣和喜好，在凌 亂紛繁的數(shù)據(jù)背后找到更符合用戶興趣和習(xí)慣的產(chǎn)品和服務(wù)，并 對產(chǎn)品和服務(wù)

7、進(jìn)行針對性地調(diào)整和優(yōu)化。比如新浪微博的智能排 序功能，根據(jù)用戶的關(guān)注、標(biāo)簽和微博內(nèi)容等相關(guān)信息，幫助用 戶梳理微博內(nèi)容，對同類微博進(jìn)行合并，對可能感興趣的微博內(nèi) 容進(jìn)行優(yōu)先展示，就是利用大數(shù)據(jù)挖掘用戶的關(guān)系和喜好，提高 用戶體驗(yàn)。書中“數(shù)據(jù)化” 一章講述了隨著信息技術(shù)的變革，文字、方 位、溝通乃至世間萬物都可以數(shù)據(jù)化，也就是數(shù)據(jù)的豐富度。社 交網(wǎng)絡(luò)的興起，大量的 UGC （ User Generated Content ,即用 戶生成內(nèi)容）內(nèi)容、音頻、文本信息、視頻、圖片等非結(jié)構(gòu)化數(shù) 據(jù)的由現(xiàn)都依賴于大數(shù)據(jù)時代的技術(shù)發(fā)展。而這些信息，恰恰可 以成為用戶之間建立關(guān)系或產(chǎn)生交流的催化劑，從而提高社

8、交網(wǎng) 站的用戶活躍度和粘度。社交網(wǎng)絡(luò)越來越成為網(wǎng)民生活中不可或缺的一部分，而用戶 也更容易在社交網(wǎng)站上表露自己的身份信息和習(xí)慣喜好，有利于 社交網(wǎng)站聚集有價值信息的同時，也會帶來更大的數(shù)據(jù)隱憂。首 當(dāng)其沖就是隱私的泄露，即使我們在新浪微博、豆瓣等社交網(wǎng)絡(luò) 上用匿名的方式企圖保護(hù)自己的隱私，但是在大數(shù)據(jù)時代，隨著 數(shù)據(jù)量和種類的增多，大數(shù)據(jù)促進(jìn)了數(shù)據(jù)內(nèi)容的交叉檢驗(yàn)，又讓 我們的隱私無處逃遁。同時，互聯(lián)網(wǎng)的由現(xiàn)，使得對網(wǎng)民的監(jiān)視 更容易、成本更低廉也更有用處。社交網(wǎng)絡(luò)收集的數(shù)據(jù)相較于搜 索引擎、視頻網(wǎng)站、門戶網(wǎng)站等其實(shí)更貼近用戶生活，其大數(shù)據(jù) 戰(zhàn)略也就要更注重對用戶隱私的保護(hù)，不要讓大數(shù)據(jù)發(fā)展超生

9、能 控制的范圍。（三）大數(shù)據(jù)與電子商務(wù)電子商務(wù)本質(zhì)上是一種銷售模式，與線下相比它具有更容易獲取消費(fèi)者數(shù)據(jù)、商品數(shù)據(jù)的特點(diǎn)，天貓雙十一那天，就有2.13億獨(dú)立用戶訪問，超過 1億筆訂單，191億銷售額，這些數(shù)據(jù)并 不只是衡量網(wǎng)站當(dāng)日的銷售情況之后就可以功成身退，而是可以 通過用戶的購物以及其他行為，分析用戶喜好，實(shí)現(xiàn)個性化頁面 展示和推薦，提高廣告轉(zhuǎn)化率。同時，類似京東商城等自建物流 的B2C電子商務(wù)網(wǎng)站，通過相應(yīng)的大數(shù)據(jù)分析，有利于合理安排 倉庫庫存，調(diào)配物流路線，在效率提高和成本節(jié)約上發(fā)揮重要作 用。我們在對購物用戶群體進(jìn)行分析時，經(jīng)常會將其分為三類， 第一類是購物目標(biāo)明確，情況知道自己要買

10、什么東西；第二類是 購物目標(biāo)模糊，知道自己要買的商品類別，具體的品牌、外觀、 價格等特性并不全部都清楚；第三類是沒有購物目標(biāo)，只是以一 種隨便逛逛的心態(tài)，進(jìn)入購物網(wǎng)站，看到喜歡的也會考慮購買。而大數(shù)據(jù)戰(zhàn)略可以幫助電子商務(wù)網(wǎng)站利用用戶之前購物所留下的 信息，包括曾經(jīng)購買過什么，收藏過什么，瀏覽過什么等信息了 解用戶的喜好，向其推薦可能喜歡的商品，可以增加第一類用戶 的額外消費(fèi)，同時簡化后兩類用戶的尋找過程，提高流量的轉(zhuǎn)化 率。同時，對電子商務(wù)企業(yè)來說，對大數(shù)據(jù)的充分利用，就可以 探索進(jìn)行個人化、個性化、精確化和智能化地進(jìn)行廣告推送和產(chǎn) 品推廣，有利于進(jìn)行更便捷的用戶調(diào)研，更精準(zhǔn)的產(chǎn)品營銷，以 及更完善的售后監(jiān)測。三、大數(shù)據(jù)的現(xiàn)實(shí)應(yīng)用如果我們應(yīng)用大數(shù)據(jù)思維，就應(yīng)該讓數(shù)據(jù)活起來、信息連起 來、成果用起來。解決的路徑應(yīng)該是：智能化的增值服務(wù)，商業(yè) 活動的增信服務(wù)，線上線下供需對接服務(wù)。要了解公眾關(guān)心什么， 希望參與什么，創(chuàng)新主體在想什么、有什么、能夠