電子商務(wù)小溫課件3

1、第3章 電子商務(wù)技術(shù)基礎(chǔ)（續(xù)）本章內(nèi)容：網(wǎng)絡(luò)技術(shù)基礎(chǔ)網(wǎng)絡(luò)互聯(lián)技術(shù)Web服務(wù)云計(jì)算和大數(shù)據(jù)你了解云計(jì)算嗎？3.4 云計(jì)算與大數(shù)據(jù)3.4.1 云計(jì)算概述美國國家標(biāo)準(zhǔn)與技術(shù)研究院（NIST）定義的云計(jì)算（Cloud computing）：是一種利用互聯(lián)網(wǎng)實(shí)現(xiàn)隨時(shí)隨地、按需、便捷地訪問共享資源池（如計(jì)算設(shè)施、存儲(chǔ)設(shè)備、應(yīng)用程序和服務(wù)等）的計(jì)算模式。計(jì)算資源服務(wù)化是云計(jì)算重要的表現(xiàn)形式，它為用戶屏蔽了數(shù)據(jù)中心管理、大規(guī)模數(shù)據(jù)處理、應(yīng)用程序部署等問題。通過云計(jì)算，用戶可以根據(jù)其業(yè)務(wù)負(fù)載快速申請或釋放資源，并以按需支付的方式對所使用的資源付費(fèi)，在提高服務(wù)質(zhì)量的同時(shí)降低運(yùn)維成本。典型個(gè)人云應(yīng)用1.云計(jì)算特征

2、根據(jù)美國國家標(biāo)準(zhǔn)和技術(shù)研究院的定義，云計(jì)算應(yīng)具備以下幾條特征：按需自助服務(wù)；隨時(shí)隨地通過任何網(wǎng)絡(luò)設(shè)備訪問；多人共享資源池；快速彈性；可被監(jiān)控與測量的服務(wù)。云計(jì)算像水、電一樣的基礎(chǔ)資源，無需用戶建立復(fù)雜的基礎(chǔ)設(shè)施，根據(jù)自身實(shí)際需求可以隨時(shí)隨地獲取存儲(chǔ)、計(jì)算等網(wǎng)絡(luò)資源，最大化資源的使用效率。 2.云計(jì)算服務(wù)形式基礎(chǔ)設(shè)施即服務(wù)（ Infrastructure as a Service, IaaS）：消費(fèi)者可以通過Internet獲得存儲(chǔ)、計(jì)算等基礎(chǔ)設(shè)施服務(wù)；平臺(tái)即服務(wù)（ Platform as a Service, PaaS）：一般包括操作系統(tǒng)、編程語言的運(yùn)行環(huán)境、數(shù)據(jù)庫以及Web服務(wù)器，用戶在該平

3、臺(tái)上可自行部署和運(yùn)行應(yīng)用，為用戶提供可實(shí)施開發(fā)的平臺(tái)環(huán)境和能力；軟件即服務(wù)（ Software as a service, SaaS）：用戶通過Internet租用Web軟件來管理企業(yè)的經(jīng)營活動(dòng)。對于許多小型企業(yè)來說，SaaS是采用先進(jìn)技術(shù)的最好途徑，它消除了企業(yè)購買、構(gòu)建和維護(hù)基礎(chǔ)設(shè)施和應(yīng)用程序的需要。流程即服務(wù)（BPaaS）則是在PaaS和SaaS基礎(chǔ)上演進(jìn)過來的為用戶提供完善的流程服務(wù)，通過流程管理來降低企業(yè)的管理成本，提高管理效率。3.云計(jì)算部署模型 根據(jù)云計(jì)算服務(wù)的形態(tài)可以分為公共云、私有云和混合云。公共云和私有云之間的區(qū)別在于：一是網(wǎng)絡(luò)連接不同，公共云是通過互聯(lián)網(wǎng)（Internet

4、）來進(jìn)行連接訪問，而私有云是通過企業(yè)內(nèi)部網(wǎng)（Intranet）進(jìn)行訪問；二是公共云的服務(wù)對象是最終用戶，私有云的服務(wù)對象是企業(yè)內(nèi)部人員或者是供應(yīng)商和客戶之間在內(nèi)的企業(yè)生態(tài)系統(tǒng)用戶。 相關(guān)概念總結(jié)4.云計(jì)算產(chǎn)業(yè)鏈產(chǎn)業(yè)鏈構(gòu)成：云計(jì)算硬件設(shè)備供應(yīng)商、網(wǎng)絡(luò)基礎(chǔ)設(shè)施提供商、以及軟件和服務(wù)提供商等眾多參與者為用戶、企業(yè)和政府提供云計(jì)算服務(wù)及系統(tǒng)解決方案。從中國云計(jì)算市場產(chǎn)業(yè)鏈來看，互聯(lián)網(wǎng)公司提供基于云的網(wǎng)絡(luò)平臺(tái)、在線存儲(chǔ)等云端服務(wù)在云計(jì)算領(lǐng)域承擔(dān)越來越重要的作用，將不斷推動(dòng)云計(jì)算產(chǎn)業(yè)鏈逐漸成熟和規(guī)范。云計(jì)算廣泛應(yīng)用于政府、企業(yè)及個(gè)人多個(gè)層面 云計(jì)算的應(yīng)用極大的提高了互聯(lián)網(wǎng)的資源利用效率，云計(jì)算實(shí)現(xiàn)了大型數(shù)

5、據(jù)的存儲(chǔ)、計(jì)算、挖掘和分析，最大化的利用資源，降低政府和企業(yè)的開發(fā)成本。對個(gè)人用戶來說，云服務(wù)為用戶提供了不同終端之間的數(shù)據(jù)信息同步和共享，實(shí)現(xiàn)了各終端的實(shí)時(shí)網(wǎng)絡(luò)同步。國務(wù)院關(guān)于促進(jìn)云計(jì)算創(chuàng)新發(fā)展培育信息產(chǎn)業(yè)新業(yè)態(tài)的意見（2015.1）云計(jì)算是推動(dòng)信息技術(shù)能力實(shí)現(xiàn)按需供給、促進(jìn)信息技術(shù)和數(shù)據(jù)資源充分利用的全新業(yè)態(tài)，是信息化發(fā)展的重大變革和必然趨勢。發(fā)展云計(jì)算，有利于分享信息知識和創(chuàng)新資源，降低全社會(huì)創(chuàng)業(yè)成本，培育形成新產(chǎn)業(yè)和新消費(fèi)熱點(diǎn)，對穩(wěn)增長、調(diào)結(jié)構(gòu)、惠民生和建設(shè)創(chuàng)新型國家具有重要意義。主要任務(wù)：增強(qiáng)云計(jì)算服務(wù)能力；提升云計(jì)算自主創(chuàng)新能力；探索電子政務(wù)云計(jì)算發(fā)展新模式；加強(qiáng)大數(shù)據(jù)開發(fā)與利用；

6、統(tǒng)籌布局云計(jì)算基礎(chǔ)設(shè)施；提升安全保障能力。3.4.2 云計(jì)算應(yīng)用谷歌云計(jì)算服務(wù)平臺(tái)谷歌2008年推出Google App Engine開始發(fā)展云計(jì)算服務(wù)，全球有30多個(gè)數(shù)據(jù)中心，服務(wù)器數(shù)量超過100萬臺(tái)，是全球典型的SaaS云計(jì)算服務(wù)商。谷歌的云計(jì)算是針對Google特定的網(wǎng)絡(luò)應(yīng)用程序而制定，主要目的在于支撐自有產(chǎn)品和業(yè)務(wù)體系，包括為搜索引擎、Google+、Gmail等提供統(tǒng)一的基礎(chǔ)設(shè)施和數(shù)據(jù)服務(wù)。目前已逐漸發(fā)展成為企業(yè)、開發(fā)者、用戶重要的云計(jì)算服務(wù)平臺(tái)，同時(shí)自身也是最大的云計(jì)算使用者。百度云計(jì)算平臺(tái) 2011年9月，百度宣布開放云計(jì)算平臺(tái)，對外提供云計(jì)算、存儲(chǔ)資源以及開發(fā)環(huán)境、應(yīng)用API接

7、口等全方位云平臺(tái)服務(wù)，百度的云平臺(tái)服務(wù)是開放了百度的基礎(chǔ)架構(gòu)和技術(shù)，為開發(fā)者提供云基礎(chǔ)環(huán)境構(gòu)建，降低開發(fā)成本和風(fēng)險(xiǎn)，為企業(yè)提供資源和云服務(wù)支持，百度平臺(tái)并不直接服務(wù)終端消費(fèi)者，而是服務(wù)應(yīng)用開發(fā)者。在開放平臺(tái)上，開發(fā)者借助百度平臺(tái)的資源和平臺(tái)優(yōu)勢，節(jié)省開發(fā)成本，將精力和資源投放在產(chǎn)品本身進(jìn)一步降低開發(fā)風(fēng)險(xiǎn)。 阿里云大數(shù)據(jù)生態(tài)圈 阿里云計(jì)算對內(nèi)為大淘寶提供統(tǒng)一的基礎(chǔ)設(shè)施和數(shù)據(jù)服務(wù)；對外為中小企業(yè)和創(chuàng)業(yè)者提供一站式的云計(jì)算解決方案提供服務(wù)，為開發(fā)者提供云開發(fā)環(huán)境和運(yùn)行平臺(tái)。阿里云計(jì)算基于自身的業(yè)務(wù)和用戶優(yōu)勢不斷開拓其他服務(wù)，例如云郵箱、搜索、支付等，借助IT技術(shù)不斷建立數(shù)據(jù)運(yùn)營的技術(shù)開放平臺(tái)，構(gòu)建和

8、積累數(shù)據(jù)庫，助力阿里巴巴在電商、金融大數(shù)據(jù)領(lǐng)域的發(fā)展。 什么是大數(shù)據(jù)？3.4.3 大數(shù)據(jù)概述大數(shù)據(jù)（Big data）的概念維基百科：大數(shù)據(jù)是無法在一定時(shí)間內(nèi)用常規(guī)軟件工具對其內(nèi)容進(jìn)行抓取、管理和處理的數(shù)據(jù)集合。Gartner: 在一個(gè)或多個(gè)維度上超出傳統(tǒng)信息技術(shù)的處理能力的極端信息管理和處理問題。NSF：由科學(xué)儀器、傳感設(shè)備、互聯(lián)網(wǎng)交易、電子郵件、音視頻軟件、網(wǎng)絡(luò)點(diǎn)擊流等多種數(shù)據(jù)源生成的大規(guī)模、多元化、復(fù)雜、長期的分布式數(shù)據(jù)集。研究發(fā)展2008 年末，計(jì)算社區(qū)聯(lián)盟發(fā)表了非常有影響力的白皮書大數(shù)據(jù)計(jì)算: 商務(wù)、科學(xué)和社會(huì)領(lǐng)域的革命性突破。隨后，EMC、IBM、惠普、微軟等知名企業(yè)紛紛通過收購大

9、數(shù)據(jù)相關(guān)廠商來實(shí)現(xiàn)技術(shù)整合，實(shí)施其大數(shù)據(jù)戰(zhàn)略。咨詢構(gòu)相繼發(fā)布與大數(shù)據(jù)相關(guān)的研究報(bào)告McKinsey ，Big data: The next frontier for innovation, competition, and productivity，2011目前，大數(shù)據(jù)的開發(fā)與利用已經(jīng)在醫(yī)療服務(wù)、零售業(yè)、金融業(yè)、制造業(yè)、物流、電信等行業(yè)廣泛展開，并產(chǎn)生了巨大的社會(huì)價(jià)值和產(chǎn)業(yè)空間。大數(shù)據(jù)的特點(diǎn)Volume（大量化）、Variety （多樣化）、Velocity（快速化）數(shù)字?jǐn)?shù)據(jù)迅速增長，信息數(shù)據(jù)化程度提升推動(dòng)數(shù)據(jù)商業(yè)價(jià)值呈現(xiàn)隨著數(shù)字化信息的發(fā)展，人類產(chǎn)生和儲(chǔ)存的數(shù)據(jù)量呈現(xiàn)爆發(fā)式增長，全球的總存儲(chǔ)

10、數(shù)據(jù)量的量級已突破艾字節(jié)（EB）甚至澤字節(jié)（ZB）（1ZB=1024EB，1EB=1024PB，1PB=1024TB）。1TB=1024GB;1GB=1024MB;1MB=1024KB;1KB=1024字節(jié)Volume 信息化高速發(fā)展，促進(jìn)數(shù)據(jù)類型繁多Variety 每分鐘都有大量數(shù)據(jù)產(chǎn)生Velocity 實(shí)戰(zhàn)案例流感預(yù)測“Detecting Influenza Epidemics using Search Engine Query Data”, Nature 2009 5000萬常用搜索詞組訓(xùn)練數(shù)據(jù) 2003-2006; 測試數(shù)據(jù) 20072008實(shí)戰(zhàn)：2009年成功預(yù)測禽流感奧巴馬2012

11、總統(tǒng)競選 the first big data election整合各種數(shù)據(jù)：個(gè)人，民調(diào)，捐款，義工，消費(fèi)者數(shù)據(jù)庫，社交傳媒每夜66000臺(tái)機(jī)器處理個(gè)性化捐款邀請，廣告精準(zhǔn)投放，關(guān)鍵州拉票策略建立選民“可勸說指數(shù)”，對癥下藥亞馬遜：用戶行為數(shù)據(jù)分析-個(gè)性化營銷大數(shù)據(jù)改變數(shù)據(jù)分析思維過去，由于數(shù)據(jù)獲取的困難程度，人們在分析數(shù)據(jù)時(shí)傾向于使用抽樣數(shù)據(jù)，并通過不斷改進(jìn)抽樣方法以提升樣本的精確性，從而對整體數(shù)據(jù)進(jìn)行推算，并竭力挖掘數(shù)據(jù)間的因果關(guān)系。但當(dāng)前數(shù)據(jù)處理思維方式正逐步向全體性、混沌性以及相關(guān)性演變，以適應(yīng)數(shù)據(jù)量的爆發(fā)式增長。大數(shù)據(jù)小數(shù)據(jù)全體采樣容錯(cuò)精確關(guān)聯(lián)因果總結(jié)設(shè)計(jì)發(fā)現(xiàn)假設(shè)通用專用解釋控制參考

12、決策開放封閉大數(shù)據(jù)的具體應(yīng)用方向阿里：多角度挖掘大數(shù)據(jù)價(jià)值，構(gòu)筑數(shù)據(jù)交易平臺(tái)阿里擁有的數(shù)據(jù)主要是交易數(shù)據(jù)以及信用數(shù)據(jù)，其特點(diǎn)在于數(shù)據(jù)覆蓋了從瀏覽到購物到支付的整個(gè)行為鏈。以營銷為例：推出數(shù)據(jù)魔方、淘寶指數(shù) 、聚石塔等數(shù)據(jù)產(chǎn)品，從不同維度對數(shù)據(jù)進(jìn)行挖掘和分析，其最終目的在于建立起數(shù)據(jù)交易平臺(tái) Data Exchange，使阿里成為數(shù)據(jù)集散中心。大數(shù)據(jù)處理流程1. 數(shù)據(jù)采集：數(shù)據(jù)采集手段有傳感器、射頻識別、數(shù)據(jù)檢索分類工具如百度和谷歌等搜索引擎，以及條形碼技術(shù)、移動(dòng)設(shè)備等。交易數(shù)據(jù)和用戶行為數(shù)據(jù)等。2數(shù)據(jù)處理與集成：完成對于已經(jīng)采集到的數(shù)據(jù)進(jìn)行適當(dāng)?shù)奶幚?、清洗去噪以及進(jìn)一步的集成存儲(chǔ)。將這些結(jié)構(gòu)復(fù)

13、雜的數(shù)據(jù)轉(zhuǎn)換為單一的或是便于處理的結(jié)構(gòu)；通過聚類或關(guān)聯(lián)分析的規(guī)則方法將無用或錯(cuò)誤的離群數(shù)據(jù)挑出來過濾掉。3. 數(shù)據(jù)分析：傳統(tǒng)的數(shù)據(jù)處理分析方法有數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、智能算法、統(tǒng)計(jì)分析等；基于云計(jì)算的數(shù)據(jù)分析。4. 數(shù)據(jù)解釋：為了提升數(shù)據(jù)解釋、展示能力，現(xiàn)在大部分企業(yè)都引入了“數(shù)據(jù)可視化技術(shù)”：集合、圖標(biāo)、圖像、像素等等。關(guān)鍵技術(shù)和挑戰(zhàn)關(guān)鍵技術(shù)云計(jì)算平臺(tái)：分布式文件系統(tǒng)；分布式并行數(shù)據(jù)庫；索引與查詢技術(shù)；數(shù)據(jù)分析技術(shù)大數(shù)據(jù)處理工具：Hadoop是目前最為流行的大數(shù)據(jù)處理平臺(tái)；大數(shù)據(jù)可視化技術(shù)挑戰(zhàn)大數(shù)據(jù)集成：廣泛的異構(gòu)性；數(shù)據(jù)質(zhì)量大數(shù)據(jù)分析：數(shù)據(jù)處理的實(shí)時(shí)性大數(shù)據(jù)的安全與隱私大數(shù)據(jù)的IT技術(shù)架構(gòu)3.4.4 大數(shù)據(jù)應(yīng)用（商務(wù)）大數(shù)據(jù)作為繼云計(jì)算、物聯(lián)網(wǎng)之后IT 產(chǎn)業(yè)又一次顛覆性的技術(shù)變革，必將對現(xiàn)代企業(yè)的管理運(yùn)作理念、組織業(yè)務(wù)流程、市場營銷決策以及消費(fèi)者行為模式等產(chǎn)生巨大影響，使得企業(yè)商務(wù)管理決策越來越依賴于數(shù)據(jù)分析而非經(jīng)驗(yàn)甚至直覺。 目前，大數(shù)據(jù)的開發(fā)與利用已經(jīng)在醫(yī)療服務(wù)、零售業(yè)、金融業(yè)、制造業(yè)、物流、電信等行業(yè)廣泛展開，并產(chǎn)生了巨大的社會(huì)價(jià)值和產(chǎn)業(yè)空間。參考閱讀孟小峰等，大數(shù)據(jù)管理：概念、技術(shù)與挑戰(zhàn)，計(jì)算機(jī)研究與發(fā)展，2013.1馮芷艷等，大數(shù)據(jù)背景下商務(wù)管理研究若干前沿課題，管理科學(xué)學(xué)報(bào)，2013.1劉智慧等，大數(shù)據(jù)技術(shù)研究綜述，浙江大學(xué)學(xué)報(bào)