互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)方案

1、互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)方案 目 錄 TOC o 1-3 h z u HYPERLINK l _Toc526967017 1.行業(yè)概述 PAGEREF _Toc526967017 h 3 HYPERLINK l _Toc526967018 2.方案架構(gòu) PAGEREF _Toc526967018 h 3 HYPERLINK l _Toc526967019 3.方案優(yōu)勢 PAGEREF _Toc526967019 h 4行業(yè)概述近年來互聯(lián)網(wǎng)發(fā)生了巨大的變化，移動互聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、電子商務(wù)大大擴展了互聯(lián)網(wǎng)的疆界和應(yīng)用領(lǐng)域?；ヂ?lián)網(wǎng)行業(yè)在大數(shù)據(jù)技術(shù)浪潮中的異軍突起，也將為整個信息技術(shù)產(chǎn)業(yè)帶來新的機遇。一方面，

2、大數(shù)據(jù)會催生對IT產(chǎn)品與解決方案更多的需求，將涵蓋從硬件、軟件到信息服務(wù)等多個層面；另一方面，越來越多的互聯(lián)網(wǎng)公司正在通過云交付的模式，將自身對于大數(shù)據(jù)集的存儲、計算與分析能力開放給第三方，使得數(shù)據(jù)即服務(wù)（Data as a Service）成為影響產(chǎn)業(yè)格局的新一代業(yè)務(wù)模式?！?方案架構(gòu)互聯(lián)網(wǎng)大數(shù)據(jù)平臺解決方案從邏輯上分為硬件層、存儲層、計算層和其上支持的各種業(yè)務(wù)模型。其中硬件平臺統(tǒng)一為整合計算和存儲能力的存儲服務(wù)器，服務(wù)器之間通過以太網(wǎng)互相連接。這種不再需要門類繁多的存儲設(shè)備和服務(wù)器類型的設(shè)計可以大大簡化管理和建設(shè)的復(fù)雜程度。存儲層存儲上層業(yè)務(wù)中的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。結(jié)構(gòu)化數(shù)據(jù)保存在關(guān)系數(shù)據(jù)庫中，網(wǎng)頁信息等非結(jié)構(gòu)化數(shù)據(jù)已Key-Value的形式保存在NoSql存儲系統(tǒng)中。計算層負責(zé)將存儲層中管理的數(shù)據(jù)轉(zhuǎn)化為上層應(yīng)用所需要的數(shù)據(jù)集，包括數(shù)據(jù)存儲、關(guān)鍵字快速檢索等。業(yè)務(wù)層則可以利用大數(shù)據(jù)平臺提供的存儲和計算資源，這些資源都可以以資源池的方式呈現(xiàn)，以多租戶的形式提供給上層的應(yīng)用。 互聯(lián)網(wǎng)大數(shù)據(jù)平臺邏輯結(jié)構(gòu)示意圖如下所示： 方案優(yōu)勢互聯(lián)網(wǎng)大數(shù)據(jù)平臺解決方案采用ParaStor分布式文件系統(tǒng)、Hadoop大數(shù)據(jù)處理平臺于一體。該平臺可以根據(jù)所需資源進行橫向擴展，并且可以以插件的形式擴展各種應(yīng)用的檢索系統(tǒng)。同