云計(jì)算在經(jīng)營(yíng)分析系統(tǒng)中應(yīng)用的思路信息管理處課件

云計(jì)算在經(jīng)營(yíng)分析系統(tǒng)中應(yīng)用的思路信息管理處

02四月2023

匯報(bào)提綱對(duì)云計(jì)算概念的理解與網(wǎng)格計(jì)算同列的一種新型并行計(jì)算方式，代表為HADOOP，我方代表BigCloud你搭臺(tái)，我唱戲PAAS代表是GoogleAppEnigne，我方代表地市數(shù)據(jù)集市你只管用，剩下我來(lái)辦SAAS代表GMAIL，我方代表經(jīng)分前臺(tái)頁(yè)面的使用虛擬化，按需分配，動(dòng)態(tài)管理，靈活配置IAAS代表藍(lán)云（IBM)，我方代表IDC我們的想法是？充分利用云計(jì)算“低硬件成本，高綜合利用率，可擴(kuò)展性強(qiáng)，高可靠性”的特點(diǎn)，優(yōu)化經(jīng)分現(xiàn)有技術(shù)架構(gòu)和管理模式以HADOOP為代表的云計(jì)算技術(shù)（技術(shù)流）與目前在經(jīng)分等IT系統(tǒng)中大量使用的并行數(shù)據(jù)庫(kù)技術(shù)混裝，充分發(fā)揮兩者特點(diǎn)，追求整體最優(yōu)學(xué)習(xí)IAAS/PAAS/SAAS（管理流）的管理方式和經(jīng)驗(yàn)，探討在設(shè)備虛擬化管理、集成化開(kāi)發(fā)平臺(tái)和在線軟件使用等方面的應(yīng)用，在一經(jīng)、南方基地等建設(shè)及試點(diǎn)項(xiàng)目中充分考慮既要保持創(chuàng)新意識(shí)，建立一個(gè)云計(jì)算的新世界，又要充分利用現(xiàn)有設(shè)備、資源和技術(shù)，保護(hù)原有投資從2003年建設(shè)至今，全國(guó)經(jīng)營(yíng)已經(jīng)形成了六千TB存儲(chǔ)和四億TPCC處理量的軟硬件體系，且運(yùn)行平穩(wěn)。無(wú)論在南方基地集中化建設(shè)方案還是云計(jì)算應(yīng)用方案的時(shí)候，都要充分考慮現(xiàn)有系統(tǒng)的利舊，發(fā)揮余熱經(jīng)分已經(jīng)是一個(gè)穩(wěn)定的系統(tǒng)，云計(jì)算這個(gè)尚未在電信及相關(guān)行業(yè)商用案例的新技術(shù)在其中的運(yùn)用一定要穩(wěn)步推進(jìn)匯報(bào)提綱2010年擬開(kāi)展研究的方向獲取層應(yīng)用層數(shù)據(jù)層訪問(wèn)層結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換ETL數(shù)據(jù)挖掘云存儲(chǔ)網(wǎng)頁(yè)分類(lèi)互聯(lián)網(wǎng)信息收集應(yīng)用搜索云數(shù)據(jù)庫(kù)前端展現(xiàn)應(yīng)用服務(wù)數(shù)據(jù)封裝云備份

2009年已經(jīng)在云計(jì)算應(yīng)用到經(jīng)分ETL和數(shù)據(jù)挖掘方面進(jìn)行了探索2010年擬繼續(xù)從信息獲取、數(shù)據(jù)存儲(chǔ)和處理、數(shù)據(jù)挖掘幾個(gè)方面開(kāi)展前瞻性研究其他云應(yīng)用課題，例如前端展現(xiàn)云化、應(yīng)用服務(wù)云化和云數(shù)據(jù)庫(kù)等我們需積極跟進(jìn)技術(shù)發(fā)展方向研究課題2：

基于云計(jì)算平臺(tái)的數(shù)據(jù)挖掘工具優(yōu)化及應(yīng)用SAAS的數(shù)據(jù)挖掘工具研究?jī)?nèi)容：以SAAS模式向地市分公司數(shù)據(jù)挖掘應(yīng)用試點(diǎn)提供挖掘服務(wù)，并進(jìn)行支撐能力的試驗(yàn)評(píng)估。根據(jù)在地市分公司數(shù)據(jù)挖掘應(yīng)用試點(diǎn)中對(duì)云計(jì)算挖掘工具的實(shí)驗(yàn)評(píng)估情況，向云計(jì)算挖掘工具提出改進(jìn)和完善的需求，包括功能、性能、易用性、數(shù)據(jù)安全性等。目前進(jìn)展：擬參考目前主流數(shù)據(jù)挖掘工具提出優(yōu)化措施，并在上海、河南和福建公司進(jìn)行驗(yàn)證類(lèi)比軟件：SPSSClementine基于云計(jì)算平臺(tái)的數(shù)據(jù)挖掘工具工作流引擎/WebGUI裝載數(shù)據(jù)挖掘算法集數(shù)據(jù)挖掘向?qū)?知識(shí)庫(kù)數(shù)據(jù)管理及探索用戶權(quán)限管理預(yù)處理結(jié)果可視化主要優(yōu)化方向完善裝載、預(yù)處理等功能按照經(jīng)分特點(diǎn)設(shè)計(jì)挖掘算法實(shí)現(xiàn)向?qū)酵诰?，?jiǎn)化使用研究課題3：

基于云計(jì)算平臺(tái)的WAP網(wǎng)頁(yè)自動(dòng)分類(lèi)技術(shù)研究非結(jié)構(gòu)化數(shù)據(jù)分析研究?jī)?nèi)容：基于云計(jì)算的搜索引擎技術(shù)，實(shí)現(xiàn)WAP網(wǎng)頁(yè)自動(dòng)分類(lèi),主要內(nèi)容包括網(wǎng)頁(yè)采集、分析、自動(dòng)分類(lèi)、分類(lèi)檢索。輔助經(jīng)分完成客戶WAP訪問(wèn)特征分析的功能。類(lèi)比軟件：自動(dòng)網(wǎng)頁(yè)分類(lèi)軟件步驟1：根據(jù)統(tǒng)計(jì)發(fā)現(xiàn)待分類(lèi)網(wǎng)頁(yè)列表步驟2：派出爬蟲(chóng)抓回目標(biāo)頁(yè)面步驟3：根據(jù)分類(lèi)規(guī)則進(jìn)行分類(lèi)識(shí)別某些熱點(diǎn)Wap或Http網(wǎng)頁(yè)網(wǎng)頁(yè)1體育類(lèi)籃球網(wǎng)頁(yè)2娛樂(lè)類(lèi)音樂(lè)網(wǎng)頁(yè)3新聞?lì)悤r(shí)事研究課題4：

基于云計(jì)算平臺(tái)的互聯(lián)網(wǎng)信息收集技術(shù)研究非結(jié)構(gòu)化數(shù)據(jù)分析研究?jī)?nèi)容：基于“云計(jì)算”的搜索引擎技術(shù)，實(shí)現(xiàn)行業(yè)信息垂直搜索，根據(jù)相關(guān)性等因素提供檢索系統(tǒng)，給經(jīng)分用戶提供互聯(lián)網(wǎng)情報(bào)分析信息。試點(diǎn)側(cè)重在手機(jī)終端信息、號(hào)碼黃頁(yè)、競(jìng)爭(zhēng)情報(bào)三個(gè)角度。輔助經(jīng)分完成相關(guān)分析應(yīng)用類(lèi)比軟件：酷訊機(jī)票搜索、政府互聯(lián)網(wǎng)輿情系統(tǒng)手機(jī)網(wǎng)站垂直搜索——終端配置信息黃頁(yè)網(wǎng)站垂直搜索——電話黃頁(yè)信息互聯(lián)網(wǎng)情報(bào)分析——用戶反饋——競(jìng)爭(zhēng)動(dòng)向研究課題6：

經(jīng)營(yíng)分析系統(tǒng)引入云存儲(chǔ)技術(shù)的研究及實(shí)現(xiàn)基于云平臺(tái)的NAS研究?jī)?nèi)容：引入云計(jì)算技術(shù)，研究并驗(yàn)證云計(jì)算分布式數(shù)據(jù)存儲(chǔ)系統(tǒng)實(shí)現(xiàn)低成本經(jīng)分系統(tǒng)數(shù)據(jù)存儲(chǔ)與備份能力的可能性,從功能、性能、成本等多角度進(jìn)行評(píng)估,探討云存儲(chǔ)在南北基地應(yīng)用的可能性類(lèi)比軟件：NAS/IBMsoFS/IBMXIV基地云存儲(chǔ)系統(tǒng)IP網(wǎng)X省經(jīng)分X省經(jīng)分X省經(jīng)分X省經(jīng)分X省經(jīng)分X省經(jīng)分通過(guò)類(lèi)似NFS的操作系統(tǒng)API形式，將近線和離線數(shù)據(jù)備份到云存儲(chǔ)系統(tǒng)中綜合運(yùn)用云計(jì)算，實(shí)現(xiàn)用戶WAP訪問(wèn)行為特征分析和WAP業(yè)務(wù)分析監(jiān)控。應(yīng)用場(chǎng)景：

用戶WAP訪問(wèn)特征分析——應(yīng)用需求應(yīng)用場(chǎng)景：

用戶WAP訪問(wèn)特征分析——數(shù)據(jù)流Internet訪問(wèn)WAP網(wǎng)關(guān)互聯(lián)網(wǎng)站省經(jīng)一經(jīng)云平臺(tái)用戶用戶ID訪問(wèn)URL訪問(wèn)時(shí)間按URL匯總傳遞給一經(jīng)WAP流量分析（重點(diǎn)網(wǎng)站）根據(jù)關(guān)鍵詞搜索技術(shù)實(shí)現(xiàn)WAP網(wǎng)站分類(lèi)利用GridFtp