精誠ITS大數(shù)據(jù)應(yīng)用解決方案和案例交流

精誠中國ITS

大數(shù)據(jù)應(yīng)用解決方案與案例介紹2精誠中國ITS業(yè)務(wù)介紹精誠集團（SYSTEXCoporation）成立于1976年，1995年上市臺股代號6214員工人數(shù)3000+

(中國員工人數(shù)800+)專業(yè)技術(shù)人員1600+

客戶數(shù)40000+2013年合并營收約156億2012年合并營收約145億2011年合并營收約137億位居臺灣前一百大服務(wù)業(yè)，為跨足兩岸三地及東南亞的亞洲區(qū)域級信息服務(wù)集團公司，在臺灣、中國、香港、新加坡、印度尼西亞與泰國設(shè)有48個營運據(jù)點。臺灣五百大服務(wù)業(yè)調(diào)查，精誠連續(xù)4年蟬聯(lián)軟件業(yè)第1名唯一連續(xù)三年進入兩岸三地一千大排行的臺灣軟件業(yè)者ITS（ITasService）由廣州瑞寶和精誠精詮兩家國內(nèi)注冊公司組成，成立時間2001年/2000年。ISO9001：2008質(zhì)量管理體系認證，系統(tǒng)集成(三級)資質(zhì)認證，廣東省計算機信息系統(tǒng)安全服務(wù)認證等。主要面向政府及公用事業(yè)、電信運營商、金融（銀行/證券/保險）、大型制造上市公司等行業(yè)客戶提供IT信息技術(shù)服務(wù)區(qū)域整合優(yōu)勢渠道通路優(yōu)勢資訊技術(shù)優(yōu)勢人才服務(wù)優(yōu)勢臺北上海雙營運總部跨域運作提供全方位專業(yè)服務(wù)的IT“智”造業(yè)用IT創(chuàng)新推動企業(yè)前進的力量完善的咨詢規(guī)劃

周密的建置設(shè)計

配套的行業(yè)應(yīng)用

全面的運維服務(wù)云中心

行動中心

大數(shù)據(jù)中心哈爾濱西安昆明長沙南寧?？谀喜錆h太原石家莊濟南呼和浩特沈陽大連貴陽亞太北京廈門杭州蘇州上海香港深圳廣州南京新竹臺中高雄泰國新加坡重慶印度尼西亞臺北長春青島成都寧波東莞佛山福州營運點服務(wù)區(qū)域鄭州布局全國，提供兩岸三地跨區(qū)維運服務(wù)異質(zhì)平臺集成大中華平臺(資金流,物流,服務(wù))優(yōu)質(zhì)產(chǎn)品代理福州員工總數(shù)近200人，平均工作年限5年以上技術(shù)人員本科碩士及以上學(xué)歷占70%以上專業(yè)人才：擁有大批熟悉電信、金融和大企業(yè)行業(yè)應(yīng)用和IT技術(shù)專家擁有多年豐富的電信級關(guān)鍵應(yīng)用和系統(tǒng)服務(wù)經(jīng)驗通過資質(zhì)認證人員（高級項目經(jīng)理、主機存儲高級認證、專業(yè)備份高級認證、虛擬化技術(shù)、大數(shù)據(jù)Hadoop等）占技術(shù)隊伍比例超過30%網(wǎng)羅優(yōu)秀人才，和行業(yè)用戶共同成長業(yè)績不斷增長、服務(wù)營收穩(wěn)步提高2013年業(yè)績超過2億元年增長率：15%，服務(wù)營收占比超過25%始終關(guān)注核心數(shù)據(jù)安全和價值公司定位一個核心：以客戶不斷增長的業(yè)務(wù)數(shù)據(jù)為核心，提供虛擬化應(yīng)用整體解決方案；專注客戶三大行業(yè)：電信運營商、金融（銀行/證券/保險）、大型制造上市公司專業(yè)技術(shù)四個領(lǐng)域：存儲備份&數(shù)據(jù)容災(zāi)、虛擬化應(yīng)用整合、數(shù)據(jù)安全管理、IT專業(yè)服務(wù)“只有專注、才能專業(yè)”“數(shù)據(jù)始終是用戶最重要的資產(chǎn)”“聚焦數(shù)據(jù)管理、云計算和大數(shù)據(jù)”專注于技術(shù)“技術(shù)專家”專注于廠家“服務(wù)專家”專注于客戶“行業(yè)專家”BigData大數(shù)據(jù)DataCloud云互聯(lián)網(wǎng)物聯(lián)網(wǎng)Social社區(qū)Mobility行動化我們的目標？ProdutsServiceMarketTechnology虛擬化應(yīng)用整體解決方案我們的能力？我們是誰？Originalsource:/blog/big-data-refinery-fuels-next-generation-data-architecture聲音檔案

影片檔案

圖形檔案文件檔案文字數(shù)據(jù)XML檔案WebLogs點擊事件社交網(wǎng)絡(luò)關(guān)聯(lián)圖譜新聞Feeds傳感器嵌入設(shè)備RFIDTags地理信息

GPS點位事件

其他BigData精煉處理場NewSQLNoSQLSQLNewSQLMPPEDW商業(yè)智慧與在線分析Web,Mobile,CRM,ERP,SCM,…Dashboard,Report,Visualization,…商務(wù)交易與行為互動因應(yīng)未來巨量數(shù)據(jù)快速流動的商業(yè)環(huán)境OLTPOLAP提供大數(shù)據(jù)平臺業(yè)務(wù)價值分析配合國家信息消費和寬帶中國戰(zhàn)略，積極落地實現(xiàn)大數(shù)據(jù)應(yīng)用商業(yè)價值電信運營商：歷史數(shù)據(jù)管理流量經(jīng)營分析、社交應(yīng)用分析、客戶行為偏好分析、精細化營銷xDR實時過濾與分析近實時位置信息分析與營銷金融-證券基金：智能分析和推薦系統(tǒng)近實時模擬與修正算法交易、高頻交易系統(tǒng)市場情感分析金融-銀行保險：海量歷史數(shù)據(jù)查詢與分析風險管控與防欺詐內(nèi)部運維日志管理與安全審計政府與公共事業(yè)統(tǒng)一數(shù)據(jù)存儲中心社交網(wǎng)絡(luò)分析、輿情監(jiān)控與分析制造業(yè)物聯(lián)網(wǎng)實時監(jiān)控與告警PHD實時信息綜合管理2013-9-16Etu獲《計算機世界》《2013大數(shù)據(jù)優(yōu)秀產(chǎn)品獎》2013-6-6Etu成為Cloudera亞洲第一個IHV全球合作伙伴2013-4-2Etu成功協(xié)助國內(nèi)電商用戶精準營銷，營收貢獻占比12%2013-2-26基于電信營運智慧中心M-Factory參展巴塞羅那“移動通訊世界大會”2013-1-15Etu獲DOIT“大數(shù)據(jù)風云榜-2012年度打資料創(chuàng)新企業(yè)”，是其中唯一獲獎的亞洲海量數(shù)據(jù)處理品牌虛擬化數(shù)據(jù)中心：完整的虛擬化解決方案可實現(xiàn)對虛擬環(huán)境的簡單以及自動管理智能統(tǒng)一、自動化的管理物理架構(gòu)及虛擬架構(gòu)動態(tài)的系統(tǒng)調(diào)整虛擬服務(wù)器智能

控制AdviseAssessAutomate借助虛擬服務(wù)器環(huán)境在實時環(huán)境中優(yōu)化服務(wù)器利用率按需實現(xiàn)數(shù)據(jù)的調(diào)度及精簡配置存儲陣列池智能化的管理環(huán)境遷移及管理數(shù)百個虛擬服務(wù)器：實現(xiàn)與存儲及網(wǎng)絡(luò)無關(guān)的服務(wù)器變更

通過存儲復(fù)制實現(xiàn)遠程異地虛擬服務(wù)器容災(zāi)HostVM1

VM2

VM3實現(xiàn)快速的災(zāi)難恢復(fù)及硬件更換部署監(jiān)控補丁開發(fā)遷移統(tǒng)一管理及用戶自服務(wù)系統(tǒng)生產(chǎn)環(huán)境的簡單數(shù)據(jù)管理布局云計算，提供虛擬化整體解決方案應(yīng)用虛擬化客戶端虛擬化存儲虛擬化網(wǎng)絡(luò)虛擬化計算虛擬化積極推進緩存存儲和內(nèi)存計算，助力高頻交易系統(tǒng)的應(yīng)用金融服務(wù)對沖基金交易分析基于市場交易披露的實時風險系統(tǒng)管理消費品供應(yīng)鏈風險管理召回商品的追蹤產(chǎn)品生命周期管理和成本分攤EPA標準法規(guī)成品可用性分析實時質(zhì)保和缺陷分析零售門店運維POS銷售數(shù)據(jù)分析平衡分析實時完整的多渠道定價產(chǎn)品損壞、退貨和變質(zhì)制造業(yè)石油天然氣行業(yè)運維績效管理制造業(yè)的產(chǎn)品和維護分析實時資產(chǎn)利用率分析更快更好的決策創(chuàng)造革新的應(yīng)用降低IT的負擔和風險系統(tǒng)內(nèi)核文件系統(tǒng)FileSystemVirtualStorageLayer(VSL)ioMemory應(yīng)用/數(shù)據(jù)庫11應(yīng)用程序WeblogsLog4J,JMS,JMX.NETeventsCodeandscripts網(wǎng)絡(luò)設(shè)備ConfigurationssyslogSNMPnetflow數(shù)據(jù)庫ConfigurationsAudit/querylogsTablesSchemas虛擬化與云端HypervisorGuestOS,AppsCloudLinux/UnixConfigurationssyslogFilesystemps,iostat,topWindowsRegistryEventlogsFilesystemsysinternalsDB用戶交易行為分析網(wǎng)上交易分析與監(jiān)控IT智慧運維與監(jiān)控資訊安全KPI量化稽核監(jiān)控稽核報表事件管理事件反查智能庫企業(yè)營運智慧管理中心IT服務(wù)管理平臺網(wǎng)絡(luò)營運平臺資安監(jiān)控平臺Splunk

智能維運平臺（Splunk–OperationalIntelligencePlatform）提供智慧運維管理的最佳實踐公司主要解決方案一覽12數(shù)據(jù)安全管理及系統(tǒng)網(wǎng)絡(luò)安全

虛擬化應(yīng)用整合自主價值的能力培養(yǎng)存儲備份與數(shù)據(jù)容災(zāi)

大數(shù)據(jù)處理與智慧運營集團優(yōu)勢與地方智慧相結(jié)合，在行業(yè)客戶中形成新能力和新價值存儲基礎(chǔ)架構(gòu)設(shè)計及咨詢服務(wù)統(tǒng)一存儲設(shè)計及異構(gòu)存儲虛擬化整合存儲分層設(shè)計及數(shù)據(jù)分級存儲管理集中備份平臺建設(shè)及優(yōu)化服務(wù)業(yè)務(wù)連續(xù)性管理及容災(zāi)咨詢設(shè)計存儲及應(yīng)用的高可用管理及設(shè)計信息全生命周期管理服務(wù)虛擬化數(shù)據(jù)中心整合企業(yè)私有云建設(shè)實施及咨詢服務(wù)應(yīng)用整合與虛擬化集成實施及咨詢服務(wù)存儲虛擬化整合管理及部署服務(wù)研發(fā)安全、安全代維、遠程辦公的整體解決方案咨詢及實施企業(yè)桌面云系統(tǒng)建設(shè)部署及咨詢服務(wù)云計算咨詢服務(wù)及集成實施服務(wù)數(shù)據(jù)歸檔平臺及審計管理核心數(shù)據(jù)防泄漏管理及咨詢服務(wù)終端安全及網(wǎng)絡(luò)準入控制網(wǎng)絡(luò)安全防護及核心主機保障管理內(nèi)容安全審計及日志審計管理核心知識產(chǎn)權(quán)保護管理及咨詢服務(wù)ISMS安全體系規(guī)劃與審計服務(wù)Etu

BigData基于Hadoop的海量數(shù)據(jù)分析系統(tǒng)海量數(shù)據(jù)網(wǎng)上精準推薦、交易行為分析、影像資料分析DCS數(shù)據(jù)庫性能優(yōu)化和InMemoryComputing內(nèi)存計算基于Splunk的智慧運維管理與業(yè)務(wù)日志分析與審計系統(tǒng)公司榮譽和業(yè)務(wù)合作Symantec認證TSPP技術(shù)支持中心、SymantecFY08/09/10/11/12華南區(qū)最佳技術(shù)合作伙伴Symantec大中華區(qū)第一家Master大師級服務(wù)資質(zhì)認證、Symantec亞太區(qū)最有價值合作伙伴HDS金牌合作伙伴及技術(shù)認證服務(wù)提供商、EMCT1最高級別代理及白金級解決方案供應(yīng)商IBM,HP服務(wù)器與存儲合作伙伴、Oracle金牌級別代理商、Overland大中華區(qū)總代理VMware白金級別代理商、Citrix金牌級別代理商、SAPOEM大中華區(qū)總代理Fusion-IO區(qū)域總代理、Informatica

T1級別代理華為認證的技術(shù)服務(wù)供應(yīng)商……技術(shù)支持服務(wù)熱線（Hotline）： 800-830-9730/400-820-6821和用戶共同經(jīng)歷的成長電信運營商行業(yè)客戶中國移動：北京移動、廣東移動、福建移動、黑龍江移動、貴州移動、天津移動、重慶移動、內(nèi)蒙移動等中國電信：北京電信、廣東電信、福建電信等；中國聯(lián)通：廣東聯(lián)通、天津聯(lián)通、廣西聯(lián)通、海南聯(lián)通等；參與的大型項目和服務(wù)案例：廣東移動業(yè)務(wù)系統(tǒng)數(shù)據(jù)存儲與備份服務(wù)廣東聯(lián)通業(yè)務(wù)系統(tǒng)數(shù)據(jù)存儲與備份服務(wù)福建移動業(yè)務(wù)系統(tǒng)數(shù)據(jù)存儲與備份服務(wù)中國移動南方基地MM商城業(yè)務(wù)行為分析福建移動業(yè)務(wù)支撐云計算平臺建置與服務(wù)廣東移動基礎(chǔ)安全規(guī)劃與審計服務(wù)……等金融行業(yè)客戶(銀行證券基金保險)Banking：中國銀行、中國農(nóng)業(yè)銀行、招商銀行、廣發(fā)銀行、渤海銀行、東莞銀行、三峽銀行、華潤銀行、南海農(nóng)商、廈門國際銀行等；Security：深圳證券交易所、廣發(fā)證券、招商證券、國信證券、民族證券、華夏基金、南方基金、諾安基金、景順長城基金等；Insurance：平安保險、友邦保險、太平人壽、中英人壽、信誠人壽、工銀安盛、富邦保險等；參與的大型項目和服務(wù)案例：中國銀行業(yè)務(wù)系統(tǒng)虛擬化平臺建置與服務(wù)中國農(nóng)業(yè)銀行業(yè)務(wù)系統(tǒng)數(shù)據(jù)備份與容災(zāi)服務(wù)廣東發(fā)展銀行綜合日志平臺與網(wǎng)銀業(yè)務(wù)系統(tǒng)分析項目深圳證券交易所安全日志平臺與審計項目廣發(fā)證券核心存儲業(yè)務(wù)移植與容災(zāi)項目……等和用戶共同經(jīng)歷的成長公共事業(yè)：國家專利局、中國石油公司、南方電網(wǎng)、廣東省財廳、海南省國土廳、廣東核電集團、華中電力、華東電力，廣西電力、重慶電力、上海電力、湖北電力、湖南電力、秦山核電、勝利油田、土哈油田、江蘇油田、廣州地鐵、廣州海關(guān)等制造業(yè)：聯(lián)想集團、美的集團、格力電器、廈門宸虹、順豐快遞、赫基國際、宏達電、和艦科技、SONY、海瀾之家、SIEMENS、GE、上海貝爾、中芯半導(dǎo)體、宏力半導(dǎo)體、日月光、晉億實業(yè)、珠海摩天宇、順達電腦、意法半導(dǎo)體、國興半導(dǎo)體、華星光電、柯尼卡-美能達、屈臣氏、奧林巴斯、SONY香港、恒大地產(chǎn)、碧桂園、奧園地產(chǎn)、明基材料

等參與的大型項目和服務(wù)案例：聯(lián)想集團智能運維管理平臺海爾集團大數(shù)據(jù)電商行為分析格力電器電商平臺安全規(guī)劃與運維服務(wù)……等和用戶共同經(jīng)歷的成長17大數(shù)據(jù)解決方案和產(chǎn)品介紹索尼公司的創(chuàng)始人出井伸之解釋索尼衰落的根本原因時，說了一段發(fā)人深省的話：“新一代基于互聯(lián)網(wǎng)DNA企業(yè)的核心能力在于利用新模式和新技術(shù)更加貼近消費者、深刻理解需求、高效分析信息并做出預(yù)判，所有傳統(tǒng)的產(chǎn)品公司都只能淪為這種新型用戶平臺級公司的附庸，其衰落不是管理能扭轉(zhuǎn)的?；ヂ?lián)網(wǎng)的魅力就是‘thepoweroflowend’”。長期以來，困擾企業(yè)最大的難題就是“如何更加了解他的客戶”。大數(shù)據(jù)時代，推動大數(shù)據(jù)技術(shù)在各行業(yè)普及的原動力，來自于企業(yè)改善自身經(jīng)營水平、提升經(jīng)營效率的需要。計算機行業(yè)的未來發(fā)展有三大趨勢：第一，應(yīng)用軟件一定會泛互聯(lián)網(wǎng)化。第二，行業(yè)會垂直整合。越靠近終端用戶的公司，在產(chǎn)業(yè)鏈上將

擁有更大的發(fā)言權(quán)。第三，數(shù)據(jù)將成為企業(yè)最重要的資產(chǎn)。為什么要做大數(shù)據(jù)和數(shù)據(jù)經(jīng)營？大數(shù)據(jù)概念及趨勢分析2013年8月，國家發(fā)布信息消費國策，強化數(shù)據(jù)分析，提升數(shù)據(jù)應(yīng)用水平和商業(yè)價值，推動產(chǎn)業(yè)升級和擴大內(nèi)需。2012年3月，奧巴馬政府發(fā)布了《大數(shù)據(jù)研究和發(fā)展倡議》，投資2億美元啟動“大數(shù)據(jù)研究和發(fā)展計劃”，同時組建“大數(shù)據(jù)高級指導(dǎo)小組”此舉標志著美國把大數(shù)據(jù)提高到國家戰(zhàn)略層面。目前我國多位科學(xué)院院士已聯(lián)合制定了《大數(shù)據(jù)國家戰(zhàn)略規(guī)劃》，大數(shù)據(jù)國家戰(zhàn)略或?qū)⑻嵘稀皟蓵弊h程，通過將“發(fā)展大數(shù)據(jù)”上升到國家戰(zhàn)略，打造“數(shù)據(jù)中國”。隨著信息系統(tǒng)已全面融入企業(yè)的生產(chǎn)\經(jīng)營\管理\業(yè)務(wù)\決策的各個方面，積累了大量的結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、海量歷史準實時數(shù)據(jù)和其他類型的數(shù)據(jù)。企業(yè)需要進一步滿足業(yè)務(wù)的快速響應(yīng)和靈活性要求，基于數(shù)據(jù)的應(yīng)用和商業(yè)價值，優(yōu)化管理體系、業(yè)務(wù)運維、經(jīng)營決策、客戶體驗。IDC定義：為了更為經(jīng)濟的從高頻率獲取的、大容量的、不同結(jié)構(gòu)和類型的數(shù)據(jù)中獲取價值，而設(shè)計的新一代架構(gòu)和技術(shù)。大數(shù)據(jù)運用于企業(yè)經(jīng)營管理方面的需求企業(yè)傳統(tǒng)的業(yè)務(wù)統(tǒng)計分析，數(shù)據(jù)分散于各專業(yè)信息系統(tǒng)，各類輔助決策系統(tǒng)基本是按照專業(yè)條線建立，缺乏跨部門、跨專業(yè)的經(jīng)營戰(zhàn)略分析場景，使得公司需訪問不同的專業(yè)系統(tǒng)才能掌握了解公司經(jīng)營情況，工作效率比較低。利用大數(shù)據(jù)技術(shù)可以消除跨部門、跨專業(yè)壁壘，構(gòu)建比較靈活的管理風格，實現(xiàn)場景模擬、可視化規(guī)劃、業(yè)務(wù)全景視圖展現(xiàn)等，為公司領(lǐng)導(dǎo)層制定戰(zhàn)略決策提供支撐，提高輔助決策能力。業(yè)務(wù)全景展示各專業(yè)領(lǐng)域效益怎么樣？生產(chǎn)經(jīng)營指標如何？借助大數(shù)據(jù)技術(shù)整合各專業(yè)數(shù)據(jù)，然后進行深入挖掘，進行經(jīng)營指標分析可視化進行全業(yè)務(wù)全景展現(xiàn)數(shù)據(jù)驅(qū)動人財物科學(xué)配置戰(zhàn)略情報分析市場運營分析業(yè)務(wù)風險管控以前：小時級/分鐘級現(xiàn)在：要求實時/準實時快速響應(yīng)以前：按月統(tǒng)計報表和指標現(xiàn)在：按天、小時、分鐘統(tǒng)計時效性傳統(tǒng)數(shù)據(jù)庫：存儲非結(jié)構(gòu)化數(shù)據(jù)，當數(shù)據(jù)量增大時數(shù)據(jù)庫迅速膨脹，導(dǎo)致性能下降存儲能力傳統(tǒng)數(shù)據(jù)庫：并發(fā)數(shù)限制，無法滿足萬級用戶同時會話并發(fā)能力業(yè)務(wù)性能提升大數(shù)據(jù)在客戶精準營銷和創(chuàng)新服務(wù)的需求目前，在公司生產(chǎn)經(jīng)營活動中產(chǎn)生了大量的視頻、客服音頻等非結(jié)構(gòu)化數(shù)據(jù)、日志、表計等半結(jié)構(gòu)化數(shù)據(jù)和結(jié)構(gòu)化數(shù)據(jù)，迫切需要從這些數(shù)據(jù)中挖掘有潛在價值信息為客戶提供優(yōu)質(zhì)服務(wù)，利用大數(shù)據(jù)技術(shù)可以將這些數(shù)據(jù)進行整合處理，通過數(shù)據(jù)內(nèi)在關(guān)聯(lián)，挖掘隱含在其中的潛在價值，及時發(fā)現(xiàn)客戶敏感需求，開展客戶個性化服務(wù)和數(shù)據(jù)外部化服務(wù)，提高客戶服務(wù)質(zhì)量和水平?？蛻粲惺裁葱枨?？想得到什么服務(wù)？識別關(guān)鍵字和詞匯，捕捉客戶敏感需求精準營銷推薦用戶行為標簽識別商業(yè)信譽評價客戶360視圖刻劃客戶精準推薦和營銷網(wǎng)頁數(shù)據(jù)抓取多媒體文件文本文件等數(shù)據(jù)整合（語音識別、中文分詞）數(shù)據(jù)挖掘數(shù)據(jù)概化需求識別模型敏感需求識別客戶留存貢獻從海量數(shù)據(jù)中快速挖掘出有潛在價值的信息，挖掘數(shù)據(jù)內(nèi)在的關(guān)聯(lián)關(guān)系，捕捉客戶敏感需求。OLAP與OLTP業(yè)務(wù)融合聯(lián)機分析處理與聯(lián)機交易處理應(yīng)用融合，從而減少系統(tǒng)建設(shè)復(fù)雜度，降低數(shù)據(jù)分析處理成本。新業(yè)務(wù)營銷渠道可從任意位置提取任意數(shù)據(jù)，可實時瀏覽、查詢并操作相同的信息，有效提升輔助決策能力。大數(shù)據(jù)在內(nèi)部運維管理方面的需求目前企業(yè)在單一業(yè)務(wù)數(shù)據(jù)分析的信息價值挖掘上存在局限性，跨業(yè)務(wù)、跨部門的數(shù)據(jù)多維聯(lián)動分析的需求越來越強烈，應(yīng)用大數(shù)據(jù)技術(shù)整合各專業(yè)數(shù)據(jù)，快速分析和監(jiān)測內(nèi)部運營數(shù)據(jù)，提升一體化運營水平、運營管控能力和風險識別和安全審計能力。日志分析平臺安全審計異常交易輸入規(guī)劃、建設(shè)、運行、安全審計、智慧運維預(yù)測模型關(guān)聯(lián)分析實時監(jiān)測和預(yù)警關(guān)聯(lián)挖掘數(shù)據(jù)整合處理方案支撐功能監(jiān)控指標在線發(fā)布業(yè)務(wù)數(shù)據(jù)實時計算異常自動監(jiān)測和預(yù)警……IT智慧運維統(tǒng)一日志分析故障預(yù)警排除異常交易查詢與故障分析IT智慧運維與監(jiān)控資訊安全KPI量化稽核Systex基于Hadoop的大數(shù)據(jù)架構(gòu)SmartContentIntelligenceITOperationDataAnalysisBrand&ProductReputationmonitoring語意分析PicSearch圖形搜尋

品牌流通業(yè)線上/線下大數(shù)據(jù)質(zhì)量提昇計畫車牌辨識系統(tǒng)UserProfilingContentSearch內(nèi)涵式搜尋EtuRecommenderDWoffload數(shù)據(jù)卸載LogMgmt海量日誌管理柏拉圖式演算法多目標式最佳補貨計算CertifiedHardwareEtuApplianceIPtrackingIP反查ImageSearch海量小圖檔MFactoryGOVFSITELCOCOMRetailAllGOVFSIFSIFSIFSITELCOTELCOTELCOTELCOCOMRetailAllRetailEtuInside(EtuSoftwareAppliance)Report/BIreportsystemInformaticaEtu-HadoopGreenPlum-MPPSplunk-ITIntelligenceSAPBOHareDB資料分析系統(tǒng)TELCOSocialCrawl社群爬蟲AllTextminingFSICOMSystex實現(xiàn)行業(yè)大數(shù)據(jù)價值應(yīng)用1.大數(shù)據(jù)處理能力針對多種格式，不同速度及數(shù)據(jù)量的源數(shù)據(jù)進行采集、分析處理，通過關(guān)聯(lián)等復(fù)雜規(guī)則形成企業(yè)數(shù)據(jù)資產(chǎn)或具體的數(shù)據(jù)應(yīng)用和服務(wù)2.數(shù)據(jù)資產(chǎn)信息展現(xiàn)規(guī)整集成各業(yè)務(wù)線的內(nèi)外部數(shù)據(jù)加工處理成為有價值的數(shù)據(jù)資產(chǎn)，提供真實、完整的企業(yè)數(shù)據(jù)資產(chǎn)統(tǒng)一視圖4.大數(shù)據(jù)分析運營明確各層級數(shù)據(jù)的管理配套組織、制度流程和管控措施，并提供數(shù)據(jù)管控的具體技術(shù)支撐，保障數(shù)據(jù)的質(zhì)量和數(shù)據(jù)受控、合理、安全使用基于數(shù)據(jù)應(yīng)用的企業(yè)競爭能力3.數(shù)據(jù)應(yīng)用綜合服務(wù)實現(xiàn)對數(shù)據(jù)的增值和價值發(fā)揮，提供面向精益化管理決策、精準營銷以及合作伙伴的各種智能應(yīng)用建立行業(yè)性的大數(shù)據(jù)處理與應(yīng)用機制，形成新型數(shù)據(jù)應(yīng)用能力。綜合應(yīng)用Hadoop、MPP數(shù)據(jù)庫、流數(shù)據(jù)處理技術(shù)，構(gòu)建移動互聯(lián)網(wǎng)海量非結(jié)構(gòu)化大數(shù)據(jù)融合處理架構(gòu)；構(gòu)建面向移動互聯(lián)網(wǎng)的競爭能力，運用互聯(lián)網(wǎng)爬蟲及內(nèi)容解析技術(shù)，識別客戶潛在需求，服務(wù)客戶精準營銷和拓展數(shù)據(jù)價值應(yīng)用及數(shù)據(jù)分析服務(wù)；市場先進技術(shù)領(lǐng)導(dǎo)

與時俱進不斷創(chuàng)新

自主創(chuàng)新品牌Etu創(chuàng)新巨量數(shù)據(jù)平臺產(chǎn)品EtuAppliance榮獲2012TAITRONICS科技創(chuàng)新優(yōu)選獎世界級的大數(shù)據(jù)分析團隊

在臺北與廈門設(shè)有研發(fā)與專業(yè)服務(wù)團隊挖掘行業(yè)數(shù)據(jù)報酬率，分析行動用戶行為，精準營銷！2013-9-16Etu獲《計算機世界》《2013大數(shù)據(jù)優(yōu)秀產(chǎn)品獎》2013-6-6Etu成為Cloudera亞洲第一個IHV全球合作伙伴2013-4-2Etu成功協(xié)助國內(nèi)電商用戶精準營銷，營收貢獻占比12%2013-2-26基于電信營運智慧中心M-Factory參展巴塞羅那“移動通訊世界大會”2013-1-15Etu獲DOIT“大數(shù)據(jù)風云榜-2012年度打資料創(chuàng)新企業(yè)”，

是其中唯一獲獎的亞洲海量數(shù)據(jù)處理品牌26美國軟件開發(fā)商Splunk于2012-4-20周四在納斯達克股市進行了IPO上市，其上市發(fā)行價為每股17美元。而在上市首日交易中，Splunk股價大漲109%，報收于35.48美元，估值達到32.8億美元。2013Splunk最大訂單

USD$20,000,000/200+TBperDay

/splunk/customer.htm一句話介紹：Splunk通過互聯(lián)網(wǎng)提供軟件，幫助企業(yè)監(jiān)測和分析數(shù)據(jù)，以改進服務(wù)、降低運營成本和降低安全風險。Splunk位于美國舊金山，成立于2003年，Splunk的3300個客戶里，包括Apple、美國銀行，Comcast，salesforce，Zynga，以及財富100強的大多數(shù)公司。Splunk大數(shù)據(jù)智能搜索與分析客戶的IT系統(tǒng)日志管理現(xiàn)狀：27龐大的數(shù)據(jù)/日志文件安全防護事件大量的錯誤告警異質(zhì)設(shè)備（網(wǎng)絡(luò)/主機/安全設(shè)備/中間件/數(shù)據(jù)庫/門禁/監(jiān)控...）網(wǎng)絡(luò)設(shè)備服務(wù)器及桌面計算機的操作系統(tǒng)應(yīng)用程序應(yīng)用服務(wù)系統(tǒng)信息FirewallsFirewallsFirewallsFirewallsFirewalls安全設(shè)備繁重而且無效率如何管理好相關(guān)數(shù)據(jù)，將所有數(shù)據(jù)轉(zhuǎn)換為可用的信息，并實現(xiàn)智能搜索和查詢像google一樣管理IT日志errorORcriticalSplunk能做什么？28在數(shù)據(jù)中心，如何從數(shù)TB的IT資料中找到自已想要的資料?IT運維“我們的WEB網(wǎng)站不能被訪問，我不得不去查找和修復(fù)問題，但我要去哪些地方尋找呢?”法規(guī)遵從“審計員想查看每個系統(tǒng)上的所有用戶的訪問行為和配置改變.”IT安全“我們需要以很少的人力很少的時間進行安全取證.”分析報表“你能夠跟蹤客戶超過30天的指定類型的交易嗎?”如果internet沒有搜索引擎你方便嗎？Splunk可以讓你實時的從一個集中平臺來搜索企業(yè)所有IT數(shù)據(jù)Splunk是什么？29Splunk就像是數(shù)據(jù)中心的google.IT數(shù)據(jù)及日志搜索與分析的引擎.Splunk是工具–支持Windows,Linux,Solaris,,AIX,MacOS,HP-UX.Splunk是多維式數(shù)據(jù)存儲中心.特別對異質(zhì)與非結(jié)構(gòu)化數(shù)據(jù).為您的整體IT環(huán)境提供可視性,報表,告警與查詢.3030●特點三互相關(guān)聯(lián)的數(shù)據(jù)利用條件的方式,快速找出互相關(guān)聯(lián)的數(shù)據(jù)，例如:Username,IP地址,主機名稱,錯誤●特點四數(shù)學(xué)運算分析利用數(shù)學(xué)運算能力，將搜索出的數(shù)據(jù)、字段快速生成互相關(guān)聯(lián)性的分析、統(tǒng)計與報表●特點一Index(索引)將局域網(wǎng)上的異質(zhì)設(shè)備、服務(wù)器、操作系統(tǒng)、應(yīng)用所產(chǎn)出的IT數(shù)據(jù)做排列與摘要●特點二搜索引擎技術(shù)利用獨特的數(shù)據(jù)儲存方式，快速找出你的數(shù)據(jù)Splunk提供機器數(shù)據(jù)的自動搜索引擎“00”Last60minutes00SearchYourEntireITInfrastructureLast1minuteUserID=“John”ANDpermission_change比方說…如果我們上百度然后問:

然后立即得到以下的價格走勢圖?(答案自然是不行的)過去六個月以來廣州平均各家鮮蝦腸粉的平均價格走勢如何?但Splunk比Google或百度有更好的結(jié)果呈現(xiàn)分析報告告警搜索資源分享安全Splunk五大功能任意鍵入關(guān)鍵詞后，既時在線搜尋用交互比對查詢，縮小事件范圍用時間、關(guān)鍵詞與字段關(guān)連進行復(fù)合搜尋搜尋結(jié)果通過14種報表運算方式（如排序、字段匯總、排除、字段關(guān)聯(lián)…等），無須透過其他工具即可直接產(chǎn)生報表11種報表格式呈現(xiàn)（如直方圖、線性圖、分區(qū)圖、圓餅圖…等），所有報表均可DrillDownSplunk給客戶帶來的價值3333實時的能見度動態(tài)面板事件交叉比對監(jiān)控與告警效能監(jiān)控交易監(jiān)控與分析SLA服務(wù)指標追蹤索引/搜索/檢視數(shù)據(jù)挖掘drilldown“大海撈針”問題分析與查找事件調(diào)查incidentinvestigations分析/報表檢視標準與閥值

&趨勢分析trending營運智慧operationalinsights歷史趨勢稽核報表統(tǒng)一的日志倉儲統(tǒng)一的儀表板支持各種應(yīng)用IT日志稽核與分析平臺Splunk提供整合式的數(shù)據(jù)處理分析能力344.實時企業(yè)維運儀表板從作業(yè)面的數(shù)據(jù)

搜尋

提供

實時的

重要信息協(xié)助企業(yè)作更有效、組織化的商業(yè)決策3.維運高可見度依業(yè)務(wù)提供端到端

(EndtoEnd)

的運維可見度，并提供重要績效指標

(KPI)2.主動式監(jiān)控在影響企業(yè)服務(wù)前自動地監(jiān)控并找出相關(guān)問題、潛在攻擊并實時告警1.搜尋及調(diào)查在公司的組織里調(diào)查找出，并迅速動態(tài)地

解決問題MachineDataOperationalIntelligence實時查詢及調(diào)查實時監(jiān)控及告警實時報表及可視化監(jiān)控分析資料分析智庫收集并索引數(shù)據(jù)Splunk數(shù)據(jù)分析平臺與全方位應(yīng)用(400+)35設(shè)定、整合、開發(fā)平臺

(DeveloperFramework,RestAPI,SDKs)業(yè)務(wù)商業(yè)分析應(yīng)用程序管理信息安全管理&合規(guī)遵從IT運維管理網(wǎng)頁智能分析Splunk

ExamplesCommunity

ExamplesCiscoSecurityF5BlueCoatEnterpriseSecurityPCIRubyonRailsMySQLMSExchangeWebSphereSquidNagiosWebIntelligenceSideviewWebAnalyticsWindowsCitrixNetScalerVMwareCiscoCDRAnalysisMySQLJMX業(yè)務(wù)決策支持IT營運治理SmallData.BigData.HugeData.特別適用于海量數(shù)據(jù)處理的高性能一體機集群的自動化部署大數(shù)據(jù)處理的最優(yōu)性能全面的高可用性企業(yè)級的安全性Etu

知意圖大數(shù)據(jù)一體機

—端到端一站式大數(shù)據(jù)解決方案Highperformance–高并發(fā)讀寫的需求

高并發(fā)、實時動態(tài)獲取和更新數(shù)據(jù)HugeStorage–海量數(shù)據(jù)的高效率存儲和訪問的需求，

海量信息的高效率存儲和查詢HighScalability&HighAvailability–高可擴展性和高可用性的需求

快速橫向擴展能力、提供7*24小時不間斷服務(wù)快速部署一鍵部署，自主優(yōu)化EtuTMOS，裸設(shè)備支持10分鐘可部署100+

個節(jié)點性能優(yōu)化軟硬件針對Hadoop完全優(yōu)化參數(shù)最佳化調(diào)校,自主DataFlow

技術(shù)水平擴展單節(jié)點存儲

4TB~40TB海量數(shù)據(jù)不宕機擴展至

上千個節(jié)點容錯機制自治備份，數(shù)據(jù)不丟失高度整合，軟硬全方位的集群HA設(shè)計安全簡便支持Kerberos驗證機制，支持LDAP服務(wù)全圖形化管理界面Etu

知意圖大數(shù)據(jù)一體機

—端到端一站式大數(shù)據(jù)解決方案EtuAppliance軟件架構(gòu)Katta/LuceneMahoutHBaseHiveQLMapReduceDataProcessingLibHDFSPigDataStoreLayerDataProcessingLayerFlumeApplicationLayer(bySYSTEX)MonitoringLogManagementAccountManagementConfigurationManagementSchedulerHighAvailabilitySearchAPIDataSourceHiveSqoopEtuOSforHadoop(bySYSTEX)基于開源Hadoop軟件系統(tǒng)架構(gòu)MahoutHBaseMapReducePigHDFS數(shù)據(jù)源管理數(shù)據(jù)存儲數(shù)據(jù)處理管理控制臺SNMP賬戶管理配置管理HA管理任務(wù)計劃管理數(shù)據(jù)源HiveMetaStoreSqoopEtu?OSKernelFTPSyslogHiveQL文件管理群集管理數(shù)據(jù)庫管理安全管理Etu?Dataflow系統(tǒng)管理操作系統(tǒng)為EtuTMOS多網(wǎng)卡帶寬聚合與故障轉(zhuǎn)移功能需搭配額外網(wǎng)卡EtuTMHA為選購功能，至少需兩臺管理節(jié)點最高等級的全系統(tǒng)故障隔離轉(zhuǎn)移機制，可能還需所有節(jié)點添加網(wǎng)卡以及交換機支持HadoopEcosystemHA包含HDFS/MapReduce(JobTracker)/HBase/HiveThriftEtu大數(shù)據(jù)平臺功能大數(shù)據(jù)平臺一般Hadoop平臺操作系統(tǒng)EtuOS，專為執(zhí)行HadoopBigData計算任務(wù)而設(shè)計通用的Linux版本計算效能全系統(tǒng)參數(shù)調(diào)校優(yōu)化，比通用的系統(tǒng)提升3～12倍的計算效能通用系統(tǒng)環(huán)境，計算效能未經(jīng)校調(diào)數(shù)據(jù)采集獨家EtuDataFlowHDFS高速寫入技術(shù)數(shù)據(jù)采集效能一般，未經(jīng)校調(diào)集群部署一鍵部署，10分鐘之內(nèi)可以完成100臺以上的工作節(jié)點安裝與配置，Hadoop集群可以立即上線運作。簡單部署涵蓋全系統(tǒng)的HA架構(gòu)。必須先手動安裝各節(jié)點操作系統(tǒng)，再安裝HadoopEcosystem相關(guān)軟件，再行相關(guān)配置網(wǎng)絡(luò)特殊設(shè)計多網(wǎng)卡帶寬合并機制；兼具高可用度設(shè)計一般網(wǎng)絡(luò)能力，缺乏效能與容錯設(shè)計高可用架構(gòu)涵蓋計算、存儲、主機系統(tǒng)、系統(tǒng)服務(wù)、安全機制、網(wǎng)絡(luò)接入等全方面的HA高度整合設(shè)計，徹底避免單點故障一般只有做到NameNodeHA架構(gòu)，且使用者需自行完成許多復(fù)雜配置，失敗風險極高集群管理模式基于瀏覽器的圖形化全集群集中管理與配置需要Root權(quán)限分別進入各節(jié)點進行系統(tǒng)管理工作Etu大數(shù)據(jù)平臺比較Terasort

性能測試1TBSourceData9DataNodesH/Wpernode8cores32GmemoryGbEnetwork4x2TBSATAHDDKernelOptimizedOSOptimizedFSOptimizedNetworkOptimizedHDFSOptimizedMapReduceOptimizedDefaultto3.5xOptimalto12x管理控制臺–首頁任務(wù)管理數(shù)據(jù)流管理集群管理文件管理表格管理管理控制臺–任務(wù)部署任務(wù)部署管理控制臺–任務(wù)狀態(tài)管理控制臺–集群狀態(tài)管理控制臺–集群監(jiān)控管理控制臺–集群節(jié)點管理服務(wù)配置管理控制臺–賬戶管理用于API調(diào)用管理控制臺–HDFS集群狀態(tài)存儲狀態(tài)管理控制臺–HDFS

文件管理文檔目錄常用操作關(guān)系數(shù)據(jù)庫vsHadoop關(guān)系數(shù)據(jù)庫Hadoop資料量GB->TBTB->PB存取方式交互式與批次批次數(shù)據(jù)更新多次讀寫一次寫,多次讀數(shù)據(jù)結(jié)構(gòu)固定schema無schema資料一致性高(ACID)低擴充性非線性線性傳統(tǒng)的數(shù)據(jù)處理流程營運信息新用戶新訂單新產(chǎn)品數(shù)據(jù)倉庫用戶瀏覽日志大部份刪除ETL部份資料探索式的數(shù)據(jù)處理流程新用戶新訂單新產(chǎn)品廣告效益分析

?促銷活動分析

?電子報效益分析

?用戶瀏覽日志營運信息數(shù)據(jù)倉庫55StrictlyNDA-MicrosoftConfidentialDataWarehouseSensorsDevicesWebLogCrawlersERPCRMLOBAPPsConnectors非結(jié)構(gòu)化數(shù)據(jù)源SSRSSSASBIPlatformFamiliarEndUserToolsPowerViewExcelwithPowerPivotEmbeddedBIPredictiveAnalytics結(jié)構(gòu)化數(shù)據(jù)源Hadoop企業(yè)的Hadoop應(yīng)用策略應(yīng)用一:參照RDBMS中的數(shù)據(jù)表RDBMSCustomersWebLogsProductsHDFS應(yīng)用二:脫機數(shù)據(jù)分析RDBMSCustomersProductsHDFSSalesHistoryRDBMSHDFSSales2008Sales2009Sales2010Sales2008ODBC/JDBC應(yīng)用三:

歷史數(shù)據(jù)與在線數(shù)據(jù)交互運用應(yīng)用四:

利用Hadoop進行數(shù)據(jù)匯總

RDBMSWebLogsHDFSWebLogSummary應(yīng)用五:利用ODBC連結(jié)Excel&HiveExcelHiveAdd-in在線資料

:MSSQLServer歷史資料

:HiveITS大數(shù)據(jù)應(yīng)用產(chǎn)品——電子商務(wù)精準營銷分析系統(tǒng)結(jié)合業(yè)內(nèi)大數(shù)據(jù)領(lǐng)導(dǎo)廠商Splunk和精誠自主研發(fā)DataStorm:分析網(wǎng)站日志與應(yīng)用系統(tǒng)日志利用DataStorm分析使用者行為，進一步提供營銷分析與商業(yè)分析提供了哪些效益:每月耗時十七天的各種分析工作縮短為兩小時完成每日新增數(shù)十億筆資料提高產(chǎn)品、營銷與維運之間的關(guān)聯(lián)性提高營銷活動與新產(chǎn)品、新功能的用戶意見回饋能見度提供實時決策的必要信息流量熱門產(chǎn)品分析訪客區(qū)隔分析ITS大數(shù)據(jù)應(yīng)用產(chǎn)品——日志集中管控與審計系統(tǒng)NO行業(yè)客戶名稱或應(yīng)用類型目標銷售場景主要產(chǎn)品和解決方案方案定位和價值1金融&制造業(yè)金融業(yè)或大型上市公司滿足銀監(jiān)會和等保測評相關(guān)安全管控和審計要求日志集中管控與審計系統(tǒng)基于大數(shù)據(jù)平臺建立綜合日志集中管控與審計平臺，滿足業(yè)務(wù)性能管理、數(shù)據(jù)挖掘和資訊安全審計的需要成功案例深圳證券交易所深圳證券通信公司銀河證券廈門銀行中英人壽保險信誠人壽保險國信證券聯(lián)想集團……等ITS大數(shù)據(jù)應(yīng)用產(chǎn)品——應(yīng)用故障與異常交易分析系統(tǒng)NO行業(yè)客戶名稱或應(yīng)用類型目標銷售場景主要產(chǎn)品和解決方案方案定位和價值1金融&制造業(yè)業(yè)務(wù)應(yīng)用故障分析系統(tǒng)核心業(yè)務(wù)系統(tǒng)（網(wǎng)銀、MES等）業(yè)務(wù)應(yīng)用故障分析系統(tǒng)基于大數(shù)據(jù)架構(gòu)，從業(yè)務(wù)應(yīng)用的應(yīng)用層、數(shù)據(jù)庫層、網(wǎng)絡(luò)層、系統(tǒng)層提供整體的應(yīng)用實時監(jiān)控與故障關(guān)聯(lián)分析成功案例廣東發(fā)展銀行重慶移動江門移動惠州移動……等ITS大數(shù)據(jù)應(yīng)用產(chǎn)品——電信行業(yè)大數(shù)據(jù)流量分析平臺NO行業(yè)客戶名稱或應(yīng)用類型目標銷售場景主要產(chǎn)品和解決方案方案定位和價值1運營商經(jīng)營分析部門和市場部門基于大數(shù)據(jù)平臺構(gòu)建流量客戶細分模型，為精準營銷提出有效建議，更進一步提升流量經(jīng)營價值基于流量經(jīng)營的流量日志分析平臺（結(jié)合集團的MFactory方案和本地的行業(yè)經(jīng)驗實現(xiàn)數(shù)據(jù)運營的解決方案）基于Hadoop系統(tǒng)架構(gòu)，通過對GPRS和WLAN流量日志進行處理分析，了解客戶上網(wǎng)特點、訪問內(nèi)容偏好，從而通過用戶、終端、網(wǎng)絡(luò)和業(yè)務(wù)四個維度進行綜合分析成功案例-進行中臺灣中華電信深圳電信內(nèi)蒙古移動……等商業(yè)建?；蚩虅潝?shù)據(jù)中介網(wǎng)絡(luò)爬蟲萬用字典產(chǎn)業(yè)品牌品項網(wǎng)域網(wǎng)址分類應(yīng)用程序匯流電影上網(wǎng)手機地理戶政網(wǎng)絡(luò)協(xié)議語意分析用戶感知事件感知內(nèi)容感知客戶關(guān)系管理系統(tǒng)(CRM)數(shù)據(jù)倉儲(DW)商業(yè)智慧分析(BI)過濾匯總企業(yè)固本加值精進服務(wù)創(chuàng)新目標族群組態(tài)描述關(guān)聯(lián)基因66經(jīng)驗與服務(wù)團隊ExpertisecoverageAppStoreIntelligenceSubscriberBehaviorsVASBusinessIntelligenceProductPerformanceSelf-serviceAnalyticPlatformWEWORKWITH

11ASIAPACMOBILEOPERATORSIN6COUNTRIESENGAGINGWITHOVER250MILLIONMOBILEDATASUBSCRIBERSMEMBEROF

ANDCustomerSupportExpertDiagnosisKPI/KQIQualityAssuranceRevenueAssuranceSecurity&Compliance電信運營商的豐富經(jīng)驗技術(shù)平臺開發(fā)R&D

LeaderPhD.C.MFan兼具理論與實務(wù)的統(tǒng)計數(shù)據(jù)分析與決策信息服務(wù)專家，擁有29篇國際論文與6項專利。并曾于半導(dǎo)體業(yè)界具備18年的良率巨量數(shù)據(jù)分析與知識服務(wù)平臺建構(gòu)，

擔任多項臺積電先進產(chǎn)學(xué)合作計劃主持人。TelecomConsultantWilliamHung15年電信業(yè)者經(jīng)驗。包含TWM固網(wǎng)業(yè)務(wù)營銷,

FET核心網(wǎng)絡(luò)規(guī)劃及維運整合顧問以及NSN中華電信核心網(wǎng)絡(luò)建置項目執(zhí)行。。專長負責跨平臺系統(tǒng)整合規(guī)劃。曾參與中華電信行動商情分析與新加坡Starhub數(shù)位匯流分析專案。Meaning-BasedComputing

Tommy

Chuang具多年Autonomy語意分析及網(wǎng)頁輿情分析項目導(dǎo)入經(jīng)驗，專精于國內(nèi)與國際各大社群討論網(wǎng)站之非結(jié)構(gòu)化內(nèi)容爬尋及數(shù)據(jù)匯整經(jīng)驗。曾參臺灣大哥大輿情分析項目導(dǎo)入。NetworkOptimizationJackLin在行動網(wǎng)絡(luò)領(lǐng)域具備國際性網(wǎng)絡(luò)優(yōu)化實戰(zhàn)經(jīng)驗，包含AT&T/KDDI/STC等美日沙特阿拉伯之龍頭電信運營商專案之參與，專長為行動網(wǎng)絡(luò)優(yōu)化算法工程，協(xié)助降低設(shè)備信令與達到負載平衡。曾參與新加坡Starhub數(shù)位匯流分析專案。SystemDeveloperRogerChung參與多家電信業(yè)者的數(shù)據(jù)處理平臺開發(fā)案,并專精于BigData數(shù)據(jù)數(shù)據(jù)處理技術(shù)與Web-based應(yīng)用程序開發(fā)，并處理各項非結(jié)構(gòu)化數(shù)據(jù)，以提供客戶與分析人員實時與準確性資料。曾參與新加坡Starhub數(shù)位匯流分析專案。技術(shù)平臺開發(fā)TechnicalDirectorJames

XieMicrosoft(MCP),VMware(VCP),CCDA認證。全面了解Splunk技術(shù)、網(wǎng)絡(luò)、服務(wù)器、虛擬化、Hadoop生態(tài)相關(guān)知識。負責項目技術(shù)方案的設(shè)計及優(yōu)化。曾參與華潤集團/百事可樂(中國)/艾利/亞洲鋁業(yè)等企業(yè)網(wǎng)絡(luò)技術(shù)解決方案。Project

Manager

Charles

Deng廈門大學(xué)軟件工程專業(yè)，美國項目管理協(xié)會認證PMP，具備電信、金融行業(yè)的業(yè)務(wù)支撐軟件開發(fā)與項目管理經(jīng)驗。負責項目團隊建設(shè)與管理，參與大數(shù)據(jù)技術(shù)方案設(shè)計選型。曾參與廈門銀行/深圳證券交易所相關(guān)項目。NetworkOptimizationYoyoChen

在網(wǎng)絡(luò)領(lǐng)域擁有國際性Cisco認證－CCIE，參與了佳士科技／金蝶／華潤集團等上市企業(yè)專案和南凌／鐵通等二級運營商專案，專長為網(wǎng)絡(luò)優(yōu)化和安全工程，協(xié)助降低設(shè)備信令與達到負載平衡。曾參與泰國銀行結(jié)算平臺分析專案。Software

Engineer

AllenWu精于Java程序設(shè)計開發(fā)，現(xiàn)專注于大數(shù)據(jù)處理技術(shù)的學(xué)習研究。專長Hadoop、Storm等相關(guān)技術(shù)原理。負責項目實施部分的技術(shù)工作。曾參與日盛銀行/臺北土地銀行業(yè)務(wù)系統(tǒng)項目開發(fā)。70StatisticalAnalyst

PhD.BoniaWang十年以上數(shù)據(jù)倉儲與數(shù)據(jù)探勘(Teradata)導(dǎo)入之實務(wù)經(jīng)驗。曾任職于和信電訊，熟稔電信業(yè)務(wù)及相關(guān)信息系統(tǒng)，對BI工具于電信業(yè)的應(yīng)用有深入的了解。StatisticalAnalyst

ErikaYang國立臺灣大學(xué)(NTU)工業(yè)工程碩士，具備半導(dǎo)體巨量數(shù)據(jù)分析實務(wù)經(jīng)驗，以數(shù)據(jù)探勘手法整合統(tǒng)計方法建立精準分析系統(tǒng)，從數(shù)據(jù)中挖掘潛信息，以轉(zhuǎn)化成重要決策。MarketResearch

LeahChiu營銷與資料探勘雙碩士，具多年ACNielsen營銷研究與實務(wù)經(jīng)驗，目前專注于營銷分析,對于市場趨勢與消費者行為的專案有深入的剖析及看法。曾參與中華電信行動商情分析與Hami影城專案項目。DataAnalyst

RussellShin跨越軟件系統(tǒng)設(shè)計與海量數(shù)據(jù)分析領(lǐng)域，具多年大型金融系統(tǒng)設(shè)計開發(fā)經(jīng)驗。曾在全國意向(Trendgo)擔任三年研發(fā)中心主任，對市場調(diào)查領(lǐng)域有多項消費者行為與營銷分析項目執(zhí)行有多年實務(wù)經(jīng)驗。曾參與ASUS用戶基因與目標族群分析專案。MarketAnalyst

ShinWang具有GoogleAdwords網(wǎng)絡(luò)營銷與分析經(jīng)驗。專長分析手機上網(wǎng)及Apps市場趨勢。具有電信、金融、汽車產(chǎn)業(yè)分析實務(wù)，深度解析用戶行為關(guān)鍵特征，挖掘企業(yè)潛在客戶，有效提升用戶價值、減少用戶流失比例。曾參與中國移動移動互聯(lián)網(wǎng)調(diào)研項目與中華電信Hami影城等專案，MobileDataAnalyst

CrayWu于臺灣固網(wǎng)、和信電訊與遠傳電信十年以上電信與行動加值服務(wù)實務(wù)經(jīng)驗，專長多維度分析平臺，如移動網(wǎng)行為與電子商務(wù)網(wǎng)站等解決方案及模型應(yīng)用。曾參與中國移動移動互聯(lián)網(wǎng)調(diào)研、動漫基地用戶行為分析專案、MM自運運營分析平臺設(shè)計項目、ASUS用戶基因與目標族群分析、網(wǎng)路書城博客來EC分析規(guī)劃、中華電信移動商情分析等專案。數(shù)據(jù)應(yīng)用分析71Systex大數(shù)據(jù)案例分享7272來自客戶的肯定73

系統(tǒng)快速排障,

降低企業(yè)損失=>

巨量交易（廣發(fā)銀行

中國銀聯(lián)）

合規(guī)審計系統(tǒng),

符合等保規(guī)范=>

證券金融（深交所

銀河證券

聯(lián)想集團

）

電商用戶分析,

深挖數(shù)據(jù)金礦

=>

移動互連（中國移動

廣東電信）典型用戶案例分享74

項目背景75支付日志監(jiān)控中國銀河證券股份有限公司，于2007年1月26日正式成立的全國性綜合類證券公司。公司本部設(shè)在北京，注冊資本為60億元人民幣。截至2011年底，公司共有員工11500余人。公司的經(jīng)營范圍包括：證券經(jīng)紀，證券投資咨詢，與證券交易、證券投資活動有關(guān)的財務(wù)顧問，證券承銷與保薦，證券自營，證券資產(chǎn)管理，融資融券，以及中國證監(jiān)會批準的其他業(yè)務(wù)。銀河證券銀河證券通過引入綜合日志審計系統(tǒng)來對銀河證券外網(wǎng)及互聯(lián)網(wǎng)應(yīng)用中各種信息設(shè)備的日志（記錄）實現(xiàn)收集、監(jiān)控、集中管理和分析，以及時發(fā)現(xiàn)安全事件并加以預(yù)防和糾正，達到進一步提升整體信息安全防護水平，加強銀河證券信息系統(tǒng)的安全性和可靠性的目的。日志集中管理等級保護日志分析豐富報表項目涉及范圍SPLUNKwindowsforwarderJuniperFirewall郵件，短信，警告通知https用戶界面公維中心主動抓取和被動接收OracleJDBCSPLUNKIDSUnixsyslogWindows2003Windows2000海王星，IISlogFtp方式收集日志F5BigIPSysmentecSEP綠盟CiscoRouterSNMPtrap項目開發(fā)與系統(tǒng)總覽統(tǒng)一視圖原始日志查詢TOP10事件統(tǒng)計攻擊類型病毒攻擊來源感染主機掌控安全事件我們需更強大的工具交易指標概覽交易監(jiān)控與排障一目了然交易時延分析為安全建立可量化的KPI考核86中國移動移動商城業(yè)務(wù)分析平臺WebIntelligence360度檢視消費者數(shù)據(jù)處理快,狠,準客戶分群,辨識客戶營運分析+模型分析網(wǎng)站分析(WebAnalytics)+營運智慧(OperationalIntelligence)在線線下資料統(tǒng)合整理,勾勒完整消費者圖像,分析個人消費者.提升利潤,增加客戶,降低流失率執(zhí)行精準營銷,直接接觸TA提高營銷投放效益,進而提升網(wǎng)站營收多平臺數(shù)據(jù)收集整合,與彈性數(shù)據(jù)處理能力!中國移動移動商城業(yè)務(wù)分析平臺利用行為數(shù)據(jù)創(chuàng)造新價值知識經(jīng)濟傳統(tǒng)EDW,DB&BI工具用戶行為接觸廣告曝光產(chǎn)生印像響應(yīng)產(chǎn)品搜索搜索關(guān)鍵字產(chǎn)品詳情頁產(chǎn)品網(wǎng)站點擊放入購物車詢問創(chuàng)意經(jīng)濟洞悉用戶「購買情境」實現(xiàn)精準營銷提升業(yè)務(wù)績效購買

意圖

訊息

印象認知客戶分析使用者點擊串流分析

客戶分群

客戶基本資料分析(關(guān)聯(lián)分析)行為分析客戶搜尋行為分析

網(wǎng)站回訪狀況分析網(wǎng)站資料下載分析服務(wù)質(zhì)量分析客服忠誠分析離開率退出率

銷售分析訂單分析(可關(guān)連客戶資料)付款資料分析

定位分析(關(guān)聯(lián)分析)

商品分析顧客點擊串流分析商品價格分析訂單分析(可關(guān)連客戶資料)策略分析

數(shù)位媒體l資料分析(網(wǎng)路媒體,行動媒體)

廣告分析商務(wù)合作分析再次購買容易布署處理快速易于整合多維分析彈性擴充數(shù)據(jù)分享與查詢數(shù)據(jù)存儲與處理數(shù)據(jù)收集HDFS分布式文件系統(tǒng)平行數(shù)據(jù)運算處理架構(gòu)分布式高效能的搜索引擎Log日志Probe探針網(wǎng)絡(luò)訊息用戶數(shù)據(jù)經(jīng)營分析精準營銷商業(yè)智能模型移動商情分析平臺移動互連網(wǎng)行為分析數(shù)據(jù)應(yīng)用精誠海量數(shù)據(jù)處理平臺設(shè)備個數(shù)復(fù)雜程度報表數(shù)據(jù)量時間301WAP欄位報表400G4m56s303A線機型分析400G12m18s302新版MT搜索分析1200G18min305貨架分析(周)1200G22min47s604客戶端IAP(月)2400G20min12s605應(yīng)用分析(月)2400G33min34sTB~PBDSH互聯(lián)網(wǎng)產(chǎn)品智慧分析解決方案實時監(jiān)控KPI實時監(jiān)控注冊用戶數(shù)終端滲透率客戶端滲透率移動互聯(lián)網(wǎng)滲透率在線模型用戶數(shù)業(yè)務(wù)量客戶貢獻新業(yè)務(wù)量付費人數(shù)業(yè)務(wù)監(jiān)控刷量行為監(jiān)測手機適配度分析業(yè)務(wù)異常監(jiān)控時實關(guān)鍵字分析服務(wù)質(zhì)量跳出率分析離開率分析停留時間平均瀏覽量忠誠度分析用戶分析新