深圳移動數(shù)據(jù)分析支撐平臺的設(shè)計與實現(xiàn)中期報告

深圳移動數(shù)據(jù)分析支撐平臺的設(shè)計與實現(xiàn)中期報告一、選題背景隨著移動互聯(lián)網(wǎng)的發(fā)展，移動數(shù)據(jù)分析變得越來越重要，已經(jīng)成為公司決策的重要支撐。移動數(shù)據(jù)分析平臺是對移動應(yīng)用程序的實時數(shù)據(jù)進(jìn)行監(jiān)測與處理，其作用是及時發(fā)現(xiàn)和解決用戶反應(yīng)的問題、改進(jìn)產(chǎn)品缺點、分析用戶使用行為等。我選擇該選題，是因為深圳移動數(shù)據(jù)分析支撐平臺的設(shè)計與實現(xiàn)挑戰(zhàn)性較大，需要具備一定計算機(jī)技術(shù)和大數(shù)據(jù)處理知識，同時能夠融合移動端和后端技術(shù)，較好地實現(xiàn)平臺可擴(kuò)展性、可用性、安全性等要素，對提高公司產(chǎn)品競爭力具有重要意義。二、選題目的移動數(shù)據(jù)分析支撐平臺全面而系統(tǒng)地收集、分析和展示移動應(yīng)用程序數(shù)據(jù)，對提升移動應(yīng)用程序的設(shè)計和使用有著重要的作用。本項目意在探索一種全新的、高效的移動數(shù)據(jù)分析支撐方法，并建立一個完善的移動數(shù)據(jù)分析支撐平臺。該平臺以網(wǎng)絡(luò)和物聯(lián)網(wǎng)技術(shù)為基礎(chǔ)，通過深度學(xué)習(xí)和數(shù)據(jù)挖掘等技術(shù)，對移動端用戶行為進(jìn)行有深入地研究，以提高用戶體驗和粘性。三、進(jìn)度安排1.需求采集和分析2.功能規(guī)劃和設(shè)計3.數(shù)據(jù)庫設(shè)計和搭建4.算法設(shè)計與優(yōu)化5.移動開發(fā)6.后端開發(fā)7.前端開發(fā)8.系統(tǒng)整合與測試四、研究內(nèi)容（一）需求采集和分析1.1調(diào)研不同公司不同行業(yè)的數(shù)據(jù)分析平臺的需求1.2梳理公司內(nèi)部業(yè)務(wù)流程和數(shù)據(jù)采集要求1.3分析收集的數(shù)據(jù)，歸納到需求文檔中（二）功能規(guī)劃和設(shè)計2.1確定平臺主要功能：數(shù)據(jù)采集、數(shù)據(jù)處理、數(shù)據(jù)可視化、用戶管理等2.2構(gòu)思系統(tǒng)的流程和架構(gòu)，確定數(shù)據(jù)傳輸方式、數(shù)據(jù)挖掘算法等2.3繪制原型圖設(shè)計系統(tǒng)頁面布局、功能組件，規(guī)范前端和后端接口規(guī)范（三）數(shù)據(jù)庫設(shè)計和搭建3.1確定數(shù)據(jù)庫中的表的字段，建立表之間的關(guān)系、實體3.2搭建數(shù)據(jù)轉(zhuǎn)儲、數(shù)據(jù)分析、數(shù)據(jù)管理三大模塊的數(shù)據(jù)庫，并開發(fā)數(shù)據(jù)庫觸發(fā)器和存儲過程（四）算法設(shè)計與優(yōu)化4.1采用深度學(xué)習(xí)、數(shù)據(jù)挖掘等技術(shù)，對數(shù)據(jù)進(jìn)行預(yù)處理、清洗和特征提取4.2采用不同的算法處理不同類型的數(shù)據(jù)，對多源數(shù)據(jù)進(jìn)行聚合4.3對算法進(jìn)行優(yōu)化、調(diào)整參數(shù)，并使用機(jī)器學(xué)習(xí)和數(shù)據(jù)挖掘技術(shù)來提升數(shù)據(jù)分析的準(zhǔn)確度和處理效率（五）移動開發(fā)5.1開發(fā)Android和iOS客戶端，對用戶體驗進(jìn)行深入優(yōu)化5.2實現(xiàn)用戶數(shù)據(jù)的采集、上傳，實時計算和實時響應(yīng)功能5.3實現(xiàn)推送功能，讓用戶使用更方便，將用戶黏性提升（六）后端開發(fā)6.1實現(xiàn)移動端數(shù)據(jù)上傳、數(shù)據(jù)預(yù)處理和聚合6.2開發(fā)Python腳本，進(jìn)行數(shù)據(jù)清洗和特征提取6.3實現(xiàn)算法和模型的計算和訓(xùn)練（七）前端開發(fā)7.1設(shè)計平臺界面，實現(xiàn)數(shù)據(jù)可視化的功能7.2實現(xiàn)數(shù)據(jù)查詢、數(shù)據(jù)導(dǎo)出、數(shù)據(jù)備份等功能模塊7.3進(jìn)行界面美化、用戶交互規(guī)范化（八）系統(tǒng)整合與測試8.1對平臺進(jìn)行測試和調(diào)試，確保穩(wěn)定性和可靠性8.2進(jìn)行系統(tǒng)部署和網(wǎng)站上線，上線前進(jìn)行回歸測試和系統(tǒng)測試8.3對平臺維護(hù)、優(yōu)化，盡可能保持平臺的完整性和可用性五、參考文獻(xiàn)[1]蔣興華，李俊.深度學(xué)習(xí)在移動數(shù)據(jù)分析中的應(yīng)用[J].未來網(wǎng)絡(luò),2018,9(7):155-163.[2]ChakrabortyA,KumarS,GursoyK,etal.RevisitingMobileAppUsagePrediction[J].IEEETransactionsonMobileComputing,2015,PP(99):1.[3]LiS,ZhaoK,ZhangS,etal.Fine-GrainedAppUsageAnalysisforBehavior-BasedClustering[C]//Proceedingsofthe15thAnnualInternationalConferenceonMobileSystems,Applications,andServices,2017:109-123.[4]RoyS,SaxenaN,KhanG,etal.Off-DeviceBehavioralFootprintingforUbiquitousMalwareDetectiononMobile[C]//ProceedingsoftheSymposiumonSecurityandPrivacy,2018.[5]ZhangJ,ZhaoY,LiH,etal.UnveilingUserBehaviorsbehindLowRetentionRatesofMobileApps[C]//Proceedingso