年度金融大數(shù)據(jù)服務(wù)平臺項目規(guī)劃書

1234靜態(tài)的(如屬性數(shù)據(jù))，也可以是動態(tài)的(如行為數(shù)據(jù))。而金融數(shù)據(jù)采集產(chǎn)品就是根據(jù)業(yè)務(wù)需要，將這些數(shù)據(jù)采集到“金融大數(shù)據(jù)服務(wù)平臺”中。Hadoop集群通過將數(shù)據(jù)分配到多個集群節(jié)點上并進行并行處理，因此尤為適合對大數(shù)據(jù)的存儲和分析。Hadoop集群通過添加節(jié)點數(shù)量來有效的擴展集群，因此具有極好的可擴展性；Hadoop軟件都是開源的，也不必購買昂貴的高檔服務(wù)器，因此具有很好的性價比。Hadoop集群將數(shù)據(jù)分片發(fā)送至多個節(jié)點保存，因此具有極高的容錯性。大提高數(shù)據(jù)挖掘的質(zhì)量。分類、聚類、時序分析等技術(shù)，數(shù)據(jù)挖掘可以從海量的、不完全的、有噪聲的、模糊的、隨機工具是一項極具挑戰(zhàn)性的任務(wù)。數(shù)據(jù)挖掘得到的結(jié)果，往往數(shù)據(jù)量巨大、關(guān)聯(lián)關(guān)系復(fù)雜、維度多以及雙向互動需求等?？梢暬宫F(xiàn)工具以適合人類思維的圖形化的方式對結(jié)果進行展示，提高了數(shù)據(jù)的直觀性和可象深刻的美麗圖形，極大提升了數(shù)據(jù)的利用價值?！敖鹑诖髷?shù)據(jù)服務(wù)平臺”的效果，最終需要集成在各類金融業(yè)務(wù)系統(tǒng)中才能得以體現(xiàn)?？蛻袅魇Х治鱿到y(tǒng)、風(fēng)險分析系統(tǒng)等。564.17???系系系8業(yè)務(wù)應(yīng)用層：負(fù)責(zé)將分析挖掘結(jié)果的可視化展現(xiàn)形式，集成到相應(yīng)的金融業(yè)務(wù)系統(tǒng)中。層和業(yè)務(wù)應(yīng)用層之間，由可視化展現(xiàn)工具負(fù)責(zé)分析挖掘結(jié)果的可視化展現(xiàn)任務(wù)。4.2技術(shù)架構(gòu)“金融大數(shù)據(jù)服務(wù)平臺”的技術(shù)架構(gòu)采用多層次形式，如下圖所示：業(yè)務(wù)系統(tǒng)1業(yè)務(wù)系統(tǒng)2R圖形包，??可視化展現(xiàn)業(yè)務(wù)系統(tǒng)3??R分析包,SAS,??分析挖掘算法R分析包,SAS,??分析挖掘模型??系數(shù)據(jù)庫Kettle,??數(shù)據(jù)抽取、轉(zhuǎn)換、加載CSSqoopMapReduce定制化程序數(shù)據(jù)客戶端數(shù)據(jù)采集關(guān)系數(shù)據(jù)庫導(dǎo)入日志分析、提取??其他數(shù)據(jù)采集采集層動態(tài)數(shù)據(jù)靜態(tài)數(shù)據(jù)日志文件??其它數(shù)據(jù)數(shù)據(jù)源數(shù)據(jù)源包括各類動態(tài)數(shù)據(jù)(如行為數(shù)據(jù))、靜態(tài)數(shù)據(jù)(如屬性數(shù)據(jù))、日志文件以及其它數(shù)據(jù)等，可以是結(jié)構(gòu)化的、半結(jié)構(gòu)化的和非結(jié)構(gòu)化的數(shù)據(jù)。94.3.NN1NN2DN1DN2DN3DBDB5.15.21性能風(fēng)險。預(yù)防措施一般是在進行項目開發(fā)之前先設(shè)計和搭建出系統(tǒng)的基礎(chǔ)架構(gòu)并進行性能測試，確保架構(gòu)符合性能指標(biāo)后再進行后續(xù)工作。等是否能及時到位、到位的工具版本是否符合項目要求等，是項目組需要考慮的風(fēng)險因素。團隊成員能力和素質(zhì)風(fēng)險：團隊成員的能力(包括業(yè)務(wù)能力和技術(shù)能力)和素質(zhì)，對施是在用人之前先選對人、開展有針對性的培訓(xùn)、將合適的人安排到合適的崗位上。影任務(wù)等和項目成員溝通清楚，采用公平、公正、公開的績效考評制度，倡導(dǎo)團結(jié)互助的工作人員流