版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
1、XX市數(shù)據(jù)中心平臺(tái)暨實(shí)戰(zhàn)應(yīng)用平臺(tái)需求與技術(shù)方案XX 股份 XX 分公司2013-11目錄 TOC o 1-5 h z HYPERLINK l bookmark2 o Current Document 概述4 HYPERLINK l bookmark4 o Current Document 建設(shè)背景4 HYPERLINK l bookmark6 o Current Document 建設(shè)目標(biāo)4 HYPERLINK l bookmark8 o Current Document 建設(shè)依據(jù)5 HYPERLINK l bookmark10 o Current Document 設(shè)計(jì)原則5 HYPERLI
2、NK l bookmark12 o Current Document 實(shí)戰(zhàn)應(yīng)用平臺(tái)建設(shè)需求6 HYPERLINK l bookmark14 o Current Document 建設(shè)內(nèi)容6 HYPERLINK l bookmark16 o Current Document 網(wǎng)絡(luò)現(xiàn)狀6業(yè)務(wù)功能需求7 HYPERLINK l bookmark34 o Current Document XXXX系統(tǒng)需求7 HYPERLINK l bookmark21 o Current Document 信息服務(wù)系統(tǒng)需求7 HYPERLINK l bookmark23 o Current Document 公文管理
3、系統(tǒng)需求8 HYPERLINK l bookmark25 o Current Document XXXXXX綜合應(yīng)用平臺(tái)備份庫建設(shè)8 HYPERLINK l bookmark27 o Current Document 非現(xiàn)場(chǎng)XX處理建設(shè)8 HYPERLINK l bookmark29 o Current Document 數(shù)據(jù)中心建設(shè)需求8集成系統(tǒng)需求10XXXX需求10XXX系統(tǒng)需求10 HYPERLINK l bookmark36 o Current Document 數(shù)據(jù)中心平臺(tái)暨實(shí)戰(zhàn)應(yīng)用平臺(tái)軟件設(shè)計(jì)方案10 HYPERLINK l bookmark39 o Current Docume
4、nt 網(wǎng)絡(luò)框架設(shè)計(jì)10 HYPERLINK l bookmark41 o Current Document 邏輯框架設(shè)計(jì)10 HYPERLINK l bookmark43 o Current Document 總體系統(tǒng)框架11軟件系統(tǒng)設(shè)計(jì)11XXXX業(yè)務(wù)子系統(tǒng)11 HYPERLINK l bookmark52 o Current Document 信息服務(wù)業(yè)務(wù)子系統(tǒng)17 HYPERLINK l bookmark54 o Current Document 公文管理業(yè)務(wù)子系統(tǒng)18集成接口設(shè)計(jì)19與XXXX的接口方案19 HYPERLINK l bookmark59 o Current Docume
5、nt 與XXX系統(tǒng)的接口功能19 HYPERLINK l bookmark61 o Current Document XXXX信息系統(tǒng)及XXX備份庫建設(shè)設(shè)計(jì)方案19 HYPERLINK l bookmark64 o Current Document XXX備份庫建設(shè)方案19 HYPERLINK l bookmark66 o Current Document 非現(xiàn)場(chǎng)XX處理建設(shè)20 HYPERLINK l bookmark68 o Current Document 系統(tǒng)架構(gòu)20 HYPERLINK l bookmark70 o Current Document 系統(tǒng)功能設(shè)計(jì)20 HYPERLIN
6、K l bookmark72 o Current Document 與相關(guān)系統(tǒng)的集成設(shè)計(jì)22 HYPERLINK l bookmark74 o Current Document 數(shù)據(jù)中心建設(shè)設(shè)計(jì)方案及其應(yīng)用23 HYPERLINK l bookmark76 o Current Document 概述23 HYPERLINK l bookmark78 o Current Document 數(shù)據(jù)匯聚與共享系統(tǒng)方案23 HYPERLINK l bookmark82 o Current Document 數(shù)據(jù)存儲(chǔ)與檢索方案28 HYPERLINK l bookmark86 o Current Docu
7、ment 效益分析32 HYPERLINK l bookmark88 o Current Document 應(yīng)用服務(wù)器虛擬化建設(shè)(VMWAREESXi虛擬化方案)33 HYPERLINK l bookmark91 o Current Document 現(xiàn)狀33 HYPERLINK l bookmark93 o Current Document 虛擬化基礎(chǔ)架構(gòu)解決方案34 HYPERLINK l bookmark95 o Current Document 虛擬化基礎(chǔ)架構(gòu)的性能34 HYPERLINK l bookmark97 o Current Document 應(yīng)用的高可用性36 HYPERL
8、INK l bookmark99 o Current Document 虛擬應(yīng)用的安全問題37 HYPERLINK l bookmark101 o Current Document 方案實(shí)施后的效果38 HYPERLINK l bookmark103 o Current Document 方案拓?fù)?1 HYPERLINK l bookmark105 o Current Document 方案構(gòu)成說明42 HYPERLINK l bookmark107 o Current Document VMwarevSphere配置43 HYPERLINK l bookmark111 o Current D
9、ocument VMwarevCenter配置46 HYPERLINK l bookmark113 o Current Document 虛擬化軟件配置需求46 HYPERLINK l bookmark115 o Current Document 虛擬化實(shí)施結(jié)果47 HYPERLINK l bookmark117 o Current Document 預(yù)算49概述建設(shè)背景XX市位于浙江省中部,XXXXXXXXXB至目前XX實(shí)有人口已突破達(dá)200多萬,其中本市人口74萬,外來人口達(dá)到143.3萬人,常駐外商1.3萬,每天流動(dòng)人口達(dá)20余萬。XX已經(jīng)建造好的卡口設(shè)備有69臺(tái),并且還在不斷的增長,但
10、是還沒有一個(gè)完整的針對(duì)卡口設(shè)備的實(shí)戰(zhàn)應(yīng)用平臺(tái)。為滿足全國各級(jí)XXXXX烈門大范圍車輛XXXXffi預(yù)警攔截、車輛軌跡和交通流量分析研判、XXXX亍為甄別查處等業(yè)務(wù)應(yīng)用,為預(yù)防和減少道路交通事故、打擊XX犯罪工作提供技術(shù)支撐,因此我們提出了針對(duì)現(xiàn)在乃至以后卡口設(shè)備所依托的一個(gè)實(shí)戰(zhàn)應(yīng)用平臺(tái)。并且隨著設(shè)備的不斷增多,對(duì)于數(shù)據(jù)存儲(chǔ)的壓力也會(huì)漸漸凸顯出來,因此考慮到XX作為一個(gè)快速發(fā)展中的城市,在經(jīng)濟(jì)發(fā)展的同時(shí),對(duì)于XXXX勺數(shù)據(jù)存儲(chǔ)環(huán)境也勢(shì)必經(jīng)受考驗(yàn),為適應(yīng)今后XX越來越龐大的智能XXXXE架,作為底層的數(shù)據(jù)存儲(chǔ)我們也同時(shí)提出了數(shù)據(jù)中心的建設(shè)方案。建設(shè)目標(biāo)?建設(shè)一個(gè)面向?qū)崙?zhàn)的本地化的XXXX系統(tǒng)形成一
11、個(gè)對(duì)于卡口應(yīng)用大的實(shí)戰(zhàn)應(yīng)用平臺(tái),使今后電子XX與卡口設(shè)備可以通過這個(gè)平臺(tái)成為一體。而隨著對(duì)卡口和電子XX的建設(shè),這兩類設(shè)備的數(shù)據(jù)將成為XX部門科技化管理中的主要數(shù)據(jù)來源,因此對(duì)于這兩種數(shù)據(jù)的運(yùn)用與后期處理至關(guān)重要,直接影響到XX部門在科技化警務(wù)工作中的成效性。?構(gòu)建一個(gè)先進(jìn)的易于擴(kuò)展的數(shù)據(jù)接入、共享和存儲(chǔ)管理中心基于先進(jìn)的數(shù)據(jù)總線技術(shù)和大數(shù)據(jù)存儲(chǔ)管理技術(shù),構(gòu)建XX市智能交通信息數(shù)據(jù)的接入、共享和存儲(chǔ)管理中心。數(shù)據(jù)中心將整合現(xiàn)有XX市智能交通信息化資源,利用數(shù)據(jù)總線技術(shù),標(biāo)準(zhǔn)化接入各類交通信息化設(shè)施設(shè)備的數(shù)據(jù),并在數(shù)據(jù)中心進(jìn)行存儲(chǔ)和管理。利用大數(shù)據(jù)存儲(chǔ)管理架構(gòu),實(shí)現(xiàn)數(shù)據(jù)中心的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)
12、存儲(chǔ)和訪問,并能夠易于今后的數(shù)據(jù)擴(kuò)展。最后,數(shù)據(jù)中心根據(jù)各類信息數(shù)據(jù)對(duì)外共享和服務(wù)的需要,進(jìn)行數(shù)據(jù)的初步處理和整合,提供規(guī)范的數(shù)據(jù)訪問和共享接口,完成向上級(jí)省市和部委信息化系統(tǒng)的對(duì)接。?建設(shè)一個(gè)面向XX內(nèi)部和社會(huì)公眾的信息服務(wù)系統(tǒng)依托數(shù)據(jù)中心,建設(shè)一個(gè)面向XX內(nèi)部的云端文件存儲(chǔ)和流轉(zhuǎn)系統(tǒng),實(shí)現(xiàn)遠(yuǎn)程的文件存儲(chǔ)管理,并支撐不同用戶間的內(nèi)部文件流轉(zhuǎn)功能。同時(shí),利用數(shù)據(jù)中心接入和匯集的各類交通信息數(shù)據(jù),支撐面向社會(huì)公眾的信息服務(wù)。本項(xiàng)目中,建設(shè)基于微信平臺(tái)的交通信息查詢和發(fā)布服務(wù)系統(tǒng),實(shí)現(xiàn)XXXX交通警情上報(bào)和擁堵上報(bào)等功能。建設(shè)依據(jù)XX交通指揮系統(tǒng)建設(shè)技術(shù)規(guī)范(GAT445-2010)XX交通指揮系
13、統(tǒng)工程建設(shè)程序與要求(GA/T651-2006)中國智能運(yùn)輸系統(tǒng)體系框架XX部XX計(jì)算機(jī)信息系統(tǒng)“九五”規(guī)劃XX部XXXXW息系統(tǒng)建設(shè)框架道路交通堵塞度及評(píng)價(jià)方法(GA/T115)城市道路交通秩序評(píng)價(jià)方法(GA/T175)城市警用地理信息系統(tǒng)分類與代碼(GA/T491)城市警用地理信息系統(tǒng)圖形符號(hào)(GA/T492)城市警用地理信息系統(tǒng)建設(shè)規(guī)范(GA/T493)XX交通指揮系統(tǒng)工程設(shè)計(jì)制圖規(guī)范(GA/T515)計(jì)算機(jī)信息系統(tǒng)安全保護(hù)等級(jí)劃分準(zhǔn)則(GB17859)信息技術(shù)軟件包質(zhì)量要求測(cè)試(GB/T17544)設(shè)計(jì)原則?資源整合充分利用已有和在建的電子XX與卡口設(shè)備,以XX實(shí)戰(zhàn)業(yè)務(wù)為核心,兼顧流程
14、化管理,重點(diǎn)滿足全國各級(jí)XXXXX鄧門大范圍車輛XXXXffi預(yù)警攔截、車輛軌跡和交通流量分析研判、XXXX行為甄別查處等業(yè)務(wù)應(yīng)用,為預(yù)防和減少道路交通事故、打擊XX犯罪工作提供技術(shù)支撐信息共享。建立XX市道路XXXMJ息的共享交換體系,保證信息資源的全方位、多渠道?兼容擴(kuò)展搭建一個(gè)標(biāo)準(zhǔn)化的信息平臺(tái)和開放式的體系框架,確保本次工程實(shí)施內(nèi)容兼容未來的業(yè)務(wù)應(yīng)用,具備支持后續(xù)信息化工程建設(shè)的能力。?技術(shù)先進(jìn)吸收國內(nèi)外XX業(yè)務(wù)管理,信息化及軟硬件技術(shù)的先進(jìn)經(jīng)驗(yàn),確保數(shù)據(jù)中心與實(shí)戰(zhàn)平臺(tái)的技術(shù)先進(jìn)性。?規(guī)范流程通過本工程的設(shè)計(jì)及實(shí)施,建立一系列從外場(chǎng)設(shè)備到內(nèi)場(chǎng)管理乃至維護(hù)考核的評(píng)審制度。?開放型此次加入了
15、針對(duì)微信、微博以及APP的功能預(yù)留,為今后針對(duì)智能方面推行警務(wù)打下基礎(chǔ)。實(shí)戰(zhàn)應(yīng)用平臺(tái)建設(shè)需求建設(shè)內(nèi)容XX市實(shí)戰(zhàn)應(yīng)用平臺(tái)以外場(chǎng)卡口與電子XX設(shè)備為基礎(chǔ),希望構(gòu)建一個(gè)中間支撐平臺(tái),成為XX部XXXK統(tǒng)、XX卡口平臺(tái)以及原有指揮調(diào)度平臺(tái)之間的一個(gè)橋梁,并且擁有良好的擴(kuò)展性,可以應(yīng)對(duì)以后可能會(huì)出現(xiàn)的其他平臺(tái)接入。網(wǎng)絡(luò)現(xiàn)狀現(xiàn)在XX擁有兩大網(wǎng)絡(luò)分布,一個(gè)是XX部門內(nèi)部的XX網(wǎng),另一個(gè)是主要負(fù)責(zé)運(yùn)作集成平臺(tái)等其他平臺(tái)的物理網(wǎng)。我們需要將實(shí)戰(zhàn)平臺(tái)構(gòu)建在XX網(wǎng)之內(nèi)同時(shí)可以連接物理網(wǎng)以及對(duì)外網(wǎng)的進(jìn)行信息發(fā)布。業(yè)務(wù)功能需求XXXX系統(tǒng)需求XXXXK統(tǒng)主要在滿足基本XXXX勺核心功能以外,還同時(shí)可以對(duì)數(shù)據(jù)進(jìn)行挖掘,產(chǎn)
16、生對(duì)XXXXt效的其他數(shù)據(jù)。XXXX!求XXXX的主要核心功能應(yīng)該具有黑名單布控、車輛行蹤分析以及聯(lián)動(dòng)布控的功能。XX信息處理需求XX信息處理應(yīng)該具有對(duì)XX數(shù)據(jù)的前期錄入、審核以及告知并且統(tǒng)計(jì)的功能。數(shù)據(jù)來源主要有XXX系統(tǒng),應(yīng)該能夠有效的兼容XXX3來的數(shù)據(jù),并且對(duì)數(shù)據(jù)有處理能力。交通信息分析需求交通信息分析應(yīng)該具有利用已有的電子XX以及卡口設(shè)備,對(duì)路況進(jìn)行交通信息分析并得出有效的實(shí)時(shí)交通路況或者對(duì)未來可能出現(xiàn)的交通狀況的預(yù)判能力,以及最后的對(duì)歷史記錄的統(tǒng)計(jì)和分析功能。設(shè)備管理需求設(shè)備管理系統(tǒng)應(yīng)該具有對(duì)現(xiàn)有外場(chǎng)設(shè)備一些基本參數(shù)的實(shí)時(shí)監(jiān)控與統(tǒng)計(jì),并且可以對(duì)已經(jīng)損壞或者有問題的設(shè)備進(jìn)行維修報(bào)單,
17、可以對(duì)整個(gè)檢修過程進(jìn)行監(jiān)控與后期統(tǒng)計(jì)。信息服務(wù)系統(tǒng)需求微信平臺(tái)需求通過微信平臺(tái)可以實(shí)現(xiàn)實(shí)時(shí)路況的查詢、事故上報(bào)以及公共設(shè)施故障的上報(bào),也可以對(duì)微信關(guān)注用戶進(jìn)行宣傳標(biāo)語的推送。微博平臺(tái)需求通過微博平臺(tái)可以實(shí)現(xiàn)實(shí)時(shí)路況的發(fā)布以及宣傳信息的發(fā)布。(待定)APP平臺(tái)需求(待定)可以通過APP進(jìn)行查詢或者上報(bào)信息的功能。公文管理系統(tǒng)需求文件存儲(chǔ)需求通過這個(gè)系統(tǒng),用戶可以上傳各類文件,并進(jìn)行存儲(chǔ)。文件管理需求用戶可以對(duì)自己存儲(chǔ)的文件,通過可視化的操作,包括上傳、復(fù)制、刪除等管理。文件流轉(zhuǎn)需求用戶之間可以通過收發(fā)進(jìn)行文件流轉(zhuǎn)。XXXXXX綜合應(yīng)用平臺(tái)備份庫建設(shè)在XX機(jī)房信息中心安裝配置XXXXX濰合應(yīng)用平臺(tái)
18、(簡稱“XXX臺(tái)“)備份庫,由支隊(duì)定期對(duì)備份庫做同步,XX大隊(duì)可從本地備份庫中獲取相應(yīng)數(shù)據(jù),供統(tǒng)計(jì)、查詢、分析的應(yīng)用系統(tǒng)使用。非現(xiàn)場(chǎng)XX處理建設(shè)在XX信息中心獨(dú)立建設(shè)機(jī)動(dòng)車XX處理系統(tǒng)(即非現(xiàn)場(chǎng)XX處理平臺(tái))和數(shù)據(jù)庫,該系統(tǒng)包括XX證據(jù)的采集、校對(duì)、車主信息的獲取、XX通知書的形成、處罰文書的打印、處罰結(jié)果落實(shí)等過程,這一部分的工作效果直接影響到整個(gè)道路交通監(jiān)控系統(tǒng)對(duì)交通參與者的威懾力,是“科技強(qiáng)警”戰(zhàn)略的重要組成部分。數(shù)據(jù)中心建設(shè)需求現(xiàn)狀XX市于2012年建設(shè)完成XX市交通XXXX隨著業(yè)務(wù)的推進(jìn)所產(chǎn)生的平臺(tái)數(shù)據(jù)日益增多,僅警情部分?jǐn)?shù)據(jù)日均產(chǎn)生警情就達(dá)到了400500條,而XXXXF臺(tái)將通過電
19、子XX與卡口進(jìn)行實(shí)時(shí)與歷史數(shù)據(jù)的分析,并且隨著城區(qū)監(jiān)控設(shè)備的鋪設(shè)和智慧城市的推廣,未來每天產(chǎn)生的數(shù)據(jù)處理與歷史數(shù)據(jù)的查詢將使現(xiàn)存框架下的存儲(chǔ)結(jié)構(gòu)成為瓶頸??傮w建設(shè)需求因此針對(duì)以上情況,希望擁有一套擴(kuò)容性好并且能良好應(yīng)對(duì)未來5年內(nèi)數(shù)據(jù)膨脹的數(shù)據(jù)系統(tǒng),在此基礎(chǔ)上,希望這套系統(tǒng)在改善原有平臺(tái)數(shù)據(jù)處理的基礎(chǔ)上,能夠同時(shí)縮小實(shí)時(shí)數(shù)據(jù)與歷史數(shù)據(jù)的查詢時(shí)間。從經(jīng)濟(jì)角度考慮,這套系統(tǒng)必須能夠同時(shí)兼容現(xiàn)有的數(shù)據(jù)存儲(chǔ),改善它的運(yùn)行能力,并且針對(duì)以后的存儲(chǔ)擴(kuò)容達(dá)到便捷和性價(jià)比高兩點(diǎn)。結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)需求在XX的業(yè)務(wù)中,有大量的結(jié)構(gòu)化數(shù)據(jù)需要進(jìn)行存儲(chǔ),這些數(shù)據(jù)常常包括:?XXXX1礎(chǔ)數(shù)據(jù)?交通運(yùn)行參數(shù)(交通流、信號(hào)系統(tǒng)
20、配時(shí)等)?車牌信息這些信息具有數(shù)據(jù)內(nèi)容常常保存為記錄的方式,其數(shù)據(jù)結(jié)構(gòu)嚴(yán)謹(jǐn)?shù)奶攸c(diǎn),為此我們稱為結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)需要有專門的系統(tǒng)予以存儲(chǔ),以支持快速的檢索與統(tǒng)計(jì)分析非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)需求在XX的業(yè)務(wù)中,會(huì)出現(xiàn)大量非標(biāo)準(zhǔn)化的文本和圖像視頻信息,如警情的報(bào)警內(nèi)容、各類預(yù)案文字、涉及車輛的圖片信息、執(zhí)法過程的錄像信息、錄音信息等。而這些信息又往往與結(jié)構(gòu)化的信息間存在各種關(guān)聯(lián)關(guān)系。對(duì)這些信息的存儲(chǔ),目前往往分散在各自獨(dú)立的系統(tǒng)中,如卡警系統(tǒng)、接處警系統(tǒng)、視頻系統(tǒng)等。這種存儲(chǔ)和管理模式造成對(duì)數(shù)據(jù)管理的困難,以及在實(shí)戰(zhàn)應(yīng)用中難以進(jìn)行綜合的信息查詢和檢索。為此需要利用專門的系統(tǒng),如大數(shù)據(jù)平臺(tái)等,進(jìn)行存儲(chǔ),以
21、支持在其上的非結(jié)構(gòu)化的數(shù)據(jù)分析挖掘工作。檢索服務(wù)需求XX的業(yè)務(wù)數(shù)據(jù)導(dǎo)致需要進(jìn)行結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)。依托這些存儲(chǔ)的信息,綜合利用結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù),進(jìn)行統(tǒng)一而關(guān)聯(lián)檢索分析可以產(chǎn)生許多新的信息,為此需要有相應(yīng)的檢索服務(wù)以支持這些信息的加工處理。信息匯聚與共享的需求在建立數(shù)據(jù)中心的過程中,不可避免的需要進(jìn)行信息的匯聚,即通過多個(gè)信息來源以獲取信息/數(shù)據(jù);同時(shí)這些信息及其加工的結(jié)果也可以提供其他系統(tǒng)使用,為此需要有相應(yīng)的系統(tǒng)以支持信息的匯聚與共享。集成系統(tǒng)需求XXXX需求實(shí)戰(zhàn)平臺(tái)的數(shù)據(jù)結(jié)果或者部分內(nèi)容可以通過現(xiàn)有的XXXX進(jìn)行展示或者操作,需要能夠完美兼容現(xiàn)有的交通XXXX。XXX系統(tǒng)需
22、求實(shí)戰(zhàn)應(yīng)用平臺(tái)所產(chǎn)生的數(shù)據(jù)應(yīng)該能與XX部XXX系統(tǒng)進(jìn)行數(shù)據(jù)對(duì)接,最終把數(shù)據(jù)傳輸至XX部的XXX系統(tǒng)。(接口預(yù)留)數(shù)據(jù)中心平臺(tái)暨實(shí)戰(zhàn)應(yīng)用平臺(tái)軟件設(shè)計(jì)方案網(wǎng)絡(luò)框架設(shè)計(jì)根據(jù)XX網(wǎng)絡(luò)現(xiàn)狀并且結(jié)合實(shí)戰(zhàn)平臺(tái)網(wǎng)絡(luò)實(shí)現(xiàn)需求,繪制出如下基本網(wǎng)絡(luò)數(shù)據(jù)走向。網(wǎng)絡(luò)框架圖(略)邏輯框架設(shè)計(jì)XX市實(shí)戰(zhàn)應(yīng)用平臺(tái)系統(tǒng)建設(shè)根據(jù)需求,從軟件設(shè)計(jì)角度可以把整個(gè)平臺(tái)分為四個(gè)層次:?應(yīng)用層,包括所有需求內(nèi)所設(shè)計(jì)的軟件功能,主要是一個(gè)數(shù)據(jù)展示與操作的功能。?支持層,包括構(gòu)建整個(gè)平臺(tái)的幾個(gè)最基本的要素,其中由來自于其他平臺(tái)的信息共享資源,以及基本的用戶管理內(nèi)容和最主要的電子XX和卡口數(shù)據(jù)。?數(shù)據(jù)中心,成為支撐起整個(gè)平臺(tái)最底層的存儲(chǔ)結(jié)構(gòu),通
23、過結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的不同存儲(chǔ)需求分為數(shù)據(jù)中心和一般的oracle數(shù)據(jù)庫。?接入層,包含所有接入平臺(tái)的數(shù)據(jù)來源,有電子XX卡口設(shè)備、XXXK統(tǒng)、集成平臺(tái)、微信微博APP以及未來可能的其他數(shù)據(jù)。邏輯結(jié)構(gòu)圖(略)總體系統(tǒng)框架總體系統(tǒng)框架圖(略)軟件系統(tǒng)設(shè)計(jì)XXXX業(yè)務(wù)子系統(tǒng)XXXX題機(jī)動(dòng)車XXXXK統(tǒng)核心軟件包括以下功能:黑名單布控功能黑名單布控是整個(gè)XXXX#務(wù)子系統(tǒng)的核心部分,而我們也將通過兩個(gè)方面來提升和優(yōu)化現(xiàn)有黑名單布控的響應(yīng)時(shí)間:前端比對(duì)布控:通過把違章車牌上傳至前端,然后通過前端卡口或電子XX設(shè)備進(jìn)行布控并返回報(bào)警信息的方式,是最理想的實(shí)時(shí)布控策略,對(duì)于時(shí)效性和實(shí)時(shí)性都非常強(qiáng),但缺點(diǎn)
24、是前端設(shè)備公共機(jī)的性能直接影響報(bào)警響應(yīng)時(shí)間,并且根據(jù)XX現(xiàn)實(shí)情況外場(chǎng)設(shè)備無法與實(shí)戰(zhàn)平臺(tái)直連,需要通過設(shè)備廠商本身提供的平臺(tái),又無形中增加了整個(gè)布控報(bào)警響應(yīng)時(shí)間的過程。根據(jù)上海、天津等項(xiàng)目的實(shí)施經(jīng)驗(yàn),在對(duì)設(shè)備廠商提出2秒內(nèi)返回報(bào)警信息的前提下,我們預(yù)計(jì)整個(gè)實(shí)時(shí)布控的報(bào)警響應(yīng)時(shí)間將會(huì)控制在5秒以內(nèi)。中心比對(duì)布控:通過利用本次項(xiàng)目中的大數(shù)據(jù)平臺(tái)我們可將XX信息錄入至數(shù)據(jù)庫,并根據(jù)前端傳回的車牌進(jìn)行分析和處理,從而進(jìn)行報(bào)警布控的一種方式。但是實(shí)時(shí)性相對(duì)前者來說肯定要差強(qiáng)人意,可應(yīng)用于一些對(duì)實(shí)時(shí)性并不高的其他警種所需的個(gè)案布控,能夠起到良好的效果。黑名單布控主要包含以下幾個(gè)主要功能:1、布控信息管理:對(duì)
25、布控信息進(jìn)行管理,包括錄入、審核等功能。2、機(jī)動(dòng)車通行信息比對(duì):實(shí)時(shí)比對(duì)機(jī)動(dòng)車過車信息,并與布控信息進(jìn)行比對(duì);3、布控機(jī)動(dòng)車通行預(yù)警:對(duì)比對(duì)結(jié)果進(jìn)行預(yù)警簽收、處理、結(jié)果反饋等。車輛行蹤分析功能1、單車軌跡查詢:機(jī)動(dòng)車軌跡精確查詢,號(hào)牌模糊查詢;2、多車軌跡查詢:關(guān)聯(lián)號(hào)牌軌跡查詢,多號(hào)牌軌跡查詢;3、多車軌跡比對(duì):車輛間軌跡關(guān)聯(lián)性比對(duì),一致性統(tǒng)計(jì);4、行蹤規(guī)律分析:嫌疑車的運(yùn)行軌跡和出沒規(guī)律,系統(tǒng)有相應(yīng)的行車軌跡分析功能。指定特定嫌疑車輛,可以跟蹤實(shí)時(shí)行車軌跡和對(duì)歷史圖片進(jìn)行回放。對(duì)刑偵經(jīng)偵禁毒止方部門比莪關(guān)心廉贊生的運(yùn)行機(jī)跡和出發(fā)規(guī)律,系 端有相應(yīng)的行車軌跡父析功能*指定特定嶷爨車輛,可以限院
26、實(shí)時(shí)行車軾 跡和對(duì)田史圖片遵行回放口行車軌跡跟蹤分析檢索指定車新并在圖上按時(shí)間順序標(biāo)注相鄰兩點(diǎn)時(shí)間何隔在3例鐘內(nèi)進(jìn)行連線針對(duì)海量數(shù)據(jù)模糊運(yùn)算的數(shù)據(jù)挖掘分析服務(wù)引擎聯(lián)動(dòng)布控功能與信號(hào)系統(tǒng)、視頻系統(tǒng)、警員調(diào)度和接處警系統(tǒng)聯(lián)動(dòng),對(duì)重要布控車輛的預(yù)警采取實(shí)施攔截措施。1、接處警聯(lián)動(dòng):通過接處警系統(tǒng),調(diào)度周邊警力對(duì)布控車輛進(jìn)行攔截;2、視頻系統(tǒng)聯(lián)動(dòng):根據(jù)預(yù)案檢索周邊的視頻資源,并提供指揮中心實(shí)時(shí)監(jiān)控;3、信號(hào)系統(tǒng)聯(lián)動(dòng):對(duì)周邊信號(hào)路口的信號(hào)燈相位進(jìn)行鎖定,干預(yù)布控車輛的行駛,達(dá)到截停的目的。信號(hào)系統(tǒng)聯(lián)動(dòng)需要信號(hào)機(jī)聯(lián)網(wǎng)并支持相應(yīng)的指令干預(yù)。.4.系統(tǒng)管理功能1、卡口系統(tǒng)基礎(chǔ)信息備案、審批、與其他信息數(shù)據(jù)傳輸
27、交換管理、參數(shù)、代碼管理等功能模塊。2、信息接口管理。除XXXXK統(tǒng)與綜合應(yīng)用平臺(tái)之間的信息傳輸交換、信息訪問等內(nèi)部信息接口外,供其他系統(tǒng)調(diào)用的信息接口包括:通行文本信息上傳、圖片信息上傳、布控信息比對(duì)、預(yù)警信息發(fā)布、布控信息交換、預(yù)警信息交換、卡口信息交換等。XX信息處理專題XX后處理系統(tǒng)XX后處理系統(tǒng)主要針對(duì)XX數(shù)據(jù)進(jìn)行后期處理以及通報(bào)。XX信息錄入功能錄入執(zhí)勤民警路口罰單信息,系統(tǒng)將保存的XX信息通過XXX系統(tǒng)接口存入XXX平臺(tái)3.4.1212XX信息審核功能審核動(dòng)態(tài)XX監(jiān)測(cè)系統(tǒng)的XX信息。檢測(cè)圖片、錄像信息、核對(duì)記錄信息,保存修改記錄,系統(tǒng)將保存的記錄信息通過XXX接口存入XXX平臺(tái)X
28、XXX告知功能XX單次或者多次將以各種現(xiàn)有形式通知車主,這里是通過短消息,在XX我們可以對(duì)多次XX的車輛通過誘導(dǎo)板進(jìn)行告知。功能截圖(略)XX信息查詢統(tǒng)計(jì)功能待XX數(shù)據(jù)聚集一定量后,再行討論查詢的條件、統(tǒng)計(jì)的要求和展示等功能。特定名單控制與處理功能通過對(duì)特定名單的建立,可以針對(duì)特定名單內(nèi)的車輛,對(duì)XX數(shù)據(jù)進(jìn)行過濾。特定名單處理結(jié)果也可以通過審核過程,對(duì)處理結(jié)果進(jìn)行二次校驗(yàn)。XX行為多發(fā)路段分析功能針對(duì)卡口數(shù)據(jù)的一套統(tǒng)計(jì)與查詢功能模塊,其中包括對(duì)于卡口一些基礎(chǔ)數(shù)據(jù)的查詢以及進(jìn)行數(shù)據(jù)挖掘后的統(tǒng)計(jì)數(shù)據(jù),其中就包括一個(gè)XX捕捉率與XX高發(fā)路段的分析等。前者可以直觀的對(duì)外場(chǎng)設(shè)備的有效捕捉率進(jìn)行統(tǒng)計(jì),后者
29、可以對(duì)執(zhí)法部門對(duì)于XX高發(fā)路段進(jìn)行集中整治帶來判斷依據(jù)。XX捕捉率查詢功能截圖(略)XX多發(fā)路段查詢功能截圖(略)交通信息分析專題功能截圖(略)行車時(shí)間功能根據(jù)卡口間過往車輛的通過時(shí)間估算出兩點(diǎn),或者由兩點(diǎn)推算出的整條路段的平均行車車速與時(shí)間,再通過誘導(dǎo)板對(duì)外發(fā)布,對(duì)司機(jī)選擇合理的行車路線提供幫助,也為緩解繁忙路段高峰時(shí)期的擁堵情況提供幫助手段。OD分析功能在設(shè)計(jì)一個(gè)道路網(wǎng)的XXXXK統(tǒng)時(shí),或在一個(gè)道路網(wǎng)XXXXK統(tǒng)實(shí)時(shí)運(yùn)行中,需要掌握交通流的集散分布規(guī)律,按照交通流的集散分布規(guī)律采取相應(yīng)的控制對(duì)策。為了提供決策數(shù)據(jù)支撐,需要道路交通流。國據(jù)。有利于管理者掌握道路交通的流向和流量,使得路網(wǎng)交通
30、整體組織更為科學(xué)。同時(shí)當(dāng)管理者對(duì)路網(wǎng)交通進(jìn)行分析時(shí),道路交通流。覺據(jù)能更好的幫助管理者了解路網(wǎng)實(shí)際交通情況。功能截圖(略)集散分析功能XXXX部門對(duì)于道路排堵保暢工作要求,從排堵、治堵、防堵三方面措施的需求著手,分析交通擁堵的成因。排堵工作需要及時(shí)掌握交通擁堵區(qū)域微觀集散現(xiàn)狀,從擁堵區(qū)域的上下游斷面和道口入手,分流和疏導(dǎo)交通;治堵工作需要掌握道路路網(wǎng)各斷面的通行能力和高峰期間的交通需求,分析并治理道路的交通瓶頸點(diǎn);防堵工作需要從交通需求管理的層次出發(fā),掌握交通擁堵區(qū)域的交通流集散路徑來源和分布結(jié)構(gòu),實(shí)施匝道調(diào)控、交通分流等措施從源頭抑制過盛的交通需求。為了提供以上XXXXft略的實(shí)施數(shù)據(jù)支撐,
31、需要道路交通流集散數(shù)據(jù)。有利于管理者制定科學(xué)的排堵、治堵和防堵措施??紤]到XX市一年也會(huì)舉辦大大小小不少展會(huì)與活動(dòng),對(duì)展會(huì)周邊的交通監(jiān)管會(huì)是很大一個(gè)工作難度,因此我們沿用世博會(huì)的管控方式,來推行對(duì)特定區(qū)域的集散分析,避免展會(huì)周邊的可能出現(xiàn)的交通擁堵情況。系統(tǒng)功能截圖(略)路況流量分析功能根據(jù)卡口設(shè)備提供的車流量數(shù)據(jù),我們可兩個(gè)卡口設(shè)備之間的道路、路口或者整條路段進(jìn)行路況流量的分析,以此作為一個(gè)交通采集系統(tǒng)里的一個(gè)分支底層數(shù)據(jù),最終計(jì)算出整條路段的平均車速,飽和度以及最重要的一個(gè)數(shù)值擁堵情況的評(píng)判。車流量統(tǒng)計(jì)曲線圖:系統(tǒng)功能截圖(略)車流量統(tǒng)計(jì)柱狀圖:系統(tǒng)功能截圖(略)設(shè)備管理專題設(shè)備狀態(tài)檢測(cè)功
32、能設(shè)備管理系統(tǒng)主要針對(duì)內(nèi)外場(chǎng)設(shè)備以及應(yīng)用程序進(jìn)行監(jiān)視的一個(gè)監(jiān)管系統(tǒng),結(jié)合運(yùn)維的設(shè)備維修單派發(fā)可實(shí)現(xiàn)發(fā)現(xiàn)問題、提交問題到解決問題和匯報(bào)問題的一體化流程監(jiān)管。設(shè)備狀態(tài)檢測(cè)功能設(shè)備管理系統(tǒng)主要針對(duì)內(nèi)外場(chǎng)設(shè)備以及應(yīng)用程序進(jìn)行監(jiān)視的一個(gè)監(jiān)管系統(tǒng),結(jié)合運(yùn)維的設(shè)備維修單派發(fā)可實(shí)現(xiàn)發(fā)現(xiàn)問題、提交問題到解決問題和匯報(bào)問題的一體化流程監(jiān)管。識(shí)別質(zhì)量檢測(cè)功能可根據(jù)抓拍數(shù)計(jì)算得出每個(gè)設(shè)備的捕捉率,如果捕捉率過低,設(shè)備可能存在問題。專題還可以通過人工方式測(cè)算出檢出率、漏檢率以及準(zhǔn)確率,通過這個(gè)專題可以定期監(jiān)控設(shè)備的運(yùn)營狀況,為設(shè)備維保提供考察依據(jù)。系統(tǒng)功能截圖(略)圖象質(zhì)量檢測(cè)功能可以查看所有設(shè)備所抓拍的全景圖像,以便
33、實(shí)時(shí)監(jiān)測(cè)各斷面信息。系統(tǒng)功能截圖(略)設(shè)備狀態(tài)管理可提供查詢外場(chǎng)設(shè)備的當(dāng)前使用狀態(tài)內(nèi)容包括視頻狀態(tài)、機(jī)箱溫度、箱門狀態(tài)、磁盤容量、CPU有率等,需要外場(chǎng)設(shè)備提供相應(yīng)數(shù)據(jù)接口實(shí)現(xiàn)。外場(chǎng)設(shè)備狀態(tài)查詢功能可提供對(duì)外場(chǎng)設(shè)備基本狀態(tài)的查詢功能,主要有卡口名稱、道路方向、車道編號(hào)、車道類型、視頻狀態(tài)、機(jī)箱溫度、箱門狀態(tài)、磁盤剩余容量、CPU占有率、車牌設(shè)備編號(hào)和卡口設(shè)備IP地址等。系統(tǒng)功能截圖(略)未上傳數(shù)據(jù)查詢功能選擇所有設(shè)備及查詢時(shí)間范圍進(jìn)行查詢,得到該時(shí)間段內(nèi)該設(shè)備的所有未上傳數(shù)據(jù),方便運(yùn)維人員對(duì)該設(shè)備的數(shù)據(jù)進(jìn)行手動(dòng)強(qiáng)制補(bǔ)傳操作。信息服務(wù)業(yè)務(wù)子系統(tǒng)這個(gè)系統(tǒng)主要針對(duì)向外部系統(tǒng)推送數(shù)據(jù)與服務(wù),現(xiàn)在主要針
34、對(duì)微信平臺(tái)做功能推廣,以后將在微博與APP端進(jìn)行開發(fā)。微信平臺(tái)專題主動(dòng)信息推送功能可以主動(dòng)向用戶推送諸如宣傳信息或者活動(dòng)信息等內(nèi)容。查詢功能XXXX查詢根據(jù)車牌號(hào)碼查詢車輛的XX信息。路況查詢根據(jù)路段名稱進(jìn)行路況的查詢。上報(bào)功能輕微道路事故上報(bào)用于輕微事故處理,上報(bào)時(shí)需要進(jìn)行驗(yàn)證,并上傳圖片、文字與位置信息。道路設(shè)施故障上報(bào)用于對(duì)道路設(shè)施故障的上報(bào),上傳圖片、文字與位置信息。路況上報(bào)用于對(duì)路況擁堵情況的上報(bào),上傳圖片或文字以及位置信息。其他功能綁定綁定后無需再對(duì)進(jìn)行驗(yàn)證。民意調(diào)查可進(jìn)行民意調(diào)查。用戶體驗(yàn)反饋可對(duì)使用滿意度進(jìn)行回饋。微博平臺(tái)專題能夠通過微博平臺(tái)發(fā)送實(shí)時(shí)路況、封路信息和突發(fā)情況等信
35、息。APP平臺(tái)專題與APP建立服務(wù)器和客戶端的關(guān)系,根據(jù)用戶的選擇進(jìn)行諸如XX查詢、路況查詢、事故上報(bào)以及其他更為多樣的查詢和互動(dòng)。公文管理業(yè)務(wù)子系統(tǒng)這個(gè)系統(tǒng)主要針對(duì)在平臺(tái)用戶之間的文件存儲(chǔ)、管理和流轉(zhuǎn),并且依托于數(shù)據(jù)中心的海量存儲(chǔ)能力,形成一個(gè)巨大的電子檔案存儲(chǔ)中心。文件存儲(chǔ)功能文件通過公文管理系統(tǒng)上傳后就會(huì)被永遠(yuǎn)保存在數(shù)據(jù)中心內(nèi),可經(jīng)由管理員設(shè)置每個(gè)人的最大存儲(chǔ)空間,以及歷史文件的最長保存時(shí)間,避免垃圾文件占用空間。文件管理功能存儲(chǔ)在數(shù)據(jù)中心的數(shù)據(jù)會(huì)通過權(quán)限管理進(jìn)行嚴(yán)格管控,只有在權(quán)限允許的情況下才可以對(duì)文件進(jìn)行添加、刪除或者修改操作。文件流轉(zhuǎn)功能文件流轉(zhuǎn)功能主要面向點(diǎn)對(duì)點(diǎn)或點(diǎn)對(duì)多點(diǎn)的文件
36、收發(fā)功能。主要文件收發(fā)流程如下:然后通過查詢功能可以查看接收人的操作狀態(tài),分為未查看、已查看節(jié)點(diǎn)發(fā)血磔M如2013-09-091P.1Q三星號(hào)2D13-MOTP;14.012013-09-0911J;47集成接口設(shè)計(jì)與XXXX的接口方案我們將通過兩種方式將實(shí)戰(zhàn)應(yīng)用平臺(tái)與現(xiàn)有的XXXXS相兼容,使兩個(gè)平臺(tái)在功能區(qū)域劃分上相對(duì)獨(dú)立,但是對(duì)使用者來說是一個(gè)整體。首先,底層數(shù)據(jù)方面,我們會(huì)將實(shí)戰(zhàn)平臺(tái)的數(shù)據(jù)庫與現(xiàn)有指揮調(diào)度平臺(tái)的數(shù)據(jù)庫進(jìn)行同步,使數(shù)據(jù)在底層互通和共享。其次,在此基礎(chǔ)上我們也通過對(duì)原有XXXXR頁嵌入的方式,把諸如軌跡追蹤、黑名單顯示等功能在GIS地圖上顯示出來。同時(shí)我們也將保持與XXXX
37、M格一致的嵌入式網(wǎng)頁形式,使原有XXXXf實(shí)戰(zhàn)應(yīng)用平臺(tái)之間的切換不會(huì)顯得突兀。與XXX系統(tǒng)的接口功能實(shí)戰(zhàn)平臺(tái)將是一個(gè)主要負(fù)責(zé)收集XX市所有電子XX與卡口設(shè)備數(shù)據(jù),并對(duì)此數(shù)據(jù)做處理的平臺(tái),同時(shí)我們也將會(huì)預(yù)留與XX部XXX系統(tǒng)進(jìn)行數(shù)據(jù)傳輸?shù)慕涌?。XXXX信息系統(tǒng)及XXX備份庫建設(shè)設(shè)計(jì)方案XXX備份庫建設(shè)方案.在XX支隊(duì)建立XXX分發(fā)庫,同時(shí)在XX大隊(duì)建立XXX備份庫;.所有XX大隊(duì)所需要的數(shù)據(jù)由XX支隊(duì)傳輸?shù)椒职l(fā)庫;.通過支隊(duì)現(xiàn)有的oracleDataGuard軟件對(duì)分發(fā)庫和XX的備份庫定期做同步;.XX大隊(duì)可從本地備份庫中獲取相應(yīng)數(shù)據(jù),供統(tǒng)計(jì)、查詢、分析的應(yīng)用系統(tǒng)使用;.對(duì)于需要辦理的具體業(yè)務(wù)數(shù)
38、據(jù),需通過外掛系統(tǒng)與支隊(duì)XXX平臺(tái)的集成交互,跑完整個(gè)業(yè)務(wù)流程,最終完成業(yè)務(wù)的辦理。非現(xiàn)場(chǎng)XX處理建設(shè)系統(tǒng)架構(gòu)系統(tǒng)架構(gòu)圖(略)系統(tǒng)功能設(shè)計(jì)XX證據(jù)采集數(shù)據(jù)采集是整個(gè)系統(tǒng)的基礎(chǔ),XX執(zhí)法證據(jù)采集模塊負(fù)責(zé)將XX證據(jù)導(dǎo)入非現(xiàn)場(chǎng)執(zhí)法系統(tǒng)中,執(zhí)法證據(jù)來源包括超速抓拍、數(shù)碼抓拍、視頻監(jiān)控、攝像機(jī)等,介質(zhì)可以包括視頻、圖像等。導(dǎo)入模式包括自動(dòng)和手工二種方式。4222XX證據(jù)校對(duì)采集證據(jù)后需要對(duì)XXXX息進(jìn)行校驗(yàn),丟棄無效或不可靠的XXXXE據(jù),并根據(jù)辨認(rèn)的號(hào)牌號(hào)碼從支隊(duì)、全省的機(jī)動(dòng)車數(shù)據(jù)庫中獲取機(jī)動(dòng)車的相關(guān)信息保存。針對(duì)證據(jù)信息來源功能需求及處理手段差異,此部分劃分為超速校對(duì)、數(shù)碼校對(duì)、視頻校對(duì)及校對(duì)糾錯(cuò)四
39、個(gè)功能,以下簡單介紹下這四個(gè)功能:超速校對(duì)實(shí)現(xiàn)超速抓拍系統(tǒng)所有采集到的圖片、基礎(chǔ)信息等XX數(shù)據(jù)自動(dòng)的寫入本系統(tǒng)的XX庫。流程如下:系統(tǒng)流程圖(略)數(shù)碼校對(duì)數(shù)碼校對(duì)數(shù)據(jù)來源主要是數(shù)碼攝像機(jī)提供的XX圖片數(shù)據(jù)文件或通過視頻設(shè)系統(tǒng)流程圖(略)備抓取成視頻文件,通過本功能,民警能對(duì)數(shù)碼證據(jù)圖片進(jìn)行校對(duì),并由業(yè)務(wù)接口寫入中心數(shù)據(jù)庫。流程如下:系統(tǒng)流程圖(略)視頻校對(duì)此功能校對(duì)流程與超速校對(duì)、數(shù)碼機(jī)校對(duì)基本相同。數(shù)據(jù)來源主要是者是移動(dòng)電子xx或其它視頻設(shè)備抓獲的xxxxk頻。流程如下:系統(tǒng)流程圖(略)校對(duì)糾錯(cuò)和復(fù)查由于采集到的各種諸如視頻、圖像等電子證據(jù)是實(shí)施非現(xiàn)場(chǎng)交通處罰的主要依據(jù),涉及交通執(zhí)法的公平性
40、、公正性。所以必須對(duì)這些電子證據(jù)進(jìn)行嚴(yán)格管理和控制,防止證據(jù)信息的隨意修改和刪除,同時(shí)為了防止一些誤操作所導(dǎo)致的數(shù)據(jù)修改或刪除,必須提供有效的數(shù)據(jù)糾錯(cuò)與管理功能。該功能提供了一種可管理的分級(jí)XX證據(jù)糾錯(cuò)和復(fù)查機(jī)制,既方便了一線操作員的操作,又提供了嚴(yán)格的可管理性。流程如下:系統(tǒng)流程圖(略)XX通知本功能提供xx通知功能,能對(duì)生成的通知書格式進(jìn)行自定義修改,提供標(biāo)準(zhǔn)格式通知書及通知書格式初始化模板。對(duì)XX結(jié)果可進(jìn)行單張或批量打印通知書,或者通知書也可以不打印,而進(jìn)行通知處理。流程如下:系統(tǒng)流程圖(略)XX處理XXXX輛的車主或駕駛?cè)嗽诮拥酵ㄖ獣院?,接受處理時(shí),打印車輛XX確認(rèn)單,車主或駕駛?cè)舜_
41、認(rèn)后,錄入XXXXS駛?cè)说鸟{駛證號(hào)或檔案編號(hào),從駕駛?cè)斯芾硐到y(tǒng)獲取駕駛?cè)说钠渌畔?。流程如下:查詢統(tǒng)計(jì)查詢統(tǒng)計(jì)功能是提供給不同人員使用的信息統(tǒng)計(jì)的門戶,該功能提供了XX校隊(duì)數(shù)據(jù)查詢、特殊數(shù)據(jù)查詢、簡易處罰決定書查詢等查詢平臺(tái)。系統(tǒng)管理系統(tǒng)管理提供:用戶管理、權(quán)限管理。用戶管理此功能直接調(diào)用XX系統(tǒng)的用戶信息,對(duì)用戶信息按所屬單位進(jìn)行分類,方便用戶進(jìn)檢索。權(quán)限管理此功能提供用戶功能權(quán)限管理及數(shù)據(jù)訪問權(quán)限配置。與相關(guān)系統(tǒng)的集成設(shè)計(jì)系統(tǒng)需要保證與周邊相關(guān)系統(tǒng)的集成,具體如下:.實(shí)現(xiàn)與支隊(duì)指揮中心集成平臺(tái)的對(duì)接系統(tǒng)需要與支隊(duì)指揮中心集成平臺(tái)實(shí)現(xiàn)對(duì)接,共享過車的軌跡信息、黑名單信息以及查緝布控等信息。.
42、實(shí)現(xiàn)與市XX局監(jiān)控系統(tǒng)的對(duì)接本期項(xiàng)目將在保持原有數(shù)據(jù)共享機(jī)制基礎(chǔ)上,向市局提供Webservice封裝的接口方式來實(shí)現(xiàn)數(shù)據(jù)的對(duì)接。.實(shí)現(xiàn)與現(xiàn)有XX支隊(duì)非現(xiàn)場(chǎng)執(zhí)法系統(tǒng)的集成實(shí)現(xiàn)與非現(xiàn)場(chǎng)執(zhí)法系統(tǒng)的對(duì)接,對(duì)接方式為非現(xiàn)場(chǎng)直接連接道路監(jiān)控庫,對(duì)道路XX原始數(shù)據(jù)進(jìn)行校對(duì),校對(duì)后有效數(shù)據(jù)入XXXXX綜合應(yīng)用平臺(tái)(XXX平臺(tái))。.與現(xiàn)有XX支隊(duì)XXX系統(tǒng)的對(duì)接監(jiān)控平臺(tái)調(diào)用XXX平臺(tái)的統(tǒng)一外掛請(qǐng)求接口服務(wù),從XXX平臺(tái)獲取機(jī)動(dòng)車基本信息和XX相關(guān)信息,為監(jiān)控平臺(tái)提供基礎(chǔ)的靜態(tài)信息集成。與浙江省、市支隊(duì)道路智能監(jiān)控一體化平臺(tái)的集成實(shí)現(xiàn)與省、市監(jiān)控平臺(tái)的對(duì)接,監(jiān)控平臺(tái)調(diào)用省局、市局道路智能監(jiān)控一體化平臺(tái)的接入服務(wù)
43、,上傳過車信息,并通過訪問省局、市局軌跡庫關(guān)聯(lián)查詢到全省的車輛軌跡與相關(guān)XX處理信息。與被盜搶庫和黑名單庫的集成從被盜搶庫和黑名單庫中獲取數(shù)據(jù),為監(jiān)控平臺(tái)提供布控黑名單。系統(tǒng)預(yù)設(shè)接口開放統(tǒng)一的Webservice接口,其他應(yīng)用系統(tǒng)可以按照統(tǒng)一接入服務(wù)協(xié)議進(jìn)行數(shù)據(jù)交互。數(shù)據(jù)中心建設(shè)設(shè)計(jì)方案及其應(yīng)用概述從數(shù)據(jù)中心的需求中可以發(fā)現(xiàn)整個(gè)數(shù)據(jù)中心建設(shè)工作包括以下幾個(gè)部分:?結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)系統(tǒng)的建設(shè)?非結(jié)構(gòu)化存儲(chǔ)系統(tǒng)的建設(shè)?數(shù)據(jù)匯聚與共享系統(tǒng)的建設(shè)?數(shù)據(jù)檢索系統(tǒng)的建設(shè)為此,我們建議數(shù)據(jù)中心采用分層方式進(jìn)行建設(shè),其層次結(jié)構(gòu)如下:分層結(jié)構(gòu)圖(略)其中,用綠色標(biāo)出的部分為本工程所涉及的內(nèi)容。其中結(jié)構(gòu)化存儲(chǔ)系統(tǒng)擬
44、利用已建成的ORACL數(shù)據(jù)庫進(jìn)行建設(shè),按照新增的數(shù)據(jù)存儲(chǔ)需求進(jìn)行相應(yīng)的升級(jí)、修改與擴(kuò)容;將一同建設(shè)非結(jié)構(gòu)化存儲(chǔ)系統(tǒng)與數(shù)據(jù)檢索系統(tǒng),以充分利用非結(jié)構(gòu)化存儲(chǔ)系統(tǒng)的特性進(jìn)行定制化的數(shù)據(jù)檢索與分析;將利用我們的數(shù)據(jù)通信中間件平臺(tái)RationalMQ進(jìn)行數(shù)據(jù)匯聚與共享系統(tǒng)的建設(shè)。數(shù)據(jù)匯聚與共享系統(tǒng)方案在進(jìn)行數(shù)據(jù)匯聚與共享系統(tǒng)建設(shè)時(shí),我們關(guān)注以下兩大類不同的需求:實(shí)時(shí)信息傳輸關(guān)注傳輸信息的實(shí)時(shí)性。這類信息只在很短的一個(gè)時(shí)期內(nèi)有效,如果超過這個(gè)時(shí)期,數(shù)據(jù)信息將失去具體的使用意義,典型的如用于交通狀態(tài)計(jì)算的實(shí)時(shí)交通參數(shù)(20s數(shù)據(jù))。歷史信息傳輸關(guān)注傳輸信息的可靠性。這類信息的實(shí)時(shí)應(yīng)用意義往往不大,通常是用于
45、事后的歷史統(tǒng)計(jì)分析,為此對(duì)數(shù)據(jù)的丟失率要求比較高,有些情況下甚至?xí)笱a(bǔ)傳,典型的如用于交通規(guī)劃分析用的歷史交通參數(shù)(5min數(shù)據(jù))針對(duì)這兩類需求,我們?cè)谶M(jìn)行系統(tǒng)設(shè)計(jì)時(shí)從以下幾個(gè)方面進(jìn)行考慮:傳輸過程中的流量控制管理,以保證實(shí)時(shí)傳輸?shù)膸捴貍鳈C(jī)制的控制管理,以適應(yīng)不同的重傳要求直通式傳輸與存儲(chǔ)轉(zhuǎn)發(fā)式傳輸,以平衡實(shí)時(shí)與歷史信息傳輸?shù)囊罅⒓创_認(rèn)與逐級(jí)端到端確認(rèn),以平衡可靠性與實(shí)時(shí)性的要求數(shù)據(jù)緩存控制與管理為此,數(shù)據(jù)中心通信系統(tǒng)涉及了整體構(gòu)架中的以下幾個(gè)層次:數(shù)據(jù)通信中間件信息匯聚層信息預(yù)處理與標(biāo)準(zhǔn)化層數(shù)據(jù)中心服務(wù)層中的信息共享與存儲(chǔ)為了實(shí)現(xiàn)這些層次中的相應(yīng)功能,我們建議圍繞成熟數(shù)據(jù)通信中間件Ra
46、tionalMQ結(jié)合定制開發(fā)的軟件實(shí)現(xiàn)這些層次。在工程中我們將會(huì)涉及以下四類軟件系統(tǒng):數(shù)據(jù)通信中間件、數(shù)據(jù)采集、數(shù)據(jù)分發(fā)、數(shù)據(jù)存儲(chǔ)。構(gòu)架圍繞XX數(shù)據(jù)中心的需求,結(jié)合上述四類軟件,我們建議的系統(tǒng)構(gòu)架如下:物理網(wǎng)網(wǎng)-XX網(wǎng)數(shù)據(jù)共享架構(gòu):物理網(wǎng)通信傳輸(RationalMQ )物理網(wǎng)/XX網(wǎng)內(nèi)數(shù)據(jù)匯聚架構(gòu):數(shù)據(jù)存儲(chǔ)(ITSDataStorage) 一1 通信傳輸(RationalMQ )構(gòu)架中:RationalMQ ,提供透明傳輸接口 ,數(shù)據(jù)通信中間件該軟件為獨(dú)立、透明傳輸?shù)耐ㄐ胖虚g件目前支持實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù)傳輸。數(shù)據(jù)采集功能為從數(shù)據(jù)庫、文件、Socket、FTP等數(shù)據(jù)源獲取數(shù)據(jù),按配置要求組織數(shù)
47、據(jù)完成數(shù)據(jù)打包,并通過通信傳輸軟件提供的接口傳輸數(shù)據(jù)。這一軟件根據(jù)需求需要按照給定的接口方式進(jìn)行定制開發(fā)。數(shù)據(jù)存儲(chǔ)功能為從數(shù)據(jù)傳輸軟件接收數(shù)據(jù),按照平臺(tái)間數(shù)據(jù)通信協(xié)議解析數(shù)據(jù)并將數(shù)據(jù)存儲(chǔ),目前存儲(chǔ)支持?jǐn)?shù)據(jù)庫、文件、FTP以及數(shù)據(jù)轉(zhuǎn)發(fā)功能。這一軟件根據(jù)需求需要按照給定的接口方式進(jìn)行定制開發(fā)。數(shù)據(jù)分發(fā)/共享功能為從數(shù)據(jù)傳輸軟件(數(shù)據(jù)通信中間件)接受數(shù)據(jù),按照數(shù)據(jù)轉(zhuǎn)發(fā)配置,將數(shù)據(jù)按規(guī)則分發(fā)到不同的應(yīng)用:數(shù)據(jù)共享或數(shù)據(jù)存儲(chǔ)。這一軟件根據(jù)需求需要按照給定的接口方式進(jìn)行定制開發(fā)。數(shù)據(jù)通信中間件(RationalMQ)獨(dú)立自主開發(fā)的數(shù)據(jù)通信中間件RationalMQ,是基于TCP/IP協(xié)議的數(shù)據(jù)通信服務(wù)軟件
48、,采用典型的Client-Server通信模式,通過配置,它既能滿足各類實(shí)時(shí)消息的即時(shí)傳輸,同時(shí)又能滿足大批量數(shù)據(jù)可靠傳輸?shù)囊?。?duì)數(shù)據(jù)傳輸做到“有且僅有一次數(shù)據(jù)被接收”。由于獨(dú)立自主開發(fā),具有定制化特性功能,無需考慮復(fù)雜的通用性,數(shù)據(jù)傳輸效率高。在開發(fā)過程中可充分考慮項(xiàng)目的實(shí)際情況進(jìn)行代碼優(yōu)化和性能優(yōu)化。針對(duì)實(shí)際項(xiàng)目的數(shù)據(jù)特性,數(shù)據(jù)分類成實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù):實(shí)時(shí)數(shù)據(jù)具有數(shù)據(jù)包小,傳輸時(shí)延小,效率高的特性;歷史數(shù)據(jù)具有數(shù)據(jù)包比較大,傳輸時(shí)延小要求不高但需要確保可靠的數(shù)據(jù)傳輸質(zhì)量,做到時(shí)效期內(nèi)不丟包。產(chǎn)品上線后維護(hù)簡單,排錯(cuò)容易,具有詳細(xì)的日志記錄,可設(shè)置調(diào)試級(jí)日志記錄,能分析每個(gè)數(shù)據(jù)包的走向,
49、精確到毫秒級(jí)的數(shù)據(jù)傳輸效率??蛻舳藬?shù)據(jù)服務(wù)層數(shù)據(jù)存儲(chǔ)層I數(shù)據(jù)傳輸層TCP/IP串口整個(gè)通信軟件分為三層:數(shù)據(jù)服務(wù)層、數(shù)據(jù)存儲(chǔ)層、數(shù)據(jù)鏈路層。每層只與其相關(guān)聯(lián)的層通信交互,各層的功能作用如下:數(shù)據(jù)服務(wù)層:提供客戶端連接接口,提供API供用戶調(diào)用,提供客戶端認(rèn)證機(jī)制,維護(hù)客戶端-服務(wù)器間連接,維護(hù)客戶端節(jié)點(diǎn),從數(shù)據(jù)存儲(chǔ)層獲取數(shù)據(jù)及發(fā)送數(shù)據(jù)到數(shù)據(jù)存儲(chǔ)層。數(shù)據(jù)存儲(chǔ)層:從數(shù)據(jù)服務(wù)層獲取數(shù)據(jù),根據(jù)數(shù)據(jù)存儲(chǔ)層協(xié)議對(duì)數(shù)據(jù)包進(jìn)行拆解包操作,本地存儲(chǔ)數(shù)據(jù),提交數(shù)據(jù)到數(shù)據(jù)鏈路層,收到數(shù)據(jù)鏈路層應(yīng)答成功發(fā)送后刪除本地?cái)?shù)據(jù),否則啟用重發(fā)機(jī)制,直至發(fā)送成功為止,確保數(shù)據(jù)完整性。數(shù)據(jù)鏈路層:建立并維護(hù)RationalMQ服
50、務(wù)器間數(shù)據(jù)鏈路,根據(jù)數(shù)據(jù)鏈路層問定義的協(xié)議對(duì)數(shù)據(jù)包進(jìn)行拆解包操作,接收數(shù)據(jù)存儲(chǔ)層發(fā)送的數(shù)據(jù)及提交數(shù)據(jù)給數(shù)據(jù)存儲(chǔ)層。.硬件方案機(jī)器用途數(shù)量型號(hào)配置信息匯聚服務(wù)器2HPDL3882*4核32GSATA1T*4(RAID5)信息共享服務(wù)器1HPDL3882*4核32GSATA1T*4(RAID5)數(shù)據(jù)存儲(chǔ)與檢索方案背景隨著信息采集手段的日益成熟和普及,各種各樣的數(shù)據(jù)匯聚至中心平臺(tái),數(shù)據(jù)量呈現(xiàn)爆炸性的增長,達(dá)到TB級(jí),PB級(jí),甚至ZB級(jí)。如何對(duì)這些海量數(shù)據(jù)進(jìn)行存儲(chǔ),檢索,分析處理,成為系統(tǒng)建設(shè)的關(guān)鍵。通過公司一年多對(duì)大數(shù)據(jù)技術(shù)的分析和研究,結(jié)合XX卡口項(xiàng)目需求和未來系統(tǒng)建設(shè)的要求,本方案采用傳統(tǒng)數(shù)據(jù)庫
51、技術(shù)和大數(shù)據(jù)處理技術(shù)相結(jié)合的形式,充分的利用傳統(tǒng)數(shù)據(jù)庫的數(shù)據(jù)一致性和點(diǎn)查詢優(yōu)勢(shì),以及大數(shù)據(jù)處理技術(shù)在海量數(shù)據(jù)檢索分析的優(yōu)勢(shì)。其中大數(shù)據(jù)處理技術(shù)采用Hadoop平臺(tái)技術(shù)架構(gòu)??傮w技術(shù)方案總體系統(tǒng)架構(gòu)分為4層(設(shè)備層,接入層,存儲(chǔ)層,應(yīng)用層),接入層通過通信機(jī)軟件和預(yù)處理軟件,將號(hào)牌識(shí)別設(shè)備抓拍到的圖片寫入文件系統(tǒng)(磁盤陣列)中,將號(hào)牌數(shù)據(jù)寫入關(guān)系型數(shù)據(jù)庫中(oracle),大數(shù)據(jù)分析平臺(tái)定期的將車牌歷史數(shù)據(jù)和圖片數(shù)據(jù)定期抽取到Hadoop系統(tǒng)中,供海量數(shù)據(jù)檢索,分析,數(shù)據(jù)挖掘等用,應(yīng)用系統(tǒng)提供最終的人機(jī)交互界面。應(yīng)用系統(tǒng)(實(shí)時(shí)查詢.檢索,分析,數(shù)據(jù)挖掘)實(shí)時(shí)在統(tǒng)查詢大數(shù)據(jù)分析平臺(tái)doobs接入層
52、通信機(jī)軟件預(yù)處理軟件設(shè)備層號(hào)碼識(shí)別設(shè)備1號(hào)碼識(shí)別設(shè)備2號(hào)碼識(shí)別設(shè)備口大數(shù)據(jù)存儲(chǔ)方案基于hadoop技術(shù)的海量數(shù)據(jù)處理架構(gòu)越來越多運(yùn)用到電子商務(wù),金融等多個(gè)行業(yè)的海量數(shù)據(jù)處理之中。交通行業(yè)同樣面臨著大數(shù)據(jù)的考驗(yàn),采用hadoop技術(shù),構(gòu)建海量交通數(shù)據(jù)中心,利用多服務(wù)器集群完成分布式并行計(jì)算,存儲(chǔ)與處理成為了一種趨勢(shì)??紤]到XX原有大量陣列存儲(chǔ)存在因此我們將整個(gè)大數(shù)據(jù)中心分為處理車牌記錄等結(jié)構(gòu)化數(shù)據(jù)的Hadoop系統(tǒng)和存放車牌圖片等非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)系統(tǒng)兩塊。原有陣列可以繼續(xù)用于存儲(chǔ)車牌圖片,而Hadoop系統(tǒng)則主要負(fù)責(zé)處理平臺(tái)不斷產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù),進(jìn)行快速的數(shù)據(jù)分析與處理,達(dá)到數(shù)據(jù)實(shí)時(shí)展示的目的
53、。這樣一方面可以大大提高XX市的平臺(tái)數(shù)據(jù)處理能力,另一方面保證原有存儲(chǔ)資源的不浪費(fèi)和未來擴(kuò)容的低成本和簡易性。Hadoop核心組成:?HDFS對(duì)外部客戶機(jī)而言,HDFS就像一個(gè)傳統(tǒng)的分級(jí)文件系統(tǒng)??梢詣?chuàng)建、刪除、移動(dòng)或重命名文件,等等。但是HDFS的架構(gòu)是基于一組特定的節(jié)點(diǎn)構(gòu)建的,這是由它自身的特點(diǎn)決定的。這些節(jié)點(diǎn)包括NameNode它在HDFS內(nèi)部提供元數(shù)據(jù)服務(wù);DataNode,它為HDFS提供存儲(chǔ)塊。存儲(chǔ)在HDFS中的文件被分成塊,然后將這些塊復(fù)制到多個(gè)計(jì)算機(jī)中(DataNode。這與傳統(tǒng)的RAID架構(gòu)大不相同。塊的大?。ㄍǔ?4MB)和復(fù)制的塊數(shù)量在創(chuàng)建文件時(shí)由客戶機(jī)決定。NameN
54、ode以控制所有文件操作。HDFS內(nèi)部的所有通信都基于標(biāo)準(zhǔn)的TCP/IP協(xié)議。?NameNodeNameNodel一個(gè)通常在HDFS實(shí)例中的單獨(dú)機(jī)器上運(yùn)行的軟件。它負(fù)責(zé)管理文件系統(tǒng)名稱空間和控制外部客戶機(jī)的訪問。NameNod歐定是否將文件映射到DataNode上的復(fù)制塊上。對(duì)于最常見的3個(gè)復(fù)制塊,第一個(gè)復(fù)制塊存儲(chǔ)在同一機(jī)架的不同節(jié)點(diǎn)上,最后一個(gè)復(fù)制塊存儲(chǔ)在不同機(jī)架的某個(gè)節(jié)點(diǎn)上。實(shí)際的I/O事務(wù)并沒有經(jīng)過NameNode只有表示DataNode和塊的文件映射的元數(shù)據(jù)經(jīng)過NameNode當(dāng)外部客戶機(jī)發(fā)送請(qǐng)求要求創(chuàng)建文件時(shí),NameNode會(huì)以塊標(biāo)識(shí)和該塊的第一個(gè)副本的DataNodeIP地址作為
55、響應(yīng)。這個(gè)NameNode還會(huì)通知其他將要接收該塊的副本的DataNode。NameNode一個(gè)稱為FsImage的文件中存儲(chǔ)所有關(guān)于文件系統(tǒng)名稱空間的信息。這個(gè)文件和一個(gè)包含所有事務(wù)的記錄文件(EditLog)將存儲(chǔ)在NameNode的本地文件系統(tǒng)上。FsImage和EditLog文件也需要復(fù)制副本,以防文件損壞或NameNode系統(tǒng)丟失。?DataNodeDataNode也是一個(gè)通常在HDFS實(shí)例中的單獨(dú)機(jī)器上運(yùn)行的軟件。Hadoop集群包含一個(gè)NameNode和大量DataNode。DataNode通常以機(jī)架的形式組織,機(jī)架通過一個(gè)交換機(jī)將所有系統(tǒng)連接起來。DataNode響應(yīng)來自HDF
56、S客戶機(jī)的讀寫請(qǐng)求。它們還響應(yīng)創(chuàng)建、刪除和復(fù)制來自NameNode的塊的命令。NameNodeR賴來自每個(gè)DataNode的定期心跳(heartbeat)消息。每條消息都包含一個(gè)塊報(bào)告,NameNode以根據(jù)這個(gè)報(bào)告驗(yàn)證塊映射和其他文件系統(tǒng)元數(shù)據(jù)。如果DataNode不能發(fā)送心跳消息,NameNode等采取修復(fù)措施,重新復(fù)制在該節(jié)點(diǎn)上丟失的塊。?SparkSpark是一個(gè)基于內(nèi)存計(jì)算的集群系統(tǒng),可用來構(gòu)建大型的、低延遲的數(shù)據(jù)分析應(yīng)用程序,運(yùn)行速度比Mapreduce快10-100倍,且易于使用,支持Java,ScalaorPython,具有通用性,并能結(jié)合SQL和流處理進(jìn)行復(fù)雜分析。Hadoo
57、p基礎(chǔ)架構(gòu)Replicateddatablacks硬件集群方案大數(shù)據(jù)分析平臺(tái)采用Hadoop集群的方案,通過對(duì)XX數(shù)據(jù)中心數(shù)據(jù)量的初步分析,建立總共12臺(tái)服務(wù)器的集群,分別如下,3臺(tái)主節(jié)點(diǎn)服務(wù)器、6臺(tái)DataNode節(jié)點(diǎn)服務(wù)器、1臺(tái)管理配置節(jié)點(diǎn)服務(wù)器、2臺(tái)應(yīng)用服務(wù)器。集群部署結(jié)構(gòu):數(shù)據(jù)節(jié)點(diǎn)1數(shù)據(jù)節(jié)點(diǎn)2數(shù)據(jù)節(jié)點(diǎn)3數(shù)據(jù)節(jié)點(diǎn)4 數(shù)據(jù)節(jié)點(diǎn)5數(shù)據(jù)節(jié)點(diǎn)6硬件方案:Hadoop集群中對(duì)不同角色的服務(wù)器,在內(nèi)存,CPUS硬盤存儲(chǔ)方面有不同的配置要求,針對(duì)XX數(shù)據(jù)中心的項(xiàng)目情況,服務(wù)器具體配置如下:機(jī)器用途數(shù)量配置NameNode1InterE5-26XX8核CPU64G內(nèi)存;4*1TSATAa(RAID1);
58、至少兩個(gè)1GbE以太網(wǎng)電口;做Raid1SecondaryNameNode1InterE5-26XX8核CPU64G內(nèi)存;4*1TSATA盤;至少兩個(gè)1GbE以太網(wǎng)電口BackupNameNode1InterE5-26XX8核CPU64G內(nèi)存;4*1TSATA盤(RAID1);至少兩個(gè)1GbE以太網(wǎng)電口數(shù)據(jù)節(jié)點(diǎn)6InterE5-24XX6核CPU128G內(nèi)存;8*1TSATA盤(RAID1);至少兩個(gè)1GbE以太網(wǎng)電口,不做Raid,8塊磁盤分開應(yīng)用服務(wù)器2InterE5-24XX6核CPU48G內(nèi)存;4*1TSATA盤(RAID5);至少兩個(gè)1GbE以太網(wǎng)電口管理配置節(jié)點(diǎn)1InterE5-2
59、6XX8核CPU48G內(nèi)存;4*1TSATA盤(RAID5);至少兩個(gè)1GbE以太網(wǎng)電口交換機(jī)1臺(tái)千兆交換機(jī)24電口+4光模塊(單模)KVM1套16口17寸液晶管理節(jié)點(diǎn)軟件3套數(shù)據(jù)節(jié)點(diǎn)軟件6套系統(tǒng)運(yùn)維管理軟件1套應(yīng)用調(diào)度管理模塊軟件1套數(shù)據(jù)訪問接口模塊軟件1套磁盤總?cè)萘縎=6X8=48T數(shù)據(jù)存儲(chǔ)能力:S=6X8X0.8/3=T效益分析從現(xiàn)狀分析,整個(gè)大數(shù)據(jù)平臺(tái)將從兩個(gè)方面改善現(xiàn)在XX的數(shù)據(jù)處理和存儲(chǔ)情況,并且隨著XX數(shù)據(jù)量的逐年提升,這兩個(gè)問題將日益突出,因此在問題出現(xiàn)之前通過這個(gè)系統(tǒng)將使現(xiàn)在和未來的問題得以解決,凸顯建設(shè)的經(jīng)濟(jì)價(jià)值。實(shí)時(shí)數(shù)據(jù)處理能力的提高運(yùn)用Hadoop系統(tǒng)我們可以將數(shù)據(jù)分析
60、提升至秒級(jí),根據(jù)我們Hadoop實(shí)驗(yàn)室的測(cè)算,以2010年上海實(shí)時(shí)車牌模糊查詢?yōu)槔?,正常情況下運(yùn)用oracle數(shù)據(jù)庫做車牌模糊查詢分析的結(jié)果產(chǎn)生在1015分鐘,運(yùn)用Hadoop系統(tǒng)這個(gè)結(jié)果會(huì)在25秒內(nèi)產(chǎn)生。因此我們可以看到運(yùn)用Hadoop系統(tǒng)使原本需要等待很長時(shí)間的任務(wù)大大縮短,達(dá)到實(shí)時(shí)展示的效果,這在某些諸如XX刑偵等方面會(huì)有突出的表現(xiàn)。海量歷史數(shù)據(jù)查詢能力的提高例如我們對(duì)2010年的數(shù)據(jù)(總量為15億條)將車牌記錄進(jìn)行出行頻次統(tǒng)計(jì)的應(yīng)用中,原Oracle系統(tǒng)中需要計(jì)算15分鐘,在Hadoop系統(tǒng)中只需要1分鐘左右,并且統(tǒng)計(jì)分析的復(fù)雜進(jìn)一步提高,之間的差距還會(huì)進(jìn)一步拉大,我們根據(jù)XX市平臺(tái)歷
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 醫(yī)療方面的計(jì)算機(jī)編程行業(yè)市場(chǎng)調(diào)研分析報(bào)告
- 國際貨運(yùn)代理行業(yè)市場(chǎng)調(diào)研分析報(bào)告
- 區(qū)塊鏈社交網(wǎng)絡(luò)行業(yè)市場(chǎng)調(diào)研分析報(bào)告
- 廣告重定向技術(shù)行業(yè)市場(chǎng)調(diào)研分析報(bào)告
- 電視機(jī)天線細(xì)分市場(chǎng)深度研究報(bào)告
- 化油器產(chǎn)業(yè)鏈招商引資的調(diào)研報(bào)告
- 頭發(fā)用手持電動(dòng)吹風(fēng)機(jī)產(chǎn)業(yè)鏈招商引資的調(diào)研報(bào)告
- 工業(yè)用烤箱產(chǎn)品供應(yīng)鏈分析
- 在線教育考核服務(wù)行業(yè)營銷策略方案
- 保險(xiǎn)柜的保養(yǎng)或修理行業(yè)市場(chǎng)調(diào)研分析報(bào)告
- 生產(chǎn)管理培訓(xùn)課件
- 小學(xué)語文整本書閱讀《夏洛的網(wǎng)》導(dǎo)讀課公開課一等獎(jiǎng)創(chuàng)新教學(xué)設(shè)計(jì)
- 部編版(2024)一年級(jí)語文上冊(cè)第7課《兩件寶》精美課件
- DL∕T 1795-2017 柔性直流輸電換流站運(yùn)行規(guī)程
- 上海民政局夫妻離婚協(xié)議書(2024版)
- 《醫(yī)院驗(yàn)收總結(jié)》課件
- 2024年山東省高考生物試題答案
- 2024年廉潔知識(shí)測(cè)試卷附答案
- 洽談會(huì)活動(dòng)方案策劃書
- 幼兒園大班健康教案《養(yǎng)成好習(xí)慣》
- 古典概型與幾何概型(文科)-2024高考數(shù)學(xué)復(fù)習(xí)含解析
評(píng)論
0/150
提交評(píng)論