視頻大數(shù)據(jù)應(yīng)用技術(shù)方案介紹

建設(shè)目標(biāo)和思路建設(shè)內(nèi)容一二三目錄深度應(yīng)用第一頁，共49頁。一、建設(shè)目標(biāo)和思路-模式轉(zhuǎn)變警力不足科技強警事后處置事前預(yù)防被動應(yīng)對主動防控建立紅河州公安局“智慧警務(wù)”應(yīng)用新機制第二頁，共49頁。一、建設(shè)目標(biāo)和思路-體系建設(shè)信息應(yīng)用123數(shù)據(jù)√車型√車牌√時間√位置√手機√基站√性別√身高√人臉√年齡√品牌……人臉識別車輛識別視頻監(jiān)控圖像反恐維穩(wěn)案件偵破災(zāi)害預(yù)防犯罪預(yù)測交通預(yù)警新型警務(wù)防控體系新型警務(wù)作戰(zhàn)模式建設(shè)符合紅河州公安局實戰(zhàn)需求的特色應(yīng)用傳感識別第三頁，共49頁。社會動態(tài)管控實有人口管理通過視頻監(jiān)控、電子圍欄、wifi探針，實現(xiàn)社會動態(tài)管控實現(xiàn)人軌、車軌、通訊軌跡分析與擬合功能精準(zhǔn)打擊和案件破獲提供支撐實現(xiàn)基層數(shù)據(jù)自動流轉(zhuǎn)，錄入，解決基層多平臺數(shù)據(jù)采集錄入難題；將人、房、車相結(jié)合人口積分制管理實現(xiàn)指揮空間化、高效化、可視化，解決接處警與指揮脫節(jié)和監(jiān)督問題，解決情報與指揮合成作戰(zhàn)問題，完善各類案件證據(jù)體系問題解決人、車、通訊工具在特殊條件下的自動預(yù)警深挖重點人員的團伙關(guān)系；實現(xiàn)分級分色的管控實現(xiàn)民警積分制管理模式，解決民警精細化管理提高辦公效率。重點人員管理精確打擊應(yīng)急指揮調(diào)度警員內(nèi)務(wù)管理動態(tài)積分分級分色可視化指揮減負增效一、建設(shè)目標(biāo)和思路-能力建設(shè)第四頁，共49頁。一、建設(shè)目標(biāo)和思路-成效智慧融合智慧應(yīng)用智慧感知智慧挖掘視頻圖像解析服務(wù)車輛大數(shù)據(jù)平臺視頻結(jié)構(gòu)化人員分析挖掘人臉卡口車輛卡口車輛結(jié)構(gòu)化WIFI卡口電子警察人臉結(jié)構(gòu)化省廳、公安部接口旅館信息網(wǎng)吧信息火車信息汽車信息?？谛畔⒎墙?jīng)上網(wǎng)車輛分析挖掘視頻結(jié)構(gòu)化數(shù)據(jù)分析挖掘軌跡分析挖掘WIFI數(shù)據(jù)挖掘關(guān)系挖掘治安視頻監(jiān)控視頻圖像實戰(zhàn)應(yīng)用平臺人員流動預(yù)警平臺視頻圖像解析平臺公安局數(shù)據(jù)匯聚管理平臺業(yè)務(wù)專題庫索引庫關(guān)系庫第五頁，共49頁。建設(shè)目標(biāo)和思路警務(wù)應(yīng)用云建設(shè)內(nèi)容一二三目錄深度應(yīng)用第六頁，共49頁。（一）、數(shù)據(jù)融合共享平臺POLICE第七頁，共49頁。1、融合共享平臺-大腦01ETL系統(tǒng)04社會資源數(shù)據(jù)02視頻數(shù)據(jù)03公安內(nèi)部數(shù)據(jù)1數(shù)據(jù)流轉(zhuǎn)云化存儲2自動化分析、自動碰撞比對3數(shù)據(jù)驅(qū)動警務(wù)第八頁，共49頁。2、融合共享平臺—總體架構(gòu)大數(shù)據(jù)服務(wù)總線系統(tǒng)大數(shù)據(jù)資源管理平臺大數(shù)據(jù)集成管理平臺數(shù)據(jù)資源島數(shù)據(jù)資源采集上報第九頁，共49頁。2、融合共享平臺—架構(gòu)XX公安局數(shù)據(jù)：約10億條數(shù)據(jù)；采用Oracle+Solr方式，Solr用于建立索引；根據(jù)XX公安局現(xiàn)有數(shù)據(jù)量，可以采用1臺Oracle服務(wù)器+3臺Solr服務(wù)器建立數(shù)據(jù)資源平臺，最大可以支持40億條數(shù)據(jù)。硬件配置：處理器：配置2顆處理器，單顆核數(shù)≥10核，主頻≥2.2GHz；內(nèi)存：256GBR-ECC，DDR內(nèi)存；硬盤：2塊600GSSD硬盤,8塊6TSATA硬盤。第十頁，共49頁。2、融合共享平臺—架構(gòu)實時流數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)匯聚平臺入庫實時預(yù)警流式處理ETL特征搜索SparkStreaming消息隊列(Kafka)卡口數(shù)據(jù)、案件數(shù)據(jù)、圖片、視頻等Hbase/Hive數(shù)據(jù)集成(ETL)全文索引數(shù)據(jù)Solr數(shù)據(jù)緩沖數(shù)據(jù)接入適配整合任務(wù)監(jiān)控數(shù)據(jù)載入建索引統(tǒng)計分析行為分析挖掘建模Hive/SparkOracle數(shù)據(jù)庫（10億條、6TB）Excel文件txt文件網(wǎng)頁、照片整合任務(wù)定制卡口（4億條記錄）Redis交互查詢數(shù)據(jù)集成數(shù)據(jù)集成(Loader)文本文件第十一頁，共49頁。3、融合共享平臺—功能首頁展示，數(shù)據(jù)資源的整體狀態(tài)，一旦異常，預(yù)警提示。第十二頁，共49頁。4、融合共享平臺—功能兼容Oracle庫、MySQL庫、Hbase庫、Solr庫第十三頁，共49頁。5、融合共享平臺—功能資源編目，一目了然，不僅僅是結(jié)構(gòu)化數(shù)據(jù)，還包括圖片、文本第十四頁，共49頁。查看數(shù)據(jù)表的字段詳細信息6、融合共享平臺—功能查看數(shù)據(jù)庫中每類數(shù)據(jù)的具體內(nèi)容，配合一鍵搜索，效果顯著數(shù)據(jù)庫運行狀態(tài)監(jiān)控第十五頁，共49頁。（二）、視頻解析平臺POLICE第十六頁，共49頁。1、視頻圖像解析平臺—架構(gòu)第十七頁，共49頁。1、視頻圖像解析平臺—硬件架構(gòu)第十八頁，共49頁。2、視頻圖像解析平臺—特點實時分發(fā)實時解析實時匯聚實時分發(fā)實時比對實時預(yù)警對視頻、圖片中的人、車、物實時提取出結(jié)構(gòu)化描述信息，半結(jié)構(gòu)化信息實時匯聚圖像解析記錄/圖片，建立車輛、人像、案事件視頻三庫；軌跡檢索、關(guān)聯(lián)研判與公安各部門、警種、政府各部門實時共享圖像解析數(shù)據(jù)；資源共享一體化；高危地區(qū)人員、重點人員、本地關(guān)注人員實時比對；市/縣分級比對技戰(zhàn)法模型一點布控、全市聯(lián)動、精準(zhǔn)預(yù)警第十九頁，共49頁。3、視頻圖像解析特點—視頻解析行人、車輛、人騎車的分類2輪、3輪、汽車的分類運用深度學(xué)習(xí)技術(shù)，系統(tǒng)對同類目標(biāo)不同特征也能很好的進行識別不同類型目標(biāo)同類型目標(biāo)，不同特征第二十頁，共49頁。3、視頻圖像解析特點—視頻解析車輛信息結(jié)構(gòu)化人物信息結(jié)構(gòu)化人騎車信息結(jié)構(gòu)化第二十一頁，共49頁。3、視頻圖像解析特點—卡口車輛解析A積累幾十種車輛相關(guān)技戰(zhàn)法B能夠識別2000多種車標(biāo)、車型C百億條車輛結(jié)構(gòu)化數(shù)據(jù)秒級響應(yīng)D由車找人、人車關(guān)聯(lián)、車車關(guān)聯(lián)第二十二頁，共49頁。3、視頻圖像解析特點—人臉解析綜合運用人臉形狀特征、人臉灰度特征和人臉皮膚紋理特征等多種特征進行融合，比對。第二十三頁，共49頁。4、視頻圖像解析資源庫實時匯聚—基礎(chǔ)庫svac智能攝像機卡口結(jié)構(gòu)化服務(wù)視頻結(jié)構(gòu)化服務(wù)人臉結(jié)構(gòu)化服務(wù)圖偵案事件案事件視頻庫動態(tài)人像庫卡口車輛庫公安部規(guī)范、標(biāo)準(zhǔn)接口基礎(chǔ)庫第二十四頁，共49頁。4、視頻圖像解析資源庫實時匯聚—專題庫通過對數(shù)據(jù)資源的不同要素(例如人、物品、車輛、機構(gòu)、案事件、地址等信息)進行關(guān)聯(lián)，面向業(yè)務(wù)應(yīng)用，可以構(gòu)建相應(yīng)的各類專題資源庫cBA車輛圖像專題庫人員圖像專題庫人臉圖像專題庫專題庫第二十五頁，共49頁。4、視頻圖像解析資源庫實時匯聚—索引庫為了更好支撐全局檢索、綜合查詢、關(guān)聯(lián)查詢、快速檢索的應(yīng)用，需要針對結(jié)構(gòu)化、圖像特征等數(shù)據(jù)建立索引庫DBCA結(jié)構(gòu)化數(shù)據(jù)索引庫圖像特征數(shù)據(jù)索引庫對象軌跡數(shù)據(jù)索引庫對象關(guān)系數(shù)據(jù)索引庫索引庫第二十六頁，共49頁。6、視頻圖像解析平臺實時比對第二十七頁，共49頁。6、視頻圖像解析平臺實時預(yù)警州級人像服務(wù)總線人像比對照片查詢資源服務(wù)接口縣級（入所人員、暫住人口、流動人口等）人像比對照片查詢資源服務(wù)接口市級（暫住人口、流動人口、轄區(qū)重點人員等）人像比對服務(wù)接口照片查詢服務(wù)接口結(jié)構(gòu)化數(shù)據(jù)服務(wù)接口州級（常住人口、重點人員、出入境等）使用其他單位服務(wù)注冊本地服務(wù)使用其他單位服務(wù)注冊本地服務(wù)注冊本地服務(wù)一點布控、全州響應(yīng)第二十八頁，共49頁。6、視頻圖像解析平臺實時預(yù)警云端立體化展現(xiàn)“云”“端”交互精準(zhǔn)預(yù)警第二十九頁，共49頁。7、特色應(yīng)用—人臉解析第三十頁，共49頁。7、特色應(yīng)用—智能搜索第三十一頁，共49頁。5、視頻解析數(shù)據(jù)量估算視頻結(jié)構(gòu)化占用資源XX公安局視頻圖像解析平臺需要保存約2.25億條數(shù)據(jù)，一條結(jié)構(gòu)化數(shù)據(jù)大小約4K，則需要存儲資源：1.結(jié)構(gòu)化數(shù)據(jù)存儲：6.7億x4K=3T；2.圖片存儲：2.25億×300K=67.5T，考慮冗余按70T計算；XX公安局匯聚數(shù)據(jù)：圖片：5000張×500路×90天約2.25億張

結(jié)構(gòu)化數(shù)據(jù)：2.25億*3約6.7億條視頻圖片數(shù)據(jù)平均大?。?00KB/張接入500路視頻，每路視頻平均采集5000

張/天數(shù)據(jù)基礎(chǔ)第三十二頁，共49頁。5、人臉解析數(shù)據(jù)量估算人臉庫占用資源XX公安局視頻解析平臺支持5000萬量級的靜態(tài)人像庫的建庫和檢索，建庫總量每增加1萬人，需增加26M磁盤空間和26M內(nèi)存1.占用內(nèi)存：26M×5000萬/1萬=130G；2.人臉特征存儲：26M×5000萬/1萬=130G；3.圖片存儲：5000萬×200k=10T。XX公安局路人庫：1000張×500路×90天約4500萬人臉照片數(shù)據(jù)平均大?。?00KB/張接入500路視頻，每路視頻平均采集1000

張人臉/天數(shù)據(jù)基礎(chǔ)XX公安局靜態(tài)庫：4500萬路人庫+500萬?？趲旌筒伎貛旒s5000萬第三十三頁，共49頁。5、卡口圖片解析數(shù)據(jù)量估算視頻結(jié)構(gòu)化占用資源紅河州公安局視頻圖像解析平臺需要保存約4億條數(shù)據(jù)，一條結(jié)構(gòu)化數(shù)據(jù)大小約2K，則需要存儲資源：1.結(jié)構(gòu)化數(shù)據(jù)存儲：4億x2K=800G；2.圖片存儲：4億×300K=120T；xx公安局匯聚數(shù)據(jù)：已有4億條卡口圖片數(shù)據(jù)平均大?。?00KB/張接入200路高清卡口數(shù)據(jù)基礎(chǔ)視頻圖像解析平臺數(shù)據(jù)存儲總計：結(jié)構(gòu)化數(shù)據(jù)：4T，圖片存儲：200T第三十四頁，共49頁。建設(shè)目標(biāo)和思路視頻大數(shù)據(jù)應(yīng)用建設(shè)內(nèi)容一二三目錄深度應(yīng)用第三十五頁，共49頁。三類管控人員流入觸網(wǎng)1、智能研判—以人為核心第三十六頁，共49頁。人物畫像宏觀畫像財產(chǎn)特征出行特征人口特征技能特征同行特征關(guān)系特征異常特征消費特征微觀畫像全息檔案1、智能研判—以人為核心第三十七頁，共49頁。一人一檔1、智能研判—以人為核心第三十八頁，共49頁?？梢暬故痉治?、智能研判—以人為核心第三十九頁，共49頁。兩勞釋放監(jiān)外執(zhí)行吸販毒人員等通過模型挖掘形成本地關(guān)注人員*打、防、控一體*冒泡管理模式1、智能研判—人員預(yù)警第四十頁，共49頁。積分應(yīng)用車輛檔案一車一檔車輛軌跡車輛流入、流出

車輛管理模型模型管理積分項管理積分算法管理

積分應(yīng)用周期積分項積分排名積分查詢車輛管理模型車輛檔案2、智能研判—以車為核心第四十一頁，共49頁。車輛關(guān)系及數(shù)據(jù)挖掘建立車輛檔案2、智能研判—以車為核心第四十二頁，共49頁。2、智能研判—以車為核心發(fā)現(xiàn)高危車輛提前預(yù)警第四十三頁，共49頁。2、智能研判—軌跡擬合第四十四頁，共49頁。2、智能研判-車輛技戰(zhàn)法區(qū)域徘徊車輛分析疑似套牌車輛分析非法營運車輛分析車輛尾隨跟蹤分析初次入城車輛分析晝伏夜出車輛分析相似路徑尋車分析車輛活動區(qū)域分析第四十五頁，共49頁。房屋中居住人員身份、電話開展關(guān)聯(lián)房屋中虛擬身份信息展開關(guān)聯(lián)房屋中小區(qū)門卡信息展開關(guān)聯(lián)實有人口管理系統(tǒng)中展開關(guān)聯(lián)醫(yī)保、社保等信息展開關(guān)聯(lián)3、智能研判—以房屋為核心第四十六頁，共49頁。建立共享的、開放式的視頻圖像工作框架，規(guī)范化、流程化的建立案件視頻庫，一案一檔，積累圖像數(shù)據(jù)資產(chǎn)案事件信息接獲涉案點位排查圖像線索取證嫌疑對象