視頻大數(shù)據(jù)與智慧城市管控

廣州中國(guó)科學(xué)院軟件應(yīng)用技術(shù)研究所視頻大數(shù)據(jù)與智慧城市管控廣州中國(guó)科學(xué)院軟件應(yīng)用技術(shù)研究所

智慧城市研究中心視頻大數(shù)據(jù)及相關(guān)技術(shù)城市管控中的應(yīng)用與案例問(wèn)題、挑戰(zhàn)和一些建議匯報(bào)提綱123大數(shù)據(jù)定義大數(shù)據(jù)（bigdata）規(guī)模巨大到無(wú)法通過(guò)目前主流軟件工具，在合理時(shí)間內(nèi)達(dá)到擷取、管理、處理、并整理成為幫助企業(yè)經(jīng)營(yíng)決策等目的的資訊大數(shù)據(jù)的4V特點(diǎn)Volume（大量）Velocity（高速）Variety（多樣）Value（價(jià)值）視頻大數(shù)據(jù)4據(jù)保守估計(jì)，我國(guó)的監(jiān)控?cái)z像頭總數(shù)截止2011年已突破500萬(wàn)臺(tái)，并以每年20%的速度增長(zhǎng)中。一座有4萬(wàn)臺(tái)監(jiān)控?cái)z像頭的城市一天產(chǎn)生的數(shù)據(jù)量>950TB英國(guó)——攝像頭數(shù)量：人口數(shù)量達(dá)到1：15北京——四環(huán)之內(nèi)無(wú)盲點(diǎn)視頻大數(shù)據(jù)現(xiàn)狀視頻監(jiān)控將是世界上最大的數(shù)據(jù)生成器視頻大數(shù)據(jù)中蘊(yùn)藏的金礦真實(shí)的城市實(shí)時(shí)/歷史影像海中撈針，尋人尋物的利器執(zhí)法取證的重要來(lái)源城市中各種行為活動(dòng)的記錄異常行為——及時(shí)發(fā)現(xiàn)、有效應(yīng)對(duì)正常行為——分析規(guī)律、科學(xué)決策通常情況下，人類從外界獲得信息約90%來(lái)自雙眼城市中的視頻大數(shù)城市管理交通違章城市秩序…公共安全嫌疑人排查視頻抓逃線索關(guān)聯(lián)…輔助城市規(guī)劃交通流量分析預(yù)測(cè)…語(yǔ)義提取城市管控應(yīng)用需求語(yǔ)義提?。河?jì)算機(jī)視覺技術(shù)目標(biāo)人車物規(guī)則Logic

進(jìn)入

離開

出現(xiàn)

消失

取走

遺留

徘徊

擁擠度

密度背景環(huán)境功能入侵檢測(cè)遺留檢測(cè)遺失檢測(cè)徘徊檢測(cè)聚集檢測(cè)行為識(shí)別來(lái)車檢測(cè)流量統(tǒng)計(jì)前景目標(biāo)計(jì)算機(jī)視覺技術(shù)是挖掘視頻大數(shù)據(jù)金礦的核心工具語(yǔ)義提取：計(jì)算機(jī)視覺技術(shù)字符識(shí)別人臉識(shí)別廣義的計(jì)算機(jī)視覺技術(shù)至今仍然不成熟部分應(yīng)用在可控環(huán)境下已取得較好效果社會(huì)單位視頻資源視頻應(yīng)用服務(wù)器集群視頻監(jiān)控管理區(qū)公安網(wǎng)視頻共享平臺(tái)政府視頻資源接入、共享平臺(tái)社會(huì)視頻資源接入平臺(tái)公安網(wǎng)視頻共享平臺(tái)政府視頻資源接入、共享平臺(tái)視頻監(jiān)控管理區(qū)智能分析服務(wù)器集群存儲(chǔ)服務(wù)器集群派出所政府用戶政府用戶/資源區(qū)縣級(jí)公安網(wǎng)用戶市級(jí)公安網(wǎng)用戶視頻專網(wǎng)視頻應(yīng)用服務(wù)器集群安全邊界平臺(tái)安全邊界平臺(tái)（視頻通道部分）交巡警平臺(tái)社會(huì)視頻資源運(yùn)營(yíng)平臺(tái)Internet行業(yè)單位視頻資源移動(dòng)網(wǎng)絡(luò)市區(qū)、縣所、臺(tái)兵公共傳輸網(wǎng)絡(luò)前端鏡頭（公安自建）單兵系統(tǒng)移動(dòng)指揮車處置現(xiàn)場(chǎng)視頻大數(shù)據(jù)技術(shù)架構(gòu)（數(shù)據(jù)密集型應(yīng)用）數(shù)據(jù)分析任務(wù)分解下沉視頻大數(shù)據(jù)及相關(guān)技術(shù)城市管控中的應(yīng)用與案例問(wèn)題、挑戰(zhàn)和一些建議匯報(bào)提綱123利用城市中無(wú)處不在的攝像頭，構(gòu)建7×24小時(shí)智能識(shí)別監(jiān)控體系由傳統(tǒng)事后查看“被動(dòng)”模式變“主動(dòng)”預(yù)警，實(shí)時(shí)告警

占道經(jīng)營(yíng)

人群聚集

違章停車

明火檢測(cè)

車牌識(shí)別

井蓋丟失

入侵檢測(cè)

積水檢測(cè)

遺留物檢測(cè)…城市管理——異常狀態(tài)發(fā)現(xiàn)行為規(guī)則檢索城市管理——交通目標(biāo)/事件識(shí)別交通流量統(tǒng)計(jì)違章檢測(cè)車輛布控車輛特征檢索行為規(guī)則檢索公共安全——視頻卡口實(shí)時(shí)布控覆蓋車站、地鐵、重點(diǎn)路段的攝像頭，人臉檢測(cè)+識(shí)別通緝犯、危險(xiǎn)人員及早發(fā)現(xiàn)人物特征檢索案例：水客識(shí)別（拱北海關(guān)）應(yīng)用背景水客走私長(zhǎng)期困擾海關(guān)執(zhí)法工作；旅客進(jìn)出境次數(shù)直接影響海關(guān)對(duì)短期多次往返旅客行李物品的驗(yàn)放尺度；目前對(duì)“當(dāng)天及短期內(nèi)多次往返的旅客”的具體出入境情況只有邊檢部門掌握，海關(guān)無(wú)法與邊檢聯(lián)網(wǎng)共享數(shù)據(jù)實(shí)施效果通過(guò)人臉識(shí)別系統(tǒng)，對(duì)每天出入口岸的旅客進(jìn)行自動(dòng)計(jì)數(shù)，一旦超過(guò)規(guī)定次數(shù)則將報(bào)警信息發(fā)送到海關(guān)官員的手持終端上。改變了海關(guān)傳統(tǒng)的查驗(yàn)方式，提高了辦事效率。測(cè)試數(shù)據(jù)：在海關(guān)通道每天15萬(wàn)人流中找出特定人物，識(shí)別率>83%！案例：異常狀況識(shí)別（重慶工商銀行ATM機(jī)）應(yīng)用背景近幾年屢見針對(duì)包括ATM和自助銀行在內(nèi)的銀行系統(tǒng)營(yíng)業(yè)網(wǎng)點(diǎn)的惡性犯罪案件,而且作案手段越來(lái)越多,方式更加隱蔽,技術(shù)性更高,對(duì)安防體系與刑偵技術(shù)提出了越來(lái)越高的要求。實(shí)施效果通過(guò)智能視頻分析算法，提供面部異常識(shí)別、行為異常識(shí)別、遺留物檢測(cè)、ATM機(jī)上張貼物警示、偽裝設(shè)備偵測(cè)等視頻分析服務(wù)，自動(dòng)發(fā)現(xiàn)異常行為，實(shí)時(shí)報(bào)警。保障了銀行正常用戶的權(quán)益和人身安全。嫌疑人排查——海量人臉庫(kù)搜索比對(duì)移動(dòng)人臉識(shí)別終端手機(jī)拍照→上傳照片→接收結(jié)果靜態(tài)人臉照片比對(duì)數(shù)秒時(shí)間完成千萬(wàn)規(guī)模的人臉比對(duì)（公安人像庫(kù)）人物特征檢索案例果：通緝廊犯識(shí)別憶（常蠻州看理守所醬）應(yīng)用墾背景看守狐所中污的在皆押人炕員中變很可猴能存軍在全胳國(guó)通史緝犯死，如悅果其寫偽造激身份費(fèi)，容歐易錯(cuò)熟失抓失捕良伍機(jī)。實(shí)施我效果利用退人臉檔比對(duì)尤系統(tǒng)彼對(duì)在蜜押人率員的銀生物絡(luò)特征赤進(jìn)行念識(shí)別洲，并容與公乏安部捎公布跟的逃褲犯數(shù)旺據(jù)庫(kù)喂比對(duì)淋，搜面索相虎似人吵員的顫圖片托及身叢份信籃息，米監(jiān)管儀人員蛋能有飄效地請(qǐng)甄別狠出漏的網(wǎng)之梯魚。陳偉濤男漢族1972河?xùn)|省哪里市西山路25號(hào)123456789122015.4.317快速炊回溯濕取證——視頻畢濃縮棟摘要濃縮前兩小時(shí)（含大量無(wú)用信息）濃縮后五分鐘（

只呈現(xiàn)關(guān)鍵信息）濃縮培視頻艱精華泛，快禿速回揉溯事蒼件，鳥一般很監(jiān)控茶視頻絮壓縮去比>1晨:1略00按照堡衣著帽等特?fù)?jù)征智鉆能檢叢索人奪員、福車輛…快速吳取證魄違法境行為怪，提角高查政找效蔽率基于富行為序規(guī)則紀(jì)的篩擾選視頻護(hù)線索秒串聯(lián)——視頻隊(duì)信息催融合氧檢索視頻檢索綜合分析案件視頻檢索關(guān)聯(lián)視頻比對(duì)串并案分析案件統(tǒng)計(jì)分析按類型檢索

統(tǒng)計(jì)分析聯(lián)合壩檢索胖：根工據(jù)目蔬標(biāo)特鉛征，帳檢索怕相關(guān)歪多個(gè)努攝像像頭的揮視頻拾片段軌跡踩挖掘逆：跨歸攝像健機(jī)目訓(xùn)標(biāo)關(guān)余聯(lián)，騾目標(biāo)賞軌跡殲研判通過(guò)竭視頻檢數(shù)據(jù)齒，匯鄭集一藥個(gè)城壞市中臭每個(gè)仿街道便的人逮流數(shù)身?yè)?jù)、輪車流帖數(shù)據(jù)和，形循成城粱市的虛人車衣分布后圖，香靜態(tài)黑的如不同香區(qū)域搜人的帽特征掌、車洪的特飾征，動(dòng)智態(tài)的健如人車真的路跨徑、魄停留嘗模式，對(duì)城偏市的器規(guī)劃五和管忌理都象極有榮價(jià)值。城市卸狀態(tài)插分析視頻大數(shù)據(jù)及相關(guān)技術(shù)城市管控中的應(yīng)用與案例問(wèn)題、挑戰(zhàn)和一些建議匯報(bào)貴提綱123負(fù)面柔案例南京焰周克校華案聲件，焦全市1萬(wàn)多名個(gè)攝醋像頭吧共提睡取了19黨98執(zhí)T的視勤頻數(shù)陜據(jù)，鄉(xiāng)豐調(diào)用15支00多名傳公安牛干警質(zhì)查看彈，耗懸時(shí)一這個(gè)月馳，卻符效果港平平啞。長(zhǎng)春舌盜車坑殺嬰貢案件愛，出夠動(dòng)了35鼓00警力狡，依禮仗長(zhǎng)沙春市6萬(wàn)個(gè)智攝像港頭（爛含逃黃跑路警線經(jīng)寫過(guò)的皮兩個(gè)讓卡口武），仍卻沒(méi)顛能及賢時(shí)找魯?shù)奖辉惚I車氏輛、貧避免歪悲劇辛。……問(wèn)題軟和挑刻戰(zhàn)硬問(wèn)監(jiān)題數(shù)據(jù)孕聯(lián)網(wǎng)偽：信經(jīng)息孤鑄島問(wèn)搏題，素不聯(lián)礎(chǔ)網(wǎng)就濱無(wú)所頭謂“鄉(xiāng)豐大數(shù)物據(jù)”視頻畜質(zhì)量籍：需連要捕鴉捉到谷正面槽清晰語(yǔ)的人煌臉、粗車牌軟問(wèn)棟題視頻社分析殺算法賓的穩(wěn)旅定性蛇：受叔環(huán)境象干擾讀大（吹光線伙陰影松、惡關(guān)劣天友氣、連晃動(dòng)繞、飛已蟲等邀都會(huì)兔影響宜系統(tǒng)既的準(zhǔn)協(xié)確性鋒）視頻格分析穗算法鐘的適每應(yīng)性損：安減裝調(diào)粱試復(fù)箱雜（牌幾乎味需要究按每流一個(gè)效應(yīng)用漿場(chǎng)景扁進(jìn)行佛不同咐的專備業(yè)參東數(shù)設(shè)謝置和米調(diào)試逗）算法卸優(yōu)化笛：研耀究需爛要實(shí)簡(jiǎn)際場(chǎng)把景數(shù)賊據(jù)支途撐硬件排升級(jí)銳：攝鑰像頭精聯(lián)網(wǎng)+高清攝改造建議惱建設(shè)汪數(shù)據(jù)喘實(shí)驗(yàn)眉特區(qū)充分由利用名政府械的海煎量視幟頻監(jiān)素控?cái)?shù)勸據(jù)，般搭建海視頻傾算法甘研發(fā)編評(píng)測(cè)垮平臺(tái)調(diào)動(dòng)脂科研撐力量喬，促莊進(jìn)智悠能視斷覺技鍛術(shù)的廊研究核創(chuàng)新頃，提含升城吼市管助理運(yùn)沈行的仙智能俱化水爐平建立囑權(quán)威丑的視哨頻識(shí)管別標(biāo)發(fā)準(zhǔn)庫(kù)謠，檢肌驗(yàn)各喂種智退能視貧頻技待術(shù)的彩優(yōu)劣摸，為綁技術(shù)桐選型被提供抱依據(jù)智能轎視頻劣分析含技術(shù)捧評(píng)測(cè)…政府術(shù)視頻嬸資源攜庫(kù)關(guān)于典數(shù)據(jù)侵安全神和隱據(jù)私保招護(hù)敏感龜信息編過(guò)濾在政寺務(wù)網(wǎng)仿和互趴聯(lián)網(wǎng)貌之間伍開辟往安全耕的虛經(jīng)擬實(shí)拌驗(yàn)環(huán)登境建議捷建設(shè)腿數(shù)據(jù)別實(shí)驗(yàn)鈴特區(qū)他山騾之玉——?jiǎng)a突gg狹le大數(shù)賤據(jù)開驢發(fā)平腔臺(tái)研究刊所、至高校容、獨(dú)居立科車學(xué)家…（數(shù)蔽據(jù)分滾析能究力）政府醬、企滑業(yè)…（數(shù)根據(jù)分蠢析需淺求）榮譽(yù)矮，獎(jiǎng)饑金，收論文撕（科管研成雜果）解決愉方案普（算旺法）目前倘世界筆上最灘大的