視頻質(zhì)量檢測與濃縮摘要

1、面向海量視頻數(shù)據(jù)的智能分析與處理上海盤威信息科技有限公司匯報內(nèi)容1，視頻監(jiān)控的網(wǎng)絡(luò)化的新問題2，視頻質(zhì)量診斷智能化設(shè)備維護3，統(tǒng)一解碼與標準網(wǎng)絡(luò)協(xié)議4，視頻濃縮與快速檢索5，圖像清晰化6，關(guān)于盤威1. 視頻監(jiān)控的網(wǎng)絡(luò)化與問題數(shù)量龐大數(shù)量龐大上海、北京、深圳、杭州、重慶等經(jīng)濟發(fā)達城市，監(jiān)控相機的裝機容量都在幾十幾十萬臺萬臺，而且還在快速增加。無人維護無人維護大量的相機無人維護，工作狀態(tài)不正常，圖像不清晰，錄下很多毫無用處的垃圾圖像。海量數(shù)據(jù)海量數(shù)據(jù)每天都產(chǎn)生海量的視頻數(shù)據(jù)(TBPB)，發(fā)生案件后難以查閱，花費大量時間定位到有用的幾秒中視頻。1. 視頻監(jiān)控的網(wǎng)絡(luò)化與問題維護困難檢索費時2.視頻質(zhì)量

2、診斷設(shè)備自動維護兩種診斷方式內(nèi)置在IPC中實時檢測視頻服務(wù)器輪詢檢測自動維護系統(tǒng)的性能1) 輪詢檢測，單路輪詢檢測，單路34秒秒2) CPU占用低占用低3) 可同時可同時16路檢測路檢測4) 多種故障同時檢測多種故障同時檢測 自動維護系統(tǒng)的性能 16路同時檢測 每路檢測時間4s 每小時1.4萬路 專利技術(shù)性能高效4核16路同時處理的負載自動維護后設(shè)備可用度自動維護后設(shè)備可用度02040608010012012345不維護維護百分比使用年限3.統(tǒng)一解碼與標準網(wǎng)絡(luò)協(xié)議IP相機NVR文件 統(tǒng)一解碼視頻分析視頻分析圖像顯示圖像顯示統(tǒng)一解碼器支持的設(shè)備和格式統(tǒng)一解碼器支持的設(shè)備和格式大華?？岛銉|德加拉漢

3、邦大立景陽喬安Jooan智和英飛拓天地偉業(yè)迪士寶Diesbo鑫視威金三立松下天敏科伯爾中維龍谷三星愛瑪科AIMC龍視安Loosafe沃仕達Woshida九安Juan。avidatmpgmpegwmvvobmp4mkv264flvswfasftsrmrmvbDivxvixdMovmpeMlvm2v3gp ogmmts。標準網(wǎng)絡(luò)協(xié)議采用Xml格式支持混合Win/linux網(wǎng)絡(luò)規(guī)范統(tǒng)一的解析簡化了系統(tǒng)擴容特點可實現(xiàn)不同層次網(wǎng)絡(luò)4，視頻濃縮與快速檢索很多場景長時間靜止無變化不同時刻出現(xiàn)的目標運動目標合并到同一個畫面，原來兩三個小時視頻1分鐘內(nèi)放完視頻摘要檢索的步驟運動目標分析與參數(shù)提取參數(shù)統(tǒng)計與存儲目

4、標檢索與參數(shù)提取動態(tài)的濃縮視頻重構(gòu)跟蹤畫面中的運動目標，提取目標屬性參數(shù)，將目標變成參數(shù)，同時提取目標畫面對運動參數(shù)進行統(tǒng)計，歸一化成統(tǒng)一標準下的屬性值，按照一定規(guī)則存儲根據(jù)給定的規(guī)則進行檢索，找到符合條件的目標，將目標圖像合成為動態(tài)的視頻，跟參數(shù)一起展現(xiàn)出來提取目標屬性視頻進行標簽化：時間、地點、內(nèi)容（人、車）運動物體人車車牌車型方向人臉時間地點數(shù)據(jù)庫速度顏色。統(tǒng)計屬性多任務(wù)并行處理視頻解碼1 2 3 8 濃縮分析1 2 3 8 圖像隊列每個任務(wù)包含多個文件，形成一個濃縮數(shù)據(jù)集任務(wù)結(jié)束后，自動啟動新任務(wù)，直至所有任務(wù)完成參數(shù)的存儲1，建立目標的參數(shù)結(jié)構(gòu)2，參數(shù)與圖像交叉存儲3，串行化后存入文

5、件4，對所有的參數(shù)按類型進行預排序，可加快檢索語義檢索1，統(tǒng)計每個摘要集的所有的參數(shù)，創(chuàng)建知識庫2，定義映射引擎3，語義分析模塊將查詢語義原子化4，生成計算機查詢語言語義檢索可簡化海量數(shù)據(jù)查詢方式邏輯+關(guān)鍵字+參數(shù)目標隊列存儲的目標數(shù)據(jù)庫符合條件的目標數(shù)據(jù)池正在播放的目標隊列播放視頻按等間隔平滑播放，為提高播放效率，提播放視頻按等間隔平滑播放，為提高播放效率，提前將符合條件的目標讀入內(nèi)存，形成目標數(shù)據(jù)池前將符合條件的目標讀入內(nèi)存，形成目標數(shù)據(jù)池播放時，從數(shù)據(jù)池中取目標數(shù)據(jù)，目標結(jié)束后，自動從數(shù)據(jù)池中清除當數(shù)據(jù)池中目標數(shù)量小于某個值，又從數(shù)據(jù)庫中找符合條件的目標，加到數(shù)據(jù)池目標檢索和摘要視頻播放

6、分割開，互不干擾，保證播放流暢SDK接口 SDK跨平臺設(shè)計跨平臺設(shè)計 支持多任務(wù)并行處理支持多任務(wù)并行處理 提供條件檢索接口提供條件檢索接口 輸入輸出簡單輸入輸出簡單 數(shù)據(jù)封包后存儲數(shù)據(jù)封包后存儲 參數(shù)自動統(tǒng)計，人車分離參數(shù)自動統(tǒng)計，人車分離 自動識別畫面中的字符干擾自動識別畫面中的字符干擾 分析速度可調(diào)，通過降低清晰度加快速度分析速度可調(diào)，通過降低清晰度加快速度SDK接口 濃縮模塊接口簡單，不超過10個 A，濃縮分析接口，濃縮分析接口 1, 初始化初始化 bvStartNewME 2, 添加一幅圖像進行分析添加一幅圖像進行分析bvFeedFrame 獲取分析結(jié)果獲取分析結(jié)果bvGetResu

7、lt 3, 結(jié)束結(jié)束 bvStopME B，濃縮視頻播放接口，濃縮視頻播放接口 1,開始播放開始播放bvStartPlay 2, 融合目標圖像融合目標圖像bvEmbedObjImage 3,結(jié)束播放結(jié)束播放bvStopPlay根據(jù)識別根據(jù)識別ID區(qū)別輸入圖像，可進行多路并行處理區(qū)別輸入圖像，可進行多路并行處理輔助接口可進行分析中查看、播放時顯示軌跡等輔助接口可進行分析中查看、播放時顯示軌跡等濃縮播放快照-原始視頻出現(xiàn)的時間運動軌跡5，圖像清晰化 模糊原因 鏡頭污染鏡頭污染 天氣不好天氣不好 目標運動目標運動 相機性能相機性能常見清晰化增強算法：常見清晰化增強算法： 運動恢復：針對汽車車牌運動恢復：針對汽車車牌 去霧：空氣污染去霧：空氣污染 超分辨力：相機分辨率低超分辨力：相機分辨率低圖像去霧去霧前去霧后超分辨力放大原始小圖像超分辨力放大后去除雨雪干擾雨雪圖像清晰化后去霧+放大原始圖像清晰化后（局部）公司簡介2009年成