2024視頻AI行為分析預(yù)警技術(shù)

視頻AI行為分析預(yù)警技術(shù) 2024 目錄CONTENTS項目介紹PROJECTINTRODUCTION

產(chǎn)品介紹PRODUCTINTRODUCTION

動作介紹ACTION

服務(wù)方案SERVICEPROGRAMME項目介紹PROJECTINTRODUCTION首家獨創(chuàng) 人工智能AI行為分析預(yù)警系統(tǒng)傳統(tǒng)監(jiān)控+AI=智慧監(jiān)控人工智能技術(shù)解析視頻中的異常行為項目介紹行為分析技術(shù)人體關(guān)鍵點檢測AI行為分析預(yù)警系統(tǒng)，是一款通過攝像機拍攝回傳的視頻畫面，自動識別分析場景下發(fā)生的異常行為并預(yù)警的智能監(jiān)控系統(tǒng)。人體關(guān)鍵點檢測該技術(shù)基于AI神經(jīng)網(wǎng)絡(luò)的深度學習算法，根據(jù)人的肢體運動軌跡，計算出各種異常動作行為，并及時發(fā)出預(yù)警信號。最新一代的視頻分析技術(shù)，也是AI人工智能技術(shù)完美應(yīng)用在安防領(lǐng)域的技術(shù)突破。該技術(shù)打破了傳統(tǒng)的技術(shù)壁壘，它是把人體的主要活動骨架結(jié)構(gòu)化，根據(jù)人的運動軌跡定義各種異常行為，并基于深度學習形成動作體系。該技術(shù)徹底擺脫了對場景的依賴，技術(shù)核心是分析場景下人的動作行為，只有人才會觸發(fā)系統(tǒng)的預(yù)警，當人的動作行為達到預(yù)警規(guī)則時，則會立即發(fā)出預(yù)警信號。該技術(shù)徹底摒棄了傳統(tǒng)的移動偵測技術(shù)，無需對圖像進行一幀一幀比對，不需要各種伴線技術(shù)來限制，大大降低了傳統(tǒng)技術(shù)的誤報率，甚至很多規(guī)則都可以做到零誤報。同時，該技術(shù)采用GPU圖像計算，降低對硬件資源的消耗，大大提高了服務(wù)器硬件的綜合識別能力。技術(shù)原理行為分析人臉識別行為分析人臉識別物體識別

通過算法，抓拍觸發(fā)異常行為預(yù)警的當事人的人臉，分析識別其身份，同時定位，跟蹤其行走路線、聯(lián)動彈屏將其逃逸方向的其他監(jiān)控畫面彈出來，高效準確判斷鎖定位置

通過算法，分析觸發(fā)異常行為報警的當事人頭上戴的、身上穿的、手里拿的物體的詳細特征，以及根據(jù)目標人物的高矮胖瘦、男女老少、行走姿態(tài)等特征，給他一個系統(tǒng)可識別的編號，結(jié)合人臉識別技術(shù)精準判斷和定位目標。技術(shù)優(yōu)勢1誤報率1AI行為識別技術(shù)很多動作都可以做到零誤報。而傳統(tǒng)的視頻分析技術(shù)相對來說誤報率則高很多

識別精準度2AI行為分析技術(shù)可以精準識別到場景下人的異常動作行為。而傳統(tǒng)的視頻分析技術(shù)是場景發(fā)生了各種變化后產(chǎn)生的報警，不能精準識別人的具體的異常行為23識別效率3AI行為分析技術(shù)采用GPU分析圖像。傳統(tǒng)的視頻分析技術(shù)則大多采用CPU運算，相對來說，服務(wù)器分析效率低很多最主要的區(qū)別：AI行為分析技術(shù)可以做到一臺服務(wù)器同時分析幾百路視頻。而傳統(tǒng)的視頻分析技術(shù)僅可以分析幾十路視頻，而且很吃力

識別能力4AI行為分析技術(shù)可以做到同一臺攝像機，同時分析N個異常行為，當場景下N個異常行為同時發(fā)生時，都可以識別出來。而傳統(tǒng)的視頻分析技術(shù)在這方面的能力相差很遠，同一臺攝像機可以識別的異常行為非常有限4技術(shù)優(yōu)勢技術(shù)對比傳統(tǒng)視頻分析技術(shù)AI行為分析技術(shù)傳統(tǒng)攝像機廠家大多數(shù)基于移動偵測技術(shù)，拌線技術(shù)，圖像比對，學習人形或物體，軌跡分析等多種技術(shù)糅合在一起，實現(xiàn)對場景的分析，當場景發(fā)生變化時，從而判斷為各種異?；谌梭w骨架結(jié)構(gòu)，根據(jù)運動軌跡定義各種異常行為，無需針對場景進行分析，只要場景內(nèi)的人的動作、與人相關(guān)的規(guī)則發(fā)生變化，即可分析判斷出各種異常行為，主動預(yù)警產(chǎn)品介紹PRODUCTINTRODUCTION系統(tǒng)簡介硬件參數(shù)機架式高性能圖靈GPU定制服務(wù)器通用規(guī)格16路/32路/64路/128路

顯示輸出：1路HDMI信號輸出上墻方式：可直顯/拼控/平臺控制管理方式：集中管理客戶端

兼容能力支持任何第三方網(wǎng)絡(luò)攝像機接入或模擬轉(zhuǎn)數(shù)字信號的接入部署方式并接入監(jiān)控局域網(wǎng)異常存儲系統(tǒng)自帶存儲盤自動存儲異常預(yù)警視頻

多點預(yù)警：支持多點通過客戶端管理彈屏預(yù)警對接合作：開放SDK給第三方，技術(shù)支持對接

預(yù)警方式自動彈屏及語音提示支持微信推送預(yù)警行為分析服務(wù)器基礎(chǔ)版 旗艦版 行業(yè)定制版 政府采版動作定義肢體動作求救、打架、跌倒這類型動作偶爾出現(xiàn)誤報，誤報原因主要來自于同類型的肢體動作觸發(fā)骨骼動作闖入、攀爬、警戒或動物的移動不會觸發(fā)報警

時間動作肢體動作時間動作骨骼動作肢體動作時間動作骨骼動作人數(shù)動作骨架，然后系統(tǒng)計算時間人數(shù)動作聚眾、尾隨這類型動作不會誤報，系統(tǒng)識別人的數(shù)量，視頻畫面中有多少副人的骨架，就統(tǒng)計多少人 識別規(guī)則區(qū)域規(guī)則識別規(guī)則區(qū)域規(guī)則標記規(guī)則1.設(shè)置有效區(qū)域，在有效區(qū)域中才會觸發(fā)系統(tǒng)報警1.選擇標記功能，系統(tǒng)在預(yù)警被觸發(fā)后標記目標人物2.設(shè)置無效區(qū)域，在無效區(qū)域不會觸發(fā)系統(tǒng)報警2.標記分為目標標記和骨架標記兩種標記模式1234靈敏度規(guī)則時間規(guī)則1.靈敏度越高，識別規(guī)則1.不設(shè)時間規(guī)則，24小時檢測要求越低，誤報會增加2.靈敏度越低，識別規(guī)則要求越高，誤報會降低

才檢測預(yù)警規(guī)則彈屏預(yù)警當系統(tǒng)檢測到異常后，會立即把現(xiàn)場視頻畫面彈屏顯示到大屏幕上預(yù)警彈屏預(yù)警聲音提示會通過音響播放提示音預(yù)警聲音提示遠程預(yù)警客戶端上同步接收預(yù)警信息遠程預(yù)警彈屏規(guī)則當檢測到預(yù)警時，彈屏顯示彈屏規(guī)則異常行為消失后，屏幕會在延時5秒后自動熄滅回復(fù)原狀。主界面會顯示最近6-8次的預(yù)警記錄漏報規(guī)則可視距離可分為：有效可視距離和無效可視距離有效可視距離內(nèi)，基本不會漏報有效可視距離外，不能保證是否漏報有效可視距離參考數(shù)據(jù)攝像機鏡頭4mm=8-10米攝像機鏡頭6mm=12-15米攝像機鏡頭8mm=20-25米

可視角度可視角度指能被攝像機拍攝到具體的動作行為的有效可視角度?？梢暯嵌戎饕紤]點包括攝像機安裝高度和攝像機可視范圍覆蓋面攝像機高度攝像機安裝高度建議為2.5-3米，支持全景攝像機模式角度分析攝像機覆蓋面一般情況下是指全方位雙向無死角覆蓋設(shè)計，頭尾兩支攝像機形成對射效果更加 取流方式視頻流 存儲服務(wù)器 視頻流 綜合平臺 流媒體服務(wù)器 門戶平臺 人臉分析 【取流說明】本系統(tǒng)支持前端NVR

行為分析 客戶端管理服務(wù)器客戶端服務(wù)器客戶端【功能】安裝在監(jiān)控中心或管理中心，負責設(shè)置各行為分析服務(wù)器的參數(shù)規(guī)則等【配置】專業(yè)服務(wù)器或高配電腦系統(tǒng)對接IPC對接任何第三方品牌的網(wǎng)絡(luò)攝像機，都可以接入AI行為分析預(yù)警系統(tǒng)進行視頻分析，對攝像機硬件有一定的要求對接內(nèi)容：主碼流地址、子碼流地址、抓拍地址、端口號、壓縮編碼類型、攝像機賬號、密碼平臺對接平臺對接主要包括平臺取流和平臺展示兩種對接平臺取流：提供第三方平臺的SDK，取RTSP流進行對接平臺展示：提供SDK開發(fā)文檔及開放接口，由平臺商做二次開發(fā)展示內(nèi)容：把分析出來的異常信息統(tǒng)一由平臺實現(xiàn)彈屏、預(yù)警、管理、統(tǒng)計等系統(tǒng)聯(lián)動廣播系統(tǒng)聯(lián)動啟動廣播系統(tǒng)自動語音警示紅外系統(tǒng)聯(lián)動顯示報警對應(yīng)區(qū)域的監(jiān)控畫面例如：周界圍墻報警聯(lián)動

消防系統(tǒng)聯(lián)動行為分析監(jiān)控當消防報警被觸發(fā)時，立即彈行為分析監(jiān)控例如：火焰檢測、煙霧檢測等開關(guān)量信號聯(lián)動可以實現(xiàn)系統(tǒng)聯(lián)動例如：喧嘩檢測【備注】本功能需進行二次開發(fā)，由第三方平臺服務(wù)商開發(fā)對接系統(tǒng)界面

界面簡介管理軟件登錄按鈕系統(tǒng)拓撲圖行為分析服務(wù)器平臺管理服務(wù)器流媒體服務(wù)器存儲服務(wù)器 人臉服務(wù)器 行為分析服務(wù)器平臺管理服務(wù)器流媒體服務(wù)器存儲服務(wù)器管理客戶端 監(jiān)控局域網(wǎng)管理客戶端

值班崗客戶端其它區(qū)域其它區(qū)域攝像機攝像機攝像機室外公共區(qū)域攝像機攝像機攝像機攝像機室外公共區(qū)域攝像機攝像機攝像機室內(nèi)辦公區(qū)域

攝像機

攝像機動作介紹ACTIONINTRODUCED行為動作歡迎定制開發(fā)公共區(qū)域歡迎定制開發(fā)打架、跌倒、聚眾、求救周界區(qū)域攀爬、闖入、警戒值班區(qū)域離崗、睡崗、缺崗其他區(qū)域徘徊、滯留行為分析算法公共區(qū)域?打架斗毆

動作定義兩人或多人互掐、扭打、推搡等定義為打架應(yīng)用場景室內(nèi)外公共區(qū)域、其他人員聚集的場景等設(shè)置規(guī)則該動作無需設(shè)置區(qū)域和事件，全范圍全程實時檢測，僅需要對靈敏度進行調(diào)整。低靈敏度誤報較小，高靈敏度誤報較多動作特性打架屬于肢體動作，沒有任何動作標準。目前系統(tǒng)僅支持互掐、扭打、拳打腳踢等類型的算法識別，其他打架行為可能識別不了。真實打架場景，往往伴隨有跌倒、求救、聚眾等狀況，因此在設(shè)置打架規(guī)則時，建議同時設(shè)置這幾個動作規(guī)則識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警打架斗毆行為分析公共區(qū)域?不慎倒地動作定義人的頭、屁股、腳處于同一平面平行于地面時定義為跌倒應(yīng)用場景室內(nèi)外公共區(qū)域、其他人員聚集的場景等設(shè)置規(guī)則該動作無需設(shè)置區(qū)域和事件，全范圍全程實時檢測，僅需要對靈敏度進行調(diào)整，低靈敏度誤報較小，高靈敏度誤報較多動作特性跌倒屬肢體動作，可能會誤報。有人跌倒時，如果能爬起來，則沒有問題；如果不能起來，則有可能發(fā)生意外，需前往查看。對半蹲、坐地、跪地、半躺、全躺、全趴下等行為也做了識別識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警不慎倒地行為分析公共區(qū)域?聚眾圍觀

動作定義聚集人數(shù)超過系統(tǒng)設(shè)定的數(shù)量，則定義為聚眾圍觀應(yīng)用場景室內(nèi)外公共區(qū)域、其他人員聚集的場景等設(shè)置規(guī)則系統(tǒng)可設(shè)置3/6/10/20/50人等多種人數(shù)選項，可設(shè)定區(qū)域及時間段。聚眾的應(yīng)用場景，屬于公共區(qū)域，正?；顒訒r間段和人數(shù)較多的區(qū)域，不適宜設(shè)置聚眾規(guī)則動作特性屬骨架人數(shù)分析，該動作幾乎沒有誤報。鏡面中的人物、人的影子、人形模特、屏幕里的人出現(xiàn)在區(qū)域內(nèi)也會計算人數(shù)識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警聚眾圍觀行為分析公共區(qū)域?緊急求救動作定義在遇到危險時，舉起雙手，超過肩膀，定義為緊急求教應(yīng)用場景任意場景設(shè)置規(guī)則該動作無需設(shè)置區(qū)域和事件，全范圍全程實時檢測，僅需要對靈敏度進行調(diào)整，低靈敏度誤報較小，高靈敏度誤報較多動作特性求救屬肢體動作，可能會誤報（如伸懶腰、舉雙手歡呼等）。真正遇到危險時，可能伴隨有跌倒、打架、聚眾等狀況，因此在設(shè)置求救規(guī)則時，建議同時設(shè)置這幾個動作規(guī)則識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警緊急求救行為分析公共區(qū)域?危險攀高動作定義在設(shè)定區(qū)域內(nèi)發(fā)現(xiàn)有人攀高，系統(tǒng)會立即預(yù)警應(yīng)用場景攀高可用于周界圍墻、建筑物外墻設(shè)置規(guī)則必須設(shè)置攀高警戒區(qū)域，才能達到觸發(fā)預(yù)警目的。一般采用默認靈敏度，不同場景可適當調(diào)整靈敏度動作特性屬骨骼動作，一般情況下，不會誤報識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警危險攀高行為分析公共區(qū)域?異常徘徊

動作定義有人在特定區(qū)域內(nèi)來回走動、逗留超過系統(tǒng)設(shè)定的時間應(yīng)用場景特殊場景，或特定時間段內(nèi)的公共區(qū)域場景設(shè)置規(guī)則系統(tǒng)提供1分鐘、3分鐘、5分鐘、10分鐘四種規(guī)則選項，可以設(shè)定布防時間段和設(shè)定區(qū)域動作特性屬骨骼與時間相結(jié)合的動作，不會誤報。系統(tǒng)檢測到人的骨架出現(xiàn)在設(shè)定的區(qū)域內(nèi)，系統(tǒng)開始計算時間，持續(xù)出現(xiàn)超過系統(tǒng)設(shè)置的時間上限時，立即報警識別速度自徘徊規(guī)則啟動后，在系統(tǒng)設(shè)定的預(yù)警時間內(nèi)仍然未離開的，則立即預(yù)警異常徘徊行為分析公共區(qū)域?超時滯留

動作定義有人在特定區(qū)域內(nèi)滯留，超過系統(tǒng)設(shè)定的時間即屬超時滯留應(yīng)用場景特殊場景，或特定時間段內(nèi)的公共區(qū)域場景設(shè)置規(guī)則系統(tǒng)提供1分鐘、5分鐘、10分鐘、30分鐘四種規(guī)則選項，可以設(shè)定布防時間段和設(shè)定區(qū)域動作特性滯留和徘徊的規(guī)則是一樣的，只是系統(tǒng)計時的標準更長。徘徊和滯留應(yīng)用在其他行業(yè)，需要識別是否同屬一人，可在v2.0版本中增加人臉識別技術(shù)，滯留和徘徊功能更完善識別速度自滯留規(guī)則啟動后，在系統(tǒng)設(shè)定的預(yù)警時間內(nèi)仍然未離開的，則立即預(yù)警超時滯留行為分析公共區(qū)域?高空攀爬動作定義雙腳離開地面并往上爬，則定義為高空攀爬應(yīng)用場景周界圍墻、建筑物外墻設(shè)置規(guī)則在圍墻大約1米高的位置，一直到圍墻頂部，包括圍墻里外兩側(cè)，都設(shè)置成警戒區(qū)域，建筑物外墻也這樣設(shè)置動作特性屬骨架和人體姿態(tài)特征的組合，一般不會誤報識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警高空攀爬行為分析公共區(qū)域?非法闖入動作定義當有人闖入特定區(qū)域時，則定義為非法闖入應(yīng)用場景任何有限制人闖入的場景，或者周界圍墻警戒區(qū)域，室內(nèi)警戒區(qū)域等設(shè)置規(guī)則設(shè)定有效區(qū)域和布防時間段，檢測到有人闖入即報警動作特性屬骨骼動作，應(yīng)用廣泛，一般不會誤報。不會因任何物體移動或場景、環(huán)境、光線等發(fā)生變化而導致誤報，比傳統(tǒng)監(jiān)控技術(shù)更有優(yōu)勢識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)出預(yù)警非法闖入行為分析公共區(qū)域?值班離崗動作定義值班人員離開崗位超過設(shè)定時間，則定義為值班離崗應(yīng)用場景值崗崗位規(guī)則設(shè)置在值班崗位設(shè)置有效區(qū)域。系統(tǒng)提供1分鐘、5分鐘、15分鐘、30分鐘四個時間選項，1分鐘為檢測時間，另外三個時間選項為常規(guī)需求動作特性屬骨骼與時間相結(jié)合的動作，不會誤報。在有效區(qū)域內(nèi)檢測不到人，開始計時，達到系統(tǒng)設(shè)定的時間立即預(yù)警識別速度值班人員離開崗位超過系統(tǒng)設(shè)定時間，立即預(yù)警值班離崗行為分析公共區(qū)域?值班睡崗動作定義值班人員在崗睡覺，超過設(shè)定的時間，為值班睡崗應(yīng)用場景值班崗位設(shè)置規(guī)則在值班崗位設(shè)置有效區(qū)域。系統(tǒng)提供1分鐘、5分鐘、15分鐘、30分鐘四個時間選項，1分鐘為檢測時間，另外三個時間選項為常規(guī)需求動作特性與離崗?fù)瑢俟趋琅c時間相結(jié)合的動作，不會誤報識別速度值班人員一直未活動超過系統(tǒng)設(shè)定時間，立即預(yù)警值班睡崗行為分析公共區(qū)域?值班缺崗動作定義值班崗位長時間沒有人上崗值班，定義為值班缺崗應(yīng)用場景值班崗位設(shè)置規(guī)則在值班崗位設(shè)置有效區(qū)域。系統(tǒng)提供了60分鐘、120分鐘、180分鐘、240分鐘四個時間選項動作特性與離崗?fù)瑢俟趋琅c時間相結(jié)合的動作，不會誤報識別速度值班人員自離開開始，達到系統(tǒng)設(shè)定時間則立即預(yù)警值班缺崗行為分析攝像機狀態(tài)檢測（旗艦版功能）監(jiān)控攝像機狀態(tài)檢測功能用途監(jiān)控攝像機狀態(tài)偵測：正常，異常，離線（被遮擋，被關(guān)電源，被剪斷線路）不需手動輸入。監(jiān)控攝像機狀態(tài)和異常行為動作庫菜單可以隨意切換。人臉識別（旗艦版功能）人臉識別功能定制（在同一臺行為分析服務(wù)器上實現(xiàn)人臉識別功能）別身份。的，則分析其人臉屬性，如性別、年齡等特征。有近距離才能識別出人臉?；鹧鎴缶瘷z測消防事件消防事件需配火焰識別攝像頭，火焰識別監(jiān)控系列攝像機是集火焰探測和視頻監(jiān)控一體的科技產(chǎn)品，采用了先進的光譜分析處理技術(shù)，確保了在復(fù)雜環(huán)境下精準識別火焰。在局域網(wǎng)中，火焰識別系列攝像機視頻畫面及火情，實時顯示在監(jiān)控室，現(xiàn)場發(fā)現(xiàn)火情監(jiān)控室同時收到警情通知，能夠在萌芽時消滅火勢。攝像頭安裝的現(xiàn)場有喇叭報警，指揮中心行為服務(wù)器做出彈屏語音報警，值班人員及時做出緊急預(yù)案處理，降低損失。系統(tǒng)組成：火焰識別球機、槍機，警燈。系統(tǒng)功能：檢測到火情時，攝像機本地提供DC12V或常開報警信號輸出，行為分析服務(wù)器視頻彈屏并伴有報警語音。應(yīng)用場景：化工廠、倉庫、電動車停車棚、消防系統(tǒng)接入、動環(huán)系統(tǒng)接入、木料加工、噴涂車間、配電室、林場、加油站等易燃或重點防火場所，也可以用禁煙場所打火機打火報警?？焖俦寂軝z測(特殊行業(yè)定制開發(fā)功能）動作定義指定區(qū)域，突然出現(xiàn)有人加速奔跑前進，立即彈屏預(yù)警。應(yīng)用場景任何有限制人奔跑的場景，或者警戒區(qū)域，室內(nèi)外警戒區(qū)域等設(shè)置規(guī)則設(shè)定有效區(qū)域和布防時間段，檢測到有人奔跑即報警動作特性屬骨骼動作，應(yīng)用廣泛，不會因任何物體移動或場景、環(huán)境、光線等發(fā)生變化而導致誤報，比傳統(tǒng)監(jiān)控技術(shù)更有優(yōu)勢識別速度自動作發(fā)生到系統(tǒng)分析，3秒內(nèi)可發(fā)