云端社會視頻資源接入系統(tǒng)淺析

０引言隨著物聯(lián)網(wǎng)等技術(shù)的不斷發(fā)展，智能化的視頻監(jiān)控系統(tǒng)建設(shè)也層出不窮，相比其他載體，視頻能夠承載更多的信息，已經(jīng)廣泛滲透到各行各業(yè)，在政府、金融、教育、電商等領(lǐng)域發(fā)揮積極作用。隨著公安信息化應用的不斷深入，大集成、大聯(lián)網(wǎng)、高效數(shù)據(jù)分析和處理已經(jīng)成為安防行業(yè)的大趨勢，視頻監(jiān)控已經(jīng)成為公安機關(guān)治安防范、打擊犯罪等重要工作的關(guān)鍵手段。但是由于種種歷史原因，大量社會視頻監(jiān)控點位存在建設(shè)時期不同、品牌眾多、參考標準不統(tǒng)一，在建設(shè)初期缺乏頂層設(shè)計和全局規(guī)劃，導致各社會視頻資源系統(tǒng)各自為政，分散建造，存在有監(jiān)控無共享、只分散難集中、系統(tǒng)效能難以最大化等諸多短板，社會視頻資源尚不能充分為實戰(zhàn)服務，整體應用水平較低。本文提出了一種云端社會視頻資源接入系統(tǒng)，云計算其超大規(guī)模、虛擬化、高可擴展性、高可用性及按需服務的特點與社會視頻資源接入系統(tǒng)的目標不謀而合，通過構(gòu)建云端社會視頻資源接入平臺，基于云存儲、云預測、云轉(zhuǎn)碼等計算技術(shù)，可實現(xiàn)低成本、高效率地匯聚一個區(qū)域內(nèi)的社會視頻資源，將各社會領(lǐng)域的社會視頻圖像集中起來，打破信息孤島，實現(xiàn)統(tǒng)一集中管理，統(tǒng)一遠程監(jiān)管，按需共享，真正做到平臺化、集中化、綜合化。１相關(guān)背景及技術(shù)1.1業(yè)務需求和現(xiàn)狀目前現(xiàn)有的社會資源系統(tǒng)中涉及多種資源接入方式，視頻編碼格式不統(tǒng)一，綜合管理平臺相互不兼容,導致不同系統(tǒng)之間不能互聯(lián)互通，已建設(shè)的社會視頻平臺不符合國家標準，難以接入公安視頻傳輸網(wǎng)，主要表現(xiàn)在以下幾個方面：（1）頂層設(shè)計缺失?，F(xiàn)有社會視頻資源接入平臺僅考慮安裝覆蓋率，缺少后期應用規(guī)劃，各地存在平臺兼容困難，所處網(wǎng)絡(luò)結(jié)構(gòu)各不相同，很多無法實現(xiàn)與公安視頻傳輸網(wǎng)的對接，視頻錄像分散存儲難以最大化利用存儲資源實現(xiàn)集中管理，系統(tǒng)效能低。（2）重復建設(shè)問題突出。各社會視頻資源接入平臺基本都是依賴傳統(tǒng)硬件架構(gòu)服務器集合，每一套平臺都需要單獨配置數(shù)據(jù)庫服務器、流媒體服務器、信令控制服務器、存儲服務器等多臺設(shè)備，往往為了避免單點故障還會配置冗余設(shè)備，這種方式很難將服務器的資源統(tǒng)籌管理，重復建設(shè)問題突出，極易造成資源浪費。（3）視頻調(diào)閱可靠性差。已經(jīng)與公安視頻傳輸網(wǎng)對接的社會視頻資源接入系統(tǒng)存在建設(shè)質(zhì)量參差不齊、建設(shè)周期難以統(tǒng)一、系統(tǒng)穩(wěn)定性差等諸多問題，當上級平臺調(diào)閱所需視頻內(nèi)容時，視頻資源很多時候呈不可用狀態(tài)，卻不能及時感知，缺乏統(tǒng)一的監(jiān)管手段。（4）現(xiàn)有系統(tǒng)互聯(lián)互通性差。小區(qū)、娛樂場所等小規(guī)模視頻監(jiān)控平臺采用的前端設(shè)備、協(xié)議多數(shù)為設(shè)備公司私有協(xié)議，不完全滿足國家標準（如GB/T28181-2016），導致系統(tǒng)之間無法互聯(lián)、互通，為社會視頻資源整合增加了技術(shù)難度。1.2云計算與安防云計算技術(shù)是分布式計算、并行計算、網(wǎng)絡(luò)存儲、負載均衡等多種技術(shù)相結(jié)合的產(chǎn)物，其核心目標是將大量的計算資源統(tǒng)一管理和調(diào)度，形成統(tǒng)一管理的資源池，并對外提供高質(zhì)量的按需服務以實現(xiàn)資源利用的最大化。當前社會視頻資源主要具有三個特征：一是信息種類多，數(shù)據(jù)容量大，所涉及的信息種類主要包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)以及非結(jié)構(gòu)化數(shù)據(jù)，其中以視頻圖像等非結(jié)構(gòu)化數(shù)據(jù)為主，更新速度快，視頻監(jiān)控一般均處于7×24小時持續(xù)不斷地產(chǎn)生新數(shù)據(jù)的狀態(tài)，逐步形成海量數(shù)據(jù)中心。二是分發(fā)需求頻繁，同一時間可能有很多用戶需調(diào)看同一個視頻資源。所以如將社會視頻資源采取云端接入的方式，需重點研究云存儲、云資源管理等技術(shù)，采用存儲技術(shù)可以解決海量視頻大規(guī)模存儲、管理問題，采用云預測技術(shù)可以為即將產(chǎn)生的資源需求進行準確地預測，為資源的動態(tài)調(diào)整做好準備。２系統(tǒng)模型2.1架構(gòu)設(shè)計本文遵循國家標準《安全防范視頻監(jiān)控聯(lián)網(wǎng)系統(tǒng)信息傳輸、交換、控制技術(shù)要求》GB/T28181-2016和《安全防范監(jiān)控數(shù)字視音頻編解碼技術(shù)要求》GB/T25724-2010在應用層面上展開研究，設(shè)計云端社會視頻資源接入系統(tǒng)，該系統(tǒng)可以實現(xiàn)在云端將社會視頻資源進行整合實現(xiàn)云存儲、云共享、云備份，可對外提供流媒體大規(guī)模分發(fā)、云端存儲及回放、報警聯(lián)動、即時分享等核心功能，可為用戶提供安全可靠、高質(zhì)穩(wěn)定的云服務，該系統(tǒng)既能夠兼容現(xiàn)有的各類互聯(lián)網(wǎng)社會視頻資源系統(tǒng)的接入，又為即將新建的系統(tǒng)提供基于國標的設(shè)計方案，確保后期與公安視頻傳輸網(wǎng)等網(wǎng)絡(luò)的低成本對接。該云端社會視頻資源接入系統(tǒng)可以市為單位，將全市范圍內(nèi)的社會視頻資源進行統(tǒng)一匯聚，各類政府管理部門可通過云端社會視頻資源接入系統(tǒng)進行實時遠程監(jiān)管各自負責區(qū)域。第三方監(jiān)管機構(gòu)也可通過系統(tǒng)進行遠程監(jiān)管。不改變現(xiàn)有互聯(lián)網(wǎng)社會視頻資源平臺建設(shè)的主體和方式，已建平臺通過低成本改造接入，未建平臺可直接接入?？蓪⑹乘幈O(jiān)、教育、旅游、消防等各領(lǐng)域視頻圖像，統(tǒng)一接入平臺中，完善全過程監(jiān)管，形成完整的管控體系，如圖1所示。圖1云端社會視頻資源接入系統(tǒng)監(jiān)管體系結(jié)構(gòu)通過云端社會視頻資源接入系統(tǒng)將社會視頻資源進行整合接入，如圖2所示，系統(tǒng)可對接入的視頻資源實行統(tǒng)一調(diào)度及管理，針對不同傳輸協(xié)議、編碼格式的視頻數(shù)據(jù)統(tǒng)一對其進行云端轉(zhuǎn)碼、云端封裝、云端存儲及云端分發(fā)，并對用戶進行分級分類管理。為了保證安全，在接入各類社會視頻資源時設(shè)置了安全防護區(qū)。同時，該系統(tǒng)還可依據(jù)公安視頻傳輸網(wǎng)邊界接入規(guī)范，通過安全邊界向公安視頻傳輸網(wǎng)等其他專網(wǎng)推送視頻數(shù)據(jù)，打破信息孤島，實現(xiàn)信息的互聯(lián)互通。圖2云端社會視頻資源接入系統(tǒng)拓撲圖云端社會視頻資源接入系統(tǒng)具有以下特點：（1）云端社會視頻資源接入系統(tǒng)具有大容量、高并發(fā)、可融合、可擴展等特性，是一個面向服務的綜合性系統(tǒng)，能夠充分滿足社會視頻資源海量后臺數(shù)據(jù)監(jiān)管的需求，如圖3所示，該系統(tǒng)可以兼容多種協(xié)議的前端設(shè)備。圖3各類協(xié)議設(shè)備（2）云端社會視頻資源接入系統(tǒng)能夠兼容現(xiàn)有的各類互聯(lián)網(wǎng)社會視頻資源監(jiān)控畫面的接入，如圖4所示，同時支持模塊功能接入，支持互聯(lián)網(wǎng)社會視頻資源平臺的接入。圖4模塊功能接入（3）云端社會視頻資源接入系統(tǒng)支持多級別、多類別的權(quán)限設(shè)置，如圖5所示，在系統(tǒng)中將數(shù)據(jù)、功能和角色進行定級分類，為每個級別分配不同的功能和數(shù)據(jù)權(quán)限，當該系統(tǒng)與公安視頻傳輸網(wǎng)等專網(wǎng)對接時可以根據(jù)相關(guān)政策，為不同的級別用戶賦予相關(guān)系統(tǒng)角色，保證系統(tǒng)數(shù)據(jù)安全，按權(quán)限向其他專網(wǎng)共享社會視頻資源，為信息共享提供保障。圖5多級別多權(quán)限設(shè)置（4）云端社會視頻資源接入系統(tǒng)本身符合國標各類安全性協(xié)議標準，提供從后端到前端的完整行業(yè)技術(shù)方案，從系統(tǒng)性上保障了整體的技術(shù)路線方向與國家后期建設(shè)方向的一致性，不存在技術(shù)選型風險。2.2方案設(shè)計本方案采用基于SVAC編碼SVC（ScalableVideoCoding，可伸縮視頻編碼，簡稱SVC）技術(shù)的互聯(lián)網(wǎng)碼流共享實現(xiàn)，完成實時點播中空域編碼能力的調(diào)節(jié)以適應互聯(lián)網(wǎng)的網(wǎng)絡(luò)環(huán)境，即通過控制視頻幀中基本層和增強層傳輸?shù)膶崟r變化來適應互聯(lián)網(wǎng)的網(wǎng)絡(luò)環(huán)境的變化?；谥С侄喾N傳輸方式、高并發(fā)、高性能碼流收發(fā)的基礎(chǔ)架構(gòu)，解決互聯(lián)網(wǎng)環(huán)境下SDP消息內(nèi)容無法識別碼流身份的問題，實現(xiàn)更有效的碼流識別機制。設(shè)備目錄數(shù)據(jù)共享技術(shù)完成平臺間設(shè)備目錄數(shù)據(jù)相互獲取和推送各平臺設(shè)備列表，實現(xiàn)平臺間的設(shè)備狀態(tài)更新信息的實時報送。使用SIP信令完成NAT穿越，完成接入平臺對接入設(shè)備的控制及管理功能。2.2.1系統(tǒng)組成云端社會視頻資源接入系統(tǒng)包括中心調(diào)度管理系統(tǒng)、云轉(zhuǎn)碼系統(tǒng)、云存儲系統(tǒng)、流媒體服務器集群、云數(shù)據(jù)庫系統(tǒng)以及其他業(yè)務處理系統(tǒng)，如圖6所示。（1）中心調(diào)度管理系統(tǒng)：主要負責云服務器資源的調(diào)度管理，實現(xiàn)資源的統(tǒng)一管理，充分提升資源的使用效率。（2）云轉(zhuǎn)碼模塊：主要負責在云端提供對視頻數(shù)據(jù)的統(tǒng)一高效轉(zhuǎn)碼，將不同格式及協(xié)議的視頻數(shù)據(jù)轉(zhuǎn)換為指定的標準格式。（3）云存儲系統(tǒng)：主要對海量視頻數(shù)據(jù)提供高性能、高可靠、安全、低成本的標準存儲服務。（4）流媒體服務器集群負：責接收前端各類社會視頻資源以及社會視頻資源子系統(tǒng)推送的媒體流并進行轉(zhuǎn)發(fā)、存儲等操作。（5）云數(shù)據(jù)庫：主要負責互聯(lián)網(wǎng)社會視頻資源接入系統(tǒng)中設(shè)備、用戶及其他相關(guān)業(yè)務數(shù)據(jù)的集中存儲與管理。（6）其他業(yè)務處理系統(tǒng)：主要負責GB/T28181協(xié)議與其他主流標準之間的轉(zhuǎn)換與管理、互聯(lián)網(wǎng)社會視頻資源接入系統(tǒng)與其他子系統(tǒng)之間的設(shè)備目錄和設(shè)備狀態(tài)的同步與通信等任務。圖6云端社會視頻資源接入系統(tǒng)方案2.2.2系統(tǒng)價值（1）兼容現(xiàn)有的各類社會視頻資源監(jiān)控畫面的接入。云端社會視頻資源接入系統(tǒng)通過云轉(zhuǎn)碼、業(yè)務處理系統(tǒng)來實現(xiàn)協(xié)議轉(zhuǎn)換、設(shè)備目錄同步及碼流互傳，從而實現(xiàn)與已建設(shè)的非國標互聯(lián)網(wǎng)社會視頻資源互聯(lián)網(wǎng)平臺的對接，完成平臺間的互聯(lián)網(wǎng)社會視頻資源共享。業(yè)務處理系統(tǒng)中的信令轉(zhuǎn)換模塊中集成已建設(shè)互聯(lián)網(wǎng)社會視頻資源接入平臺的私有協(xié)議SDK，完成已建設(shè)的互聯(lián)網(wǎng)社會視頻資源互聯(lián)網(wǎng)平臺私有協(xié)議和國標信令的轉(zhuǎn)換。向已建設(shè)的互聯(lián)網(wǎng)社會視頻資源互聯(lián)網(wǎng)平臺提供標準的REST接口及集成SDK，完成互聯(lián)網(wǎng)社會視頻資源接入系統(tǒng)與已建設(shè)的互聯(lián)網(wǎng)社會視頻資源互聯(lián)網(wǎng)平臺的設(shè)備目錄同步。向已建設(shè)的社會視頻資源互聯(lián)網(wǎng)平臺提供標準碼流封裝SDK和SVAC編解碼插件，完成互聯(lián)網(wǎng)社會視頻資源接入系統(tǒng)與已建設(shè)的互聯(lián)網(wǎng)社會視頻資源互聯(lián)網(wǎng)平臺的碼流共享。（2）將建的社會視頻資源接入采用國標接入。對于即將建設(shè)的前端設(shè)備接入云端社會視頻資源接入系統(tǒng)則不再采用私有協(xié)議，而是遵循國家標準《安全防范視頻監(jiān)控聯(lián)網(wǎng)系統(tǒng)信息傳輸、交換、控制技術(shù)要求》GB/T28181-2016和《安全防范監(jiān)控數(shù)字視音頻編解碼技術(shù)要求》GB/T25724-2010，完成對專網(wǎng)平臺的互聯(lián)網(wǎng)運行功能的升級。（3）接入公安視頻傳輸網(wǎng)等其他專網(wǎng)。云端社會視頻資源接入系統(tǒng)完成公共安全視頻圖像信息共享平臺UDP視頻流與互聯(lián)網(wǎng)的TCP視頻流的互轉(zhuǎn)，與公共安全視頻圖像信息共享平臺通過安全隔離設(shè)備或安全邊界互聯(lián)互通。通過用戶管理，支持多級別、多類別的權(quán)限設(shè)置，按權(quán)限查看共享互聯(lián)網(wǎng)社會視頻資源。2.3關(guān)鍵技術(shù)分析2.3.1云平臺資源存儲由于云端社會視頻資源接入系統(tǒng)重點匯聚視頻數(shù)據(jù)，而視頻數(shù)據(jù)是7×24小時不間斷產(chǎn)生的，導致海量視頻數(shù)據(jù)的存儲需求激增，在傳統(tǒng)的社會視頻資源接入系統(tǒng)中，存儲方案均基于磁盤I/O，其工作性能受限于磁盤的讀寫性能，本文所設(shè)計的云端社會視頻資源接入系統(tǒng)中則采取了數(shù)據(jù)切片的方式，依據(jù)視頻數(shù)據(jù)的特征將其進行切片處理，設(shè)計符合視頻數(shù)據(jù)特征的數(shù)據(jù)存儲策略將其分散存儲在云端的云存儲介質(zhì)中，該存儲系統(tǒng)的底層由索引服務器、數(shù)據(jù)服務器組成，由一組存取訪問接口來對外提供存取服務，使得上層應用與底層存儲分開，用戶在使用過程中無須了解底層實現(xiàn)，與使用普通存儲服務器操作相同。2.3.2云平臺資源分配資源管理是所有云平臺面臨的關(guān)鍵問題，好的資源分配可以使得云端資源最大化利用，當前很多云平臺均通過Openstack等項目來實現(xiàn)云基礎(chǔ)架構(gòu)，其本質(zhì)是以虛擬機的形式對外提供服務，這種方式的分配粒度較大，動態(tài)性較差，難以適應復雜多變的動態(tài)需求，極易造成資源浪費。本文所設(shè)計的云端社會視頻資源接入系統(tǒng)通過深入分析視頻服務的特征，發(fā)現(xiàn)可將視頻應用以微服務的方式進行部署，并結(jié)合Docker容器技術(shù)，使得資源的動態(tài)分配更加靈活。３結(jié)語互聯(lián)網(wǎng)社會視頻資源系統(tǒng)中涉及多種資源接入方式，視頻編碼格式不統(tǒng)一，綜合管理平臺相互不兼容，導致不同系統(tǒng)之間不能互聯(lián)互通，同時互聯(lián)網(wǎng)上社會視頻資源不能接入專網(wǎng)，已建設(shè)的互聯(lián)網(wǎng)社會視頻資源平臺不符合國