基于FPGA的視頻圖像縮放與疊加融合技術(shù)的設(shè)計方案及實現(xiàn)

基于FPGA的視頻圖像縮放與疊加融合技術(shù)的設(shè)計方案及實現(xiàn)針對兩通道視頻圖像疊加融合，設(shè)計并實現(xiàn)了一種實時性好、靈活性強的FPGA硬件系統(tǒng)。該系統(tǒng)可以根據(jù)實際需求進行任意比例和任意位置的視頻圖像疊加融合。方案經(jīng)仿真驗證后，運用雙線性插值縮放算法、DDR2存儲以及疊加融合等技術(shù)在FPGA硬件平臺上實現(xiàn)。結(jié)果表明，該系統(tǒng)能達到預(yù)期效果，疊加融合畫面效果良好，能夠滿足工程應(yīng)用的需求。視頻圖像疊加融合技術(shù)可以將兩路視頻圖像信號進行疊加融合并輸出到一臺顯示器上進行顯示。兩路視頻圖像信號中，一路作為被疊加信號（即背景），另一路作為疊加信號（即前景），在背景視頻圖象中可以融入前景視頻圖象并在同一終端上顯示。這項技術(shù)在電視系統(tǒng)、視頻監(jiān)控系統(tǒng)、廣告娛樂、交通管理等領(lǐng)域有著廣泛的應(yīng)用。目前國內(nèi)生產(chǎn)視頻疊加器的有北京彩訊、上海大視等廠家，主要是采用視頻矩陣、畫面分割器實現(xiàn)，大多采用專用的視頻疊加芯片設(shè)計而成，其靈活性較差，成本高［1-3］。本設(shè)計在以FPGA為主控芯片的硬件平臺上實現(xiàn)視頻圖像的縮放與疊加融合功能，可實現(xiàn)兩路任意分辨率輸入視頻疊加，并能擴展成多路疊加，通過縮放算法對每一路進行放大或縮小，進而調(diào)整前景在背景中的比例；還可通過更改參數(shù)，調(diào)節(jié)前景在背景中的位置。該方案實時性好，處理速度快，靈活性較高。視頻圖像疊加融合信號流程如圖1所示。本設(shè)計中兩路視頻圖像信源的分辨率可根據(jù)需求任意選定。其中一路為背景視頻圖像信號源，另外一路為前景視頻圖像信號源，分別將兩路信號源通過雙線性插值縮放算法進行處理，根據(jù)需要對前景和背景視頻圖像的大小進行適當(dāng)?shù)目s放，最后將兩路視頻信號進行疊加融合處理并輸出［4-5］。根據(jù)方案的信號流程圖可知，兩路信源信號為并行處理，適用采用FPGA進行實現(xiàn)［6］。疊加效果圖如圖2所示。其中圖2（a）為前景視頻圖像，原始分辨率為640×480；圖2（b）為背景視頻圖像，原始分辨率是800×600。通過Matlab對設(shè)計方案進行仿真，背景縮放1024×768，占滿輸出屏幕，前景縮放為320×240，并規(guī)定其在左上角疊加，如圖2（c）所示。視頻疊加融合的硬件實現(xiàn)視頻疊加融合系統(tǒng)總體框圖如圖3所示，系統(tǒng)主要由DVI接口、編碼模塊、解碼模塊、DDR2存儲模塊和FPGA控制模塊等幾個主要部分組成，其中解碼和編碼分別采用SiliconImage和Chrontel公司的專用芯片實現(xiàn)。具體實現(xiàn)過程如下［7］：（1）將輸入的兩路視頻信號通過解碼電路轉(zhuǎn)碼成VESA標(biāo)準(zhǔn)的數(shù)字視頻信號，并將其送至FPGA內(nèi)部。（2）由于不同分辨率之間存在幀不同步，為了實現(xiàn)任意比例縮放，達到任意分辨率疊加融合的效果，需要將輸入的數(shù)據(jù)進行外部存儲以解決幀不同步的問題［8-9］。（3）根據(jù)需要將前景視頻圖像和背景視頻圖像進行適當(dāng)比例的放大和縮小，本系統(tǒng)采用雙線性插值縮放算法進行任意比例縮放處理［10-11］。（4）以高分辨率視頻圖像的像素時鐘為觸發(fā)時鐘對兩路縮放后圖像進行疊加融合處理，并由FPGA產(chǎn)生VESA標(biāo)準(zhǔn)時序，驅(qū)動液晶顯示器顯示［12］。（5）將疊加融合好的視頻信號進行編碼并通過DVI接口輸出到顯示終端上，獲得視頻圖像疊加融合的效果［13］。FPGA內(nèi)部工作流程如圖4所示。首先通過I2C總線對外圍的編碼、解碼芯片進行配置；其次控制MCB（MemoryControllerBlock），使DDR2正常進行數(shù)據(jù)存??；然后縮放核從DDR2中讀取數(shù)據(jù)進行縮放；最后將兩個縮放核輸出的數(shù)據(jù)進行疊加融合并顯示在終端上［14］。設(shè)計中最主要的延遲來自于DDR2緩存模塊，需要預(yù)先將視頻圖像緩存為一幀，然后再進行后續(xù)處理。此模塊引進了一幀的延遲（1/60s），其他模塊的延遲極小，可以忽略不計，總體延遲大約幾十毫秒，具有良好的實時性。仿真與驗證本設(shè)計選用的主控芯片F(xiàn)PGA為Xilinx公司的Spartan6系列，型號為XC6SLX100-2FGG767。在ISE13.4開發(fā)平臺上運用Ver