課件成果地址武

(19)中民國(guó)家知識(shí) (21)(22)(71)申請(qǐng)人大地址430072省市武昌區(qū)珞珈山武(72)發(fā)明人特殊普通合

(10)申請(qǐng)公布號(hào) (43)人權(quán)利要求書3頁(yè)說明書7頁(yè)附圖2一種3D圖像空間與3D視聽空間轉(zhuǎn)換方法及(57)A象相對(duì)于中心點(diǎn)在視聽坐標(biāo)系中的方位信息3D中提取出目標(biāo)對(duì)象的深度值和中心點(diǎn)的A

權(quán)利要求 1/3離信息；直；步驟1設(shè)圖像坐標(biāo)中心點(diǎn)的位置以二維點(diǎn)的形式記為L(zhǎng)C[a,b]T目標(biāo)對(duì)象的位置為L(zhǎng)O[x,y]T得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息是[x-a,y-b]T； 其中，aw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，bw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，cw是中心點(diǎn)在視聽坐標(biāo)系中位于機(jī)光軸方向的值，xw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，yw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，zw是中心點(diǎn)在視聽坐標(biāo)系中位于攝步驟3中，所述目標(biāo)對(duì)象的深度值通過計(jì)算機(jī)光學(xué)中心到目標(biāo)對(duì)象的深度所述中心點(diǎn)的深度值通過計(jì)算機(jī)光學(xué)中心到中心點(diǎn)的深度值ZLlisten(u,v)得到，

權(quán)利要求 2/3設(shè)(X,Y)表示以物理單位度量的成像平面坐標(biāo)系的坐像平面坐標(biāo)系的原點(diǎn)O1定義在機(jī)光軸和圖像平面的交點(diǎn)處，X軸和Y軸方向分別與圖像坐標(biāo)系的u軸和v軸平行，點(diǎn)的距離信息disifm如下，其中dLspeaker(X,Y)代表目標(biāo)對(duì)象以物理距離為單位的視差dLlisten(X,Y)代表聽音點(diǎn)以 點(diǎn)的距離信息；直；LC[a,b]T，目標(biāo)對(duì)象的位置為L(zhǎng)O[x,y]T，得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息是[x-a,y-b]T； [x-a

權(quán)利要求 3/3其中，aw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，bw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，cw是中心點(diǎn)在視聽坐標(biāo)系中位于機(jī)光軸方向的值，xw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，yw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，zw是中心點(diǎn)在視聽坐標(biāo)系中位于攝度值ZLspeaker(u,v)式如下，所述中心點(diǎn)的深度值通過計(jì)算機(jī)光學(xué)中心到中心點(diǎn)的深度值ZLlisten(u,v)得到，設(shè)(X,Y)表示以物理單位度量的成像平面坐標(biāo)系的坐像平面坐標(biāo)系的原點(diǎn)O1定義在機(jī)光軸和圖像平面的交點(diǎn)處，X軸和Y軸方向分別與圖像坐標(biāo)系的u軸和v軸平行，點(diǎn)的距離信息disifm如下，其中dLspeaker(X,Y)代表目標(biāo)對(duì)象以物理距離為單位的視差dLlisten(X,Y)代表聽音點(diǎn)以根據(jù)權(quán)利要求8所述3D圖像空間與3D視聽空間轉(zhuǎn)換裝置，其特征在視差根據(jù)下893D3D在于：聲像位置還原模塊中，還原所得目標(biāo)對(duì)象在視聽坐標(biāo)系中的目標(biāo)位置為[xw-aw,yw-b,zcdisifm]T。 3D圖像空3D視聽空間轉(zhuǎn)換方法及裝 中用戶視覺對(duì)目標(biāo)對(duì)象的位置的感知與用戶聽覺對(duì)目標(biāo)對(duì)象位置的感知之間的轉(zhuǎn)換關(guān)系 的2D音頻系統(tǒng)缺乏對(duì)聲音對(duì)象的三信息表達(dá)，在3D視聽系統(tǒng)中不能完整表達(dá)圖像目標(biāo)對(duì)象空間信息，導(dǎo)致3D音頻與3D感知的不匹配，如3D中看到體 本發(fā)明的目的是在圖像空間中獲取目標(biāo)對(duì)象的方位信息和3D中獲取目標(biāo)對(duì) 步驟2目標(biāo)對(duì)象方位信息轉(zhuǎn)換包括將圖像坐標(biāo)系中目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息映射到視聽坐標(biāo)系得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)在視聽坐標(biāo)系中的方位信息； 步驟3深度信息獲取包括從3D中提取出目標(biāo)對(duì)象的深度值和中心點(diǎn)的深度值；為圖像的水平方向v為圖像的垂直方所述視聽坐標(biāo)系是由聽音點(diǎn)和Xc,Yc,Zc軸組成的直的位置為L(zhǎng)O[x,y]T得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息是[x-a,y-b]T； [0013][x-a [0014]其中，aw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，bw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，cw是中心點(diǎn)在視聽坐標(biāo)系中位于機(jī)光軸方向的值，xw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，yw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，zw是中心點(diǎn)在視聽坐標(biāo)系中度值ZLspeaker(u,v)得到公式如下， 其中，dLspeaker(u,v)代表目標(biāo)對(duì)象以像素為單位的[0018]所述中心點(diǎn)的深度值通過計(jì)算機(jī)光學(xué)中心到中心點(diǎn)的深度值ZLlisten(u,v)得 其中，dLlisten(u,v)代表聽音點(diǎn)以像素為單位的視差 O1定義在機(jī)光軸和圖像平面的交點(diǎn)處X軸和Y軸方向分別與圖像坐標(biāo)系的u軸和v軸中心點(diǎn)的距離信息disifm如下， [0025]其中dLspeaker(X,Y)代表目標(biāo)對(duì)象以物理距離為單位的視差dLlisten(X,Y)代表聽音 5中，還原所得目標(biāo)對(duì)象在視聽坐標(biāo)系中的目標(biāo)位置為 信息映射到視聽坐標(biāo)系得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)在視聽坐標(biāo)系中的方位信息； 深度信息獲取模塊用于從3D中提取出目標(biāo)對(duì)象的深度值和中心點(diǎn)的深度值；[0034]目標(biāo)對(duì)象距離信息獲取模塊，用于根據(jù)深度信息獲取模塊所得目標(biāo)對(duì)象與中心點(diǎn)的為圖像的水平方向v為圖像的垂直方所述視聽坐標(biāo)系是由聽音點(diǎn)和Xc,Yc,Zc軸組成的直角坐標(biāo)系聽音點(diǎn)為原點(diǎn)，Xc軸和Yc軸與圖像坐標(biāo)系的u軸和v軸平行，Zc軸為機(jī)光軸，和圖像平面垂LC[a,b]T對(duì)象的位置為L(zhǎng)O[x,y]T目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息是[x-a,y-b]T；[0038]目標(biāo)對(duì)象方位信息轉(zhuǎn)換模塊中，得到目標(biāo)對(duì)象相對(duì)于中心點(diǎn)在視聽坐標(biāo)系中的方位 [0039][x-a [0040]其中，aw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，bw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，cw是中心點(diǎn)在視聽坐標(biāo)系中位于機(jī)光軸方向的值，xw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，yw是中心點(diǎn)在視聽坐標(biāo)系中垂直方向的值，zw是中心點(diǎn)在視聽坐標(biāo)系中對(duì)象的深度值ZLspeaker(u,v)如下，[0043]其中，dLspeaker(u,v)代表目標(biāo)對(duì)象以像素為單位的[0044]所述中心點(diǎn)的深度值通過計(jì)算機(jī)光學(xué)中心到中心點(diǎn)的深度值ZLlisten(u,v)得 [0046]其中，dLlisten(u,v)代表聽音點(diǎn)以像素為單位的視差 定義在機(jī)光軸和圖像平面的交點(diǎn)處X軸和Y軸方向分別與圖像坐標(biāo)系的u軸和v軸平心點(diǎn)的距離信息disifm如下， [0051]其中dLspeaker(X,YdLlisten(X,Y 而且聲像位置還原模塊中還原所得目標(biāo)對(duì)象在視聽坐 [0056]3D3D視聽空間的方在圖像空間中獲取目標(biāo)對(duì)象的方位信息和3D中獲取目標(biāo)對(duì)象的距3D語(yǔ)音與的空間信息一致性給用戶更真的3D聽覺和視覺體驗(yàn)實(shí)現(xiàn)圖像空間信息與[0060][0061]本發(fā)明所提供方法可采用計(jì)算機(jī)軟件技術(shù)實(shí)現(xiàn)自動(dòng)運(yùn)行流程，實(shí)施例的流程具體包括以下步驟：象的位置為L(zhǎng)O[x,y]T目標(biāo)對(duì)象相對(duì)于中心點(diǎn)的方位信息是[x-a,y-bT其中T表示向 聽音點(diǎn)Xc,Yc,Zc軸組成的直角坐標(biāo)系，Xc軸和Yc軸分別與圖像坐標(biāo)系的u軸和v軸平行，Zc軸為機(jī)的光軸，和圖像平面垂直。系內(nèi)的三維點(diǎn)表示為M=[X,wYw,Zw]T它們 向量表示形式分別 2.2.2系中的中心點(diǎn)映射到視聽坐標(biāo)系的坐標(biāo)表示如下： LC[a,b,c cc LO[x,y,z w[0079]其中，xw是中心點(diǎn)在視聽坐標(biāo)系中水平方向的值，yw是中心點(diǎn)在視聽坐標(biāo)系中垂直LO=[x,y,1]w[0080]2.2.32.2.2方位信息表示為如下： [0081][x-a [0088]其中B是機(jī)之間的基線距離[0089]計(jì)算機(jī)光學(xué)中心到目標(biāo)對(duì)象的深度值如下 [0092]計(jì)算機(jī)光學(xué)中心到中心點(diǎn)的深度值如下 [0095]dLspeaker(u,v)dLlisten(u,v)3.1出目標(biāo)對(duì)象與中心點(diǎn)的深度差deep如下： [0099][0101]4.2.11(X,Y)標(biāo)。在X-Y坐標(biāo)系中，原點(diǎn)O1定義在機(jī)光軸和圖像平面的交點(diǎn)處，稱為圖像的主點(diǎn)設(shè)O1在圖像坐標(biāo)系u-v下的坐標(biāo)為(u0,v0)，X軸和Y軸方向分別與圖像坐標(biāo)系的uv[0104]其中s′表示因機(jī)成像平面坐標(biāo)軸相互不正交引出的傾斜因子] 如圖32得到的目標(biāo)對(duì)象相對(duì)于中心點(diǎn)在視聽坐標(biāo)系中的方位信息[xa,ybzcT和由步驟4得到的距離信息disifm，將目標(biāo)對(duì)象相對(duì)于聽 音點(diǎn)的方位移動(dòng)disifm，即可得到中的目標(biāo)對(duì)象在視聽空間中應(yīng)處的位置 可以先執(zhí)行步驟34后執(zhí)行步驟12在系統(tǒng)資源足夠的情況下也可以并行執(zhí)行步驟12和3、4最后根據(jù)步驟24的結(jié)