三種簡(jiǎn)單手勢(shì)識(shí)別

1、、背景能創(chuàng)造出更豐當(dāng)藥福攵。 高，是新一找的人機(jī)交 可以彌補(bǔ)傳統(tǒng)交互方式的葛 處于蓬勃發(fā)展的階段.仍-EM離瑤詼著您燥鰻継1 蠶篦程謂和羿于料化動(dòng)態(tài)手勢(shì)可 I饗書載務(wù)識(shí)坯構(gòu)腐錢2起，薯勰址尊霜餐顎腐驀賞警O佔(zhàn)二.手勢(shì)識(shí)別概述2.U手勢(shì)識(shí)別的概念J2-1圖像到概念的變換Tgv手勢(shì)是姿勢(shì)的一個(gè)子集，姿勢(shì)這個(gè)概念沒有精確的 定義。一般認(rèn)為，手勢(shì)概念經(jīng)過人的手轉(zhuǎn)化為的手勢(shì)動(dòng)作， 觀 所2.2、手勢(shì)識(shí)別流程了計(jì)戶性計(jì) 到加用觸使 點(diǎn)J”為 發(fā)是懂統(tǒng)互 代別眷傳交 舟皿 匕匕J篩。厶月彳刪合界統(tǒng)仍 占結(jié)互傳， 八5嬌交補(bǔ)段構(gòu)打；/ 倬升的彌階亍汽丄 超態(tài)型以的時(shí) 婦靜新可展別 。與建，發(fā)鞏 料，構(gòu)求勃?jiǎng)?

2、打力別要蓬手 冷總沢旳于態(tài) 加込勢(shì)性處瓠 云表手然正的 t,的態(tài)自究覺 M觀動(dòng)式研視 和直用方別于 鬥和利入識(shí)基 )富。輸究。 加豐5CO亦手研義 有語面和。意 打具的界覺題有 鬥勢(shì)富互視問很 妃0手豐交于的面 ”態(tài)更機(jī)基究界 佛動(dòng)出人R。造的 XX Ju Jy 建歹毛代 龍手匕匕一 E FA厶月 一 相勢(shì)1新式許的 護(hù)升起是方 子態(tài)一，靜在面2.3.手勢(shì)建模在手勢(shì)識(shí)別框架中，手勢(shì)模型是一個(gè)最 基本的部分。根據(jù)不同的應(yīng)用背景，手勢(shì)識(shí) 別采用的模型會(huì)有不同，而對(duì)于不同的手勢(shì) 模型，采用的手勢(shì)檢測(cè)與跟蹤算法、特征提 取、識(shí)別技術(shù)也會(huì)有差別。手勢(shì)建模主要分 為基于表觀的手勢(shì)模型與基于三維的手勢(shì)模2.

3、4、手勢(shì)特征提取手勢(shì)特征的提取是與手勢(shì)模型密切相關(guān)的，不 同的手勢(shì)模型會(huì)有不同有手勢(shì)特征。例如基于模型 的手勢(shì)模型有手的每個(gè)關(guān)節(jié)的狀態(tài)特征，基于表觀 模型的手勢(shì)特征是輪廓特征、位置特征等。靜態(tài)手 勢(shì)識(shí)別和動(dòng)態(tài)于勢(shì)識(shí)別的特征也不同，靜態(tài)手勢(shì)的 特征只是描述的手的靜態(tài)信息，例如輪廓、面積等。 動(dòng)態(tài)手勢(shì)特征是連續(xù)的靜態(tài)特征序列。三、手勢(shì)識(shí)另u3.1、設(shè)計(jì)思路常用的靜態(tài)手勢(shì)特征有輪廓、位置、面積、分 布等。本文主要利用對(duì)手勢(shì)面積大小的識(shí)別來達(dá)到手 勢(shì)識(shí)別的目的，這里直接比較手型面積有交大困難。 在手勢(shì)的定位與分割時(shí)，產(chǎn)生了手勢(shì)區(qū)域的方框， 我們運(yùn)用這個(gè)面積來代替手勢(shì)的面積，具有較好的 效果。當(dāng)用攝像頭

4、采集到手勢(shì)時(shí)，先將采集到的手 勢(shì)與采集到的手勢(shì)庫進(jìn)行比較，比較得出與攝像頭所得手勢(shì)較吻合的的手勢(shì), 的名稱。在屏幕上顯示相關(guān)手勢(shì)3.2.手勢(shì)采集對(duì)于手勢(shì)識(shí)別，首先得要求有用來對(duì)比識(shí)別的手勢(shì)， 我們采集的簡(jiǎn)單的手勢(shì)有以下幾種：拳頭、布、剪刀。如下 圖所示：3.3.相關(guān)程序本文的識(shí)別程序是在“膚色識(shí)別:的咅礎(chǔ) 上進(jìn)行一定修改形成的。通過讀程序，我勒 發(fā)現(xiàn)原程序較慢，我們刪除了一部分P專I 序提高了識(shí)別的速度。通過了Cf和Cb卞書 斷&的值，再利用Y的面積來判斷不同的手勢(shì)。 程序詳見報(bào)告。三、手勢(shì)識(shí)另!J3.1、設(shè)計(jì)思路常用的靜態(tài)手勢(shì)特征有輪廓、位置、面積、分 布等。本文主要利用對(duì)手勢(shì)面積大小的識(shí)別

5、來達(dá)到手 勢(shì)識(shí)別的目的，這里直接比較手型面積有交大困難。 在手勢(shì)的定位與分割時(shí)，產(chǎn)生了手勢(shì)區(qū)域的方框， 我們運(yùn)用這個(gè)面積來代替手勢(shì)的面積，具有較好的 效果。當(dāng)用攝像頭采集到手勢(shì)時(shí)，先將采集到的手 勢(shì)與采集到的手勢(shì)庫進(jìn)行比較，比較得出與攝像頭所得手勢(shì)較吻合的的手勢(shì), 的名稱。在屏幕上顯示相關(guān)手勢(shì)3.4.識(shí)別結(jié)果對(duì)于不同的手勢(shì)所得識(shí)別結(jié)果如下:TFT eft7由識(shí)別結(jié)果可以看出：在合適位置隨著 于勢(shì)的變換，在屏幕上顯示的文字作相應(yīng) 變化。實(shí)驗(yàn)中發(fā)現(xiàn)，在不同攝像頭背景 ，實(shí)驗(yàn)結(jié)果存在較大差別，于是，變們采 取了純黑色的背景進(jìn)行實(shí)驗(yàn)。手勢(shì)識(shí)別技術(shù)的實(shí)現(xiàn)使人機(jī)交互更近一步,提高了人機(jī)交互的能力，對(duì)生產(chǎn)生

6、活有很大的 好處。通過查閱相關(guān)資料，我們認(rèn)識(shí)到了手勢(shì) 識(shí)別在各方面的實(shí)際意義。本次實(shí)驗(yàn)實(shí)現(xiàn)了較 為簡(jiǎn)單的手勢(shì)識(shí)別，但不足之處較多，還有許 多需完善的部分。通過這次DSP課程學(xué)習(xí)，我們覺得在做實(shí)驗(yàn)時(shí)我們應(yīng)該先確定自己實(shí)驗(yàn)的目標(biāo)，本次實(shí)驗(yàn)我們欠缺一定討論，一開始對(duì)實(shí)驗(yàn)的方向不 太明確，之后是在實(shí)驗(yàn)過程中才慢慢發(fā)現(xiàn)運(yùn)用： 面積大小對(duì)手勢(shì)進(jìn)行識(shí)別能產(chǎn)生較好效果y:円-田偉民以前也學(xué)過一點(diǎn)圖像處理的的基本知識(shí)，也學(xué)過 PHOTOSHOP的軟件，也對(duì)圖像的處理比較感興趣，所 以選擇了這個(gè)課程。在DSP圖像處理里面也學(xué)到了很多的 東西尤其是圖像的顯不的最基本的知識(shí)，從米集，編碼， 到輸出。對(duì)我來說意義最大的

7、是用程序來實(shí)現(xiàn)了圖像的處 理，以前都是用軟件來處理的，這是我接近計(jì)算機(jī)的方法 更近了一步。DSP課程對(duì)我來說最難的是C語言編程，我 們花了很多的時(shí)間在C語言的編程上，開始的時(shí)候總是在改子程序，讀程序，后來開始嘗試一些自己寫字程序。在 不斷的嘗試中摸索出來了一些方法和技巧，收獲了不少的東西無論是圖像處理上還是在編程上。我們總是在不斷地嘗試中，不斷地努力中，漸漸形成了自己的想法稅思路。 溫興泵通過這次實(shí)驗(yàn)，我們幾個(gè)人分工合作，達(dá)到了很好的效果！首先，通過對(duì)程序的熟悉掌握相關(guān)的知識(shí)點(diǎn)，并能運(yùn)用其知識(shí)點(diǎn)進(jìn)行 自己的設(shè)計(jì)，把前面幾次的實(shí)驗(yàn)的討論的結(jié)果成果運(yùn)用在了這次的 實(shí)驗(yàn)中，我們從顯示字到畫矩形邊框，再到比較框里面的白色的面 積比例確定顯示哪個(gè)字符，這個(gè)完全是不斷比較程序?qū)嵺`出來的， 同時(shí)，我們對(duì)以前的顯示輪廓的程序進(jìn)行改進(jìn)，實(shí)現(xiàn)了能夠快速切 換攝像頭的功能，從而使界面平滑流暢，可以方便快捷地進(jìn)行測(cè)試, 達(dá)到了很好的效果！這次實(shí)驗(yàn)，幾個(gè)人搞了很長的時(shí)間，首先是程 序的熟悉方面就花了大概半天的時(shí)間，然后反復(fù)實(shí)驗(yàn)反復(fù)修改，最 后總算書縣的我們想要的功能-手勢(shì)識(shí)別！