基于手語語言學(xué)與人體運(yùn)動(dòng)學(xué)的手語識(shí)別研究.pdf

1、隨著計(jì)算機(jī)應(yīng)用技術(shù)在現(xiàn)代社會(huì)影響的迅速擴(kuò)大，傳統(tǒng)的基于鼠標(biāo)和鍵盤的人機(jī)交互技術(shù)越來越顯示出它們的局限性，因而研究多模式人機(jī)接口技術(shù)在現(xiàn)實(shí)生活中變得越來越重要。手語識(shí)別做為多模式人機(jī)接口領(lǐng)域的一項(xiàng)重要組成部分，已經(jīng)吸引了越來越多的專家和學(xué)者們的注意。
　　理想的手語識(shí)別應(yīng)能處理大量的既定的詞匯，最大可能地滿足使用者的移動(dòng)需要，在復(fù)雜環(huán)境下實(shí)時(shí)準(zhǔn)確的識(shí)別，并且這種識(shí)別應(yīng)該面向真正的、非特定的手語操做者。目前非特定人手語識(shí)別與特定人手語

2、識(shí)別相比還有較大的差距，造成這一差距的主要原因包括非特定人數(shù)據(jù)本身的差異性矛盾與訓(xùn)練樣本的缺乏。數(shù)據(jù)差異性使得非特定人手語識(shí)別中提取手語數(shù)據(jù)有效的共同特征非常困難。訓(xùn)練樣本缺乏，使得在實(shí)際應(yīng)用中模型的表達(dá)能力與樣本缺乏之間的矛盾成為制約識(shí)別系統(tǒng)效果的瓶頸。這兩個(gè)問題的解決將對(duì)中國手語識(shí)別及其它相關(guān)領(lǐng)域具有重要的意義。在本文中，針對(duì)數(shù)據(jù)差異性和訓(xùn)練樣本缺乏問題，我們從以下幾個(gè)方面解決：
　　1、根據(jù)手語具有語言學(xué)和人體運(yùn)動(dòng)學(xué)特點(diǎn)，在

3、保證原始數(shù)據(jù)完整性的前提下，建立了手語語言學(xué)和人體運(yùn)動(dòng)學(xué)相結(jié)合的標(biāo)記體系。根據(jù)上述標(biāo)記體系和目前沒有手語數(shù)據(jù)檢測方法的現(xiàn)況，提出了符合手語特點(diǎn)的數(shù)據(jù)檢測方法，用于檢測生成和轉(zhuǎn)換的手語數(shù)據(jù)的有效性。
　　2、提出了符合手語具有手語語言學(xué)和人體運(yùn)動(dòng)學(xué)特點(diǎn)的數(shù)據(jù)生成方法，在此方法中應(yīng)用了遺傳算法和鮑德溫效應(yīng)，保證所生成數(shù)據(jù)是呈現(xiàn)出高質(zhì)量趨勢增長的手語數(shù)據(jù)。
　　3、針對(duì)非特定人手語數(shù)據(jù)的差異性問題，首先我們提出了使用正交黎曼流形的