基于移動終端的中國手語合成系統(tǒng).pdf

1、中國手語合成系統(tǒng)旨在為聾人教育,聾健間的無障礙交流創(chuàng)造環(huán)境與基礎(chǔ),它利用人工智能,計算機(jī)圖形學(xué)等技術(shù),實現(xiàn)用三維虛擬角色演示用戶指定的中國手語。系統(tǒng)的成功研發(fā),為聾人創(chuàng)造無障礙環(huán)境發(fā)揮起到了重要作用,對推廣規(guī)范的中國手語有重大作用,獲得了來自殘聯(lián)、教育部、聾協(xié)的各界專家的高度評價。系統(tǒng)適用于各種服務(wù)行業(yè)和公共場所,可給聾人朋友的學(xué)習(xí)和生活帶來極大便利,應(yīng)用前景廣闊。
　　在追求人機(jī)和諧的今天,基于三維虛擬人合成技術(shù)的中國手語合成系

2、統(tǒng)有助于聾人群體使用電視、網(wǎng)絡(luò)、電話、計算機(jī)、電影等高科技產(chǎn)品,提高他們的生活質(zhì)量;有助于手語的標(biāo)準(zhǔn)化,擴(kuò)大標(biāo)準(zhǔn)手語的使用范圍,從而擴(kuò)大聾人群體的社會交流;有助于改善聾人受教育的環(huán)境,通過合成系統(tǒng)可以向聾啞人提供一種無障礙的自主學(xué)習(xí)方式,為他們增加受教育的機(jī)會,提高他們參與社會競爭的能力。通過可視化的虛擬人手語動作及相關(guān)文字信息的結(jié)合,提高廣大聽力語言殘疾人的教育水平和生活質(zhì)量,直接影響2800萬聽力語言殘疾人平等交流和獲取信息的權(quán)益,

3、也關(guān)系著我國聾啞人教育質(zhì)量的進(jìn)一步提高。
　　本文的主要研究內(nèi)容如下:
　　虛擬人建模:分析人體模型的幾何表示方法、人體結(jié)構(gòu)及人體上肢運動特征。針對兩個系統(tǒng)的不同特性,選擇了基于VRML97標(biāo)準(zhǔn)中的H-Anim模型模型規(guī)范,建立了基于層次結(jié)構(gòu)的虛擬人模型。
　　手語運動數(shù)據(jù)采集及靜態(tài)編輯:本文分別采用5DT DataGlove以及EVaRT進(jìn)行運動數(shù)據(jù)采集,數(shù)據(jù)內(nèi)容主要包含手部和手臂兩部分運動數(shù)據(jù),并針對虛擬人使用的數(shù)

4、據(jù)類型做相應(yīng)格式的轉(zhuǎn)換。由于運動設(shè)備采集的數(shù)據(jù)存在數(shù)據(jù)冗余、動作偏差等問題,需要對手語詞的各個關(guān)鍵幀進(jìn)行修正編輯。
　　手語詞優(yōu)化及手語合成:本文提出了手語詞關(guān)鍵幀的優(yōu)化策略,并對詞庫中的手語詞做減幀處理。同時針對不同自由度的關(guān)節(jié)采用不同的插值算法,在兩個關(guān)鍵幀間計算獲取若干等時間間隔的幀序列,將獲得的幀序列的數(shù)據(jù)賦值給虛擬人進(jìn)行手語運動合成,還原手語動作。
　　分布式結(jié)構(gòu)及中文分詞功能:本文實現(xiàn)了基于C/S結(jié)構(gòu)的分布式客戶