日語依存句法分析技術(shù)研究.pdf

1、日語依存關(guān)系解析是日語句子解析的一項基本技術(shù)，主要基于日語依存語法來確定句子中文節(jié)與文節(jié)間的依存關(guān)系。句法分析是進(jìn)行語義分析等深層自然語言處理的首要基礎(chǔ)，是諸多自然語言處理應(yīng)用系統(tǒng)不可或缺的一個重要環(huán)節(jié)。依存關(guān)系解析在機器翻譯、信息抽取、自動問答等領(lǐng)域有著重要的應(yīng)用。
　　目前對日語依存解析的相關(guān)研究，重點都集中在對學(xué)習(xí)框架的修改上，機器學(xué)習(xí)算法大多采用支持向量機或其他基于邊界和記憶學(xué)習(xí)的方法。條件隨機場作為一種優(yōu)秀的序列標(biāo)注器，

2、在序列標(biāo)注方面有著出色的表現(xiàn)，被成功地運用在自然語言處理的任務(wù)中，并取得了很好的效果，但是在日語依存關(guān)系解析方面，卻未見相關(guān)的報道。本文采用層疊組塊算法和條件隨機場相結(jié)合的方法進(jìn)行日語依存關(guān)系解析，融入豐富的上下文信息，從整句的角度給予每個標(biāo)注單元一個最優(yōu)的標(biāo)注結(jié)果。在日本京都大學(xué)文本語料庫(Version4.0)上的實驗結(jié)果表明，該方法在不使用動態(tài)特征的條件下，依存正確率和句子正確率分別取得了很好的效果。
　　規(guī)則方法作為統(tǒng)計方

3、法的有益補充，仍被廣泛的用于自然語言處理的諸多領(lǐng)域中。傳統(tǒng)的規(guī)則獲取是根據(jù)知識工程師的經(jīng)驗和知識手工編寫，完全依賴于編寫規(guī)則的知識工程師的語言知識，獲取規(guī)則集合需要大量的人力和物力。針對傳統(tǒng)的獲取規(guī)則方法的不足，本文采用了基于條件隨機場的錯誤驅(qū)動機制，將條件隨機場的一次識別結(jié)果作為特征加入到條件隨機場二次識別的特征模板中，利用統(tǒng)計方法來自動學(xué)習(xí)其中的錯誤規(guī)律，訓(xùn)練得到機器識別模型并進(jìn)行糾錯，在上述的語料庫上的實驗結(jié)果表明，該方法進(jìn)一步提