藏文文本情感分析方法研究.pdf

1、輿情分析作為自然語言處理研究的重要分支，近年來越來越受關(guān)注。隨著藏文信息技術(shù)的發(fā)展，藏語也邁入了自然語言處理時(shí)代，而針對(duì)藏文文本的情感分析研究也越來越受到重視，但由于藏文文本的情感分析研究起步晚等原因使得在該領(lǐng)域有很多有待完善、需要提升的內(nèi)容，具有很大的研究空間。
　　本文在分析研究了國內(nèi)外文本情感分析方法的基礎(chǔ)上，結(jié)合藏文本身的特點(diǎn)，提出了“基于層次結(jié)構(gòu)的藏文文本情感分析方法”，該方法中將藏文情感分析分為詞語級(jí)、句子級(jí)、篇章級(jí)三

2、個(gè)層次，并基于現(xiàn)有的資源，針對(duì)每一個(gè)層次的特點(diǎn)提出了不同的研究方法，并設(shè)計(jì)系統(tǒng)加以實(shí)現(xiàn)、驗(yàn)證。三個(gè)層次的主要工作如下：
　　1．藏文詞語級(jí)情感分析方面，針對(duì)情感詞典缺乏的問題，首先人工整理包括基礎(chǔ)情感詞典、程度副詞詞典、否定和雙否定詞詞典、轉(zhuǎn)折詞字典的藏文情感詞典，驗(yàn)證了基于詞向量擴(kuò)充情感詞典的幾種方法，提出了knn擴(kuò)充的方法最優(yōu)，并用該方法從語料中自動(dòng)擴(kuò)充情感詞，建立了一部比較實(shí)用的藏文情感詞典；
　　2．藏文句子級(jí)情感分

3、析方面，歸納和總結(jié)了藏文句子的語言特性，抽象和提取出藏文句子情感分析的三層規(guī)則集：句型規(guī)則、句間規(guī)則、句內(nèi)規(guī)則，提出了利用情感詞典和規(guī)則集分析藏文句子情感的一種方法，并設(shè)計(jì)實(shí)現(xiàn)了藏文句子傾向性分析系統(tǒng)；
　　3．藏文篇章級(jí)情感分析方面，針對(duì)藏文篇章情感分析語料建設(shè)困難的問題，先基于情感詞典的方法對(duì)原始語料進(jìn)行初步標(biāo)注，再人工篩選得到標(biāo)注語料，然后利用標(biāo)注語料構(gòu)建SVM模型，對(duì)篇章文本進(jìn)行情感分析。針對(duì)傳統(tǒng)的詞袋模型維度大，且難以捕

4、捉到情感特征等問題，提出采用混合情感特征的方法訓(xùn)練模型，得到了較好的效果。
　　本文在現(xiàn)有的研究基礎(chǔ)上，取得了以下成果：
　　1．提出了藏文文本情感分析的三層框架；
　　2．將詞向量的方法用于藏文情感詞典的擴(kuò)充中，并對(duì)傳統(tǒng)的基于相似度擴(kuò)充詞典的方法進(jìn)行了改進(jìn)，提高了準(zhǔn)確率，獲得了一部比較好的藏文情感詞典；
　　3．從藏文的文法特點(diǎn)出發(fā)，歸納和總結(jié)了適用于藏文的句子情感分析規(guī)則集，建立了句型規(guī)則、句間規(guī)則和句內(nèi)規(guī)則