一種新的并發(fā)分詞算法的研究與實現(xiàn).pdf

1、漢語的詞法分析是漢語理解的基礎(chǔ)，是漢語信息處理領(lǐng)域的一個重要課題。 該課題提出一種新的并發(fā)檢索-綜合排歧的分詞方法，目的是利用并行的特點，使分詞與分詞之間、分詞與排歧分析之間能夠并行處理，從而更高效、合理地實現(xiàn)詞法分析，進一步提高分詞方法的切分精度和切分效率。 該文在目前漢語詞法分析方法基礎(chǔ)上，提出了一種并行分詞方法，并特別指出了全切分普遍存在的并發(fā)檢索和持續(xù)檢索問題，進而，給出了并發(fā)檢索-綜合排歧分詞方法的算法模型。該

2、方法在輸入的同時進行切分，同時維護多個詞庫檢索對象，并在分詞的同時進行簡單的句法分析，最后通過多種排歧方法，實現(xiàn)輸入與切分、切分與歧義分析的并行運算，在輸入結(jié)束時即刻得到分詞結(jié)果。該文提出了該分詞方法的體系結(jié)構(gòu)模型，設(shè)計了并發(fā)檢索算法，并建立了模擬實驗系統(tǒng)。經(jīng)過在模擬實驗，證明該方法是一種可行而且高效的分詞方法，達到了預(yù)期的目的。 該方法具有一定的理論和應(yīng)用價值。它利用并行計算技術(shù)實現(xiàn)了詞檢索的并行以及檢索和歧義分析的并行，克服