基于Google Web API的中文訓練庫自動獲取方法研究與實現.pdf

1、目前，隨著網絡技術的翻天覆地的發(fā)展變化，互聯網上的信息資源日益豐富，已經成為人們在日常生活、學習和工作中快速獲取信息的重要途徑。因此，如何有效地處理網上信息，成為信息處理領域一個很重要的研究課題，有效的方法是對網頁進行自動分類處理，然而，大部分的研究者都是在自己建立的訓練庫上做測試得出結論。分類算法的分類性能和訓練庫之間相關，高質量的訓練庫會使分類器得到比較好的分類性能。 在本文中，主要研究訓練庫自動獲取的方法。雖然對訓練庫的研

2、究很少，但是有幾個方面的原因說明它是值得研究。 首先，如果訓練庫的建立過程能夠自動實現，特別是訓練樣本能夠自動獲取，將提高訓練庫建立的速度，將減輕人們的工作量，加快分類的速度。 其次，對于普通用戶也能迅速建立起自己所需要的訓練庫，將減少人們在整個分類過程中手工參與的程度。 最后，將建立的訓練庫和分類效果比較好的分類算法結合在一起，能提高分類的準確率，同時也能對訓練庫進一步的改進和提高。 對于訓練庫的自動獲

3、取，本文主要做了以下幾個方面的工作： (1)針對傳統(tǒng)的手工獲取訓練網頁，本文提出了基于Google Web API的方法來收集網頁作為訓練樣本，快速獲取網頁，減少人們的工作量。 (2)改造了傳統(tǒng)的訓練庫結構，傳統(tǒng)訓練庫中的類是并列的，改進為具有類層次結構的，并且盡量把訓練庫中所有的類都具有層次結構，即對于每個父類，都有一個或者幾個子類，利用父類及其子類的類名作為查詢關鍵詞，利用Google Web API來收集網絡資源，