社交網(wǎng)絡數(shù)據(jù)獲取與結(jié)構(gòu)分析系統(tǒng)的設計與實現(xiàn).pdf

1、Web2.0時代的到來，使得互聯(lián)網(wǎng)技術朝著更加人性化的方式發(fā)展，Twitter、Facebook、微博、朋友網(wǎng)、人人網(wǎng)等社交軟件也隨之興起并飛速發(fā)展，目前，人們的日常交流活動基本都是在這些社交軟件所提供的平臺上進行。人與人之間以這些社交軟件為媒介進行有目的的信息交流，從而產(chǎn)生關系網(wǎng)絡，這種以人，和人與人之間關系而構(gòu)成的社會網(wǎng)絡結(jié)構(gòu)，稱之為社交網(wǎng)絡。社交網(wǎng)絡的兩個結(jié)構(gòu)要素是節(jié)點和邊，節(jié)點一般指人，邊是人與人之間的關系。順應科技發(fā)展的需要而

2、產(chǎn)生的科研合作網(wǎng)絡，是科研合作的產(chǎn)物，是科研學者之間的社交網(wǎng)絡，而科研合著網(wǎng)絡又是科研合作網(wǎng)絡中由科研學者之間通過合著論文而產(chǎn)生關系從而構(gòu)成的合著者之間的社交網(wǎng)絡。本文研究的對象為社交網(wǎng)絡中有代表性的兩種網(wǎng)絡:微博用戶關系網(wǎng)絡和科研合著網(wǎng)絡，前者是有向網(wǎng)絡，后者是無向網(wǎng)絡。
　　社交網(wǎng)絡的概念來源于社會學，自提出以來就引起了國內(nèi)外學者的廣泛關注，到目前為止，社交網(wǎng)絡的研究熱潮仍未退去。網(wǎng)絡數(shù)據(jù)的獲取是社交網(wǎng)絡研究所要解決的首要問題

3、，但是，大多數(shù)已有的關于社交網(wǎng)絡的研究，其網(wǎng)絡數(shù)據(jù)來源是公用數(shù)據(jù)集，或者模擬的網(wǎng)絡數(shù)據(jù)集，這在一定程度上不能準確地反映社交網(wǎng)絡結(jié)構(gòu)的真實情況。所以，從互聯(lián)網(wǎng)上獲取真實的社交網(wǎng)絡結(jié)構(gòu)數(shù)據(jù)就顯示尤為重要，也使得社交網(wǎng)絡的研究成果更加具有實際意義。本文設計的社交網(wǎng)絡數(shù)據(jù)獲取與結(jié)構(gòu)分析系統(tǒng)實現(xiàn)了真實數(shù)據(jù)的獲取，分別從新浪微博系統(tǒng)和DBLP數(shù)據(jù)庫中獲取真實的新浪微博用戶關系數(shù)據(jù)與合著關系數(shù)據(jù)。
　　社會網(wǎng)絡分析方法和復雜網(wǎng)絡分析方法是被國內(nèi)

4、外學者廣泛認可的兩種社交網(wǎng)絡結(jié)構(gòu)分析方法。對于科研合著網(wǎng)絡來說，分析其網(wǎng)絡結(jié)構(gòu)，對促進科研合作的繼續(xù)發(fā)展，預測某一領域的發(fā)展方向等具有重要的作用。對于微博用戶關系網(wǎng)而言，分析其網(wǎng)絡結(jié)構(gòu)，對于市場運營、用戶推薦等都有著重要的借鑒意義。本文設計并實現(xiàn)的系統(tǒng)采用社會網(wǎng)絡分析方法中的角色分析方法研究科研合著網(wǎng)絡結(jié)構(gòu)，對意見領袖和結(jié)構(gòu)洞進行分析研究，采用復雜網(wǎng)絡分析方法研究新浪微博用戶關系網(wǎng)絡的拓撲結(jié)構(gòu)特性。
　　本文設計并實現(xiàn)了社交網(wǎng)絡數(shù)

5、據(jù)獲取與網(wǎng)絡結(jié)構(gòu)分析系統(tǒng)，主要工作如下:
　　1、介紹了本文在設計并實現(xiàn)系統(tǒng)時涉及到的相關概念和技術。
　　2、設計并實現(xiàn)新浪微博數(shù)據(jù)獲取與網(wǎng)絡結(jié)構(gòu)分析功能，使系統(tǒng)可以完成從新浪微博系統(tǒng)中獲取真實的用戶關系數(shù)據(jù)，對數(shù)據(jù)進行去噪處理，并生成關系網(wǎng)絡結(jié)構(gòu)圖，且采用復雜網(wǎng)絡分析方法對網(wǎng)絡拓撲結(jié)構(gòu)特性進行分析等一系列工作。
　　3、設計并實現(xiàn)科研合著網(wǎng)絡數(shù)據(jù)獲取與結(jié)構(gòu)分析功能，使系統(tǒng)可以完成從DBLP數(shù)據(jù)庫中獲取以“數(shù)據(jù)挖掘”