通過新浪微博數(shù)據(jù)挖掘預(yù)測上證綜指走向.pdf

1、社交網(wǎng)絡(luò)在最近幾年發(fā)展迅速，國內(nèi)的新浪微博覆蓋面廣，其內(nèi)容產(chǎn)生便捷，傳播迅速，提供了海量的直接或間接數(shù)據(jù)，故本文選取新浪微博作為數(shù)據(jù)來源，通過抽取新浪微博中的文本數(shù)據(jù)，結(jié)合上證綜指的漲跌信息，發(fā)掘二者之間的相關(guān)性，并嘗試建立預(yù)測模型，進(jìn)而為股市投資者提供一定的參考信息。
　　新浪微博文本數(shù)據(jù)的抓取，主要是通過自己編寫網(wǎng)絡(luò)爬蟲來實(shí)現(xiàn)的。其中，重點(diǎn)分析并解決了用戶登陸、高級搜索、單位時間內(nèi)IP訪問次數(shù)限制、文本析取、文本清洗、指標(biāo)提取

2、等問題。
　　將整理后的新浪微博文本信息以及上證綜指收盤價信息，結(jié)合人工神經(jīng)網(wǎng)絡(luò)算法，最終建立了新浪微博對上證綜指收盤價的預(yù)測模型。
　　本文主要創(chuàng)新點(diǎn)有:
　　1.國內(nèi)利用新浪微博數(shù)據(jù)預(yù)測上證綜指走勢的研究尚未發(fā)現(xiàn)，本文以此為出發(fā)點(diǎn)，利用新浪微博數(shù)據(jù)預(yù)測上證綜指走勢。
　　2.新浪微博文本內(nèi)容的抓取過程中，引入分布式系統(tǒng)的機(jī)制，解決了新浪微博在用戶層次和IP層次上設(shè)置的反網(wǎng)絡(luò)爬蟲限制。
　　3.本研究屬于