基于Hadoop的云教學(xué)資源平臺設(shè)計與優(yōu)化.pdf

1、隨著高等院校信息化進(jìn)程不斷的發(fā)展進(jìn)步，使得其教學(xué)資源的特征出現(xiàn)了相應(yīng)的變化。首先在教學(xué)資源數(shù)量上呈爆炸式增長，其次在資源的數(shù)據(jù)結(jié)構(gòu)上也呈現(xiàn)出多樣性，既有結(jié)構(gòu)化數(shù)據(jù)，也有非結(jié)構(gòu)化數(shù)據(jù)。采用傳統(tǒng)的基于集中式服務(wù)器管理的教學(xué)資源平臺已經(jīng)不能滿足教學(xué)資源的大數(shù)據(jù)化所帶來的需求，這就給我們設(shè)計和開發(fā)教學(xué)資源平臺提出了新的挑戰(zhàn)。而云計算技術(shù)的發(fā)展對解決大數(shù)據(jù)問題有很大的幫助。因此，本論文針對當(dāng)前高校對教育資源的需求現(xiàn)狀，在以Hadoop體系框架為基

2、礎(chǔ)的云平臺上設(shè)計教學(xué)資源平臺解決實(shí)際問題，并對Hadoop平臺以及教學(xué)資源平臺進(jìn)行測試與優(yōu)化，對測試與優(yōu)化結(jié)果進(jìn)行了分析與評價。
　　本文首先闡明了研究基于云計算技術(shù)的教學(xué)資源平臺的理論和實(shí)際意義，提出研究背景和研究目的，同時分析了當(dāng)前國內(nèi)外對于云計算技術(shù)與教育教學(xué)領(lǐng)域相結(jié)合的研究現(xiàn)狀。其次對云計算與教學(xué)資源平臺的相關(guān)技術(shù)與理論做了介紹與說明。介紹了云計算技術(shù)的體系結(jié)構(gòu)，分析了云計算技術(shù)與大數(shù)據(jù)的關(guān)系；介紹了虛擬化技術(shù)，以及對Ha

3、doop生態(tài)系統(tǒng)進(jìn)行了闡述與分析。
　　其次，本文闡述了使用VMware軟件與Hadoop開源軟件在實(shí)驗(yàn)機(jī)上虛擬計算機(jī)集群并搭建完全分布式云平臺的過程，之后對搭建完成的云平臺進(jìn)行了簡單的運(yùn)行測試。
　　在云平臺之上，本文分析了當(dāng)前高校對教學(xué)資源平臺的需求，設(shè)計了基于Hadoop框架的教學(xué)資源平臺。首先對教學(xué)資源平臺進(jìn)行功能模塊設(shè)計，提出總體框架；其次根據(jù)對當(dāng)前教學(xué)資源的數(shù)據(jù)特征與結(jié)構(gòu)的分析，使用不同的數(shù)據(jù)庫管理系統(tǒng)分別處理結(jié)

4、構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)。闡述了使用MySQL設(shè)計結(jié)構(gòu)化數(shù)據(jù)庫以及使用HBase設(shè)計非結(jié)構(gòu)化數(shù)據(jù)庫的過程；還介紹了該教學(xué)資源平臺的web界面的設(shè)計過程。
　　本文分析了教學(xué)資源數(shù)據(jù)的特點(diǎn)，包括教學(xué)資源數(shù)據(jù)的大小、格式、類型等.針對教學(xué)資源數(shù)據(jù)的特點(diǎn)，結(jié)合 Hadoop云平臺的 HDFS存儲以及名 MapReduce運(yùn)行進(jìn)行了有針對性的優(yōu)化設(shè)計并對平臺進(jìn)行基準(zhǔn)測試以及對比分析，得出了教學(xué)資源數(shù)據(jù)存儲在云平臺上的優(yōu)化的相關(guān)結(jié)論。