大數(shù)據(jù)時代的機遇與挑戰(zhàn)論文3000字

1、大數(shù)據(jù)時代的機遇與挑戰(zhàn)什么是大數(shù)據(jù)時代？“大數(shù)據(jù)”在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域以及軍事、金融、通訊等行業(yè)存在已有時日，卻因為近年來互聯(lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關(guān)注。最早提出“大數(shù)據(jù)”時代到來的是全球知名咨詢公司麥肯錫，麥肯錫稱：“數(shù)據(jù)，已經(jīng)滲透到當(dāng)今每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用，預(yù)示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來?！贝髷?shù)據(jù)時代是怎樣產(chǎn)生的？物聯(lián)網(wǎng)、云計算、社交網(wǎng)絡(luò)、社會媒

2、體以及信息獲取技術(shù)的飛速發(fā)展，數(shù)據(jù)正以前所未有的速度迅速增長和積累，數(shù)據(jù)是人類社會最重要的財富大數(shù)據(jù)時代的到來大數(shù)據(jù)時代的特點1.數(shù)據(jù)量大（Volume）第一個特征是數(shù)據(jù)量大。大數(shù)據(jù)的起始計量單位至少是P（1000個T）、E（100萬個T）或Z（10億個T）。2.類型繁多（Variety）第二個特征是數(shù)據(jù)類型繁多。包括網(wǎng)絡(luò)日志、音頻、視頻、圖片、地理位置信息等等，多類型的數(shù)據(jù)對數(shù)據(jù)的處理能力提出了更高的要求。3.價值密度低（Value）

3、第三個特征是數(shù)據(jù)價值密度相對較低。如隨著物聯(lián)網(wǎng)的廣泛應(yīng)用，信息感知無處不在，信息海量，但價值密度較低，如何通過強大的機器算法更迅速地完成數(shù)據(jù)的價值“提純”，是大數(shù)據(jù)時代亟待解決的難題。4.速度快、時效高（Velocity）第四個特征是處理速度快，時效性要求高。這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘最顯著的特征。既有的技術(shù)架構(gòu)和路線，已經(jīng)無法高效處理如此海量的數(shù)據(jù)，而對于相關(guān)組織來說，如果投入巨大采集的信息無法通過及時處理反饋有效信息，那將是得不償

4、失的?？梢哉f，大數(shù)據(jù)時代對人類的數(shù)據(jù)駕馭能力提出了新的挑戰(zhàn)，也為人們獲得更為深刻、全面的洞察能力提供了前所未有的空間與潛力。大數(shù)據(jù)時代的機遇大數(shù)據(jù)技術(shù)通過對海量數(shù)據(jù)的快速收集與挖掘、及時研判與共享，成為支持社會治理科學(xué)決策和準確預(yù)判的有力手段，為社會轉(zhuǎn)型期的社會治理創(chuàng)新帶來了機遇。建立大數(shù)據(jù)中心，及時搜集、實時處理數(shù)據(jù)信息，為科學(xué)決策提供堅實基礎(chǔ)。對社會大數(shù)據(jù)進行歷時性和實時性分析，加強社會風(fēng)險控制，提高政府預(yù)測預(yù)警能力和應(yīng)急響應(yīng)能力。

5、應(yīng)用。大數(shù)據(jù)時代的挑戰(zhàn)大數(shù)據(jù)面臨的挑戰(zhàn)是多方面的：（1）數(shù)據(jù)的快速增長對存儲空間、存儲技術(shù)、數(shù)據(jù)壓縮技術(shù)、能源消耗的挑戰(zhàn)：大數(shù)據(jù)需要占用大量的存儲空間，盡管存儲性價比在提高，壓縮技術(shù)也在不斷發(fā)展，但保存數(shù)據(jù)所消耗能也在大量增長。解決辦法是研制出新一代高密度、低能耗存儲設(shè)備。（2）數(shù)據(jù)本身安全及個人隱私泄露面臨的挑戰(zhàn)：在海量數(shù)據(jù)洪流中，在線對話與在線交易活動日益增加，其安全威脅更為嚴峻。大數(shù)據(jù)環(huán)境下通過對用戶數(shù)據(jù)的深度分析，很容易了解用戶

6、行為和喜好，嚴重的將導(dǎo)致企業(yè)的商業(yè)機密及個人隱私泄露。（3）網(wǎng)絡(luò)帶寬能力與對數(shù)據(jù)處理能力面臨的挑戰(zhàn)：網(wǎng)絡(luò)帶寬是瓶勁，尤其表現(xiàn)在各網(wǎng)絡(luò)接入商之間的互聯(lián)互通出口上；大數(shù)據(jù)時代網(wǎng)絡(luò)必須有足夠的帶寬支持，才能保證數(shù)據(jù)實時性。數(shù)據(jù)計算能力是應(yīng)對數(shù)據(jù)洪流時的又一挑戰(zhàn)，采用分布式計算可以解決其中的一些問題，但部署相對較復(fù)雜。（4）有效數(shù)據(jù)擷取面臨的挑戰(zhàn)：從海量數(shù)據(jù)中提取隱含在其中的、潛在有用信息和知識的過程十分復(fù)雜的，需要反復(fù)“去偽存真”。通常要經(jīng)過

7、業(yè)務(wù)理解、數(shù)據(jù)理解、數(shù)據(jù)準備、建立挖掘模型、評估和部署等多個步驟。即在開始數(shù)據(jù)分析之前，我們必須了解業(yè)務(wù)需求，根據(jù)需求明確業(yè)務(wù)目標和要求；接下來便是對現(xiàn)有數(shù)據(jù)進行評估，并對原始數(shù)據(jù)進行組織、清理、集成、變換等一系列數(shù)據(jù)收集和預(yù)處理工作；在搞好數(shù)據(jù)清理的基礎(chǔ)上，應(yīng)用相關(guān)算法和工具建立分析模型；之后對所建立的模型進行評估，重點具體考慮得出的結(jié)果是否符合最初的業(yè)務(wù)目標；最后，便可將發(fā)現(xiàn)的結(jié)果以及過程利用各種可視化技術(shù)（報表、報告、圖形等）呈現(xiàn)

8、出來。大數(shù)據(jù)給人文社會科學(xué)帶來哪些挑戰(zhàn)？大數(shù)據(jù)時代的來臨數(shù)據(jù)逐漸成為重要的生產(chǎn)要素。而傳統(tǒng)人文社科普遍數(shù)據(jù)采集能力不足只有通過技術(shù)創(chuàng)新和方法上的創(chuàng)新文科與理科、工科相結(jié)合才能帶來質(zhì)的突破。大數(shù)據(jù)時代為突發(fā)公共事件的輿情帶來什么機遇和挑戰(zhàn)？數(shù)據(jù)的最終作用是為領(lǐng)導(dǎo)者決策或執(zhí)行部門的行動提供參考如何有效整合大數(shù)據(jù)首先要做到快速分析、及時反應(yīng)和動態(tài)應(yīng)用其次是在技術(shù)上實現(xiàn)對海量數(shù)據(jù)和信息的存儲、深度挖掘和實時監(jiān)測實現(xiàn)精準地采集和預(yù)警。目前人民網(wǎng)已