《大數據處理與云計算》教學大綱

1、《大數據處理與云計算》教學大綱課程類別：專業(yè)教育課課程名稱：大數據處理與云計算開課單位：信息與通信工程學院課程編號：N03050703總學時：40學分：2.5適用專業(yè)：信息工程專業(yè)先修課程：無一、課程在教學計劃中的地位、作用大數據處理與云計算是信息工程專業(yè)高年級學生開設的一門專業(yè)教育課。本課程主要學習大數據處理和云計算的相關原理和技術，根據實際需求，構建相應的大數據處理和云計算平臺框架。通過本課程學習，使學生掌握大數據的采集、傳輸、處理

2、和應用的技術，了解Hadoop分布式系統(tǒng)基礎架構，掌握HDFS和MapReduce技術。了解HBase、Hive、Zookeeper、Avro、Pig等相關大數據技術，與實際工程應用相結合，構建相應的云計算平臺。教學應當結合實際實驗條件，培養(yǎng)學生實踐動手能力，了解大數據技術發(fā)展現狀，促進大數據相關教學改革。二、課程教學內容、要求及學時分配第一章大數據與云計算概況1、了解大數據概念2、了解大數據的產生、應用和作用3、了解云計算技術的概述4

3、、了解云計算的特點及技術分類5、了解大數據與云計算、物聯(lián)網之間的關系第二章大數據處理與云計算的關鍵技術1、理解大數據處理的基本流程2、掌握大數據的關鍵技術3、理解大數據的處理工具4、了解大數據面臨的挑戰(zhàn)5、理解云計算及關系型數據庫第三章Hadoop1、了解Hadoop概述2、了解Hadoop發(fā)展簡史3、掌握HBase高級應用4、理解HBase應用場景5、理解HBase常用接口和SQL引擎層實戰(zhàn)6、理解基于HadoopV1和V2使用HBa

4、se的異同第八章基于HadoopV2的HivePig開發(fā)技巧1、理解Hive和Pig架構和理論基礎2、理解Hive的作用和原理說明3、掌握Hadoop倉庫和傳統(tǒng)數據倉庫的協(xié)作關系4、理解HadoopHive倉庫數據數據流5、理解基于HadoopV1和V2使用Hive和Pig等工具的異同6、HQL基本語法第九章實時流框架StmonYARN（HadoopV2）實戰(zhàn)技巧1、理解實時流計算的概念2、理解Stm的概念、核心組件、特性3、理解Stm