《Hadoop大数据原理与应用》授课计划.docx

教师授课计划20* 20*学年第*学期课程名称：大数据技术原理及应用课程性质：专业必修课程编写教师：职称：总学时：48 其中理论学时：32实验学时：16其它学时：_0_考核方式：考试 教材名称：Hadoop大数据原理与应用 主编：徐鲁辉 出版社：西安电子科技大学出版社 适用专业、年级：数据科学与大数据技术专业*级要求：1.授课计划由教研室主任（团队负责人）召集相关主讲教师集体研究后编写；2 .每个授课单元（2学时）的内容占一格，表格不够可另加附页；3 .任课教师须严格按授课计划教学，进度提前或推迟超过4学时视为教学事故；4 .“讲课”、“实脸”、“其它”的填写，应在相应栏画“J”，如果有其它教学内容必须在备 注栏进一步说明；“课程性质”填写公共必修课程、公共选修课程、数学与自然科学类课程、工程基 础类课程、专业基础类课程、专业必修课程、专业方向课程、专业选修课程、专业实跟环节等。5 .授课计划经审核后使用，报院系教务科备案，授课教师人手一份。教研室主任签字：学院（中心）负责人签字:教学单位盖章序 号周周 课 次讲 课实验其 它教学内容备注（如课堂讨 论、习题等）章节（章节名称、教学内容提要、实验的名 称、课堂讨论的题目）111q11.1-1 .7开学第一课1 .自我介绍2 .课程地位、先修及后续课程3 .教学目标及知识图谱4 .课时分配（理论+实验）及进度、教材、 参考资料、上机软件5 .考核方式：平时+实验+期末6 .雨课堂、学堂云使用方法一、大数据概述1 .大数据内涵、特征、关键技术、产业2 .大数据与云计算、物联网、人工智能、5G的关系3 .大数据岗位介绍4 .大数据学习路线图头脑风暴， 问卷调查， 在线更习并 测试Java Python 知 识，导入必 备Linux基 础操作 章节测试1212q1/22.1-2 .4二、初识 HadoopI.Hadoop来源、发展史、特点、版本2 .Hadoop生态系统3 .Hadoop体系架构4.Hadoop应用现状章节测试2 预习实验1 指导书，自 行实践部署 Hadoop集群序 号周周 课 次讲课实验其它教学内容备注（如课堂讨 论、习题等）章节（章节名称、教学内容提要、实验的名 称、课堂讨论的题目）321q22.5实验1部署全分布模式Hadoop集群1 .安装和配置CentOS2 .安装和配置Java环境3 .启动和配置SSH免密登录4 .安装和配置Hadoop实验报告143133.1-3 .4三、分布式文件系统HDFS1 .HDFS简介2 .HDFS体系结构3 .HDFS文件存储机制：块的分布4 .HDFS数据读写532q33.5三、分布式文件系统HDFS5 .实战 HDFS Web UkHDFS Sheik HDFSJava API 编程6 .HDFS高可靠性机制章节测试3641q33.5实验2实战HDFS实验报告275144.1-4.3四、分布式计算框架MapReduce1 .MapReduce 简介2 .第一个 MapReduce 案例：WordCount3 . MapReduce作业执行流程852444.4-4 .6四、分布式计算框架MapReduce4.M叩Reduce数据类型与格式5.Shufflc 机制6.在MapReduce中自定义组件961y44.7实验 3 MapReduce 编程(1)实验报告31071q54.7-4 .9四、分布式计算框架M叩Reduce7 .实战 MapReduce： MapReduce Web UR MapReduce Sheik MapReduce Java API 编程8 .MapReduce 调优9 .其他主流计算框架章节测试4117255.1-5 .6五、分布式资源管理平台YARNI.YARN简介2 .YARN体系架构3 .YARN工作流程新旧MapReduce对比（补充）4 .实战YARN5 .YARN新特性6 .其他统一资源管理和调度框架章节测试523序 号周周 课 次讲课实验其它教学内容备注（如课堂讨 论、习题等）章节（章节名称、教学内容提要、实验的名 称、课堂讨论的题目）12817补充实验 4 MapReduce 编程(2)实验报告4139166.1-6 .5六、分布式协调框架ZooKcepcr1 .分布式协调技术2 .初识 Zoo Keeper3 .ZooKeeper系统模型4 .ZooKeeper工作原理5 .ZooKccpcr应用场景1492q66.6-6 .7六、协调系统ZooKeeper6 .部署Zookeeper集群7 .实战 ZooKeeper： ZooKeeper Shell, ZooKccpcr Java API 编程章节测试615101V66.6-6 .7实验5部署ZooKeeper集群和实战 ZooKeeper实验报告516111q77.1-7 .5七、分布式数据库HBase1 .NoSQL 简介2 .初识 HBase3 .HBasc数据模型4 .HBase体系架构5 .HBase运行机制1711277.6-7 .7七、分布式数据库HBase6 .部署HBase集群7 .实战 HBase： HBase Shell» HBase JavaAPI编程章节测试718121V77.6-7 .7实验6部署HBase集群和实战HBase实验报告619131788.1-8 .6八、数据仓库Hive1 .初识Hive2 .Hive体系架构3 .Hive数据类型4 .Hive文件格式5 .Hive数据模型6 .Hive函数20132788.7-8 .8八、数据仓库Hive7 .部署Hive8 .实战 Hive： HWI, Hive Shell, Hive JavaAPI编程章节测试8序 号周周 课 次讲课实验其它教学内容备注（如课堂讨 论、习题等）章节（章节名称、教学内容提要、实验的名 称、课堂讨论的题目）21141V88.7-8 .8实验7部署Hive和实战Hive实验报告722151T99.1-9 .4九、数据迁移和采集1.数据迁移工具Sqoop 2.日志采集工具Flume 3.分布式流平台Kafka4.ETL 工具 Kettle章节测试9231521010.1-10.4十、数据可视化1 .可视化概念2 .可视化作用与意义3 .可视化图表的类型4 .可视化工具章节测试1024161V99.49.5期末大复习实验8实战Sqoop实验报告8