Hadoop离线分析实战课标教案.pdf
181页课程代码:Curriculum Standards(2023 年修订)XXX 编印课程名称:Hadoop离线分析实战课程代码:适用专业:大数据技术等专业学制学历及教育类别:三年制高职教育课程学分:4 学分计划用教学时间:64 学时修订人(或编制人签名):审核人(系主任签名):审定人(教学副院长签名):修订版本:第 4版修订时间:(一)课程概述.(二)课程培养目标.(三)与前后课程的联系.(四)教学内容与学时分配.(五)教学项目(学习情境)设计.(六)考核标准与方式.(七)学习资源的选用.(八)教师要求.(九)学习场地、设施要求.Hadoop离线分析实战课程标准11.Hadoop离线分析实战是大数据技术专业的专业必修课2.(1)课程设计理念课程按照理论实践一体、课内外互补、课堂教学与企业实践相结合的课程设计指导思想,以任务或项目为载体组织教学内容,突出学生的主体地位,实现“教、学、做”的有机融合,知行合一;通过角色扮演、团队协同、个体体验、展示交流等手段,实现从模仿到应用到创新的高职学生螺旋上升式成长培养创新创业精神凝结着敢为人先、与时俱进的创新精神,艰苦奋斗、自强不息的创业精神建设中国特色社会主义,需要培养数以千万计的专门人才和数以亿计的高素质劳动者,需要一大批科学家、思想家、发明家的创新志趣和创新智慧,需要一大批在第一线的新型产业工人和知识型农民创造社会财富的积极性和能动性。
本课程强调对学生社会主义核心价值观的培育、涵养、引领,强调对学生创新创业意识的培养,深入挖掘学生自身的创造力,增强自主创新、原始创新、集成创新能力通过在实践环节润物细无声地融入敢为人先、与时俱进,艰苦奋斗、自强不息的创新创业精神,从中华优秀传统文化(大国工匠),优秀共产党员时代楷模的先进实例中汲取营养,结合具体项目开展时的学生反馈,遵循学生学习的自然规律,有机融入思政育人,采用角色扮演、体验式等多元的学习方式,有意识、有步骤地将职业能力的训练和职业素养的形成融入到实际的课程学习过程2)课程设计思路1坚持育人为本、德育为先,充分挖掘与系统设计课程思政元素,培养“德智体美劳”全面发展的社会主义建设者和接班人以学生为中心,关注学生的全面发展、和谐发展、持续发展、终身发展和健康成长中Hadoop离线分析实战课程标准22根据专业(群)人才培养目标与规格,按照理论实践一体、线上线下结合、岗课赛证相融通的设计理念,将行业的新技术、新工艺、新知识、新标准、新规范及职业资格认证、技能大赛相关知识与内容及时融入课程,培养学生掌握新一代信息技术相关产业链与岗位群所需要的大数据领域系统的理论基础知识3根据专业(群)人才培养目标与规格,将精益求精的工匠精神、追求卓越的劳动精神与专业大数据分析领域技术技能提升相结合,以任务或项目为载体组织序化实习实训内容,坚持学做合一,要求学生掌握行业岗位通用的成熟技术与方法,在实践环节通过角色扮演、团队协同、个体体验、展示交流等手段,培养学生具备大数据分析领域扎实的技术能力。
4培养学生产业数字化与数字产业化需要的技术技能创新能力,适应产业技术快速迭代升级与就业结构不断向高端技术层次转化,培养学生持续学习与终身学习能力,增强学生就业适应性强化学生在具备过硬的思想政治素质、系统的专业理论知识和扎实的专业技能基础上,能够进行技术技能的创新,强调对学生创新创业意识的培养,深入挖掘学生自身的创造力,增强自主创新、原始创新、集成创新能力3.(1)项目一 认识数据管理:任务 1)认识数据管理技术任务 2)初始 Hadoop(2)项目二 Hadoop 平台的搭建与安装:任务 1)Hadoop 平台搭建基础任务2)Hadoop 集群规划任务3)运行平台搭建任务 4)安装配置支持软件任务 5)安装配置 Hadoop任务 6)验证 HadoopHadoop离线分析实战课程标准3(3)项目三 数据清洗技术任务 1)HDFS 分布式文件系统的体系架构和文件操作任务2)MapReduce 分布式计算系统的基本运行框架任务3)YARN 分布式资源管理平台的资源调度(4)项目四 数据仓库-Hive 的搭建与应用任务 1)Hive 搭建的工作准备任务2)Hive 组件的新增工作任务3)用 Hive 来存储数据并执行查询分析(5)项目五 Flume 的应用任务 1)Flume 组件的安装任务2)Flume 的运行机制任务 3)Flume 应用案例(6)项目六 Sqoop-海量数据传输工具使用任务 1)Sqoop 组件的安装任务2)Sqoop 的数据导入与导出(7)项目七 Azkaban调度器任务 1)Azkaban的安装部署任务2)导入数据库任务3)验证Azkaban任务 4)构建工作流本课程是大数据技术专业的专业必修课。
课程通过学习使学生获得基于大数据可视化的理念、技术与应用,着重培养学生掌握大数据可视化相关概念、基础知识和可视化工具的基本应用,作为大数据技术与应用专业的后期课程,为毕业后从事大数据相关工作打下基础通过学习本课程,要求学生能达到如下教学目标:Hadoop离线分析实战课程标准31.(1)理解大数据相关的基本理论知识(2)掌握大数据的系统架构及关键技术(3)掌握 HDFS 的重要概念、体系结构、存储原理和读写过程,并熟练掌握分布式文件系统 HDFS 的使用方法(4)能够了解数据库 Hive 实现原理和运行机制并熟练掌握 Hive 的使用方法(5)了解 Flume 的背景、掌握 Flume 组件的功能与安装方法,熟知 Flume 的应用案例(6)掌握 Sqoop 开源工具与 RDBMS 之间的的关系与联系,掌握 Sqoop 组件的安装方法2.(1)具有常见大数据分析基础工具的搭建与配置能;(2)具有使用常见大数据工具数据导入与导出的能力;(3)具有使用常见大数据分析工具开展大数据分析的能力3.(1)树立正确的世界观、人生观、价值观;(2)树立正确的劳动观、择业观、就业观,提升就业创业能力;(3)具有自主学习的能力、分析问题、解决问题和创新能力;(4)具有创新意识、创新精神、创新方法;(5)具有团队合作能力、组织沟通能力;(6)在项目实践中能自觉遵守职业道德和规范,具有法律意识。
1本课程是的前导课程是Linux 操作系统、数据库基础2本课程是专业核心平台课程,为“大数据可视化”、“大数据仓库”、“数据预处理”、“NoSQL 基础与运维”等专业模块课程的前导课程,本课程的学习为后续专业课程的学习打下坚实的基础Hadoop离线分析实战课程标准5以部署认识数据管理、Hadoop平台的搭建与安装、数据清洗技术、数据仓库、Flume、Sqoop和Azkaban调度器等七个项目为载体,将职业行动领域的工作过程融合在情境项目训练中课程单元结构与学时分配见表4-1表 4-1 课程单元结构与课时分配表1认识数据管理1.数据管理技术的介绍2.认识hadoop1.掌握数据管理技术的发展历程2.了解 Hadoop 的相关版本3.了解 hadoop 技术生态组件1.能说出数据管理技术的发展历程;2.能说出hadoop 的相关版本;3.能列出 hadoop 技术生态组件1 培养耐心细致的工作态度和质量意识2 培养服务社会,责任担当意识和精益求精的工匠精神3 培养团结协作的合作精神4 积极沟通的工作习惯12思政面:博采众长、精益求精思政线:技术创新思政点:根据数据管理的发展历程,启发学生对于创新思维的理解,学会变被动接受为主动思考,创新性的解决问题,有技术的创新,才能推动行业和社会的进步。
通过熟知的大数据应用场景,提出思考问题,案例中需要使用到哪些技术才能实现-明确数据管理的重要性引导学生通过教材、网络及学习资料逐一掌握数据管理技术的发展历程,并提出问题对学生的自学情况进行检查和点评,针对自学数据管理技术知识过程中学生遇到的较难的知识点进行讲解引导学生说出数据管理技术的发展历程6Hadoop离线分析实战课程标准65.培养爱国主义精神2Hadoop4思政面:党的领导、道路自信思政线:改革开放思政点:通过谷歌公司没有开源“三驾马车”,与开源的 Hadoop形成对比,引入改革开放是决定当代中国命运的关键抉择,是发展中国特色社会主义,实现中华民族伟大复兴的必经之路的思政点每次提及 Hadoop 都得先说谷歌公司的“三驾马车”,同学们知道 Hadoop 与谷歌公司之间的渊源吗引导学生通过教材、网络及学习资料逐一掌握 Hadoop 的三大组件及其功能,并提出问题对学生的自学情况进行检查和点评,针对自学数据管理技术知识过程中学生遇到的较难的知识点进行讲解引导学生说出 hadoop 相关版本、hadoop技术生态组件2Hadoop 平台的搭建与安装1.搭建hadoop2.6.0基础开发环境。
2.hadoop 集 群1.掌握 Hadoop 平台的搭建2.了解 Hadoop 集群的规划3.掌握支持软件的安装1Hadoop2思政面:严谨诚信、遵纪守法思政线:严谨细致14Hadoop离线分析实战课程标准7规划3.运 行 平 台 搭建4.安装配置支持软件5.安 装 配 置hadoop6.验证 hadoop4.掌握配置 Hadoop 的方法1.能利用虚拟机搭建 Hadoop 开发环境;2.能进行 hadoop 集群规划;3.能安装配置相关支持软件4.能配置 hadoop1 培养耐心细致的工作态度和质量意识2 培养服务社会,责任担当意识和精益求精的工匠精神3 培养团结协作的合作精神4 积极沟通的工作习惯5.培养社会主义接班人思政点:根据 hadoop 平台搭建步骤简介文档,引入在工作中应形成了良好的文档编写能力、严谨细致的职业素养明确项目目的、要求、注意事项;引导学生通过教材、网络及学习资料逐一掌握 Hadoop 平台搭建需要做的准备工作,并提出问题对学生的自学情况进行检查和点评,针对自学 Hadoop 平台搭建需要做的准备工作过程中学生遇到的较难的知识点进行讲解Hadoop 平台搭建需要做的准备工作的要素2Hadoop2思政面:落实责任、团结协作思政线:团结协作思政点:以小组为单位在运行平台搭建过程中,体验团队力量,养成一丝不苟、严谨细致的工作态度。
明确项目目的、要求、注意事项;引导学生通过教材、网络及学习资料逐一掌握 Hadoop 集群规划要点及思路,并提出问题对学生的自学情况进行检查和点评,针对自学 Hadoop 集群规划工作过程中学生遇到的较难的知识Hadoop离线分析实战课程标准8点进行讲解Hadoop 集群规划要点及思路34思政面:落实责任、团结协作思政线:团结协作思政点:以小组为单位在运行平台搭建过程中,体验团队力量,养成一丝不苟、严谨细致的工作态度明确项目目的、要求、注意事项;引导学生通过教材、网络及学习资料逐一掌握运行平台搭建要点及思路,并提出问题对学生的自学情况进行检查和点评,针对实践操作运行平台搭建工作过程中学生遇到的较难的知识点进行讲解运行平台搭建的步骤及要点42思政面:落实责任、团结协作思政线:团结协作Hadoop离线分析实战课程标准9思政点:以小组为单位在运行平台搭建过程中,体验团队力量,养成一丝不苟、严谨细致的工作态度明确项目目的、要求、注意事项;引导学生通过教材、网络及学习资料逐一掌握安装配置支持软件要点及思路,并提出问题对学生的自学情况进行检查和点评,针对实践操作安装配置支持软件工作过程中学生遇到的较难的知识点进行讲解。
安装配置支持软件的步骤及要点5Hadoop2思政面:落实责任、团结协作思政线:团结协作思政点:以小组为单位在运行平台搭建过程中,体验团队力量,养成一丝不苟、严谨细致的工作态度明确项目目的、要求、注意事项;引导学生通过教材、网络及学习资料逐一掌握安装配置 Hadoop 要点及思路,并提出问题对学生的自学情况进行检查和点评,针对实践操作安装配置 Hadoop 工作过程中学生遇到的较难的知识点进行讲解Hadoop离线分析实战课程标准10安装配置 。





