Hadoop大数据技术与项目实战

省级 | 电子与信息大类 (51)/计算机类 (5102)

课程介绍学校选课申请

       本课程是高等职业院校大数据技术专业的一门专业核心课，课程内容基于大数据运维工程师、大数据分析工程师等职业岗位能力要求，对接大数据平台运维等“1+x”证书、大数据应用开发技能大赛等能力要求。课程以企业真实项目“电商平台用户行为数据分析”的实施流程为主线贯穿所有知识点，通过该项目实战，使学习者掌握Hadoop大数据核心技术，包括Hadoop大数据平台部署、数据采集、离线数据仓库的设计与开发，最后对分析结果进行可视化展示。

       本课程学习内容主要包括：Vmware、Xshell、IDEA等软件的安装配置；Hadoop分布式集群环境搭建； Flume、Kafka、Hive、Sqoop、Zookeeper等组件的基本工作原理、搭建及配置方法；使用Flume-Kafka-Flume架构实现数据采集；Sqoop数据迁移；Hive离线数据仓库的设计与开发；pyecharts数据可视化。

       本课程的前序课程有Linux操作系统，MySQL数据库等，后续课程有数据采集与ETL、Spark大数据技术与应用等。
本课程的第二章也适用于云计算技术应用专业的学生学习。