个人介绍
Hadoop大数据技术

主讲教师:何永亚

教师团队:共5

  • 何永亚
  • 苏秀芝
  • 张清涛
  • 左国才
  • 华建军
学校: 湖南软件职业技术大学
开课院系: 软件与信息工程学院
专业大类: 软件技术
开课专业: 大数据工程技术
课程负责人: 何永亚
课程编号: 03051513
学分: 4
课时: 64
课程介绍
       本课程共分15个项目,从前到后内容依次包含了项目一在虚拟机中安装centos7、项目二安装hadoop伪分布、项目三平台基础环境配置、项目四搭建Zookeeper分布式集群、项目伍搭建HDFS分布式集群、项目六 搭建YARN分布式集群、项目七Hadoop分布式计算框架(MapReduce)、项目八 Hive的安装部署、项目九Hive常用命令使用、项目十搭建HBase分布式集群、项目十一Sqoop安装部署、项目十二Flume的安装与使用、项目十三Kafka分布式集群搭建、项目十四Davinci安装部署、项目十五互联网金融项目离线分析。内容由浅入深,涵盖了大数据生态的各个主要知识点。 通过本门课程的学习,使学生能够手动搭建Hadoop环境,掌握Hadoop平MapReduce编程,掌Hadoop生态圈常用组件的作用、结构、配置和工作流程,并具备一定的动手和分析问题的能力,解决实际应用中的问题。
教师团队

何永亚

职称:讲师

单位:湖南软件职业技术大学

部门:软件与信息工程学院

苏秀芝

职称:副教授

单位:湖南软件职业技术大学

部门:软件与信息工程学院

张清涛

职称:工程师

单位:湖南软件职业技术大学

部门:软件与信息工程学院

职位:教师

左国才

职称:教授

单位:湖南软件职业技术大学

部门:软件与信息工程学院

职位:副院长

华建军

职称:高级工程师

单位:湖南软件职业技术大学

部门:软件与信息工程学院

职位:教师

课程章节
教学方法

理实一体化教学,使学生在搭建和使用Hadoop的过程中理解其中的技术原理。案例化教学,将技能和知识点拆分为单个的小案例,逐一进行理解和训练。综合应用强化,多类案例进行实操教学,提高学生使用Hadoop完成大数据项目的熟练程度。




教学条件

教师具备讲师以上职称,充分了解Hadoop生态圈中各技术产生背景、应用场景,能够搭建Hadoop、HBase、Hive、sqoop环境,并能熟练应用;根据授课状况合理调整授课进度。实验硬件环境:建议运行内存16G,空闲磁盘30G;操作系统:Windows7 64位操作系统及以上版本;使用软件:MySQL5.x(及以上版本)、Hadoop2.9.2、HBase2.x、Hive2.x、sqoop、kafka、davici。


教学效果

 通过本门课程的学习,使学生能够手动搭建Hadoop环境,掌握Hadoop平MapReduce编程,掌Hadoop生态圈常用组件的作用、结构、配置和工作流程,并具备一定的动手和分析问题的能力,解决实际应用中的问题。

参考教材

西安电子科技大学出版社 2023年8月出版 《基于新信息技术的Hadoop大数据技术》


教学资源
课程章节 | 文件类型   | 修改时间 | 大小 | 备注
1.1 教学设计
表格
.xlsx
2023-12-21 12.23KB
1.2 教学日历
表格
.xlsx
2023-07-16 11.24KB
2.1 课程思政
附件
.${file.extension}
2024-02-22 --
2.2 项目导学
文档
.pdf
2023-12-20 99.82KB
2.3 思维导图
附件
.${file.extension}
2023-05-01 --
2.4 任务一 linux概述
视频
.mp4
2023-07-19 165.58MB
 
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-09 91.67MB
 
文档
.pptx
2024-05-09 7.77MB
2.5 任务二 安装centos7
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 48.38MB
 
视频
.mp4
2024-03-09 105.35MB
 
视频
.mp4
2024-03-09 58.58MB
 
视频
.mp4
2024-03-09 87.47MB
 
文档
.doc
2024-03-09 2.30MB
2.6 项目拓展
文档
.pdf
2024-08-13 2.01MB
3.1 课程思政
附件
.${file.extension}
2024-02-22 --
3.2 项目导学
文档
.pdf
2023-05-03 94.72KB
3.3 思维导图
附件
.${file.extension}
2023-05-06 --
3.4 任务一 大数据概述
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 178.01MB
 
视频
.mp4
2024-02-24 27.85MB
 
视频
.mp4
2024-04-19 147.21MB
 
文档
.pptx
2024-04-19 11.13MB
 
视频
.mp4
2024-04-19 138.80MB
 
文档
.pptx
2024-04-19 7.81MB
3.5 任务二  网络配置
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 102.36MB
 
视频
.mp4
2024-02-24 10.62MB
 
视频
.mp4
2024-03-09 84.82MB
 
视频
.mp4
2024-03-09 69.61MB
 
视频
.mp4
2024-03-09 63.83MB
 
视频
.mp4
2024-03-09 61.08MB
 
视频
.mp4
2024-03-09 63.14MB
 
文档
.doc
2024-03-09 718.85KB
 
视频
.mp4
2024-09-05 91.39MB
3.6 任务三 linux SSh免密登录
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 23.54MB
 
视频
.mp4
2024-03-09 61.51MB
 
视频
.mp4
2024-03-09 80.55MB
 
文档
.doc
2024-03-09 86.00KB
3.7 任务四 jdk安装与配置
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 18.07MB
 
视频
.mp4
2024-03-09 99.57MB
 
文档
.doc
2024-03-09 24.00KB
3.8 任务五 Hadoop的安装与配置
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-22 310.69MB
 
文档
.doc
2024-02-22 269.77KB
3.9 项目拓展
文档
.docx
2023-05-16 631.22KB
4.1 课程思政
附件
.${file.extension}
2024-02-22 --
4.2 项目导学
文档
.pdf
2023-05-11 72.12KB
4.3 思维导图
附件
.${file.extension}
2023-05-11 --
4.4 任务一 Linux虚拟机克隆
作业
.work
2023-12-20 --
 
视频
.mp4
2024-03-09 59.96MB
 
文档
.doc
2024-03-09 141.50KB
4.5 任务二 三节点网络以及相关工具配置
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-22 60.28MB
 
视频
.mp4
2024-02-22 61.26MB
 
视频
.mp4
2024-02-22 56.05MB
 
视频
.mp4
2024-02-22 43.64MB
 
视频
.mp4
2024-02-22 56.60MB
 
文档
.doc
2024-02-22 174.00KB
4.6 任务三 Hadoop集群安装前准备
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 301.58MB
 
文档
.doc
2024-02-24 454.61KB
 
视频
.mp4
2024-02-24 76.28MB
4.7 项目拓展
文档
.pdf
2023-09-19 1.49MB
 
文档
.pdf
2024-10-10 1.49MB
 
附件
.conf
2024-10-10 78.00Byte
 
附件
.sh
2024-10-10 830.00Byte
 
附件
.sh
2024-10-10 606.00Byte
4.8 讨论答疑
附件
.${file.extension}
2024-10-10 --
 
附件
.${file.extension}
2024-10-10 --
5.1 课程思政
附件
.${file.extension}
2024-02-22 --
5.2 项目导学
文档
.pdf
2023-05-12 92.39KB
5.3 思维导图
附件
.${file.extension}
2023-05-12 --
5.4 任务一 Zookeeper概论
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 100.31MB
 
视频
.mp4
2024-06-07 107.57MB
 
文档
.pptx
2024-06-07 7.13MB
5.5 任务二 搭建zookeeper集群
作业
.work
2023-12-20 --
 
视频
.mp4
2024-03-09 72.59MB
 
视频
.mp4
2024-03-09 75.12MB
 
视频
.mp4
2024-03-09 75.05MB
 
视频
.mp4
2024-03-09 68.98MB
 
视频
.mp4
2024-03-09 62.97MB
 
视频
.mp4
2024-03-09 61.15MB
 
文档
.doc
2024-03-09 113.50KB
 
视频
.mp4
2024-04-19 16.79MB
5.6 任务三 Zookeeper shell的操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-06 65.37MB
 
文档
.docx
2024-02-06 12.42KB
 
视频
.mp4
2024-02-24 45.00MB
5.7 项目拓展
文档
.pdf
2023-05-16 366.49KB
 
文档
.pdf
2023-05-16 366.49KB
 
附件
.gz
2023-05-16 16.88MB
 
附件
.cfg
2023-05-16 1.27KB
6.1 课程思政
附件
.${file.extension}
2024-02-22 --
6.2 项目导学
文档
.pdf
2023-06-04 97.12KB
6.3 思维导图
附件
.${file.extension}
2023-05-16 --
6.4 任务一 HDFS架构设计与工作原理
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 90.51MB
 
视频
.mp4
2024-02-24 163.61MB
 
视频
.mp4
2024-04-19 147.95MB
 
文档
.pptx
2024-04-19 9.27MB
6.5 任务二 搭建HDFS集群
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-25 43.18MB
 
视频
.mp4
2024-03-09 183.11MB
 
视频
.mp4
2024-03-09 143.79MB
 
视频
.mp4
2024-03-09 99.59MB
 
文档
.doc
2024-03-09 146.00KB
6.6 任务三 HDFS shell操作
作业
.work
2023-12-20 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
附件
.${file.extension}
2024-02-24 --
 
视频
.mp4
2024-04-19 134.96MB
 
文档
.docx
2024-04-19 13.66KB
6.7 项目拓展
文档
.pdf
2023-05-16 285.36KB
 
文档
.pdf
2023-05-16 285.36KB
 
附件
.gz
2023-05-16 349.47MB
 
附件
.rar
2023-05-16 9.62KB
7.1 课程思政
附件
.${file.extension}
2024-02-22 --
7.2 项目导学
文档
.doc
2023-07-12 27.14KB
7.3 思维导图
附件
.${file.extension}
2023-07-02 --
7.4 任务一 YARN架构设计与工作原理
视频
.mp4
2023-07-23 76.64MB
 
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 133.01MB
 
文档
.pptx
2024-05-04 7.42MB
7.5 任务二 搭建YARN分布式集群
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-25 199.88MB
 
视频
.mp4
2024-05-04 107.28MB
 
视频
.mp4
2024-05-04 62.95MB
 
视频
.mp4
2024-05-04 90.61MB
 
文档
.doc
2024-05-04 263.00KB
7.6 任务三 Hadoop集群运维管理
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-25 297.98MB
 
视频
.mp4
2024-05-04 110.96MB
 
视频
.mp4
2024-05-04 108.19MB
 
文档
.doc
2024-05-04 236.50KB
7.7 项目拓展
文档
.doc
2023-05-28 251.50KB
 
文档
.doc
2023-05-28 251.50KB
 
附件
.xml
2023-05-28 3.07KB
 
附件
.xml
2023-05-28 876.00Byte
8.1 课程思政
附件
.${file.extension}
2024-02-22 --
8.2 项目导学
文档
.doc
2023-06-04 27.23KB
8.3 思维导图
附件
.${file.extension}
2023-07-02 --
8.4 任务一 初识MapReduce
视频
.mp4
2023-07-23 21.33MB
 
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 90.01MB
 
文档
.pptx
2024-05-04 8.58MB
8.5 任务二 MapReduce编程
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-24 98.19MB
 
视频
.mp4
2024-05-04 231.45MB
 
文档
.doc
2024-05-04 287.00KB
 
视频
.mp4
2024-10-10 13.77MB
8.6 项目拓展
文档
.doc
2023-07-08 284.50KB
 
文档
.doc
2023-07-08 284.50KB
 
附件
.dll
2023-07-08 83.50KB
 
附件
.exe
2023-07-08 110.00KB
 
附件
.gz
2023-07-08 349.47MB
9.1 课程思政
附件
.${file.extension}
2024-02-22 --
9.2 项目导学
文档
.doc
2023-07-02 27.50KB
9.3 思维导图
附件
.${file.extension}
2023-07-02 --
9.4 任务一 Hive概述
作业
.work
2023-12-20 --
 
视频
.mp4
2024-02-25 50.20MB
 
视频
.mp4
2024-02-25 61.31MB
 
视频
.mp4
2024-05-04 140.06MB
 
文档
.pptx
2024-05-04 7.77MB
9.5 任务二 Hive的安装部署
作业
.work
2023-12-21 --
 
视频
.mp4
2024-02-24 164.89MB
 
视频
.mp4
2024-05-04 186.38MB
 
视频
.mp4
2024-05-04 196.14MB
 
文档
.doc
2024-05-04 50.50KB
9.6 项目拓展
文档
.doc
2023-05-28 47.00KB
 
文档
.doc
2023-05-28 47.00KB
 
附件
.gz
2023-05-28 221.95MB
 
附件
.xml
2023-05-28 251.87KB
 
附件
.jar
2023-05-28 960.85KB
10.1 课程思政
附件
.${file.extension}
2024-02-22 --
10.2 项目导学
文档
.doc
2023-07-13 27.50KB
10.3 思维导图
附件
.${file.extension}
2023-07-02 --
10.4 任务一 Hive对数据库的操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 82.47MB
 
文档
.doc
2024-05-04 70.50KB
10.5 任务二 Hive对数据表的操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 104.27MB
 
文档
.doc
2024-05-04 159.50KB
10.6 任务三 Hive数据相关操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 201.78MB
 
文档
.doc
2024-05-04 181.50KB
10.7 任务四 Hive查询相关操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 146.02MB
 
文档
.doc
2024-05-04 190.50KB
10.8 任务五 Hive表连接相关操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 116.22MB
 
文档
.doc
2024-05-04 84.00KB
10.9 任务六 Hive内部表和外部表相关操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 90.45MB
 
文档
.doc
2024-05-04 62.00KB
10.10 任务七 Hive分区与分桶相关操作
作业
.work
2023-12-20 --
 
视频
.mp4
2024-05-04 108.29MB
 
文档
.doc
2024-05-04 95.00KB
10.11 项目拓展
文档
.doc
2023-06-10 762.59KB
 
文档
.doc
2023-06-10 762.59KB
11.1 课程思政
附件
.${file.extension}
2024-02-22 --
11.2 项目导学
文档
.doc
2023-07-18 27.48KB
11.3 思维导图
附件
.${file.extension}
2023-07-02 --
11.4 任务一 HBase概述
作业
.work
2023-07-10 --
 
视频
.mp4
2024-02-25 11.98MB
 
视频
.mp4
2024-05-04 115.75MB
 
文档
.pptx
2024-05-04 7.16MB
11.5 任务二 HBase集群安装配置
作业
.work
2023-07-10 --
 
视频
.mp4
2024-02-25 12.82MB
 
视频
.mp4
2024-05-04 254.75MB
 
视频
.mp4
2024-05-04 98.41MB
 
文档
.doc
2024-05-04 149.00KB
11.6 任务三  HBase shell操作
作业
.work
2023-12-17 --
 
视频
.mp4
2024-05-04 124.79MB
 
文档
.docx
2024-05-04 12.92KB
11.7 项目拓展
文档
.doc
2023-06-10 149.50KB
 
文档
.doc
2023-06-10 149.50KB
 
附件
.gz
2023-06-10 103.05MB
 
附件
.rar
2023-06-10 3.73KB
12.1 课程思政
附件
.${file.extension}
2024-02-22 --
12.2 项目导学
文档
.doc
2023-07-13 27.43KB
12.3 思维导图
附件
.${file.extension}
2023-07-03 --
12.4 任务一 Sqoop数据迁移工具
作业
.work
2023-12-17 --
 
视频
.mp4
2024-02-25 62.52MB
 
视频
.mp4
2024-05-03 78.12MB
 
文档
.pptx
2024-05-03 6.92MB
12.5 任务二 Sqoop安装配置
作业
.work
2023-07-10 --
 
视频
.mp4
2024-05-03 119.87MB
 
文档
.doc
2024-05-03 24.00KB
12.6 任务三 Sqoop迁移Hive仓库数据
作业
.work
2023-07-10 --
 
视频
.mp4
2024-05-03 160.65MB
 
文档
.doc
2024-05-03 25.00KB
12.7 项目拓展
文档
.doc
2023-07-04 36.50KB
 
文档
.doc
2023-07-04 36.50KB
 
附件
.gz
2023-07-04 16.09MB
 
附件
.jar
2023-07-04 960.85KB
13.1 课程思政
附件
.${file.extension}
2024-02-22 --
13.2 项目导学
文档
.doc
2023-07-05 27.25KB
13.3 思维导图
附件
.${file.extension}
2023-07-04 --
13.4 任务一 Flume日志采集系统概述
作业
.work
2023-07-11 --
 
视频
.mp4
2024-02-25 159.79MB
 
视频
.mp4
2024-05-03 79.97MB
 
文档
.pptx
2024-05-03 6.86MB
13.5 任务二  Flume安装配置
作业
.work
2023-07-11 --
 
附件
.${file.extension}
2024-02-22 --
 
视频
.mp4
2024-05-03 152.92MB
 
文档
.doc
2024-05-03 25.00KB
13.6 任务三 测试实例:监控端口数据
视频
.mp4
2024-05-03 88.66MB
 
文档
.doc
2024-05-03 298.00KB
13.7 项目拓展
文档
.doc
2023-06-10 308.50KB
 
文档
.doc
2023-06-10 308.50KB
 
附件
.gz
2023-06-10 64.79MB
 
附件
.properties
2023-06-10 1.62KB
14.1 课程思政
附件
.${file.extension}
2024-02-22 --
14.2 项目导学
文档
.doc
2023-07-16 27.36KB
14.3 思维导图
附件
.${file.extension}
2023-07-04 --
14.4 任务一 Kafka概述
作业
.work
2023-07-11 --
 
视频
.mp4
2024-02-25 401.99MB
 
视频
.mp4
2024-05-04 92.66MB
 
文档
.pptx
2024-05-04 6.93MB
14.5 任务二 Kafka分布式集群搭建
作业
.work
2023-07-11 --
 
视频
.mp4
2024-05-03 57.40MB
 
视频
.mp4
2024-05-03 100.00MB
 
视频
.mp4
2024-05-03 61.88MB
 
视频
.mp4
2024-05-03 60.63MB
 
视频
.mp4
2024-05-03 57.27MB
 
视频
.mp4
2024-05-03 69.19MB
 
文档
.doc
2024-05-03 37.50KB
14.6 项目拓展
文档
.doc
2023-07-01 35.00KB
 
文档
.doc
2023-07-01 35.00KB
 
附件
.tgz
2023-07-01 68.26MB
 
附件
.properties
2023-07-01 1.20KB
 
附件
.properties
2023-07-01 6.71KB
 
附件
.properties
2023-07-01 1.90KB
 
附件
.properties
2023-07-01 1.22KB
15.1 课程思政
附件
.${file.extension}
2024-02-22 --
15.2 项目导学
文档
.pdf
2023-07-18 125.85KB
15.3 思维导图
附件
.${file.extension}
2023-07-05 --
15.4 任务一 Davinci架构设计
作业
.work
2023-07-11 --
 
视频
.mp4
2024-02-25 101.19MB
 
视频
.mp4
2024-05-03 84.63MB
 
文档
.pptx
2024-05-03 7.20MB
15.5 任务二 Davichi安装部署
作业
.work
2023-07-11 --
 
视频
.mp4
2024-05-03 48.31MB
 
视频
.mp4
2024-05-03 91.64MB
 
视频
.mp4
2024-05-03 385.32MB
 
视频
.mp4
2024-05-03 95.75MB
 
文档
.doc
2024-05-03 139.50KB
15.6 项目拓展
文档
.doc
2023-06-10 130.50KB
 
文档
.doc
2023-06-10 130.50KB
 
附件
.zip
2023-06-10 108.46MB
 
附件
.bz2
2023-06-10 22.33MB
 
附件
.sql
2023-06-10 26.46KB
 
附件
.yml
2023-06-10 3.42KB
16.1 课程思政
附件
.${file.extension}
2024-02-22 --
16.2 项目导学
文档
.doc
2023-07-12 27.36KB
16.3 思维导图
附件
.${file.extension}
2023-07-05 --
16.4 任务一 需求分析
视频
.mp4
2024-05-03 48.37MB
16.5 任务二 数据流程设计
视频
.mp4
2024-05-03 44.46MB
16.6 任务三 开发步骤
视频
.mp4
2024-05-03 127.08MB
 
视频
.mp4
2024-05-03 251.20MB
 
视频
.mp4
2024-05-03 247.42MB
 
视频
.mp4
2024-05-03 99.49MB
 
视频
.mp4
2024-05-03 228.71MB
 
视频
.mp4
2024-05-03 255.42MB
 
文档
.doc
2024-05-03 200.50KB
16.7 项目拓展
文档
.doc
2023-06-10 200.50KB
 
文档
.doc
2023-06-10 200.50KB
 
附件
.rar
2023-06-10 151.82MB
提示框
取消 进入课程
提示框
确定要报名此课程吗?
确定取消

京ICP备10040544号-2

京公网安备 11010802021885号