职称:高级工程师
单位:江西服装学院
部门:大数据学院
主讲教师:吴琴琴、陈东林、米鹏
教师团队:共4位
第1期
| 学校: | 江西服装学院 |
| 开课院系: | 大数据学院 |
| 专业大类: | 计算机类 |
| 开课专业: | 数据科学与大数据技术 |
| 课程负责人: | 吴琴琴 |
| 课程编号: | 1670320016 |
| 学分: | 2 |
| 课时: | 32 |
《Hadoop大数据技术》是数据科学与大数据技术专业一门重要的专业教育必修课程。课程主要讲解初识Hadoop、构建Hadoop集群、HDFS分布式文件系统、MapReduce分布式计算系统、Zookeeper分布式协调服务、Hive数据仓库、HBase数据库、Flume日志采集系统、Kafka实战、Hadoop综合项目等内容。通过该课程使学生学会大数据平台的搭建和部署,重点掌握大数据分析的主要思想和基本流程,并通过编程练习和典型综合应用实例加深了解;同时对Hadoop平台应用与开发的一般理论有所掌握,如分布式数据收集、分布式数据存储、分布式数据计算、分布式数据展示。此外,通过本课程有助于学生以工程思维、系统思维来理解大数据系统的架构,并将其应用到具体的工程建设当中,能够熟练的应用大数据技术解决企业中的实际生产问题,切实提高同学们的项目实施素质和能力。课程教学采用讲授法、演示法、案例分析、翻转课堂等授课方式与多媒体教学手段相融合,激发学生学习兴趣和潜能;以贴近学生的项目案例为切入点融入课程思政元素,培养学生的工匠精神及增强学生的社会责任感。
| 课程章节 | | 文件类型 | | 修改时间 | | 大小 | | 备注 | |
| 1.1 大数据 |
文档
.pdf
|
2023-10-11 | 555.07KB | ||
|
视频
.mp4
|
2025-09-12 | 421.17MB | |||
| 1.2 Hadoop概述 |
文档
.pdf
|
2023-09-10 | 542.36KB | ||
|
视频
.mp4
|
2025-03-27 | 9.23MB | |||
| 1.3 大数据环境准备 |
文档
.pdf
|
2024-04-17 | 559.06KB | ||
|
视频
.mp4
|
2025-09-12 | 167.58MB | |||
| 1.4 关闭及禁用防火墙、关闭SELinux |
视频
.mp4
|
2025-09-12 | 73.13MB | ||
|
视频
.mp4
|
2025-09-12 | 109.59MB | |||
|
视频
.mp4
|
2025-09-12 | 86.31MB | |||
| 1.5 远程终端工具安装 |
文档
.pdf
|
2024-04-17 | 667.89KB | ||
|
视频
.mp4
|
2025-09-12 | 63.45MB | |||
| 1.6 虚拟机克隆 |
文档
.pdf
|
2024-04-17 | 49.96KB | ||
| 1.7 安装JDK |
文档
.pdf
|
2024-04-17 | 139.10KB | ||
|
视频
.mp4
|
2025-09-12 | 177.30MB | |||
|
视频
.mp4
|
2025-09-12 | 160.02MB | |||
| 2.1 Hadoop集群安装 |
文档
.docx
|
2024-04-17 | 2.43MB | ||
| 2.2 完全分布式集群概述、环境检查、Hadoop安装、配置、验证 |
视频
.mp4
|
2025-09-12 | 155.74MB | ||
| 2.3 集群时间同步 |
视频
.mp4
|
2025-09-12 | 463.95MB | ||
| 3.1 HDFS分布式存储 |
文档
.docx
|
2023-12-22 | 1.01MB | ||
| 3.2 HDFS概述 |
视频
.mp4
|
2025-09-12 | 175.22MB | ||
| 3.3 HDFS读写流程、HDFS的shell操作 |
视频
.mp4
|
2025-09-12 | 147.64MB | ||
| 3.4 Maven安装及环境配置 |
视频
.mp4
|
2025-09-12 | 191.81MB | ||
| 3.5 Idea创建maven项目、配置Idea的maven环境 |
视频
.mp4
|
2025-09-12 | 72.57MB | ||
| 3.6 递归遍历HDFS |
视频
.mp4
|
2025-09-12 | 75.18MB | ||
| 3.7 HDFS上传、下载文件 |
视频
.mp4
|
2025-09-12 | 89.94MB | ||
| 4.1 MapReduce实战 |
文档
.docx
|
2023-12-22 | 1.36MB | ||
| 4.2 MapReduce、Yarn理论知识 |
视频
.mp4
|
2025-09-12 | 248.75MB | ||
| 5.1 ZooKeeper |
文档
.docx
|
2023-12-23 | 624.41KB | ||
| 5.2 Zookeeper理论介绍 |
视频
.mp4
|
2025-09-12 | 260.05MB | ||
| 5.3 Zookeeper集群安装配置及验证 |
视频
.mp4
|
2025-09-12 | 274.95MB | ||
| 6.1 什么是数据仓库 |
视频
.mp4
|
2025-03-27 | 10.46MB | ||
|
视频
.mp4
|
2025-03-27 | 5.93MB | |||
| 6.2 Hive数据仓库实战 |
文档
.docx
|
2023-12-24 | 1.56MB | ||
|
视频
.mp4
|
2025-03-27 | 9.86MB | |||
| 6.3 数仓分层概述 |
视频
.mp4
|
2025-09-12 | 76.82MB | ||
| 6.4 Hive安装及概述 |
视频
.mp4
|
2025-09-12 | 213.12MB | ||
| 6.5 Hive启动方式 |
视频
.mp4
|
2025-09-12 | 94.71MB | ||
| 6.6 Hive的数据类型、DDL、DML操作 |
视频
.mp4
|
2025-09-12 | 303.17MB | ||
| 6.7 Hive复杂数据类型、数据存储格式、查看表、修改表、删除、清空表 |
视频
.mp4
|
2025-09-12 | 277.08MB | ||
| 6.8 Hive分区表 |
视频
.mp4
|
2025-09-12 | 238.52MB | ||
| 6.9 Hive分桶表、视图、关联 |
视频
.mp4
|
2025-09-12 | 290.28MB | ||
| 6.10 Hive内置函数(一) |
视频
.mp4
|
2025-09-12 | 180.67MB | ||
| 6.11 Hive内置函数(二) |
视频
.mp4
|
2025-09-12 | 97.66MB | ||
| 6.12 Hive窗口函数 |
视频
.mp4
|
2025-09-12 | 251.28MB | ||
| 6.13 Hive自定义函数 |
视频
.mp4
|
2025-09-12 | 88.58MB | ||
| 7.1 Flume数据采集实战 |
文档
.docx
|
2023-12-24 | 1.47MB | ||
| 7.2 FLume概述、安装及配置、nc-logger案例 |
视频
.mp4
|
2025-09-12 | 187.92MB | ||
| 7.3 Flume事务、agent内部原理、复制结构案例 |
视频
.mp4
|
2025-09-12 | 197.80MB | ||
| 7.4 exec-logger、exec-hdfs案例 |
视频
.mp4
|
2025-09-12 | 121.24MB | ||
| 7.5 spooldir-hdfs、taildir-hdfs案例 |
视频
.mp4
|
2025-09-12 | 169.12MB | ||
| 8.1 HBase讲义 |
文档
.docx
|
2025-09-12 | 2.50MB | ||
| 8.2 Hbase安装、配置、启动 |
视频
.mp4
|
2025-09-12 | 161.41MB | ||
| 8.3 HBase的DDL操作 |
视频
.mp4
|
2025-09-12 | 141.40MB | ||
| 8.4 HBase的DML操作 |
视频
.mp4
|
2025-09-12 | 204.61MB | ||
| 8.5 Hive整合Hbase、Hbase的JavaAPI操作 |
视频
.mp4
|
2025-09-12 | 356.33MB | ||
| 9.1 Kafka实战 |
文档
.docx
|
2023-12-24 | 1.55MB | ||
|
视频
.mp4
|
2025-03-27 | 4.83MB | |||
| 9.2 Kafka概述、安装配置;topic创建、查看;生产数据及消费数据演示 |
视频
.mp4
|
2025-09-12 | 228.09MB | ||
| 9.3 Kafka整合Flume |
视频
.mp4
|
2025-09-12 | 140.67MB | ||
| 10.1 影评大数据分析项目实战 |
文档
.docx
|
2023-12-24 | 164.58KB | ||
| 11.1 旅游酒店评价大数据分析项目实战 |
文档
.docx
|
2023-12-24 | 1.62MB | ||
| 11.2 Sqoop |
视频
.wmv
|
2025-09-12 | 120.59MB | ||
| 11.3 旅游酒店评价大数据分析项目实战-视频上 |
视频
.wmv
|
2025-09-12 | 319.61MB | ||
| 11.4 旅游酒店评价大数据分析项目实战-视频下 |
视频
.wmv
|
2025-09-12 | 152.21MB | ||
| 11.5 启动Spring Boot |
视频
.wmv
|
2025-09-12 | 48.75MB | ||
| 12.1 名人名言项目演示视频 |
视频
.mp4
|
2025-09-12 | 420.24MB | ||
| 13.1 微博数据分析项目演示 |
视频
.mp4
|
2025-09-12 | 436.75MB | ||
| 14.1 Azkaban |
文档
.pptx
|
2023-12-24 | 3.46MB | ||
| 14.2 Azkaban安装配置、测试案例 |
视频
.mp4
|
2025-09-12 | 138.95MB | ||
| 14.3 利用Azkaban实现数仓项目一的自动调度执行 |
视频
.mp4
|
2025-09-12 | 109.58MB | ||
| 14.4 数仓项目一实现过程演示 |
视频
.mp4
|
2025-09-12 | 364.57MB |