目录

  • 课程导学
    • ● 教学大纲
    • ● 课程标准
    • ● 教学日历
  • 项目一 Linux环境搭建与准备
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 VMware Workstation 安装部署
    • ● 任务二 创建虚拟机
    • ● 任务三 安装rochy linux8系统
    • ● 任务四 linux统一设置
    • ● 项目跟练
    • ● 讨论答疑
  • 项目二 Hadoop安装与配置
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 Hadoop伪分布安装与配置
    • ● 任务二 Hadoop完全分布式环境搭建准备
    • ● 任务三 搭建完全分布式Hadoop集群
    • ● 项目跟练
    • ● 讨论答疑
  • 项目三 Hive的安装部署
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一  Hive概述
    • ● 任务二 Hive原理及架构
    • ● 任务三 Hive的安装部署
    • ● 任务四 hive on Spark(选做)
    • ● 任务五 hiveserver2服务部署
    • ● 任务六 使用Datagrip图形化客户端进行远程访问
    • ● 项目跟练
    • ● 讨论答疑
  • 项目四 DDL数据定义
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 Hive对数据库的操作
    • ● 任务二 Hive对数据表的操作
    • ● 项目跟练
    • ● 讨论答疑
  • 项目五 DML数据操作
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 数据导入
    • ● 任务二 数据导出
    • ● 任务三 数据备份与恢复
    • ● 项目跟练
    • ● 讨论答疑
  • 项目六 查询操作
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 基础语法
    • ● 任务二 基本查询
    • ● 任务三 Hive表连接相关操作
    • ● 项目跟练
    • ● 讨论答疑
  • 项目七 分区表和分桶表
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 分区
    • ● 任务二 分桶
    • ● 项目跟练
    • ● 讨论答疑
  • 项目八 函数的使用
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 函数简介
    • ● 任务二 内置函数
    • ● 项目跟练
    • ● 讨论答疑
  • 项目九 hive sql综合训练
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 环境准备
    • ● 任务二 简单查询
    • ● 任务三 汇总分析
    • ● 任务四 复杂查询
    • ● 任务五 多表查询
    • ● 项目跟练
    • ● 讨论答疑
  • 项目十 教育大数据分析平台
    • ● 课程思政
    • ● 项目导学
    • ● 思维导图
    • ● 任务一 项目概述
    • ● 任务二 sqoop安装配置
    • ● 任务三 实现数据仓库分层
    • ● 任务四 数据采集
    • ● 任务五 数据分析
    • ● 任务六 数据可视化
    • ● 项目跟练
    • ● 讨论答疑
任务二 Hadoop完全分布式环境搭建准备
  • 1 任务实施
  • 2 任务过关
  • 3 任务拓展

  一、步骤视频

 步骤一 Linux虚拟机克隆

 Hadoop集群最小3个节点,另外两个节点,我们可以使用虚拟机的克隆功能快速安装,具体请看视频:

  步骤二 网络及工具配置

  克隆的节点与被克隆的节点在配置上是一致的,我们需要将对网络以及工具进行一下修改,具体请看视频:

  步骤三 时钟同步

  Hadoop集群对时钟有一定要求,我们进行时钟同步操作,具体请看视频:

  步骤四 集群SSH免密登录

  Hadoop集群一般都会在一个主节点上去启动其他节点的进程,这个时候一定要配置免密,否则每访问一个节点都要输入密码,将非常繁琐,集群间免密登录具体请看视频:

  步骤五 集群脚本开发 

  大数据的安装通常情况各个节点都是一致的,运行的命令通常各个节点也是类似的,如果一个一个节点安装配置,输入命令无疑是非常繁琐的,我们配置集群脚本将极大提升使用效率,具体请看视频:

  步骤六 搭建zookeeper集群

  Hadoop完全分布式集群要实现高可用是要依赖zookeeper集训来实现,如何搭建zookeeper集群呢,具体请看视频:

  二、指导文档