目录

  • 1 序言
    • 1.1 大数据平台运维职业等级标准
  • 2 平台操作系统的使用
    • 2.1 Linux操作系统概述
    • 2.2 Linux常用命令
    • 2.3 实训:Linux操作系统的使用
  • 3 Hadoop平台安装
    • 3.1 Hadoop概述
      • 3.1.1 Hadoop起源和生态圈
      • 3.1.2 版本应用场景和运行模式
    • 3.2 Hadoop核心组件
      • 3.2.1 HDFS
      • 3.2.2 YARN
      • 3.2.3 MapReduce
    • 3.3 Linux环境配置
      • 3.3.1 配置Linux基础环境
      • 3.3.2 配置JAVA环境
    • 3.4 安装Hadoop
      • 3.4.1 安装单机Hadoop
    • 3.5 实训:Hadoop平台安装
  • 4 平台基础环境配置
    • 4.1 集群网络连接
    • 4.2 SSH无密码登录
    • 4.3 集群网络配置
    • 4.4 SSH无密码验证配置
    • 4.5 实训:平台的基础环境配置
  • 5 平台参数配置
    • 5.1 Hadoop配置文件说明
    • 5.2 在Master节点上安装Hadoop
    • 5.3 配置hdfs-site.xml文件参数
    • 5.4 配置core-site.xml文件参数
    • 5.5 配置mapred-site.xml
    • 5.6 配置yarn-site.xml文件参数
    • 5.7 Hadoop其它相关配置
    • 5.8 实训:平台参数配置
  • 6 Hadoop集群运行
    • 6.1 Hadoop的运行状态
    • 6.2 Namenode格式化
    • 6.3 查看Java进程
    • 6.4 查看HDFS的报告
    • 6.5 运行测试
    • 6.6 停止hadoop
    • 6.7 实训: Hadoop集群运行
  • 7 hive组件安装配置
    • 7.1 hive相关知识
    • 7.2 hive组件架构
    • 7.3 实训:Hive组件安装配置
  • 8 Hbase组件安装配置
    • 8.1 Hbase相关知识
    • 8.2 Hbase功能应用
    • 8.3 Hbase组件设置
    • 8.4 实训:Hbase组件安装配置
  • 9 ZooKeeper组件安装配置
    • 9.1 ZooKeeper相关知识
    • 9.2 ZooKeeper选项设置
    • 9.3 ZooKeeper角色选举
    • 9.4 实训:ZooKeeper组件安装配置
  • 10 Sqoop组件安装配置
    • 10.1 Sqoop相关知识
    • 10.2 Sqoop导入和导出
    • 10.3 实训:Sqoop组件安装配置
  • 11 Flume组件安装配置
    • 11.1 flume相关知识和功能应用
    • 11.2 实训:Flume组件安装配置
  • 12 大数据平台实施方案
    • 12.1 系统实施方案概述
    • 12.2 确认客户需求
    • 12.3 编写方案
    • 12.4 实施方案执行、测试、验收
  • 13 制定客户培训方案
    • 13.1 培训方案概述
    • 13.2 培训方案要点
    • 13.3 文档制作工具
    • 13.4 平台操作演示要点
  • 14 大数据运维基本问题
    • 14.1 大数据平台问题分析处理流程
    • 14.2 基础环境问题
    • 14.3 hive组件问题
    • 14.4 平台启动问题
    • 14.5 平台运行问题
实训:Hive组件安装配置