项目一　认识大数据及 Hadoop 集群搭建与运维  1

　 　 知识目标  1

　 　 技能目标  1

　 　 项目描述  1

　 　 　 任务1. 1　 认识大数据  2

　 　 　 任务1. 2　 安装与管理 CentOS 8 服务器操作系统  8

　 　 　 任务1. 3　 搭建 Hadoop 集群  28

　 　 　 任务1. 4　 Hadoop 集群运行与维护  46

　 　 思政视窗  64

　 　 知识小结  65

　 　 课后练习  65

项目二　 ZooKeeper 环境搭建与基本操作  67

　 　 知识目标  67

　 　 技能目标  67

　 　 项目描述  67

　 　 　 任务2. 1　 安装与配置 ZooKeeper  67

　 　 　 任务2. 2　 ZooKeeper CLI 操作  78

         任务2. 3　 Hadoop 高可用集群环境搭建  86

　 　 思政视窗  101

　 　 知识小结  101

　 　 课后练习  102

项目三　 Kafka 与 Flume 环境搭建与基本操作  103

　 　 知识目标  103

　 　 技能目标  103

　 　 项目描述  103

　 　 　 任务3. 1　 安装与配置 Kafka  104

　 　 　 任务3. 2　 安装与配置 Flume  109

　 　 　 任务3. 3　 Flume 与 Kafka 数据采集和监控 112

　 　 思政视窗  123

　 　 知识小结  124

　 　 课后练习  124

项目四　 Hive 环境搭建与基本操作  126

　 　 知识目标  126

　 　 技能目标  126

　 　 项目描述  126

　 　 　 任务4. 1　 安装与配置 Hive  126

　 　 　 任务4. 2　 Hive 数据库管理的基本操作  138

　 　 思政视窗  161

　 　 知识小结  161

　 　 课后练习  161

项目五　 HBase 环境搭建与基本操作  164

　 　 知识目标  164

　 　 技能目标  164

项目描述  164

　 　 　 任务5. 1　 安装与配置 HBase  165

　 　 　 任务5. 2　 HBase 数据库管理的基本操作  171

　 　 思政视窗  182

　 　 知识小结  183

　 　 课后练习  183

项目六　 Spark 环境搭建与基本操作  185

　 　 知识目标  185

　 　 技能目标  185

　 　 项目描述  185

　 　 　 任务6. 1　 安装与配置 Spark  185

　 　 　 任务6. 2　 Spark Shell 操作  191

　 　 思政视窗  198

　 　 知识小结  198

　 　 课后练习  199

项目七　 ClickHouse 环境搭建与基本操作  200

　 　 知识目标  200

　 　 技能目标  200

　 　 项目描述  200

　 　 　 任务7. 1　 安装与配置 ClickHouse  200

　 　 　 任务7. 2　 ClickHouse 操作  205

　 　 思政视窗  211

　 　 知识小结  211

　 　 课后练习  212

项目八　 Flink 环境搭建与基本操作  213

　 　 知识目标  213

技能目标  213

　 　 项目描述  213

　 　 　 任务　 安装与配置 Flink  213

　 　 思政视窗  218

　 　 知识小结  218

　 　 课后练习  218

项目九　 Sqoop 环境搭建与基本操作  220

　 　 知识目标  220

　 　 技能目标  220

　 　 项目描述  220

　 　 　 任务9. 1　 安装与配置 Sqoop  220

　 　 　 任务9. 2　 MySQL 数据迁徙到 HDFS 和 Hive  226

　 　 思政视窗  234

　 　 知识小结  234

　 　 课后练习  235