Hadoop平台搭建与应用（第2版）（微课版）

本书基于企业级大数据处理应用项目，采用“任务驱动式”的编写方式，指导读者基于Hadoop生态系统进行大数据平台的搭建与应用。全书共包括8个项目，分别是认识大数据、Hive环境搭建与基本操作、ZooKeeper环境搭建与应用、HBase环境搭建与基本操作、Hadoop生态组件的安装与使用、Hadoop HA集群搭建、Ambari搭建与集群管理，以及Hadoop平台应用综合案例。 本书实用性和可操作性较强，讲解精练，通俗易懂，可作为高等院校大数据技术及其他相关专业的教材，也可作为从事大数据分析等工作的技术人员的参考书。

米洪，江苏省教学名师；江苏省技术能手；江苏省高校“青蓝工程”优秀中青年骨干教师；学院大数据技术专业负责人，交通大数据科研团队负责人；主持省级教科研项目6项，参与10余项；发表北大核心论文8篇；江苏省高等职业院校教师专业带头人访问学者（东南大学）。?

项目1　认识大数据　1 学习目标　1 项目描述　1 任务1.1　认知大数据，完成系统环境搭建　1 任务描述　1 任务目标　2 知识准备　2 任务实施　16 任务1.2　Docker安装及常用命令　24 任务描述　24 任务目标　24 知识准备　24 任务实施　26 任务1.3　Hadoop环境搭建　33 任务描述　33 任务目标　33 知识准备　33 任务实施　34 项目小结　48 课后练习　48 项目2　Hive环境搭建与基本操作　49 学习目标　49 项目描述　49 任务2.1　Hive的安装与配置　49 任务描述　49 任务目标　49 知识准备　50 任务实施　53 任务2.2　Hive的应用　58 任务描述　58 任务目标　59 知识准备　59 任务实施　66 项目小结　74 课后练习　75 项目3　ZooKeeper环境搭建与应用　76 学习目标　76 项目描述　76 任务3.1　ZooKeeper的安装与配置　76 任务描述　76 任务目标　76 知识准备　77 任务实施　82 任务3.2　ZooKeeper CLI操作　94 任务描述　94 任务目标　94 知识准备　94 任务实施　96 项目小结　100 课后练习　101 项目4　HBase环境搭建与基本操作　102 学习目标　102 项目描述　102 任务4.1　HBase的安装与配置　102 任务描述　102 任务目标　102 知识准备　103 任务实施　109 任务4.2　HBase Shell操作　119 任务描述　119 任务目标　119 知识准备　119 任务实施　120 项目小结　126 课后练习　127 项目5　Hadoop生态组件的安装与使用　128 学习目标　128 项目描述　128 任务5.1　Sqoop的安装与使用　128 任务描述　128 任务目标　128 知识准备　129 任务实施　132 任务5.2　Pig的安装与使用　136 任务描述　136 任务目标　136 知识准备　136 任务实施　141 任务5.3　Flume的安装与使用　149 任务描述　149 任务目标　149 知识准备　149 任务实施　150 任务5.4　Kafka的安装与使用　152 任务描述　152 任务目标　152 知识准备　152 任务实施　155 任务5.5　Flink的安装与使用　157 任务描述　157 任务目标　157 知识准备　157 任务实施　160 项目小结　162 课后练习　162 项目6　Hadoop HA集群搭建　164 学习目标　164 项目描述　164 任务6.1　Hadoop HA集群环境搭建　164 任务描述　164 任务目标　164 知识准备　165 任务实施　166 任务6.2　Hadoop HA集群的启动与自动故障转移测试　178 任务描述　178 任务目标　178 知识准备　179 任务实施　179 项目小结　182 课后练习　182 项目7　Ambari搭建与集群管理　183 学习目标　183 项目描述　183 任务7.1　搭建Ambari平台　183 任务描述　183 任务目标　183 知识准备　184 任务实施　186 任务7.2　使用Ambari管理Hadoop集群　207 任务描述　207 任务目标　207 知识准备　207 任务实施　207 项目小结　213 课后练习　213 项目8　Hadoop平台应用综合案例　214 学习目标　214 项目描述　214 任务8.1　本地数据集上传到Hive中　214 任务描述　214 任务目标　214 任务实施　215 任务8.2　使用Hive进行简单的数据分析　218 任务描述　218 任务目标　218 任务实施　218 任务8.3　Hive、MySQL、HBase数据的互导　220 任务描述　220 任务目标　220 任务实施　220 任务8.4　流数据处理的简单应用　225 任务描述　225 任务目标　225 任务实施　226 项目小结　231 课后练习　232