Hadoop大数据技术应用实践(普通高等教育十三五规划教材)/大数据技术应用实践系列

本书以大数据技术中的 经典实现方法Hadoop应用 实践为核心、以提高学生 的大数据基础理论水平和 解决实践问题的能力为出 发点、以培养大数据时代 具有创新精神和实践能力 的人才为目的。 本书系统阐述了Hadoop 大数据技术应用实践的原 理、方法和应用相关知识 ，同时给出了每一章内容 对应的实现指令或源程序 。全书共九章内容。内容 由浅入深，分为基础篇及 提高篇两部分，其中第1章 到第4章为基础篇，内容涵 盖Hadoop初识简介、 Hadoop基础环境搭建、分 布式存储HDFS介绍以及 MapReduce编程模型等知 识，提高篇包括Hadoop数 据仓库Hive、Hadoop数据 库Hbase、Pig语言、 Hadoop项目案例以及 Mahout项目案例等较深入 的知识。本书理论结合实 际，每一个章节都包含有 相关内容的实践部分，以 便读者在了解相关知识后 ，能及时进行项目的实践 ，有助于提高读者动手实 践的能力。每章提供适量 习题，进一步加深对内容 的理解。 本书内容全面，详略得 当，在简单阐述原理的基 础上，重点阐述Hadoop应 用实践的详细实现过程， 可读性强。本书可以作为 高等院校大数据技术相关 专业和计算机技术、信息 管理、人工智能、电子信 息工程、通信工程、自动 控制等专业本科生及高职 院校相关课程的教材，也 可供从事大数据相关研究 的技术人员参考。

第1章 Hadoop初识简介 1.1 Hadoop介绍 1.1.1 Hadoop简述 1.1.2 Hadoop的特点 1.1.3 Hadoop的发展 1.2 Hadoop体系架构 1.2.1 HDFS结构 1.2.2 MapReduce结构 1.2.3 HBase结构 1.2.4 Hive结构 1.2.5 Mahout介绍 1.3 Hadoop软件安装及配置 1.3.1 编译安装与基础介绍 1.3.2 Linux环境下安装 1.3.3 安装配置环境变量 1.3.4 设置免密码登陆 1.3.5 配置时间同步 本章习题 第2章 Hadoop开源项目及伪分布式实现 2.1 Zookeeper简介 2.1.1 Zookeeper介绍 2.1.2 Zookeeper用途及特点 2.1.3 Zookeeper安装使用 2.2 单节点伪分布式安装 2.2.1 Hadoop配置文件说明 2.2.2 格式化HDFS文件系统 2.2.3 进程管理 本章习题 第3章 分布式存储HDFS 3.1 HDFS分布式文件系统安装 3.1.1 HDFS介绍 3.1.2 HDFS的安装过程 3.1.3 HDFS常用的一些简单的Shell命令 3.2 HDFS的相关概念 3.2.1 块及数据分片 3.2.1 名称节点NameNode和数据节点DataNode 3.2.3 第二个名称节点SecondaryNameNode 3.3 HDFS的文件存储机制 3.3.1 文件存储机制概述 3.3.2 HDFS的命名空间 3.3.3 客户端 3.3.4 通信协议 3.4 HDFS的数据存储管理 3.4.1 数据冗余存储 3.4.2 数据存取策略 3.4.3 数据错误与恢复 3.5 HDFS的数据读写过程 3.5.1 读取数据过程 3.5.2 写入数据过程 3.6 分布式及RPC通信简介