Hadoop权威指南(大数据的存储与分析第4版修订版&升级版)

汤姆·怀特著的《Hadoop权威指南(大数据的存 储与分析第4版修订版&升级版)》结合理论和实践， 由浅入深，全方位介绍了Hadoop这一高性能的海量数 据处理和分析平台。全书5部分24章，第Ⅰ部分介绍 Hadoop基础知识，主题涉及Hadoop、MapReduce、 Hadoop分布式文件系统、YARN、Hadoop的I/O操作。 第Ⅱ部分介绍MapReduce,主题包括MapReduce应用开 发；MapReduce的工作机制、MapReduce的类型与格 式、MapReduce的特性。第Ⅲ部分介绍Hadoop的运维 ，主题涉及构建Hadoop集群、管理Hadoop。第Ⅳ部分 介绍Hadoop相关开源项目，主题涉及Avro、Parquet 、Flume、Sqoop、Pig、Hive、Crunch、Spark、 HBase、ZooKeeper。第Ⅴ部分提供了三个案例，分别 来自医疗卫生信息技术服务商塞纳(Cerner)、微软的 人工智能项目ADAM(一种大规模分布式深度学习框架) 和开源项目Cascading(一个新的针对MapReduce的数 据处理API)。 本书是一本权威、全面的Hadoop参考书和工具书 ，阐述了Hadoop生态圈的最新发展和应用，程序员可 以从中探索海量数据集的存储和分析，管理员可以从 中了解Hadoop集群的安装和运维。

Tom White是最杰出的Hadoop专家之一。自2007年2月以来，Tom White一直是Apache Hadoop的提交者(committer)，也是Apache软件基金会的成员。Tom是Cloudera的软件工程师，他是Cloudera的首批员工，对Apache和Cloudera做出了举足轻重的贡献。在此之前，他是一名独立的Hadoop顾问，帮助公司搭建、使用和扩展Hadoop。他是很多行业大会的专题演讲人，比如ApacheCon、OSCON和Strata。Tom在英国剑桥大学获得数学学士学位，在利兹大学获得科学哲学硕士学位。他目前与家人居住在威尔士。 译者简介 王海博士，解放军理工大学通信工程学院教授，博导，教研中心主任，长期从事无线自组网网络的设计与研发工作，主持国家自然科学基金、国家863计划课题等多项国家级课题，近5年获军队科技进步二等奖1项，三等奖6项，作为第一发明人申请国家发明专利十余项，发表学术论文50余篇。 华东博士，现任南京医科大学计算机教研室教师，一直致力于计算机辅助教学的相关技术研究，陆续开发了人体解剖学网络自主学习考试平台、诊断学自主学习平台和面向执业医师考试的预约化考试平台等系统，并在各个学科得到广泛的使用，获得全国高等学校计算机课件评比一等奖和三等奖各一项。主编、副主编教材两部，获发明专利一项、软件著作权多项。 刘喻博士，长期从事软件开发、软件测试和软件工程化管理工作，目前任教于清华大学软件所。 吕粤海，长期从事军事通信网络技术研究与软件开发工作，先后通过华为光网络高级工程师认证、思科网络工程师认证。

第Ⅰ部分 Hadoop基础知识 第1章 初识Hadoop 1.1 数据！数据！ 1.2 数据的存储与分析 1.3 查询所有数据 1.4 不仅仅是批处理 1.5 相较于其他系统的优势 1.5.1 关系型数据库管理系统 1.5.2 网格计算 1.5.3 志愿计算 1.6 Apache Hadoop发展简史 1.7 本书包含的内容 第2章 关于MapReduce 2.1 气象数据集 2.2 使用Unix工具来分析数据 2.3 使用Hadoop来分析数据 2.3.1 map和reduce 2.3.2 Java MapReduce 2.4 横向扩展 2.4.1 数据流 2.4.2 combiner函数 2.4.3 运行分布式的MapReduce作业 2.5 Hadoop Streaming 2.5.1 Ruby版本 2.5.2 Python版本 第3章 Hadoop分布式文件系统 3.1 HDFS的设计 3.2 HDFS的概念 3.2.1 数据块 3.2.2 namenode和datanode 3.2.3 块缓存 3.2.4 联邦HDFS 3.2.5 HDFS的高可用性 3.3 命令行接口 3.4 Hadoop文件系统 3.5 Java接口 3.5.1 从Hadoop URL读取数据 3.5.2 通过FileSystem读取数据 3.5.3 写入数据 3.5.4 目录 3.5.5 查询文件系统 3.5.6 删除数据 3.6 数据流 3.6.1 剖析文件读取 3.6.2 剖析文件写入 3.6.3 一致模型 3.7 通过distcp并行复制 第4章 关于YARN 4.1 剖析YARN应用运行机制 4.1.1 资源请求 4.1.2 应用生命期 4.1.3 构建YARN应用 4.2 YARN与MapReduce 1相比 4.3 YARN中的调度 4.3.1 调度选项 4.3.2 容量调度器配置 …… 第Ⅱ部分 关于MapReduce 第Ⅲ部分 Hadoop的操作 第Ⅴ部分 案例学习