大数据技术基础(普通高等学校十四五规划数据科学与大数据技术专业特色教材)

（1）该教材的编写由校内教师、985高校教师和企业教师共同完成。由于《大数据技术基础》课程的重要地位和实践特点，高校教师和企业教师都非常重视该教材的编写。目前，《大数据技术基础》课程是我校1门校企合作课程。基于文华学院的大数据特色专业学科建设和浪潮大数据实验室的平台，给学生提供良好的教学和实践平台，该教材由校内教师和企业教师共同编写。 （2）基于案例驱动的教学内容设计。以往的许多教材在内容上一般只有针对知识点的基础案例，缺乏应用案例，从而使学生感到高深莫测和畏难情绪。因此，我们在该教材的编写过程中精心设计应用案例，以确保应用的完整性。 （3）在该教材的编写中，先给学生讲解大数据系统的组成部分及各部分功能，后讲解一个完整的案例帮助学生理解和巩固知识点，掌握大数据分析和处理的流程。这样学生就掌握了每个知识点的应用价值，学习起来更有兴趣和信心。 （4）本书兼顾了湖北省应用型高等学校的人才培养特点以及研究型大学的实践教学需要，为了更好地提高学生的专业技能训练以及提高学生的学习兴趣。

大数据技术让我们以一种靠前的方式对海量数据进行分析，从中获得有巨大价值的产品和服务。本书围绕Hadoop技术进行讲解，主要内容包括大数据技术和架构的介绍、Hadoop环境搭建、Hadoop分布式文件系统(HDFS)、Hadoop分布式计算框架MapReduce、Hadoop资源调度框架Yarn、Hadoop分布式数据库HBase、数据仓库Hive、分布式实时计算框架Storm等知识。最后，本书紧密结合实际应用，基于几个综合案例说明和实践提炼出含金量十足的开发经验。 本书涉及知识技术较广、内容丰富，解析清楚详细，讲述明确，通俗易懂，适合作为计算机、大数据等相关专业的教材使用，也可作为从事大数据分析与运维人员的业务参考书。

毕业于英国南岸大学因特网与多媒体工程专业，2005年入职文华学院，一直从事计算机方向的课程教学，具有多年Java、数据库等课程的教学经验。参与了大数据挖掘与并行处理的实践教学研究、《大学计算机基础》精品课程等多项教改项目。1、参编《新编计算机专业英语》清华大学出版社2、参编《数据库系统原理及应用》清华大学出版社3、参编《数据库系统原理及应用习题解析与项目实训》清华大学出版社4、参编《数据结构（C语言版）》清华大学出版社

第1章 大数据技术简介
1.1 大数据的产生和发展背景
1.2 大数据的本质和特征
1.3 大数据的技术现状
1.4 大数据的潜在价值
1.5 大数据的挑战
1.6 大数据的技术发展趋势
第2章 大数据技术总体架构和关键技术
2.1 大数据系统总体架构
2.2 大数据存储与管理技术
2.3 大数据处理技术
2.4 大数据查询技术
2.5 大数据分析技术
2.6 数据可视化技术
第3章 Hadoop环境搭建
3.1 Hadoop简介
3.2 Hadoop核心架构
3.3 Hadoop安装
第4章 并行计算框架MapReduce
4.1 MapReduce简介
4.2 MRv1架构
4.3 MRv2架构
4.4 MapReduce编程实例
第5章 分布式文件系统HDFS
5.1 HDFS的基本特征与架构
5.2 HDFS的高可用设计
5.3 HDFS数据组织方式与读/写流程分析
5.4 HDFS操作命令
5.5 HDFS基本编程接口
第6章 列式存储数据库HBase
6.1 HBase简介
6.2 HBase的基础架构
6.3 安装HBase
6.4 HBase的基本操作
6.5 HBase客户端
6.6 HBase编程实践
第7章 数据仓库工具Hive
7.1 关于Hive
7.2 数据类型与文件格式
7.3 HiveQL：Hive查询语言
7.4 表
7.5 函数
7.6 Hive的实践
第8章 分布式实时计算框架Storm
8.1 背景介绍
8.2 Storm体系概要
8.3 Storm数据流模型
8.4 Storm集群安装部署
8.5 Storm实战与进阶
第9章 大数据案例之文华学院招生与就业系统
9.1 文华学院招生与就业大数据系统需求
9.2 文华学院招生与就业大数据系统总体设计
9.3 文华学院招生与就业大数据处理流程
9.4 文华学院招生与就业大数据系统可视化
第10章 大数据案例之手机销售数据统计分析系统
10.1 应用项目案例需求介绍
10.2 需求功能分析与设计
10.3 项目整体系统架构设计
10.4 Phoenix的安装与使用
10.5 案例项目详细设计
10.6 销售数据分析客户端页面
10.7 小结
第11章 大数据案例之基于HBase的对象存储服务
11.1 国内外知名对象存储服务
11.2 本项目基本需求
11.3 技术选型
11.4 功能模块设计
11.5 数据库设计
11.6 HBase优化
11.7 代码
11.8 测试
11.9 小结
参考文献