大数据技术入门 微课视频+题库版

"本书特色 （1） 采用“理实一体化”教学方式，课堂上既有教师的讲述，又有学生独立思考、上机操作的内容。 （2） 丰富的教学案例，包含了书中的教学课件、习题答案、微课视频等多种教学资源。 （3） 紧跟时代潮流，注重技术变化，书中包含了近期新的大数据技术知识和一些开源库的使用。建议读者在阅读本书时使用Python 3.7以上版本，并提前安装好所需要的扩展库（如requests、Scrapy、numpy、pandas、matplotlib等）以便实验。此外，读者在阅读本书时还需安装MySQL和Kettle等相关软件。 （4） 本书编者都具有多年的教学经验，书中重难点突出，能够激发学生的学习热情。 "

本书介绍大数据技术的基本概念和相应的技术应用。全书共10章，分别是大数据介绍、云计算基础、大数据架构、数据采集、数据清洗、大数据存储、大数据分析与挖掘、大数据可视化、大数据安全和大数据的行业应用。本书将理论与实践操作相结合，通过大量的案例帮助读者快速了解大数据相关基本技术，并对书中重要的、核心的知识点加大练习比例，以达到熟练应用的目的。本书可作为高等院校大数据、人工智能、软件技术、云计算、计算机网络等专业的专业课教材，也可作为大数据爱好者的参考书。

"黄源 计算机系教师，大数据专业负责人，带头人，副教授。 主讲课程： （1）XML基础 （2）大数据基础 （3）linux操作系统 （4）网站搜索引擎优化 （5）python基础 主编教材（第一主编） （1）XML基础与案例教程 机械工业出版社 （2）HTML5+css3网页设计机 械工业出版社 （3）搜索引擎优化基础与实训 中国水利水电出版社 （4）大数据分析 清华大学出版社"

第1章 大数据介绍
1.1 大数据概述
1.1.1 认识大数据
1.1.2 大数据的特征
1.1.3 大数据技术应用与基础
1.2 大数据的意义
1.2.1 大数据的国家战略意义
1.2.2 大数据的企业意义
1.2.3 我国大数据市场的产业发展
1.3 本章小结
1.4 实训
习题1
第2章 云计算基础
2.1 云计算概述
2.1.1 云计算定义
2.1.2 云计算的特征
2.1.3 云计算的体系结构
2.2 云计算的服务类型与层次
2.2.1 云计算服务类型
2.2.2 云计算服务层次
2.3 云计算的服务模式
2.3.1 公有云
2.3.2 私有云
2.3.3 混合云
2.4 云计算关键技术
2.4.1 虚拟化技术
2.4.2 容器技术
2.4.3 并行计算技术
2.4.4 海量数据存储技术
2.5 云计算与大数据
2.5.1 云计算与大数据的关系
2.5.2 云计算与大数据的融合发展
2.6 云计算的应用
2.7 常见云计算平台介绍
2.7.1 云计算平台介绍
2.7.2 常见的云计算平台
2.8 本章小结
2.9 实训
习题2
第3章 大数据架构
3.1 大数据架构概述
3.1.1 大数据架构介绍
3.1.2 大数据架构分类
3.2 Hadoop架构
3.2.1 Hadoop介绍
3.2.2 Hadoop发展史
3.2.3 Hadoop核心组件
3.3 HDFS概述
3.3.1 HDFS的概念
3.3.2 HDFS操作
3.4 MapReduce概述
3.4.1 MapReduce的概念
3.4.2 MapReduce设计方式
3.4.3 MapReduce架构
3.5 本章小结
3.6 实训
习题3
第4章 数据采集
4.1 数据采集概述
4.2 数据采集平台
4.2.1 数据采集平台概述
4.2.2 数据采集平台实例
4.3 爬虫数据采集基础
4.3.1 网络爬虫基础知识
4.3.2 网络爬虫框架Scrapy
4.4 Python爬虫实现
4.4.1 Python简介
4.4.2 Python爬虫实现
4.5 本章小结
4.6 实训
习题4
第5章 数据清洗
5.1 数据清洗概述
5.2 数据清洗的常用方法
5.2.1 缺失值的处理方法
5.2.2 噪声数据的处理方法
5.3 数据质量与数据仓库
5.3.1 数据质量的定义
5.3.2 数据质量的常见问题
5.3.3 数据质量与数据清洗
5.3.4 数据仓库与ETL
5.3.5 主数据与元数据
5.4 数据清洗环境与常用工具
5.4.1 数据清洗环境
5.4.2 数据清洗常用工具
5.5 本章小结
5.6 实训
习题5
第6章 大数据存储
6.1 大数据存储概述
6.1.1 大数据存储的概念
6.1.2 大数据存储的类型
6.1.3 大数据存储的关键技术
6.2 大数据存储方式
6.2.1 分布式存储
6.2.2 NoSQL数据库
6.2.3 NewSQL数据库
6.2.4 云数据库
6.3 NoSQL数据库产品介绍
6.3.1 Redis
6.3.2 HBase
6.3.3 MongoDB
6.3.4 LevelDB
……