数据工程应用微服务开发实践

本书详细讲解了基于微服务的数据工程应用开发实践，包括微服务及数据工程相关原理概述、开发环境搭建、服务运行与跟踪、服务通信与配置、国产自主可控数据库实践、相关系统的开发实践等内容，特色是（1）结合当今微服务发展技术指导传统数据工程应用的开发实践（2）引入当今对国产自主可控数据库的要求，详细讲解了如何在微服务技术条件下对国产化数据库的安装、配置与使用。（3）采用经典的数据工程应用案例分析。读者对象是管理科学工程专业本科学生、从事数据工程开发的开发人员、架构师等。

马武彬，国防科技大学系统工程学院副研究员，研究方向为数据工程、数据分析、信息物理融合系统、微服务应用等。全军ZZ数据工程总师组成员、全军战X工程数据应用分系统副总师。英国拉夫堡大学访问学者。连续5年担任数据工程专业课程数据工程应用与实践主讲老师。作为技术负责人长期参与军队重大工程，作为技术骨干对全军重大项目3XXk、6XX装备数据工程信息资源建设与分析、“战XX”系统关键技术攻关、6XX辅助决策支持系统等工程进行设计与开发实现。发表论文20余篇，出版教材2部，获军队科技进步三等奖1项。

目录 第1章微服务与数据工程概述 1.1微服务概述 1.1.1Spring MVC 1.1.2Spring Boot 1.1.3Spring Cloud 1.2数据工程原理与应用概述 1.2.1相关概念 1.2.2数据工程发展历程 1.2.3数据工程与信息工程领域的关系 1.3基于微服务的数据工程应用开发 1.3.1数据工程应用微服务架构 1.3.2基于微服务的数据工程应用开发原则 1.3.3基于微服务的数据工程应用开发流程 第2章基于微服务的数据工程应用开发环境构建 2.1安装与配置Java环境 2.1.1Linux下JDK 1.8环境的安装与配置 2.1.2Windows下JDK 1.8环境的安装与配置 2.2安装与配置Eclipse 2.2.1Linux下Eclipse的安装与配置 2.2.2Windows下Eclipse的安装与配置 2.3安装与配置Maven 2.3.1Linux下Maven的安装与配置 2.3.2Windows下Maven的安装与配置 2.4安装与配置Spring Boot 2.5安装与配置Spring Cloud 2.5.1Eureka Server配置 2.5.2Eureka Client配置 2.5.3Feign配置 第3章基于微服务的数据工程应用服务运行与跟踪 3.1微服务启动与运行 3.1.1服务拆分 3.1.2服务注册与发现 3.1.3服务消费 3.2微服务负载均衡 3.2.1Ribbon负载均衡 3.2.2Feign应用负载均衡 3.3微服务保护 3.3.1服务熔断 3.3.2服务自动扩展 3.4微服务跟踪 3.4.1Zipkin微服务跟踪 3.4.2Sleuth微服务跟踪 3.4.3ELK微服务跟踪 第4章基于微服务的数据工程应用服务通信与配置 4.1微服务消息驱动 4.1.1RabbitMQ框架 4.1.2Apache Kafka框架 4.2微服务集群网关 4.2.1Nginx集群网关 4.2.2Zuul集群网关 4.3微服务集群配置 4.3.1Spring Cloud Config集群配置中心 4.3.2ZooKeeper集群管理 第5章基于微服务的国产自主可控数据库实践 5.1微服务通用数据库配置与部署 5.1.1离线安装MySQL 5.1.2集群配置整合应用 5.1.3配置MySQL 5.2达梦数据库的配置与部署 5.2.1安装简介 5.2.2硬件环境需求 5.2.3软件环境需求 5.2.4达梦数据库的安装 5.2.5达梦数据库的卸载 5.2.6许可证安装 5.3神通数据库配置与部署 5.3.1启动安装程序 5.3.2安装过程 5.3.3数据库配置 5.3.4停止数据库服务 5.4人大金仓数据库的配置与部署 5.4.1软硬件环境需求 5.4.2金仓数据库的安装 5.4.3数据库初始化 5.5GBase8s数据库配置与部署 5.5.1GBase8s数据库软硬件环境需求 5.5.2环境准备 5.5.3GBase8s数据库安装 5.5.4GBase8s数据库的卸载 5.5.5启动/停止数据库服务 第6章基于微服务的数据汇聚系统开发实践 6.1数据汇聚系统功能概述 6.1.1权限与安全 6.1.2数据融合 6.2用户权限与安全模块的设计与开发 6.2.1前端页面设计 6.2.2数据库结构设计 6.2.3权限与安全模块编码开发 6.3数据融合模块的设计与开发 6.3.1前端页面设计 6.3.2数据库结构设计 6.3.3模块编码开发 第7章数据获取与分析应用微服务开发与实践 7.1相关环境与配置 7.1.1Python3环境安装与配置 7.1.2Redis环境安装与配置 7.2数据分析应用服务架构设计 7.3数据库设计与实践 7.4数据获取微服务的开发与实践 7.5数据分析微服务开发与实践 7.5.1定义神经网络变量 7.5.2LSTM函数定义 7.5.3训练模型函数 7.5.4预测模型 7.5.5结果对比 参考文献