云存储 释放数据无限价值

"人类文明的发展史，其实就是建立在存储技术的演进之上的。数据成为继土地、劳动力、资本、技术之后的第五种生产要素，所有基于数据的挖掘和增值都离不开存储。本书即详细介绍了数据存储技术的昨天、今天和明天，不失为一本了解数据存储技术的标杆读物。 ◎阿里云存储团队一线研发工程师、产品经理和架构师合力撰写 ◎阿里云存储团队保障数十EB 数据的实战开发经验和教训 ◎孙凝晖院士、谢长生教授、张建锋、蒋江伟、吴结生、陈起鲲等专家联袂力荐 ◎本书涉及数据存储技术的方方面面，如存储系统架构、存储协议、数据重删与压缩、数据复制与冗余、数据安全、数据一致性、分布式存储系统等存储技术基础 ◎还有视频监控、大数据及数据湖统一存储、多媒体数据存储、高性能计算数据存储、混合云灾备等行业应用存储技术解决方案 ◎更有SCM 介质、DNA存储、多维光存储、混合云存储等存储技术创新展望"

   当第一个类人猿用沾满炭灰的石头在洞穴墙壁上刻下自己的形象时，“存储”作为延续文明的工具就诞生了。当古老的“存储”遇到云计算，就成为了由云而生、依云而建的云存储。本书呈现的是阿里云存储团队通过保障数十 EB 数据的稳定和安全在十余年的自研之路得来的技术变革、实战开发经验和教训，以及丰富的行业和场景应用的解决方案。阿里云的存储工程师们会在本书中尽力回答：超大规模的云存储系统如何创建；如何满足高峰值应用的高带宽和低延时需求；如何低成本、低能耗地长期保存和利用数据；如何保证全年 7×24 小时不间断的超高可用性；如何保证用户的数据安全；如何利用数据生命周期；如何根据用户的需求弹性地部署和调度资源；如何实现数据管理和调度的高效及智能化；如何针对不同的行业给出合适的解决方案等问题。

本书是阿里巴巴集团存储技术研发成果的集大成式讲解和全面展示，既适合企业 CTO、CIO、IT 经理进行决策时参考，也适合使用云计算进行应用开发与部署的开发工程师、管理运维工程师、系统架构师作为技术用书，对于想了解和学习云存储的高校学生及相关从业者也有很高的科普价值。

阿里云基础产品委员会主要负责阿里云的计算、存储、网络、安全、云原生、稳定性等产品技术架构设计与开发，权威定义了包括云存储在内的云计算产业标准。

第1章数据价值驱动存储创新1
1.1数据与存储2
1.2存储介质的发展3
1.2.1NANDFlash4
1.2.2NVMeSSD7
1.3存储软件技术发展9
1.3.1用户态存储软件栈9
1.3.2高性能用户态存储软件平台12
1.4存储系统架构的演进13
1.4.1硬件主导的存储系统架构14
1.4.2软件主导的存储系统架构16
1.4.3面向云端的软硬件协同存储系统架构18
第2章存储关键技术19
2.1存储协议类型20
2.1.1SCSI与iSCSI20
2.1.2NVMe26
2.1.3NVMeoF34
2.1.4RESTfulAPI41
2.1.5网络文件系统45
2.1.6SMB协议55
2.2数据重删与压缩58
2.2.1数据重删59
2.2.2数据压缩60
2.3数据复制与冗余61
2.3.1数据复制61
2.3.2数据备份与恢复62
2.3.3RAID64
2.3.4多副本与纠删码66
2.4数据安全77
2.4.1数据加密77
2.4.2权限管理78
2.5数据一致性81
2.5.1分布式一致性81
2.5.2一致性对比分析85
第3章云存储基础组件89
3.1分布式存储系统90
3.1.1技术特点90
3.1.2系统架构93
3.1.3分布式文件协议94
3.1.4单机存储引擎99
3.1.5高性能软件栈101
3.2分布式锁服务104
3.2.1从单机锁到分布式锁104
3.2.2云存储的分布式锁106
3.3高性能网络服务框架110
3.3.1网络服务面临的挑战110
3.3.2云存储的高性能网络服务111
3.4键值存储系统118
3.4.1键值存储系统架构的演变118
3.4.2阿里云键值存储系统121
第4章云存储的技术创新125
4.1云存储服务技术创新126
4.1.1快照技术的近期新应用126
4.1.2共享块存储技术129
4.1.3对象存储可用性技术实践133
4.1.4对象存储分布式缓存137
4.1.5对象存储异地多活容灾架构139
4.1.6文件系统的数据一致性144
4.1.7文件系统的多租户实践148
4.1.8并行文件系统客户端优化152
4.1.9海量结构化大数据存储155
4.2云定义存储技术创新162
4.2.1块存储技术能力162
4.2.2对象存储技术能力165
4.2.3日志服务技术能力167
4.3云数据管理技术创新169
4.3.1可观测性技术169
4.3.2数据重删技术172
4.3.3相册与网盘服务的关键技术173
4.3.4智能媒体管理技术178
第5章云存储的应用实践181
5.1视频监控数据存储182
5.2大数据及数据湖统一存储183
5.3多媒体数据存储188
5.4高性能计算数据存储191
5.5混合云灾备195
5.6智能运维AIOps197
……