-
第12章 云存储
第12章 云存储" level="2"> 第12章 云存储 12.1 云存储的概念" level="3"> 12.1 云存储的概念 第12章 云存储" class="reference-link"> 第12章 云存储 Google、Amazon、Microsoft等国外互联网巨头为我们描述了云计算的美妙场景：当云计算时代到来之时，不必在你的计算机上安... -
12.3 云存储技术
12.3 云存储技术 12.3 云存储技术 云存储包含两个部分：云端+终端。云端指统一的云存储服务端，终端指多样化的PC机、手机、移动多媒体设备等终端设备。云存储的发展需要云端和终端里面的多种技术的支持。 （1）摩尔定律 摩尔定律一直推动着整个硬件产业的发展，芯片、内存和磁盘等硬件设备在性能和容量方面也得到了极大的提升。最明显的例子莫过于CPU，最... -
9.3 UpdateServer实现机制
9.3 UpdateServer实现机制 9.3.1 存储引擎" level="4"> 9.3.1 存储引擎 9.3 UpdateServer实现机制 UpdateServer用于存储增量数据，它是一个单机存储系统，由如下几个部分组成： ●内存存储引擎，在内存中存储修改增量，支持冻结以及转储操作； ●任务处理模型，包括网络框架、任务队列、工作线程... -
3.2 性能分析
3.2 性能分析 3.2 性能分析 给定一个问题，往往会有多种设计方案，而方案评估的一个重要指标就是性能，如何在系统设计之初估算存储系统的性能是存储工程师的必备技能。性能分析用来判断设计方案是否存在瓶颈点，权衡多种设计方案，另外，性能分析也可作为后续性能优化的依据。性能分析与性能优化是相对的，系统设计之初通过性能分析确定设计目标，防止出现重大的设计失误... -
2.6 数据压缩
2.6 数据压缩 2.6.1 压缩算法" level="4"> 2.6.1 压缩算法 2.6 数据压缩 数据压缩分为有损压缩与无损压缩两种，有损压缩算法压缩比率高，但数据可能失真，一般用于压缩图片、音频、视频；而无损压缩算法能够完全还原原始数据，本文只讨论无损压缩算法。早期的数据压缩技术就是基于编码上的优化技术，其中以Huffman编码最为知名，它通... -
2.1.5 存储层次架构
2.1.5 存储层次架构 2.1.5 存储层次架构 从分布式系统的角度看，整个集群中所有服务器上的存储介质（内存、机械硬盘，SSD）构成一个整体，其他服务器上的存储介质与本机存储介质一样都是可访问的，区别仅仅在于需要额外的网络传输及网络协议栈等访问开销。 如图2-5所示，假设集群中有30个机架，每个机架接入40台服务器，同一个机架的服务器接入到同一个... -
第2章 单机存储系统
第2章 单机存储系统" level="2"> 第2章 单机存储系统 2.1 硬件基础" level="3"> 2.1 硬件基础 2.1.1 CPU架构" level="4"> 2.1.1 CPU架构 第2章 单机存储系统" class="reference-link"> 第2章 单机存储系统 单机存储引擎就是哈希表、B树等数据结构在机械磁盘、SSD... -
7.3.7 讨论
7.3.7 讨论 7.3.7 讨论 Google的分布式存储系统一步步地从Bigtable到Megastore，再到Spanner，这也印证了分布式技术和传统关系数据库技术融合的必然性，即底层通过分布式技术实现可扩展性，上层通过关系数据库的模型和接口将系统的功能暴露给用户。 阿里巴巴的OceanBase系统在设计之初就考虑到这两种技术融合的必然性，因... -
第1章 概述
第1章 概述 第1章 概述 Google、Amazon、Alibaba等互联网公司的成功催生了云计算和大数据两大热门领域。无论是云计算、大数据还是互联网公司的各种应用，其后台基础设施的主要目标都是构建低成本、高性能、可扩展、易用的分布式存储系统。 虽然分布式系统研究了很多年，但是，直到近年来，互联网大数据应用的兴起才使得它大规模地应用到工程实践中。相... -
12.3 Redis
12.3 Redis 12.3 Redis Redis是一个开源（BSD许可）的基于内存的数据结构存储系统，可以用作数据库、缓存和消息中间件。 Redis使用ANSI C实现，2013年起由Pivotal公司资助。Redis的全称意为REmote DIctionary Server。 通过docker run指令可以直接启动一个redis-co...