-
关于作者
关于作者 关于作者 Wesley Chun在高中阶段开始进入计算领域，当时他使用的是BASIC和6502汇编语言，系统是Commodore。随后开始在Apple IIe上使用Pascal语言，然后是在穿孔卡片上使用ForTran语言。正是在穿孔卡片上使用ForTran的经历使他成为一名谨慎小心的开发人员，因为将一组卡片发送到学校的主机并得到返回结果，... -
2.5.15 使用并行计算实现上亿排序
2.5.15 使用并行计算实现上亿排序 1.为什么需要并行计算来排序 2.数据取值范围 3.输入输出数据 4.并行计算排序的详细过程 2.5.15 使用并行计算实现上亿排序 1.为什么需要并行计算来排序 对于大型互联网应用中经常面临对上亿大数据的排序处理等需求，并且上亿大数据量的排序处理能力也是检验分布式系统的计算能力的经典指标之一。 通常... -
1.2 分布式存储分类
1.2 分布式存储分类 1.2 分布式存储分类 分布式存储面临的数据需求比较复杂，大致可以分为三类： ●非结构化数据：包括所有格式的办公文档、文本、图片、图像、音频和视频信息等。 ●结构化数据：一般存储在关系数据库中，可以用二维关系表结构来表示。结构化数据的模式（Schema，包括属性、数据类型以及数据之间的联系）和内容是分开的，数据的模式需要预先... -
12.5.4 云平台架构
12.5.4 云平台架构 12.5.4 云平台架构 从托管Web应用程序的角度看，云平台主要包括云存储以及应用运行平台，如图12-7所示。 图 12-7 云平台整体架构 云平台的核心组件包括：云存储组件和应用运行平台组件。下面简单介绍一下。 （1）云存储组件 云存储组件包括两层：分布式存储层以及存储访问层。分布式存储层管理存储服务器... -
第9章 分布式存储引擎
第9章 分布式存储引擎 9.1 公共模块" level="3"> 9.1 公共模块 9.1.1 内存管理" level="4"> 9.1.1 内存管理 第9章 分布式存储引擎 分布式存储引擎层负责处理分布式系统中的各种问题，例如数据分布、负载均衡、容错、一致性协议等。与其他分布式存储系统类似，分布式存储引擎层支持根据主键更新、插入、删除、随机读取以... -
序言
序言 序言 关于分布式系统的知识，可以从大学教科书上找到，许多人还知道Andrew S.Tanenbaum等人在2002年出版的“分布式系统原理与范型”（Distributed Systems：Principles and Paradigms）这本书。其实分布式系统的理论出现于上个世纪70年代，"Symposium on Principles of D... -
前言
前言 前言 随着社交网络、移动互联网、电子商务等技术的不断发展，互联网的使用者贡献了越来越多的内容。为了处理这些内容，每个互联网公司在后端都有一套成熟的分布式系统用于数据的存储、计算以及价值提取。Google是全球最大的互联网公司，也是在分布式技术上相对成熟的公司，其公布的Google分布式文件系统GFS、分布式计算系统MapReduce、分布式表格系... -
13.1 RabbitMQ
13.1 RabbitMQ 13.1 RabbitMQ RabbitMQ是一个支持Advanced Message Queuing Protocol（AMQP）的开源消息队列实现，由Erlang编写，因以高性能、高可用以及可伸缩性出名。它支持多种客户端，如：Java、Python、PHP、.NET、Ruby、JavaScript等。它主要用于在分布式系... -
第四部分 开源项目
第四部分 开源项目 第四部分 开源项目 ·第22章 Etcd——高可用的键值数据库 ·第23章 Docker三剑客之Docker Machine ·第24章 Docker三剑客之Docker Compose ·第25章 Docker三剑客之Docker Swarm ·第26章 Mesos——优秀的集群资源调度平台 ·第27章 Kubernet... -
目录
目 录 序言 前言 第1章 概述 1.1 分布式存储概念 1.2 分布式存储分类 第一篇 基础篇 第2章 单机存储系统 2.1 硬件基础 2.1.1 CPU架构 2.1.2 IO总线 2.1.3 网络拓扑 2.1.4 性能参数 2.1.5 存储层次架构 ...