-
13.5.2 EMC Greenplum
13.5.2 EMC Greenplum 13.5.2 EMC Greenplum Greenplum是EMC公司研发的一款采用MPP架构的OLAP产品，底层基于开源的PostgreSQL数据库。 1.整体架构 如图13-11，Greenplum系统主要包含两种角色：Master服务器（Master Server）和Segment服务器（Segme... -
3.1 协调架构原理简介
3.1 协调架构原理简介 3.1 协调架构原理简介 Fourinone对分布式协调的实现，是通过建立一个domain/node两层结构的节点信息去完成，domain可以是分类或者包，node可以是具体属性，domain和node都是根据需求设计命名，比如可以将domain命名为“a.b.c…”表示一个树型类目。一个domain下可以有很多个node，每... -
第一部分 Docker基础
第一部分 Docker基础 本书的第一部分由第1章和第2章构成，将带领读者开始使用Docker，并讲解其基础知识。第1章阐述Docker的起源及其核心概念，如镜像、容器和分层。在第1章的最后，读者将动手使用Dockerfile创建自己的第一个镜像。第2章介绍一些有用的技巧，让读者深入理解Docker的架构。我们通过依次... -
4.8 Gradle思考
4.8 Gradle思考 4.8 Gradle思考 笔者认为，学习Gradle最好的方法就是在实践中学习，这也是笔者为什么要先按照项目中的使用方法来讲解Gradle的原因。大部分的语言，其设计思想都是相通的，Gradle的设计参考了很多脚本语言的优势，开发者在实践中运用Gradle的时候，一定会在它身上看见其他语言的影子。但是，开发者需要的不仅仅是会使... -
4.3 Facebook Haystack
4.3 Facebook Haystack 4.3.1 系统架构" level="4"> 4.3.1 系统架构 4.3 Facebook Haystack Facebook目前存储了2600亿张照片，总大小为20PB，通过计算可以得出每张照片的平均大小为20PB/260GB，约为80KB。用户每周新增照片数为10亿（总大小为60TB），平均每秒新增的... -
4.4 内容分发网络
4.4 内容分发网络 4.4.1 CDN架构" level="4"> 4.4.1 CDN架构 4.4 内容分发网络 CDN通过将网络内容发布到靠近用户的边缘节点，使不同地域的用户在访问相同网页时可以就近获取。这样既可以减轻源服务器的负担，也可以减少整个网络中的流量分布不均的情况，进而改善整个网络性能。所谓的边缘节点是CDN服务提供商经过精心挑选的距离... -
4.4.2 讨论
4.4.2 讨论 4.4.2 讨论 由于Blob存储系统读访问量大，更新和删除很少，特别适合通过CDN技术分发到离用户最近的节点。CDN也是一种缓存，需要考虑与源服务器之间的一致性。源服务器更新或者删除了Blob数据，需要能够比较实时地推送到CDN缓存节点，否则只能等到缓存中的对象被淘汰，而对象的有效期一般很长，热门对象很难被淘汰。 另外，淘宝在研发... -
第6章 分布式表格系统
第6章 分布式表格系统 6.1 Google Bigtable" level="3"> 6.1 Google Bigtable 6.1.1 架构" level="4"> 6.1.1 架构 第6章 分布式表格系统 分布式表格系统对外提供表格模型，每个表格由很多行组成，通过主键唯一标识，每一行包含很多列。整个表格在系统中全局有序，适用3.3.2节中讲的... -
6.2.9 讨论
6.2.9 讨论 6.2.9 讨论 分布式存储系统有两个目标：一个是可扩展性，最终目标是线性可扩展；另外一个是功能，最终目标是支持全功能SQL。Megastore是一个介于传统的关系型数据库和分布式NoSQL系统之间的存储系统，融合了SQL和NoSQL两者的优势。 Megastore的主要创新点包括： ●提出实体组的数据模型。通过实体组划分数据，实... -
6.3.3 分区层
6.3.3 分区层 6.3.3 分区层 分区层构建在文件流层之上，用于提供Table、Blob、Queue等数据服务。分区层的一个重要特性是提供强一致性并保证事务操作顺序。 分区层内部支持一种称为对象表（Object Table,OT）的数据架构，每个OT是一张最大可达若干PB的大表。对象表被动态地划分为连续的范围分区（RangePartition，...