-
27.8 本章小结
27.8 本章小结 27.8 本章小结 本章介绍了Kubernetes系统的设计、核心概念、主要组件，以及常见操作和网络模型。通过这些知识，相信读者对于Kubernetes的功能有了直观认识，并可以利用它来搭建自己的容器云平台。 虽然Kubernetes自身并没有提出PaaS或者DevOps的理念，但它提供的资源抽象接口和生命周期管理，让用户可以很方... -
11.4.6 工程现象
11.4.6 工程现象 11.4.6 工程现象 1.错误必然出现 只要是理论上有问题的设计或实现，实际运行时一定会出现，不管概率有多低。如果没有出现问题，要么是稳定运行时间不够长，要么是压力不够大。系统开发过程中要有洁癖，不要放过任何一个可能的错误，或者心存侥幸心理。 2.错误必然复现 实践表明，分布式系统测试中发现的错误等到数据规模增大以后必然... -
大规模分布式系统架构与设计实战
大数据技术丛书 大规模分布式系统架构与设计实战 彭渊 著 ISBN：978-7-111-45503-5 本书纸版由机械工业出版社于2014年出版，电子版由华章分社（北京华章图文信息有限公司）全球范围内制作与发行。 版权所有，侵权必究 客服热线：+ 86-10-68995265 客服信箱：service@bbbvip.com 官方网址：www... -
第13章 分布式处理与大数据平台
第13章 分布式处理与大数据平台 第13章 分布式处理与大数据平台 分布式系统和大数据处理平台是目前业界关注的热门技术。 本章将重点介绍热门的消息队列中间件RabbitMQ，分布式任务处理平台Celery，大数据分布式处理的三大重量级武器：Hadoop、Spark、Storm，以及新一代的数据采集和分析引擎Elasticsearch。 围绕如何基于... -
1.1 分布式存储概念
1.1 分布式存储概念" level="2"> 1.1 分布式存储概念 1.1 分布式存储概念" class="reference-link"> 1.1 分布式存储概念 大规模分布式存储系统的定义如下： “分布式存储系统是大量普通PC服务器通过Internet互联，对外作为一个整体提供存储服务。” 分布式存储系统具有如下几个特性： ●可扩展。分布... -
第1章 概述
第1章 概述 第1章 概述 Google、Amazon、Alibaba等互联网公司的成功催生了云计算和大数据两大热门领域。无论是云计算、大数据还是互联网公司的各种应用，其后台基础设施的主要目标都是构建低成本、高性能、可扩展、易用的分布式存储系统。 虽然分布式系统研究了很多年，但是，直到近年来，互联网大数据应用的兴起才使得它大规模地应用到工程实践中。相... -
2.3.4 SQL与NoSQL
2.3.4 SQL与NoSQL 2.3.4 SQL与NoSQL 随着互联网的飞速发展，数据规模越来越大，并发量越来越高，传统的关系数据库有时显得力不从心，非关系型数据库（NoSQL,Not Only SQL）应运而生。NoSQL系统带来了很多新的理念，比如良好的可扩展性，弱化数据库的设计范式，弱化一致性要求，在一定程度上解决了海量数据和高并发的问题，以... -
3.7 分布式协议
3.7 分布式协议 3.7.1 两阶段提交协议" level="4"> 3.7.1 两阶段提交协议 3.7 分布式协议 分布式系统涉及的协议很多，例如租约，复制协议，一致性协议，其中以两阶段提交协议和Paxos协议最具有代表性。两阶段提交协议用于保证跨多个节点操作的原子性，也就是说，跨多个节点的操作要么在所有节点上全部执行成功，要么全部失败。Paxo... -
25.7 本章小结
25.7 本章小结 25.7 本章小结 本章介绍了Docker Swarm的安装、使用和主要功能。通过使用Swarm，用户可以将若干Docker主机节点组成的集群当作一个大的虚拟Docker主机使用。并且，原先基于单机的Docker应用可以无缝地迁移到Swarm上来。 实现这些功能的前提是服务自动发现能力。在现代分布式系统中，服务的自动发现、注册、更... -
2.1.5 存储层次架构
2.1.5 存储层次架构 2.1.5 存储层次架构 从分布式系统的角度看，整个集群中所有服务器上的存储介质（内存、机械硬盘，SSD）构成一个整体，其他服务器上的存储介质与本机存储介质一样都是可访问的，区别仅仅在于需要额外的网络传输及网络协议栈等访问开销。 如图2-5所示，假设集群中有30个机架，每个机架接入40台服务器，同一个机架的服务器接入到同一个...