-
6.3 引导（Bootstrapping）
6.3 引导（Bootstrapping） 引导层启动服务器的 OS，使服务器达到我们所需要的状态。这个层次包括了 OS 的种类、磁盘容量以及网络配置等。本节我们将介绍利用服务器自动化安装以及虚拟化技术来构建环境的自动化工具。 6.3.1 Kickstart 假如你所在的开发现场添置了 100 台服务器。如果所有的服务器都必须设定同样的磁盘分区... -
第4章 分布式文件系统
第4章 分布式文件系统" level="2"> 第4章 分布式文件系统 4.1 Google文件系统" level="3"> 4.1 Google文件系统 4.1.1 系统架构" level="4"> 4.1.1 系统架构 第4章 分布式文件系统" class="reference-link"> 第4章 分布式文件系统 分布式文件系统的主要功能有两... -
4.1.2 关键问题
4.1.2 关键问题 4.1.2 关键问题 1.租约机制 GFS数据追加以记录为单位，每个记录的大小为几十KB到几MB不等，如果每次记录追加都需要请求Master，那么Master显然会成为系统的性能瓶颈，因此，GFS系统中通过租约（lease）机制将chunk写操作授权给ChunkServer。拥有租约授权的ChunkServe称为主ChunkSe... -
2.5.4 实现Hadoop经典实例Word Count
2.5.4 实现Hadoop经典实例Word Count 2.5.4 实现Hadoop经典实例Word Count 很多人是通过Word Count入门分布式并行计算，该demo演示了Hadoop的经典实例Word Count的实现。 ❏ 输入数据：n个数据文件，每个1G大小，为了方便统计，每个文件的数据由"aaa bbb…ccc"(由空格分割的1k... -
3.6 实践与应用
3.6 实践与应用 3.6.1 如何实现公共配置管理 3.6 实践与应用 3.6.1 如何实现公共配置管理 在分布式多台机器环境下，维持统一的配置信息是最常见的需求，当配置信息改变时，所有的机器能实时获取并更新。 Fourinone通过Park进行配置信息管理，Park提供创建和修改信息的方法，并支持轮循和事件响应两种方式获取变化的对象，两种方式... -
空标题文档
大脑是一种生理组织，而且是一种错综复杂的织物组织，与我们所知的宇宙中的其他任何事物都不同。但是，就像其他生理组织一样，它是由细胞构成的。确切地讲，这些细胞是高度专业化的细胞，但控制它们的原理和控制其他所有细胞的原理是一样的。人们能够检测、记录和解释这些细胞的电学信号和化学信号，也能够识别它们的化学成分。同时，人们还能够描述构成大脑织物神经纤维网的关系。总之... -
14.5 回顾runnable
14.5 回顾runnable 14.5 回顾runnable 在本章早些时候，我曾建议大家在将一个程序片或主Frame当作Runnable的实现形式之前，一定要好好地想一想。若采用那种方式，就只能在自己的程序中使用其中的一个线程。这便限制了灵活性，一旦需要用到属于那种类型的多个线程，就会遇到不必要的麻烦。 当然，如果必须从一个类继承，而且想使类具有... -
5.1 计算图
5.1 计算图 5.1.1 用计算图求解 5.1.2 局部计算 5.1.3 为何用计算图解题 5.1 计算图 计算图将计算过程用图形表示出来。这里说的图形是数据结构图，通过多个节点和边表示（连接节点的直线称为“边”）。为了让大家熟悉计算图，本节先用计算图解一些简单的问题。从这些简单的问题开始，逐步深入，最终抵达误差反向传播法。 5.1.1 用... -
13.2 Celery
13.2 Celery 13.2 Celery 除了通用的消息队列外，任务队列在分布式处理中也十分重要。任务队列的输入是工作的一个单元，称为任务，有多个工作者监听队列来获取任务并执行。 Celery是一个简单、灵活、高可用、高性能的开源（BSD许可）分布式任务处理系统，专注于实时处理的任务队列管理，同时也支持任务调度。Celery基于Python...