-
15.1 机器的标识
15.1 机器的标识 15.1 机器的标识 当然，为了分辨来自别处的一台机器，以及为了保证自己连接的是希望的那台机器，必须有一种机制能独一无二地标识出网络内的每台机器。早期网络只解决了如何在本地网络环境中为机器提供唯一的名字。但Java面向的是整个因特网，这要求用一种机制对来自世界各地的机器进行标识。为达到这个目的，我们采用了IP（互联网地址）的概念。... -
2.6 实时流计算
2.6 实时流计算 2.6 实时流计算 实时流计算的场景：业务系统根据实时的操作，不断生成事件（消息/调用），然后引起一系列的处理分析，这个过程是分散在多台计算机上并行完成的，看上去就像事件连续不断地流经多个计算节点处理，形成一个实时流计算系统。 市场上流计算产品有很多，主要是通过消息中枢结合工人模式实现的，大致过程如下： 1）开发者实现好流程输入... -
7.4.1 其他MPI作业资源调度技术
7.4.1 其他MPI作业资源调度技术 7.4.1 其他MPI作业资源调度技术 目前大型互联网公司的MPI集群的资源调度的主要做法是，基于Toroue的PBS方式进行任务和资源调度。PBS(Portable Batch System)最初由NASA的Ames研究中心开发，主要为了提供一个能满足异构计算网络需要的软件包，用于灵活的批处理，特别是满足高性能... -
3.6 手写数字识别
3.6 手写数字识别 3.6.1 MNIST 数据集 3.6.2 神经网络的推理处理 3.6.3 批处理 3.6 手写数字识别 介绍完神经网络的结构之后，现在我们来试着解决实际问题。这里我们来进行手写数字图像的分类。假设学习已经全部结束，我们使用学习到的参数，先实现神经网络的“推理处理”。这个推理处理也称为神经网络的前向传播 （forward p... -
6.2 Google Megastore
6.2 Google Megastore 6.2.1 系统架构" level="4"> 6.2.1 系统架构 6.2 Google Megastore Google Bigtable架构把可扩展性基本做到了极致，Megastore则是在Bigtable系统之上提供友好的数据库功能支持，增强易用性。Megastore是介于传统的关系型数据库和NoSQL... -
8.4 架构剖析
8.4 架构剖析 8.4.1 一致性选择" level="4"> 8.4.1 一致性选择 8.4 架构剖析 8.4.1 一致性选择" class="reference-link"> 8.4.1 一致性选择 Eric Brewer教授的CAP理论指出，在满足分区可容忍性的前提下，一致性和可用性不可兼得。 虽然目前大量的互联网项目选择了弱一致性，但我... -
4.6 分布式Session的架构设计和实现
4.6 分布式Session的架构设计和实现 4.6 分布式Session的架构设计和实现 如果建立一个网站，经常用到Session，Web中的Session指的就是用户在浏览某个网站时，从进入网站到浏览器关闭所经过的这段时间，也就是用户浏览这个网站所花费的时间。一个Session的概念需要包括特定的客户端、特定的服务器端以及不中断的操作时间。A用户和... -
空标题文档
你担心的事99%不会发生 当我们走出停车场，顺着两侧都是石楠花的小路走到海边时，安迪告诉我他是如何使用正念通过SAS选拔的。对他来说，这是一种天生具备的能力。 “每天早上我醒来，都把这一天当作选拔竞赛的第一天。我在前一天表现糟糕还是出彩，又有什么关系？没有必要为前一天的失意黯然神伤，也不必为前一天的辉煌沾沾自喜。它们都已经过去了。” “在选拔过程中，... -
3.3 数据分布
3.3 数据分布 3.3.1 哈希分布" level="4"> 3.3.1 哈希分布 3.3 数据分布 分布式系统区别于传统单机系统在于能够将数据分布到多个节点，并在多个节点之间实现负载均衡。数据分布的方式主要有两种，一种是哈希分布，如一致性哈希，代表系统为Amazon的Dynamo系统；另外一种方法是顺序分布，即每张表格上的数据按照主键整体有序，代...