-
7.2.7 讨论
7.2.7 讨论 7.2.7 讨论 Microsoft SQL Azure将传统的关系型数据库SQL Server搬到云环境中，比较符合用户过去的使用习惯。当然，云SQL Server与单机SQL Server还是有一些区别： ●不支持的操作：Microsoft Azure作为一个针对企业级应用的平台，尽管尝试支持尽量多的SQL特性，仍然有一些特性无... -
11.4.4 系统实现
11.4.4 系统实现 11.4.4 系统实现 分布式存储系统实现的关键在于可控性，包括代码复杂度、服务器资源、代码质量等。开发基础系统时，一个优秀工程师发挥的作用会超过10个平庸的工程师，常见的团队组建方式是有经验的优秀工程师加上有潜质的工程师，这些有潜质的工程师往往是优秀的应届生，能够在开发过程中迅速成长起来。 1.重视服务器代码资源管理 内存... -
11.4.5 使用与运维
11.4.5 使用与运维 11.4.5 使用与运维 稳定性和性能并不是分布式存储系统的全部，一个好的系统还必须具备较好的可用性和可运维性。 1.吃自己的狗粮 开发人员和运维人员往往属于不同的团队，这就会使得运维人员的需求总是被开发人员排成较低的优先级甚至忽略。一种比较有效的方式是让开发人员轮流运维自己开发的系统，定期总结运维过程中的问题，这样，运维... -
2.1.2 “包工头-职介所-手工仓库-工人”模式
2.1.2 “包工头-职介所-手工仓库-工人”模式 2.1.2 “包工头-职介所-手工仓库-工人”模式 30年的改革开放，中国经济总量已经排到了世界第二的位置上，有部分原因是农民工在加工生产行业几十年辛勤的劳动和努力，是他们使中国经济获得了今天的地位。 为了表示对中国农民工的敬意，Fourinone提出一种简化的分布式并行计算的设计模型，模仿现实中生... -
2.5.2 工头工人计算模式更完整的示例
2.5.2 工头工人计算模式更完整的示例 2.5.2 工头工人计算模式更完整的示例 从前面章节的原理介绍里知道，我们现实中的分布式计算存在多个环节，比如有的任务拆分，有的计算结果合并，或者多个拆分和合并，它们之间是串行关系，也就是合并必须等待拆分和计算完成才能进行，同时每个拆分或者合并的任务又都是并行的过程。 CtorDemo：是包含了3个工头实例，... -
2.5.6 分布式计算自动部署的示例
2.5.6 分布式计算自动部署的示例 2.5.6 分布式计算自动部署的示例 对于一个分布式计算的应用，如果不需要自动部署，将工头工人程序文件分别部署到相应机器运行即可，不需要过多配置。 Fourinone可以支持自动化class和jar包部署，class和jar包只需放在工头机器上，各工人机器会自动获取并执行，兼容操作系统，不需要进行安全密钥复杂配置... -
3.6 实践与应用
3.6 实践与应用 3.6.1 如何实现公共配置管理 3.6 实践与应用 3.6.1 如何实现公共配置管理 在分布式多台机器环境下，维持统一的配置信息是最常见的需求，当配置信息改变时，所有的机器能实时获取并更新。 Fourinone通过Park进行配置信息管理，Park提供创建和修改信息的方法，并支持轮循和事件响应两种方式获取变化的对象，两种方式... -
5.1 闲话中间件与MQ
5.1 闲话中间件与MQ 5.1 闲话中间件与MQ 谈起MQ，闲话几句中间件历史，大约2000年左右时，当时比较主流的分布式技术是Corba和微软阵营的Com/Com+，当时在一个小企业实习接受过Corba技术培训，那会儿拿本厚厚的Corba技术书，虽然也不怎么懂“公共对象请求代理体系结构”这个抽象高深的名字，但看见别人听着后更加一脸茫然时，顿时感到一... -
3.6 可扩展性
3.6 可扩展性 3.6.1 总控节点" level="4"> 3.6.1 总控节点 3.6 可扩展性 通过数据分布，复制以及容错等机制，能够将分布式存储系统部署到成千上万台服务器。可扩展性的实现手段很多，如通过增加副本个数或者缓存提高读取能力，将数据分片使得每个分片可以被分配到不同的工作节点以实现分布式处理，把数据复制到多个数据中心，等等。 分布... -
7.4 其他作业调度平台简介
7.4 其他作业调度平台简介 7.4 其他作业调度平台简介 在7.1节我们构思了一个调度平台的设计，并且利用之前学习的分布式技术来实现一个MPI的调度平台。本节我们看看市场上其他MPI调度技术，了解到其他互联网公司怎么做MPI调度的，再介绍一下Mesos和Yarn调度框架。