mfs分布式文件系统的配置 经验

通过对mfs分布式文件系统中各个模块的拆分组合,较为详细且清晰的实现其配置 mfs分布式文件系统,所需主机: 管理服务器 managing server (master  vm3) 元数据日志服务器

jopen 2015-07-20   14726   0

大型网站之分布式会话管理 经验

方案都各有优劣,需要根据具体的实际场景做出合适的选择。 原创文章转载请注明出处: 大型网站之分布式会话管理

jopen 2015-10-06   6572   0

分布式服务平台:Microservices Infrastructure 经验

Microservices infrastructure 是一个为快速部署全球分布式服务的现代平台。 基础平台包括可以用来管理集群和资源节点数量的控制节点。容器可以自动在 DNS 上注册,从而使其他服务能够定位到它们

分布式事务内存数据库:MemDB 经验

MemDB 是全球首个支持分布式事务的 MongoDB。 高性能和可伸缩 快速的内存数据访问,高达 25,000 ops (single doc read/write) /碎片 (each shard

jopen 2015-11-05   10706   0

Python 并行分布式框架:Celery 经验

Celery (芹菜)是基于Python开发的分布式任务队列。它支持使用任务队列的方式在分布的机器/进程/线程上执行任务调度。 一、架构设计 Celery的架构由三部分组成,消息中间件(message

jopen 2016-01-05   11763   0

分布式文件系统:SeaweedFS 经验

SeaweedFS 是简单,高伸缩性的分布式文件系统,包含两部分:存储数十亿的文件;快速为文件服务。SeaweedFS 作为支持全 POSIX 文件系统语义替代,Seaweed-FS 选择仅实现 key-file

bger 2015-10-29   11325   0

Web项目演化系列--分布式 经验

务器了,如果不想要搭建集群服务器,可将相应的功能剥离出来成为单一的项目,也就是分布式结构。 由于后期必然会演变成分布式架构,而各个结构又是集群,因此如果当前情况下就把项目构架得太多复杂,投入再多的

jopen 2016-01-08   7121   0

分布式队列编程优化篇 经验

前言 “分布式队列编程”是一个系列文,之前我们已经发布了《 分布式队列编程模型、实战 》,主要剖析了分布式队列编程模型的需求来源、定义、结构以及其变化多样性;根据作者在新美大实际工作经验,给出了队

分布式系统的事务处理 经验

个区也需要进行数据冗余处理。这就是数据副本:当出现某个节点的数据丢失时可以从副本读到,数据副本是分布式系统解决数据丢失异常的唯一手段。所以,在这篇文章中,简单起见,我们只讨论在数据冗余情况下考虑数据的一致性和性能的问题。简单说来:

分布式数据库 HBase 经验

HBase是 Hadoop 的正式子项目,它是一个面向列的分布式数据库。是建立的hdfs之上,提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。 它介于nosql和RDBMS之间,仅能通过主键(row

openkk 2011-12-01   137182   0

分布式计算框架 Fourinone 经验

FourInOne(中文名字“四不像”)是一个四合一分布式计算框架,在写这个框架之前,我对分布式计算进行了长时间的思考,也看了老外写的其他开源框架,当我们把复杂的hadoop当作一门学科学习时,似乎忘

fmms 2011-12-06   35341   0

分布式的数据存储平台 PNUTS 经验

Yahoo!的PNUTS是一个分布式的数据存储平台,它是 Yahoo!云计算平台重要的一部分。它的上层产品通常也称为Sherpa。按照官方的 描述,”PNUTS, a massively parallel

openkk 2012-03-07   21153   0

分布式数据存储框架 Gizzard 经验

Twitter已经从以往的数据存储开发经验中提出一个名为 Gizzard的Scala框架,让用户可以更方便地创建自定义容错、分布式数据库。Twitter给出了一个名为“Rowz”的示例,方便用户上手。 Twitter还公布了Gi

openkk 2012-06-08   30644   0

Disco - 基于MapReduce的分布式计算框架 经验

Disco是一个基于MapReduce的分布式计算框架。Disco是一个开源项目,由诺基亚研究中心开发用来解决处理大数据时碰到的实际问题。 Disco采用Python开发,具有易于使用,强大的特点

openkk 2012-06-08   32597   0

Java分布式应用平台 SmartFrog 经验

SmartFrog 是一个功能强大而且灵活的用于配置发布和管理分布式软件系统的 Java 平台。 SmartFrog由以下三部分组成: A Language for defining configurations

openkk 2012-06-09   14358   0

分布式的内存对象系统 Shared Cache 经验

SharedCache是高性能的、分布式的内存对象系统,用于在动态WEB或Win应用程序中减少数据库的负责,提高访问速度。SharedCache 全部的代码都是用c#写的,100% DotNet原生态。

jopen 2011-12-25   25235   0

用于分布式计算的RPC框架:MyRPC 经验

MyRPC是个远程过程调用框架,设计用来方便地连接异构系统。它具有基于IDL的客户机/服务器存根生成,多平台支持,二进制协议(不需要转义二进制数据,更少的开销),支持各种数据类型(如字符串,二进制,符号和无符号整数,浮点数,列表,结构和枚举),和异常的支持。

jopen 2014-02-28   13377   0

分布式搜索 Elasticsearch 简介 经验

Elasticsearch是一个基于lucene的、开源的、分布式的、RESTful的搜索引擎。Elasticsearch有如下特征: 1. 更快的执行搜索; 2. 安装简单; 3. 完全自由的搜索模式;

jopen 2014-01-17   26758   0

分布式监控系统 Ganglia 经验

Ganglia是一个跨平台可扩展的,高 性能计算系统下的分布式监控系统,如集群和网格。它是基于分层设计,它使用广泛的技术,如XML数据代表,便携数据传输,RRDtool用于数据存储和可 视化。它利用精

openkk 2012-07-29   26858   0

分布式资源管理 GridWay 经验

GridWay 是一个工作负载管理器,用于在一个由不同计算平台组成的 grid 中执行作业管理和资源调配。GridWay 主要任务是大规模、可靠和高效的计算资源分片管理。

openkk 2012-07-29   11522   0
1 2 3 4 5 6 7 8 9 10