分布式的Key-Value存储系统 Dynomite 经验

Dynomite 是采用 ErLang 语言开发的分布式的Key-Value存储系统。 Dynomite is an eventually consistent distributed key value

openkk 2011-12-01   16403   0

Java Cache 的HashMap实现, 适用场景及分布式ehcache实例 经验

e快5倍。 如果本地cache不能满足你的要求,ehcache是个很好的选择。不仅仅作为分布式的cache,甚至作为状态同步,ehcache都有非常优秀的案例。也可以实现多机copy。分享一个

openkk 2012-02-13   81732   0

分布式的Key-Value存储系统 Kai 经验

Kai是一个分布式key-value数据存储,启发自Amazon的Dynamo。它能够用于构建高可靠性和高可扩展性。你可以利用Kai管理海量数据,就像Dynamo存储购物车,分类等一样。 A highly

openkk 2011-12-01   13847   0

分布式日志处理和关联分析引擎 MassLogProcess 经验

MassLogProcess 是一个分布式日志处理和关联分析引擎。现在处理alpha阶段,MassLogProcess提供OSSIM类似的功能,但致力于更大数据量的日志处理和分布式计算。 当前版本包含以下组件:

jopen 2012-05-23   30501   0

用 Hadoop 进行分布式并行编程, 第 1 部分 经验

Hadoop 是一个开源的可运行于大规模集群上的分布式并行编程框架,由于分布式存储对于分布式编程来说是必不可少的,这个框架中还包含了一个分布式文件系统 HDFS( Hadoop Distributed

jopen 2014-01-23   40789   0

可扩展Web架构与分布式系统 经验

绍一些在大型网站结构设计的过程中需要注意的关键问题以及实现目标的基础工作。 本文侧重于介绍网络系统,尽管一些准则在其他分布式系统中也是适用的。 1.1. web分布式系统的设计原则 搭建和运营

jopen 2014-04-11   56152   0
P20

  分布式计算开源框架Hadoop入门实践 文档

分布式计算开源框架Hadoop介绍 ── 分布式计算开源框架Hadoop入门实践(一) 在SIP项目设计的过程中,对于它庞大的日志在开始时就考虑使用任务分解的多线程处理模式来分析统计,在我从前写的文章《Tiger

softmind 2011-10-08   6215   0

分布式系统测试在阿里云的实践 经验

分布式系统的测试是一个比较大的话题,在这里,我们仅用几个阿里云飞天分布式系统测试中比较有特点的实践方式来阐述一下我们对分布式系统测试的理解,希望对大家有所帮助。 1. 阿里云的分布式系统 飞天

jopen 2012-11-11   50374   0

基于JSON的开源分布式数据库:RethinkDB 经验

by。RethinkDB还易于安装和学习。 简单的编程模型: JSON数据模型和即时的一致性。 分布式连接,子查询,汇总,原子更新。 Hadoop的风格的map / reduce。 易于管理:

jopen 2012-11-09   24168   0

HAProxy + Keepalived + Flume 构建高性能高可用分布式日志系统 经验

保证了高可用性。 三、Flume简介 Flume是Apache提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时

jopen 2013-07-11   31389   0

Python并发分布式开发框架 asyncoro 经验

asyncore库是python的一个标准库,它是一个异步 socket的包装。我们操作网络的时候可以直接使用socket等底层的库,但是 asyncore使得我们可以更加方便的操作网络,避免直接使用socket,select,poll等工具时需要面对的复杂。

jopen 2012-07-09   21625   0

EhCache 分布式下缓存对象的同步 经验

为了提升目前开发产品的性能,项目组内考虑将一些常用的数据放入缓存,并且今后要将系统分布式部署,以达到负载均衡的目的,因此缓存同步问题就不得不需要考虑,该项目中主要用 EhCache 产品, EhCache

jopen 2012-09-03   63894   0

Cacheonix - Java分布式数据库管理框架 经验

是一个开源的集群的缓存和Java分布式数据库管理框架。允许其用户在集群中扩展Java应用程序,同时保持简单的设计和编码在一个单一的Java虚拟机中。 Cacheonix 关键特性: 可靠的分布式Java高速缓存

jopen 2012-10-14   65869   0

Hadoop2.5.0完全分布式配置(1主3从) 经验

如果不需要输入密码就连接成功的话,证明你配置对了,恭喜! 如果上面的步骤完成了,那么下面进行格式化文件系统: hdfs namenode -format 然后启动 HDFS 、 YARN

jopen 2014-11-22   27139   0

分布式应用开发框架:Apache Twill 经验

Hadoop YARN 的抽象层,减少了开发分布式应用程序的复杂度,允许开发者把精力放在应用逻辑上。Apache Twill 可以让你向使用线程一样来使用 YARN 的分布式编程模型。 示例代码: pu

jopen 2014-12-15   11943   0

使用 Redis 实现分布式系统轻量级协调技术 经验

分布式系统中,各个进程(本文使用进程来描述分布式系统中的运行主体, 它们可以在同一个物理节点上也可以在不同的物理节点上)相互之间通常是需要协调进行运作的,有时是不同进程所处理的数据有依赖关系,必须按照一定的次序进

ny8p 2015-06-19   23978   0

Apache Spark在大规模分布式自然语言处理的应用 经验

我想先介绍算法依赖的技术方法。我们使 用Spark技术来实现这个算法。Spark是一款卓越的数据分布式计算引擎,它能把数据分散到集群的所有节点进行计算。它和Map/Reduce有两个 重要的区别:

d2dn 2015-09-11   16802   0

京东开源的分布式SQL查询引擎:Presto 经验

Presto是什么? Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。 Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。

wge7 2015-06-25   32952   0
Presto  

MyCat:开源分布式数据库中间件 经验

系统中,数据规模单表单月30亿。 MyCat 是什么? 从定义和分类来看,它是一个开源的分布式数据库系统,是一个实现了MySQL协议的服务器,前端用户可以把它看作是一个数据库代理,用MySQL

jopen 2015-07-16   37977   0
Mycat  

mfs分布式存储+master端高可用 经验

mfs分布式存储+master端高可用

n2fy 2015-08-02   15680   0
mfs  
1 2 3 4 5 6 7 8 9 10