分布式日志收集系统: Facebook Scribe之配置文件 经验

(15)max_write_size:默认是1000000字节。File存储将尝试按max_write_size字节的块大小刷新数据到文件系统。max_write_size的大小不能超过max_size。由于 target_write_s

jopen 2012-01-11   23489   0

分布式 key-value 存储系统 Scalaris 经验

Scalaris 是一个采用Erlang开发的分布式 key-value 存储系统。 Business Logic fault-tolerant startup: start Scalaris when

openkk 2011-12-01   13551   0

分布式数据存储服务器 MckoiDDB 经验

MckoiDDB 是一个支持低延迟的随机存取(读,写)的数据库,涵盖了网络上的机器集群分布式数据库查询系统。该软件提供了管理数据在网络上集群和用于访问和查询数据的 客户端API存储系统。该系统可通过在

openkk 2011-12-01   14067   0

lucene + hadoop 分布式搜索运行框架 Nut 介绍 经验

Nut设计最重要的原则,以此原则形成以分布式并行计算为核心的架构设计。以分布式并行计算为核心的架构设计是Nut区别于Solr、Katta的地方。 Nut是一个Lucene+Hadoop分布式并行计

fmms 2012-01-01   43838   0

分布式key/value存储系统 BeansDB 经验

是一个主要针对大数据量、高可用性的分布式KeyValue存储系统,采用HashTree和简化的版本号来快速同步保证最终一致性(弱),一个简化版的 Dynamo (Dynamo 是 Amazon 公司的一个分布式 存储 引擎。)。

openkk 2012-03-07   15953   0

高度可扩展的分布式图形数据库 Titan 经验

Titan 是一个分布式的图形数据库,特别为存储和处理大规模图形而优化。 支持不同的分布式存储层 Cassandra 1.1 HBase 0.92 原生实现 Blueprints graph API Gremlin

openkk 2012-06-14   37423   0

MemSQL,号称世界上最快的分布式关系型数据库 经验

前Facebook工程师创办的MemSQL公司获500万美元投资。号称世界上最快的分布式关系型数据库,兼容MySQL但快30倍,能实现每秒150万次事务。原理是仅用内存并将SQL预编译为C++。

openkk 2012-06-18   27775   0

分布式搜索引擎 Elastic Search 经验

ElasticSearch是一个基于 Lucene 构建的开源,分布式,RESTful搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。支持通过HTTP使用JSON进行数据索引。

fmms 2012-01-01   21586   0

为什么Hadoop将一定会是分布式计算的未来? 经验

多,也就 越相信Hadoop的未来,这里写一篇文章与大家分享分享,为什么我相信Hadoop一定是分布式计算的未来。 写在前面的话: 今天听同事分享了一篇很有意思的讲座,叫做"Why Map-Reduce

fmms 2012-02-19   111837   0

php与memcached服务器交互的分布式实现源码分析 经验

的关系,研究了php通过调用 memcache 和 memcached PECL扩展库的接口存储到分布式缓存 服务器 的机制,在此做我根据他们各自的 源码 进行分析,希望能对这方面感兴趣的人有些帮助。

fmms 2012-03-14   38915   0

高性能分布式框架 Shuttler.Net 经验

Shuttler.Net是一个高性能分布式框架,如果你在使用老去的remoting,webservices分布式架构,或在使用新生的wcf,那么你也可以尝试下Shuttler.Net。 如果你想开

openkk 2012-06-09   36022   0

分布式多线程检查点工具:DMTCP 经验

高性能计算/分布式计算等大量计算需要程序运行几天、几周甚至几个月,如果期间因为电力或者不可避免的问题导致程序中断会浪费大量的时间和人力,还 有超级计算机在这段时间里运行的电力成本。我们没有遇到过电力问

jopen 2013-12-16   11313   0

基于solr和zookeeper的分布式搜索方案 经验

SolrCloud 是基于Solr和Zookeeper的分布式搜索方案,是正在开发中的Solr4.0的核心组件之一,它的主要思想是使用Zookeeper作为集群的配置信息中心。 它有几个特色功能:

jopen 2014-03-22   23511   0

快速理解Kafka分布式消息队列框架 经验

== 是什么 == 简单的说, Kafka 是由 Linkedin 开发的一个分布式的消息队列系统 (Message Queue) 目标 Scope (解决什么问题) kafka

jopen 2014-03-31   26499   0

分布式存储解决方案:Skylable SX 经验

Skylable SX 是一个用来满足你数据存储需求的可靠的、强大的完全分布式的解决方案。可聚合来自多台服务器上的可用磁盘空间到一个单一的存储系统。集群本身确保你的数据是通过多个节点复制和同步的。内建去重、客户端加密、即时压缩等特性。

分布式服务架构之java远程调用技术浅析 经验

分布式服务框架中,一个最基础的问题就是远程服务是怎么通讯的,在Java领域中有很多可实现远程通讯的技术,例 如:RMI、MINA、ESB、Burlap、Hessian、SOAP、EJB和JMS等,这

jopen 2013-12-28   29468   0

用 Hadoop 进行分布式并行编程, 第 2 部分 经验

在上一篇文章:“用 Hadoop 进行分布式并行编程 第一部分 基本概念与安装部署”中,介绍了 MapReduce 计算模型,分布式文件系统 HDFS,分布式并行计算等的基本原理, 并且详细介绍了如何安装

jopen 2014-01-23   13905   0

可伸缩Web架构与分布式系统(2) 经验

一些在设计大型网站时需要考虑的关键问题和一些为达到这些目标所使用的组件。 上篇文章 介绍了Web分布式系统设计准则和基本原理,本文介绍构建快速、可伸缩数据访问的组件。 (上文)谈及了在设计分布式系

jopen 2014-02-10   27569   0

solrcloud分布式集群部署&zookeeper集群安装 经验

eper在集群中的角色 像上述这样表名zookeeper的集群启动成功。 Solrcloud分布式集群 解压D:\apache-solr-4.3.0\example\webapps\solr.war

jopen 2013-12-11   31506   0

zookeeper单机多实例和分布式部署 经验

介绍zookeeper单机多实例部署(实验性质)以及生产环境的分布式部署 1. 准备工作: 1)需要linux环境,推荐用ubuntu的系统。学习的话使用oracle的virtual box安

jopen 2014-01-18   89282   0
1 2 3 4 5 6 7 8 9 10