分布式 Checksum 交换中心 DCC 经验

Distributed Checksum Clearinghouse (DCC) 是一个包含客户端和服务器的平台,用来收集跟邮件信息相关的 checksum 数据,计算器可为 SMTP 服务器提供数据,mail user agent 可用来监测和处理垃圾邮件。同时 DCC 服务器间可交换公用的 checksum 数据。

fmms 2012-01-10   62818   0

基于ZooKeeper的分布式Session实现 经验

能更加放心安全的观赏动物。回到我们企业级应用系统中,随着信息化水平的不断提高,我们的企业级系统变得越来越庞大臃肿,性能急剧下降,客户抱怨频频。拆 分系统是目前我们可选择的解决系统伸缩性和性能问题的唯一行之有效的方法。但是拆分系统同时也带

fmms 2012-01-01   242564   0

AtomizeJS - 用JavaScript开发分布式应用 经验

AtomizeJS 是一个 JavaScript 库用来编写运行在浏览器之上的分布式应用,无需在服务器编写任何特定的逻辑。 项目主页: http://www.open-open.com/l

openkk 2012-03-08   18291   0

分布式计算方法 Swarm 经验

Swarm是一个Web应用程序开发框架,它允许程序分布在多台 计算机,从某种程度上让程序对程序员完全透明。Swarm将会观察程序的执行,并计算出如何在计算机之间分配计算量以达到效率最大化。Swarm采用

openkk 2012-03-03   14391   0

分布式RPC框架 zerorpc-python 经验

基于zeromq、gevent和 msgpack开发的分布式RPC框架zerorpc-python。这个框架简单、易用。 项目主页: http://www.open-open.com/li

fmms 2012-03-18   69468   0

分布式计算平台 ICE 经验

ICE(Internet Communications Engine)是ZeroC提 供的一款高性能的分布式计算平台,支持 C++ , .NET , Java , Python , Objective-C

openkk 2012-06-09   27619   0

hadoop分布式集群搭建 经验

hadoop分布式集群搭建

openkk 2012-09-01   32361   0

分布式基准测试框架 - RadarGun 经验

RadarGun 是一个用于对数据网格和分布式缓存进行基准测试的框架。 架构: 测试结果: 项目主页: http://www.open-open.com/lib/vie

jopen 2012-12-19   12327   0

Redis脚本实现分布式 经验

redis被大量用在分布式的环境中,自然而然分布式环境下的锁如何解决,立马成为一个问题。例如我们当前的手游项目,服务器端是按业务模块划分服务器的,有应用服,战斗服等,但是这两个vm都有可能同时改变玩家

jopen 2015-01-13   21136   0

分布式的内存计算平台:Apache Ignite 经验

Ignite 内存数组组织框架是一个高性能、集成和分布式的内存计算和事务平台,用于大规模的数据集处理。Ignite 为应用和不同的数据源之间提供一个高性能、分布式内存中数据组织管理的框架。 集群计算特性:

jopen 2015-01-10   61534   0

分布式流处理框架:Tigon 经验

Flows 对于 Tigon 而言相当于 Twill 对于 YARN 容器。提供了运行时弹性的伸缩性。 Flowlets 可以存储在 HBase ,如果需要可使用 Tephra 的 ACID

jopen 2014-12-15   15625   0

分布式数据库DDB introduce 经验

database)是网易杭研院立项最早,应用最为广泛的后台产品之一,也是国内最早出现的基于现有database之上开发的分布式数据库中间件,目前 依然在为网易易信,云音乐,云阅读等大型互联网产品提供稳定的数据库服务。业界中同

jopen 2014-09-25   29499   0

ZooKeeper伪分布式集群安装 经验

选择一个稳定版本进行下载,我这里下载的是zookeeper-3.4.6版本。 ZooKeeper伪分布式集群安装 伪分布式集群:在一台Server中,启动多个ZooKeeper的实例。 上传并解压安装包 cd /usr

jopen 2015-03-08   17960   0

分布式计算 Spark 入门介绍 经验

Spark是一个通用的分布式内存计算框架,本文主要研讨Spark的核心数据结构RDD的设计思路,及其在内存上的容错。内容基于论文 Zaharia, Matei, et al. " Resilient Distributed

jopen 2015-01-07   65000   0

搭建Spark完全分布式集群 经验

写在前面一: 本文详细总结Spark分布式集群的安装步骤,帮助想要学习Spark的技术爱好者快速搭建Spark的学习研究环境。 写在前面二: 使用软件说明 约定,Spark相关软件存放目录:

jopen 2015-01-16   23746   0

分布式矩阵编程库:Spartan 经验

Spartan是一个用于分布式矩阵编程库。使用类似于Numpy的操作来构建矩阵表达式。然后这些表达式被编译和优化,最后运行在一个跨多台机器的分布式阵列后端。 >> In [3]: x = spartan

jopen 2015-01-21   13857   0

分布式存储推荐论文 经验

Shun-Tak Leung。 基于普通服务器构建超大规模文件系统的典型案例,简单实用, 是google的重要基础设施,大数据的基石, 主要面向大文件和批处理系统。 主要技术特点包括: 假设硬件故障是常态, 64MB大块,

jopen 2014-01-21   20407   0

淘宝分布式数据层:TDDL 经验

淘宝很早就对数据进行过分库的处理, 上层系统连接多个数据库,中间有一个叫做DBRoute的路由来对数据进行统一访问。DBRoute对数据进行多库的操作、数据的整合,让上层系统像操作 一个数据库一样操作多个库。

jopen 2014-02-24   105344   0

mongodb集群的分布式锁的实现研究 经验

分布式锁的作用 一般来讲,锁的作用是在于解决不同的执行流之间对于同一个资源的竞争而产生的问题。分布式锁的作用就在于解决分布式程序中,分布在不同机器上的执行流对于资源的竞争问题。在mongodb的cluster上

jopen 2014-09-11   30623   0

MongoDB单机, 主从, 分布式部署 经验

MongoDB分片部署 介绍完以上,组合起来就可以搭建一个比较强壮的分布式MongoDB集群。分片类似分布式,MongoDB以新增分片的方式,扩展自己的容量,并且能给读写负载均衡。 1. 每一个启动的mo

jopen 2014-05-20   120810   0
1 2 3 4 5 6 7 8 9 10