​兔子和分布式机器学习 经验

兔子和分布式机器学习 上个学习的时候,我除了 TA 机器学习以外,另外一半的时间就是上了 System 课程。因为上课的缘故,需要做一个课程项目,于是我决定做一些和分布式机器学习相关的事情。 来到

gcd8 2015-01-21   34205   0

分布式流式处理框架:Storm 经验

Storm是一个免费开源、分布式、高容错的实时计算系统。它与其他大数据解决方案的不同之处在于它的处理方式。Hadoop 在本质上是一个批处理系统,数据被引入 Hadoop 文件系统 (HDFS) 并分发到各个节

jopen 2014-12-03   27828   0

用 Docker 构建分布式 Redis 集群 经验

【编者的话】本文介绍了如何使用Docker搭建Redis集群,很多读者都在问Docker能带来哪些实质性的好处,我想本文就是一个很好的例子。不使用Docker你也可以搭建Redis集群,那使用Docker后会有怎么样的优势了?我想可以用两个词总结:快速和复用。

jopen 2015-02-06   44625   0
Docker  

Git之分布式VS集中式 经验

Linus一直痛恨的CVS及SVN都是集中式的版本控制系统,而Git是分布式版本控制系统,集中式和分布式版本控制系统有什么区别呢? 先 说集中式版本控制系统,版本库是集中存放在中央服务器的,而干活

jopen 2015-01-06   9421   0

谈谈分布式计算的算子层 经验

本文是我对分布式计算的算子这层的一些认识和想法。因为最近自己的开发任务也是这方面相关的,公司内部有自研的类流式计算框架需要做一层算子层。我主要分析的是流式系统上实现算子这一点入手,对比现有计算框架和业界正在开展的项目,分析分析这件事的

jopen 2015-01-16   18290   0

NodeJS+Redis实现分布式Session方案 经验

Session 是面向连接的状态信息,是对 Http 无状态协议的补充。 Session 怎么工作? Session 数据保留在服务端,而为了标识具体 Session 信息指向哪个连接,需要客户端传递向服务端发送一个连接标识,比如存在Cookies

jopen 2014-11-15   50417   0

NoSQL中的分布式、容错事务 经验

5年前,术语NoSQL才 刚刚开始出现 ,那时 很多 NoSQL 数据库 的版本都还不到1.0,对于 CAP理论 来说,众多NoSQL数据库都选择了可用性要高于一致性的做法。 ACID 是一个沉重的负担,而

jopen 2015-01-15   19908   0

反思 | 分布式框架是必须的吗? 经验

程来处理流式或者批量处理任务,例如Hadoop和Storm,从而提高重用性。 当有人问起该如何处理大数据问题时,他们总是被指引到现存的产品中,例如Hadoop或者Storm。虽然这些产品非常棒

jopen 2015-09-24   9007   0

Apache SINGA ——分布式深度学习平台 经验

在 2015 年 3 月 17 日接纳的一个孵化项目,是个分布式深度学习平台。 SINGA 是基于大型数据集训练大型深度学习模块的常规分布式学习平台。SINGA 支持各种流行的深度学习模块,其中的 feed-forward

jopen 2016-01-17   8623   0

jedisLock—redis分布式锁实现 经验

一、使用分布式锁要满足的几个条件: 系统是一个分布式系统(关键是分布式,单机的可以使用ReentrantLock或者synchronized代码块来实现) 共享资源(各个系统访问同一个资源,资

AliciaDeal 2016-10-11   13437   0

饿了么分布式服务治理及优化经验 经验

通过中间件以及研发工具的辅助提升研发人员的工作效率,提升网站的稳定性及性能。 今天我想站在一个的角度上,看一下饿了么最近一年多的时间,经历的技术上一些痛苦的问题与改进的过程。 为什么讲比较痛

Mal24L 2016-08-18   48427   0
P33

  chapter 6 分布式系统中的死锁 文档

1. 第六章 分布式系统中的死锁 2. 6.1 死锁问题一般地说,分布式系统涉及更广泛的资源和数据共享。 同集中式系统相比,分布式系统需要通过多个机器才能得到相关信息,其死锁更难避免、更难防止、更难检

dejunw 2013-02-05   2291   0
P26

  分布式系统日志处理调研 文档

1. 分布式系统日志处理调研20120131-0206 2. 目录介绍 开源日志系统 方案 3. 介绍 4. 背景随着分布式系统规模扩以及模块化程度越来越高,各组件关联性越来越强,使得调试变得很复杂

290259325 2012-02-15   559   0
P16

  FastDHT----分布式Hash系统 文档

1. FastDHT ----分布式Hash系统余庆 2009-6-18 2. FastDHT简介分布式hash系统,存储Key Value Pair 支持两种存储方式 缓存方式的MPOOL 持久存储方式的BDB

cellcomcn 2012-09-18   5669   0

分布式JSON对等协议 TeleHash 经验

可让应用在网络的边界直接进行连接。受益于 TeleHash,应用程序之间可高效的进行路由和分发小的数据。 示例: // basic Telex with example command { "_ring":43723

openkk 2011-12-18   20034   0

分布式缓存系统 Xixibase 经验

Xixibase是一个高性能,跨平台的分布式缓存系统。Xixibase server 采用 C++ 实现,底层网络库采用的是Boost Asio。 Xixibase 主要特点: 1. 实现'Local

fmms 2012-02-03   21702   0

基于ZooKeeper的分布式Session实现 经验

能更加放心安全的观赏动物。回到我们企业级应用系统中,随着信息化水平的不断提高,我们的企业级系统变得越来越庞臃肿,性能急剧下降,客户抱怨频频。拆 分系统是目前我们可选择的解决系统可伸缩性和性能问题的唯一行之有

jopen 2013-09-09   116615   0

分布式FTP服务器:DrFTPD 经验

DrFTPD 是一个纯java的分布式FTP服务器。DrFTPD由一个master节点和多个 slave 节点组成,其中 slave 节点用来真正的接收文件传输任务,而 master 用来管理 slave

jopen 2013-01-10   51706   0

分布式系统监视:zabbix 经验

zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。 zabbix能监视各种网络参数,保证服务器系统的安全运营;并提供柔软的通知机制以让系统管理员快速定位/解决存在的各种问题。

jopen 2013-03-08   17166   0

分布式SQL引擎:Lealone 经验

是一个可用于HBase的分布式SQL引擎 是对 H2关系数据库 的改进和扩展 是一个100%纯Java的、将BigTable和RDBMS融合的数据库 有哪些应用场景? 使用Lealone的分布式SQL引擎

jopen 2013-03-20   15658   0
1 2 3 4 5 6 7 8 9 10