基于Go实现的分布式MQ 经验

6年的Java开发经验、先后就职于淘宝Java中间件团队、腾讯无线媒体产品部。现就职于陌陌担任基础业务组主管。专注于分布式消息总线、LBS技术领域、golang在大规模生产换环境应用的探索。 今天交流的内容也是我上半

jopen 2015-09-15   30878   0

分布式计算系统:Go Glow 经验

Go 编写的易用分布式计算系统,是 Hadoop Map Reduce,Spark,Flint,Samza 等等的替代品。 Glow 的目标是提供一个库,可以在并行线程或者分布式集群机器中进行更简单计算。

jopen 2015-10-30   12689   0

SpringMVC+MyBatis+JMS+JTA(分布式事务) 经验

这也就意味这一个问题,我们要多个数据源在同一个事务中。这里不枚举市面上的所有解决方案,其实atomikos JTA 是一个比较不错分布式事务管理器。 当然如果没有使用到JMS,在需要多数据源(也就是需要连接多个数据库)的情况同样适用。

jopen 2016-01-08   38858   0

深入理解分布式事务 经验

1、什么是分布式事务 分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。以上是百度百科的解释,简单的说,就是一次大的操作由不同的小操作

AnnRalston 2016-12-06   6227   0

基於 Bitcoin 的分布式 DNS: Namecoin 资讯

Namec oin 是一个基于比特币技术的分布式域名系统. 其原理和 Bitcoin 一样, 但产生於一个不同於 Bitcoin 主交易区块的起源块. 因为是基於 Bitcoin , 域名的安全性, 分布性,

openkk 2012-05-17   7503   0
DNS  

浅谈分布式消息技术 Kafka 经验

Kafka的基本介绍 Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志

wgpd9383 2017-07-26   17443   0

CAP 理论与分布式系统设计 经验

CAP 和 分布式系统的讨论和研究很多,但我认为这一篇肯定给大家带来不一样的收获,欢迎留言讨论。 Author Taosheng  Shi WeChat  Contact data-lake

基于Redis的开源分布式服务Codis 资讯

ng==》单个Twemproxy==》多个 Twemproxy==》Codis,豌豆荚自己开发的分布式Redis服务。在大规模的Redis使用过程中,他们发现Redis受限于多个方面:单机 内存有限、

jopen 2015-02-02   18695   0
Codis  
P56

  10 分布式对象体系 文档

分布对象处理技术---发展趋势 9.6 分布对象主流技术开发过程 1 2. 9.1 分布对象技术要解决的基本问题以下情况是不是分布式? 1、浏览 2、两个及其之间的通信 3、计算引擎 2 3. ?B机A机就是支持访问异地对象同一地址空间C++编译器完成连接

panyong15 2014-01-06   1467   0
Java开发   HTTP   Java   Perl   C/C++  

ZooKeepe分布式系统协调 开源项目

ZooKeeper是Hadoop的正式子项目,它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护、名字服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务

码头工人 2019-01-17   594   0
P28

  zookeeper分布式协同 文档

1. zookeeper分布式协同 2. 目录CONTENTS01 / 自身特性02 / 应用案例03/ 分布式系统概论 3. 01 / 自身特性-初识zookeeperWhat is zookeeper

summerwild 2018-01-24   760   0
Java  
P28

  高性能和分布式计算 文档

1. 高性能和分布式计算 林小拉 linxl@mail.sysu.edu.cn 中山大学信息科学与技术学院 2. 内容提要分布式计算和分布式系统 P2P计算 云计算和网格计算 传感器网络和物联网 3.

萧萧若水 2011-10-30   6695   0

海量文件的分布式计算处理方案 博客

Hadoop 是Google MapReduce的一个Java实现。MapReduce是一种简化的分布式编程模式,让程序自动分布到一个由普通机器组成的超大集群上并发执行。就如 同java程序员可以不考虑内存泄露一样,

Hadoopp 2012-09-28   803   0

分布式系统,你真的了解吗? 经验

承载量是分布式系统存在的原因 当一个互联网业务获得大众欢迎的时候,最显著碰到的技术问题,就是服务器非常繁忙。当每天有1000万个用户访问你的网站时,无论你使用什么样的服务器硬件,都不可能只用一台机

分布式ID生成方法 经验

为了解决上述两个问题,引出了第二个常见的方案 【常见方法二:单点批量 ID 生成服务】 分布式系统之所以难,很重要的原因之一是“没有一个全局时钟,难以保证绝对的时序”,要想保证绝对的时序,还是

hanxiaola 2016-02-22   19338   0

分布式团队工作的乐趣与好处 资讯

当我说我们是一个分布式团队时,我是指我们确实分布在整个地球上。Buffer 团队现在有 25 人,下面是 团队成员的位置图 。 分布式是如此快乐的 6 个原因 我认为分布式团队经常关注在挑

jopen 2014-07-23   7228   0

分布式云端机器学习 资讯

这样的云端服务平台,企业不仅仅可以用它来储存数据,做一些经典的“后视”商务智能分析,更能使用云端的强大力量做出具有“前瞻性”的预测分析。使用 Azure 机器学习 这样的现代化工具,企业可以获得关于其业务未

jopen 2015-06-03   14644   0

用于处理分布式数据 - COOPY 经验

COOPY 是一组工具包用于处理分布式数据,支持数据比较、补丁、合并以及版本控制,支持数据格式包括:CSV, Excel, MySQL, Sqlite 等等 项目主页: http://www

openkk 2012-02-15   17151   0

分布式爬虫框架:Cola 经验

Cola Cola是一个分布式的爬虫框架,用户只需编写几个特定的函数,而无需关注分布式运行的细节。任务会自动分配到多台机器上,整个过程对用户是透明的。 依赖 首先,确保Python版本为2.6或者2

jopen 2014-07-18   84246   0

Comcast 的开源的分布式系统库:Sirius 经验

Sirius 是一个来自 Comcast 的开源的分布式系统库,为你的应用程序提供方便、低延迟的访问呢重要的参考数据,这些数据的特点是小、相对很少更新的只读数据集。由于目前的内存资源成本越来越低,多数数据都直接在内存中存放。

jopen 2014-04-24   13044   0
1 2 3 4 5 6 7 8 9 10