分布式日志系统:Scribe 经验

够从各种日志源上收集日志,存储到一个中央存 储系统(可以是NFS,分布式文件系统等)上,以便于进行集中统计分析处理。它为日志的“分布式收集,统一处理”提供了一个可扩展的,高容错的方案。当中 央存储系统

jopen 2014-12-04   20945   0

分布式计算框架:Google Cloud Dataflow 经验

也有可以构建复杂的pipeline做一代码优化和任务调度的好处,但目前还需要程序员来配置资源分配。 Spark在设计分布式数据集API时,模拟了Scala集合的操作API,使得额外的语法学习成本比Dataflow要低。

Chukwa:开源分布式数据收集系统 经验

Chukwa 是一个开源的用于监控大型分布式系统的数据收集系统。它构建在 hadoop 的 hdfs 和 map/reduce 框架之上的,继承了 hadoop 的可伸缩性和鲁棒性。Chukwa 还包

jopen 2014-12-02   43565   0

分布式跟踪系统调研 经验

tk/distributed-tracing.md 分布式跟踪系统调研 介绍 把分布式系统中各个组件的工作汇总起来,就可以得到一个全面的跟踪系统。 每个公司都会有一套自己的分布式跟踪系统。Google的Dappe

jopen 2015-01-25   38455   0

linux分布式安装hadoop1.2 经验

三台机器,centos6.5, master、slave1、slaver2分布式安装hadoop1.2 配置环境 准备: 三台虚拟机 配置主节点: 1. 查看当前使用网卡 [root@localhost

yne7 2015-03-30   9376   0
P17

  windows上Hadoop的伪分布式配置 文档

第三章 windows上Hadoop的伪分布式配置 3.1 安装前的准备 在windows上配置Hadoop需要做一些准备,包括软件的下载,了解Hadoop运行的条件,了解Hadoop在Linux与windows平台上的不同。

louiscool 2012-04-25   614   0
P3

  java分布式事务概念与实现示例 文档

完全由容器控制事务,用户通过Bean配置文件来定义事务行为 二三种都支持分布式事务,但只支持Java环境下的分布式事务。 下面讨论如何在Java程序里实现分布式事务,即在同一个事务里访问多个数据源。实际上就是如何使用JTA

why0806 2013-02-19   4754   0
P5

  分布式对象—EJB基础 文档

分布式对象—EJB基础 1、Java RMI RMI (Remote Method Invocation 远程方法调用)是Java的网络分布式应用系统的核心解决方案之一。它可以被看作是RPC的Jav

peijianwen 2011-05-18   3162   0
EJB   Java开发  
P55

  基于 ZooKeeper 的分布式 Session 实现 文档

基于ZooKeeper的分布式Session实现 1.   认识ZooKeeper ZooKeeper—— “动物园管理员”。动物园里当然有好多的动物,游客可以根据动物园提供的向导图到不同的场馆观赏

sweetbaybe 2012-12-27   576   0

Java 中最简单的分布式调用 RMI 经验

JAVA中最简单的分布式调用 RMI 前言 我们先来看一个例子: 系统中目前存在两个 JAVA 服务,分别是服务A、服务B。现在服务A 想要调用服务B中的某个服务,我们怎么实现呢? 有人觉

lm_lxt 2017-04-27   21641   0

分布式机器学习平台比较 经验

且,最近我们已经看到了有很多机器学习平台正在建立起来。 这篇文章 调查分析了多个分布式机器学习平台所使用的设计方法,并提出了未来的研究方向。这是我与我的学生Kuo Zhang、Salem Alqa

zhongkouwei 2017-08-28   40348   0

分布式事务实现:Spanner 资讯

统中,维护一个递增的时间戳作为版本号很好办。分布式系统中,机器和机 器之间的时钟有误差,并且误差范围不确定,带来的问题就是很难判断事件(在本文,事件指分布式事务版本号)发生的前后关系。反应在Spanner中,就是

cmb2 2015-03-18   7168   0
Spanner  

构建分布式系统 - 技术考量 资讯

前不久在拉斯维加斯举办的 RICON分布式系统大会 取得了圆满的成功,这佐证了当今大型应用的重要性。各场演讲都爆满,观众的参与度也空前高涨。此次大会由 Basho Technologies (知名的分布式NoSQL数据库

mx64 2015-06-23   7204   0

分布式系统的事务处理 资讯

区也需要进行数据冗余处理。这就是数据副本:当出现某个节点的数据丢 失时可以从副本读到,数据副本是分布式系统解决数据丢失异常的唯一手段。所以,在这篇文章中,简单起见,我们只讨论在数据冗余情况下考虑数据的一致性和性

jopen 2014-01-20   32257   0
P7

  Memcached分布式缓存简介 文档

一.   什么是Memcached Memcached 是一个高性能的分布式内存 对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象 来减少读取数据库的次数,从而提供动态、数据库驱动网站的速度。

fanyunsheng001 2011-08-23   525   0
P50

  09 Java RMI的分布式应用的实例 文档

1. 9.6 一个RMI的分布式应用的实例用RMI编写一个分布式应用,核心有以下三方面: 定位远程对象 1. 一个应用可以利用RMI的名字服务功能注册器远程对象。 2. 可以象操作普通对象一样传送并返回一个远程对象的引用(指针)。

panyong15 2014-01-06   2891   0
Java开发   HTML   Java   C/C++  
P14

  分布式数据库选型 文档

用较高NoSQL较成熟数据模型简单,通常为Key-Value模式,基于键值的操作非常快,通常具备分布式能力不支持事务 范围查询是瓶颈 周边工具少 对运维有一定要求使用Key-Value模型来访问数据的

quyf 2016-07-28   1951   0
方案   报告   SQL  
P21

  消息中间件在大型分布式系统 文档

1. 消息中间件在大型分布式系统的应用马震(锋寒)@淘宝网 2011-11-26 2. 个人简介2008年——至今 淘宝网技术专家 负责消息中间件的研发 之前在Ericsson和金蝶中间件工作 感兴趣领域:

fuxiaoyu 2017-03-14   1257   0

hadoop分布式集群搭建 博客

hadoop版本:hadoop-0.20.205.0-1.i386.rpm 下载地址:http://www.fayea.com/apache-mirror/hadoop/common/hadoop-0.20.205.0/ jdk版本:jdk-6u35-linux-i586-rpm.bin 下载地址:http://www.oracle.com/technetwork/java/javase/down

jopen 2012-09-06   2021   0
fast el   拉手  
P65

  网站设计方案合集 文档

购物商城网站设计方案-电子商务-网上商城 这是推荐的一套商业网站方案,支持数据库。 此方案设有方便 用户管理、产品管理、客户服务 等模块。 具有基本电子商务功能,能满足大多数企业的商务应用,开发成本约在6000-10000之间。

mousefat 2012-05-04   5687   0
方案  
1 2 3 4 5 6 7 8 9 10