案例分析:基于消息的分布式架构 经验

美国计算机科学家,LaTex的作者Leslie Lamport说:“分布式系统就是这样一个系统,系统中一个你甚至都不知道的计算机出了故障,却可能导致你自己的计算机不可用。”一语道破了开发分布式 系统的玄机,那就是它的复杂与不可控。所以Martin

jopen 2014-12-21   45051   0

5个强大的Java分布式缓存框架推荐 经验

本文主要是分享了5个常用的Java分布式缓存框架,这些缓存框架支持多台服务器的缓存读写功能,可以让你 的缓存系统更容易扩展。 1、 Ehcache – Java分布式缓存框架 Ehcache是一个

jopen 2014-11-17   111686   0

分布式系统的功能和性能测试框架:Zopkio 经验

Zopkio是专为支持大规模的性能和功能测试的一个测试框架。

jopen 2014-12-11   15982   0

Dubbo:来自于阿里巴巴的分布式服务框架 经验

000+次访问量支持,并被广泛应用于阿里巴巴集团的各成员站点 Dubbo是一个阿里巴巴开源出来的一个分布式服务框架,致力于提供高性能和透明化的RPC远程服务调用方案,以及SOA服务治理方案。其核心部分包含:

jopen 2014-12-02   136772   0

亿级Web系统搭建——单机到分布式集群 经验

可能离用户更近,提升用户体验。 例如,我访问了一张imgcache.gtimg.cn上的图片(腾讯的自建CDN,不使用qq.com域名的原因是防止http请求的时候,带上了多余的cookie信息),我获得的IP是183

jopen 2014-12-16   24263   0

Dockerized化的分布式应用程序的本地集群:Docker Swarm 经验

Swarm是一个Dockerized化的分布式应用程序的本地集群,它是在Machine所提供的功能的基础上优化主机资源的利用率和容错服务。具体来 说,Docker Swarm支持用户创建可运行Docker

jopen 2015-02-27   17825   0

可伸缩Web架构与分布式系统(1) 经验

计大型网站时需要考虑的关键问题和一些为达到这些目标所使用的组件。本文主要关注于Web系统,然而其中的一些内容同样适用于其他分布式系统。 1、Web分布式系统设计准则 构建和运行一个可伸缩的网站或应用来说究竟意味着什么?从一个基本的层面

jopen 2014-02-10   21836   0

Hadoop 2.3.0 分布式集群搭建图文 经验

0 /home 配置环境变量:在环境变量加入 hadoop 的 sbin目录并重载。 五。分布式集群搭建 1. 增加虚拟系统 1 )复制出一定数量的虚拟系统文件 2 )修改 UUID CMD$

jopen 2014-03-14   61471   0

地理空间信息的分布式版本控制系统:GeoGit 经验

GeoGit是一个开源工具,它的设计灵感来自Git,但适用其核心概念来处理地理空间数据的分布式版本控制。 ~$ geogit help List geogit commands ~/new-folder

jopen 2014-07-09   13963   0

分布式缓存服务器 memcachedb 经验

一个由新浪网的开发人员开放出来的开源项目,给memcached分布式缓存服务器添加了Berkeley DB的持久化存储机制和异步主辅复制机制,让memcached具备了事务恢复能力、持久化能力和分布式复制能力,非常适合于需要超高性能读写速度,但是

openkk 2011-11-30   14500   0

分布式内存数据云存储:EVCache 经验

Volatile  - 数据可以在任何时候消失 Cache - 一个内存键值存储 特性 分布式键值存储 AWS 跨域复制存储数据 注册和自动发现新节点或者新服务 项目主页: http://www

jopen 2015-05-19   11201   0
EVCache  

基于 HBase 构建可伸缩的分布式事务队列 经验

发者可以自由操作任何形式的数据操作而不用担心不一致 性,潜在的返工和失败。它可以帮助开发者在没有分布式系统背景的情况下建立他们的大数据应用。此外,如果需要可以关闭这种强大的保护机制换取高性能。它总 是比其他方式更容易使用。

ccwv 2015-06-15   11652   0

开源的分布式文件系统:GlusterFS 3.5 亮相 资讯

GlusterFS是一个开源的分布式文件系统,具有强大的Scale-Out横向扩展能力,通过扩展能够支持数PB存储容量和处理数千客户端。 GlusterFS借助TCP/IP或InfiniBand RD

jopen 2014-05-09   11494   0

分布式计算系统,Spark 发布1.0.0 版本 资讯

能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。 尽管创建 Spark 是为了支持分布式数据集上的迭代作业,但是实际上它是对 Hadoop 的补充,可以在 Hadoop

jopen 2014-05-30   29373   0
Spark  

如何编写一个分布式数据库 经验

刘奇(goroutine) 个人简介 : PingCAP创始人兼CEO。分布式系统专家,擅长分布式数据库,分布式缓存。目前从事NewSQL方向的创业,通过开源方式重建google内部的F1和s

jopen 2015-09-24   193269   0

CurioDB: 用 Scala和Akka构建的分布式持久化Redis克隆 经验

CurioDB: 用 Scala和Akka构建的分布式持久化Redis克隆。 Installation I've been using SBT to build the project, which

jopen 2015-07-13   20073   0

Adam:大规模分布式机器学习框架 经验

Adam是微软研究院的深度学习项目,该项目仍然是应用卷积神经网络进行图像分类,效果提高了很多,但从我读论文的角度看,adam更偏向于分布式 框架的实现,而非理论的创新,自Alex和Hinton在2012年发出[2]以后,其实卷积神经网络

jopen 2015-07-02   25877   0

构建高可扩Web架构和分布式系统实战 经验

1 Web分布式系统设计的原则 构建并运营一个可伸缩的Web站点或应用程序到底是指什么?在最初,仅是通过互联网连接用户和访问远程资源。 和大多数事情一样,当构建一个Web服务时,需要提前抽出时

jopen 2015-11-11   11631   0

FastDFS 分布式的文件存储环境搭建 经验

FastDFS 分布式的文件存储环境搭建 FastDFS环境安装包地址: http://download.csdn.net/detail/rzg813/9273935 (包含6个) 在Linux CentOS

jopen 2016-01-08   13922   0

Cola:一个分布式爬虫框架 经验

了这个 cola 。下面的文字来自 wiki 。 Cola是一个分布式的爬虫框架,用户只需编写几个特定的函数,而无需关注分布式运行的细节。任务会自动分配到多台机器上,整个过程对用户是透明的。 依赖

jopen 2016-01-07   14582   0
1 2 3 4 5 6 7 8 9 10