大型网站技术架构的演进 经验

20% 的数据上,如果我们能将这部分数据缓存下来,性能一下子就上来了。而缓存又分为两种:本地缓存和远程分布式缓存。具体使用哪种?还是两种都用,我目前不知道。 这里有一个问题,书没有提到:应该缓存哪些数据?应该有一些原则的吧。

jopen 2015-04-14   30071   0

全球最杰出的14位程序员 资讯

个人简介/主要荣誉: 谷歌大规模分布式计算系统的设计师,例如:站点爬行,索引与搜索,在线广 告,MapReduce,BigTable 以及 Spanner (分布式数据库)。2009 年进入美国国家工程院;2012

jopen 2014-07-11   12909   0

大型网站技术架构的演进 资讯

因为80%的业务访问都集中在20%的数据上,如果我们能将这部分数据缓存下来,性能一下子就上来了。而缓存又分为两种:本地缓存和远程分布式缓存。具体使用哪种?还是两种都用,我目前不知道。 这里有一个问题,书没有提到:应该缓存哪些数据?应该有一些原则的吧。

jopen 2015-08-18   31522   0
架构  

[译]从LinkedIn,Apache Kafka到Unix哲学 经验

哲学(philosophy)。我将展示这种哲学与主流数据库设计方式截然不同的原因;并探索如果现代分布式数据系统从Unix中学到了一些皮毛,那它在今天将发展成什么样子。 特别是,我觉得Unix管道与

jopen 2015-09-11   27066   0

讲给硅谷创业者的大数据精华集合 经验

突破571亿,背后是有很多故事,当年在百度做Pyramid(按Google三辆马车打造的金字塔三层分布式系统)有志之士,继续在OceanBase 创造神话。而阿里云当年备受争议,马云也怀疑是不是被王坚忽

jopen 2015-01-25   84829   0
P83

  hadoop源码分析总结 文档

Hadoop源代码分析(一) 关键字: 分布式 云计算 Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。 GoogleCluster: http://research

bluesky666 2015-05-05   2182   0
P83

  Hadoop源代码分析 文档

Hadoop源代码分析(一) 关键字: 分布式 云计算 Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。 GoogleCluster: http://research

leroy 2011-08-16   3752   0
P83

  Hadoop 源码 文档

 Hadoop源代码分析(一) 关键字: 分布式 云计算 Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。 GoogleCluster: http://research

xnbw 2016-01-12   2076   0
P83

  Hadoop源代码分析(完整版) 文档

Hadoop源代码分析(一) 关键字: 分布式 云计算 Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。 GoogleCluster: http://research

cixiang 2010-11-15   335   0
P83

  Hadoop 源代码分析(完整版) 文档

思数云大数据中心 http://www.bihadoop.com Hadoop源代码分析(一) 关键字: 分布式 云计算 Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。

ka520 2015-11-14   1188   0
P6

  MemCached Cache Java Client封装优化历程 文档

Memcached 介绍 Memcached是一种集中式Cache,支持分布式横向扩展。这里需要有点说明,很多开发者觉得Memcached是一种分布式Cache,但是其实Memcached服务端本身是单实例的,只

pengle 2012-05-24   781   0
P6

  MemCached Cache Java Client 封装优化历程 文档

Memcached 介绍 Memcached是一种集中式Cache,支持分布式横向扩展。这里需要有点说明,很多开发者觉得Memcached是一种分布式Cache,但是其实Memcached服务端本身是单实例的,只

css0613 2012-09-05   3724   0

探索5K巅峰,云梯架设的飞天之梦 经验

对任何企业而言,服务压力上涨都是幸福的烦恼。而到了阿里这样的规模,不管是幸福还是烦恼都被放大了无数倍。对于大规模分布式离线存储和计算集群来 说,如果原有集群不能通过简单的增添主机来增加存储空间和计算能力,横向扩展遭遇

jopen 2014-10-30   30429   0
P6

  MemCached Cache Java Client封装优化历程 文档

Memcached 介绍 Memcached是一种集中式Cache,支持分布式横向扩展。这里需要有点说明,很多开发者觉得Memcached是一种分布式Cache,但是其实Memcached服务端本身是单实例的,只

pengle 2012-03-31   3917   0

任务和调度:理解批量处理的关键设计 经验

写脚本,在类Unix系统中通过cron程序定时启动执行。但是这种模式仅仅适合单机处理的情况,没有分布式处理的能力,同时也没有办法进行统一的监控管理。在实际使用时,可能同时存在数量巨大的批量任务,如何管

ss5723 2016-08-31   33577   0
P6

  MemCached Cache Java Client封装优化历程 文档

Memcached 介绍 Memcached是一种集中式Cache,支持分布式横向扩展。这里需要有点说明,很多开发者觉得Memcached是一种分布式Cache,但是其实Memcached服务端本身是单实例的,只

sherman4223 2011-01-29   6276   0

HBase优化实战 经验

HBase是一个相对较复杂的分布式系统,并发写入的性能非常高。然而,分布式系统从结构上来讲,也相对较复杂,模块繁多,各个模块之间也很容易 出现一些问题,所以对像HBase这样的大型分布式系统来说,优化系统运行

jopen 2015-12-05   22044   0
P15

  rocketmq原理介绍 文档

宕机或者重启)下,消息短暂的乱序,使用普通顺序方式比较合适。 ▶严格顺序消息 顺序消息的一种,无论正常异常情况都能保证顺序,但是牺牲了分布式 Failover 特性,即 Broker 集群中只要有一台机器不可用,则整个集群都不可用,服务可用性大大降低。

sunshine42 2016-09-16   577   0
P8

  NOSQL数据库介绍 文档

P: Tolerance of network Partition 分区容忍性(分布式) CAP理论告诉我们,一个分布式系统不可能满足一致性,可用性和分区容错性这三个需求,最多只能同时满足两个。 关注

synart 2012-04-18   8205   0

High Availability启示录 经验

有4个引擎发动机的大型飞机,就是一个HA系统,一个发动机坏了也不至于飞机失去动力而坠毁。当前各种分布式计算架构,存储架构也都是HA系统,包括我们人自身更是一个复杂的HA系统,单个细胞可以随便死去,我们人体可以生成新细胞来替换老细胞。

MolliePiper 2016-02-14   11553   0
1 2 3 4 5 6 7 8 9 10