P11

  一步步构建大型网站架构 文档

用户数据等,这个时候通常会考虑的机制有缓存同步或分布式缓存;   4、如何让上传文件这些类似的功能继续正常,这个时候通常会考虑的机制是使用共享文件系统或存储等;   在解决了这些问题后,终于是把web

cwb1128 2011-09-11   672   0

成为专业程序员路上用到的各种优秀资料、神器及框架 经验

,工作原理,配置文件以及方法,几乎一模一样。配置简单,功能强大) Ganglia:分布式监控系统 fleet:分布式init系统 Ansible:能够大大简化Unix管理员的自动化配置管理与流程控制方式。

ymquan1987 2017-03-09   38211   0

构建高并发高可用的电商平台架构大纲 经验

是一种非常简洁快速的数据结构,他能同时使存储空间和速度最优化(而不必空间换时间),适合于海量数据的的计算场景。 2. 并行与分布式计算 1) 任务切分、分而治之 (MR) 在大规模的数据中,数据存在一定的局部性的特征,利

yne7 2015-03-30   82411   0

构建高并发高可用的电商平台架构大纲 经验

是一种非常简洁快速的数据结构,他能同时使存储空间和速度最优化(而不必空间换时间),适合于海量数据的的计算场景。 2. 并行与分布式计算 1) 任务切分、分而治之 (MR) 在大规模的数据中,数据存在一定的局部性的特征,利

jopen 2015-11-15   65006   0
P36

  构建高并发高可用的电商平台架构实践 文档

时使存储空间和速度最优化(而不必空间换时间),适合于海量数据的的计算场景。 2.     并行与分布式计算   1)      任务切分、分而治之(MR) 在大规模的数据中,数据存在一定的局部性的特征

gwpking 2016-04-15   835   0

构建高并发高可用的电商平台架构大纲 经验

是一种非常简洁快速的数据结构,他能同时使存储空间和速度最优化(而不必空间换时间),适合于海量数据的的计算场景。 2. 并行与分布式计算 1) 任务切分、分而治之 (MR) 在大规模的数据中,数据存在一定的局部性的特征,利

dwd4 2015-03-31   73469   0
P13

  消息中间件原理及JMS简介 文档

发送者可以将消息间接传给多个接收者,大大提高了程序的性能、可扩展性及健壮性,这使得异步处理模型在分布式应用上比起同步处理模型更具有吸引力。[5] 本文首先介绍了消息中间件的原理,然后介绍了目前流行的消

wenxin 2011-10-14   4616   0
P21

  hbase 文档

hbase简介 1.1. 什么是hbase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的

q943768628 2018-04-02   1512   0

世界上最牛的程序员 博客

google 乐。随 便看看 google 的成果就知道了。具有超强容错和负载平衡能力的分布式文件系统 GFS ( 现在能够用 100,000 台廉价 PC 搭起一个巨型分布系统,并且高效便宜地进行管理的系统也不多哈

ptjs 2012-09-27   6086   0
CentOS 7   Band  
P21

  Hadoop HDFS安装和管理 文档

data.dir /home/hdfs/hdfsinstall/filesystem/data 存储文件系统数据的位置,在每个数据节点上。 dfs.replication 2 数据需要备份的数量,默认是3

huafenged 2011-08-17   5478   0

Docker镜像 经验

时代,毋庸置疑的是,Docker作为领域内的 新宠儿,必然会继续受到业界的广泛青睐。云计算时代,分布式应用逐渐流行,并对其自身的构建、交付与运行有着与传统不一样的要求。借助Linux内核的 cgrou

ygfb 2015-12-08   19540   0
Docker   Linux  

Zookeeper研究和应用 经验

zookeeper简介 zookeeper 是一个开源分布式的服务,它提供了分布式协作,分布式同步,配置管理等功能. 其实现的功能与google的 chubby 基本一致.zookeeper的官方网站已经写了一篇非常经典的概述性文章

jopen 2015-03-25   21697   0

窥探Docker中的Volume Plugin内幕 经验

作者介绍: 张朝潞,有容云(Yourun Cloud)平台存储架构师。曾工作于UIT,华三,腾讯,专注分布式存储的研究和开发,对云计算存储解决方案方面有很深的技术造诣和行业理解。 本次交流将与大家分享Docker

izcdxtfrc 2016-05-16   28510   0
Docker  
P16

  MapReduce 的原理 文档

ce任务。通常作业的输入和输出都会被存储在文件系统中。整个框架负责任务的调度和监控,以及重新执行已经失败的任务。 通常,MapReduce框架和分布式文件系统是运行在一组相同的节点上的,也就是说,计算

hhy5277 2013-01-18   884   0

大数据技术hadoop入门理论系列之二—HDFS架构简介 经验

HDFS全称是Hadoop Distribute File System,是一个能运行在普通商用硬件上的分布式文件系统。与其他分布式文件系统显著不同的特点是: HDFS是一个高容错系统且能运行在各种低成本硬件上; 提供高吞吐量,适合于存储大数据集;

jopen 2016-01-12   16076   0
P16

  MapReduce 的原理 文档

ce任务。通常作业的输入和输出都会被存储在文件系统中。整个框架负责任务的调度和监控,以及重新执行已经失败的任务。 通常,MapReduce框架和分布式文件系统是运行在一组相同的节点上的,也就是说,计算

kanmars 2012-11-05   3974   0

十八款Hadoop工具帮你驯服大数据 经验

下载地址:http://incubator.apache.org/ambari/ HDFS (即Hadoop分布式文件系统) Hadoop分布式文件系统提供一套基础框架,专门用于拆分收集自不同节点之间的数据,并利用复制手段在节点故障时实现数据恢复。大型文件会被拆分

jopen 2016-01-05   23769   0

十八款Hadoop工具帮你驯服大数据 资讯

由Hortonworks公司负责提供支持。 HDFS (即Hadoop分布式文件系统) Hadoop分布式文件系统提供一套基础框架,专门用于拆分收集自不同节点之间的数据,并利用复制手段在节点故障时实现数据恢复。大型文件会被

jopen 2015-03-17   24523   1
Hadoop  
P18

  hadoop搭建与eclipse开发环境设置 文档

name.dir,dfs.data.dir参数,hadoop存放数据文件,名字空间等的目录,格式化分布式文件系统时会格式化这个目录。 这里指向了/hadoop,所以也要创建这个目录,并且用户归属也是hadoop:hadoop。

huafenged 2011-08-17   4456   0
P18

  hadoop搭建与eclipse开发环境设置及远程调试 文档

name.dir,dfs.data.dir参数,hadoop存放数据文件,名字空间等的目录,格式化分布式文件系统时会格式化这个目录。 这里指向了/hadoop,所以也要创建这个目录,并且用户归属也是hadoop:hadoop。

li270606338 2013-08-28   4101   0
1 2 3 4 5 6 7 8 9 10