全部 项目 经验 代码 文库 问答 博客 资讯
P18

  淘宝TFS 文档

分布式文件系统学习1-搜集点资料 文章分类:Java编程 先列举几个比较常用的： FastDFS  --国人开发的一个开源系统 参考：http://blog.csdn.net/phphot/arch

gonow86 2013-01-30   680   0
分布式/云计算/大数据  

PayPal高级工程总监：读完这100篇论文 就能成大数据高手 资讯

： 关键架构层 图 1：大数据处理的关键架构层（点击图片可看大图） 文件系统层： 在这一层里，分布式文件系统需具备存储管理、容错处理、高可扩展性、高可靠性和高可用性等特性。 数据存储层：

jopen 2015-07-07   40256   0
大数据  

Pregel：基于图分割的图结构数据并行处理 经验

node），采用分布式文件系统，例如：GFS（google 分布式文件系统），HDFS（Hadroop 分布式文件系统），TFS（淘宝分布式文件系统）等。域名服务器包含了分布式文件系统中文件名与文件地址之间的键值对索引（index）。

jopen 2014-01-18   14972   0
Pregel   图形/图像处理  

hadoop的运行原理 经验

简单的一句话解释MapReduce就是“任务的分解与结果的汇总”。 HDFS是Hadoop分布式文件系统（Hadoop Distributed File System）的缩写 ，为分布式计算存储提供了底层支持。 MapReduce从它

jopen 2016-01-10   11195   0
分布式/云计算/大数据  

Hadoop 新 MapReduce 框架 Yarn 详解 经验

Hadoop MapReduce 框架的问题 对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不再累述，读者可参考

jopen 2014-05-14   171737   0
Hadoop   分布式/云计算/大数据  

Hadoop MapReduceV2(Yarn) 框架 经验

Hadoop MapReduce 框架的问题 对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不再累述，读者可参考

jopen 2014-09-11   22474   0
分布式/云计算/大数据   Hadoop YARN  
P14

  基于Ubuntu14.04 的 Hadoop2.2 集群安装与配置 文档

2、安装和配置Hadoop集群。 二、原理 Hadoop分布式计算平台是由Apache软件基金会开发的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS）和MapReduce（Google Ma

李新广 2015-07-10   4006   0
Hadoop   分布式/云计算/大数据  

存储系统的那些事 问答

存储系统从其与生俱来的使命来说，就难以摆脱复杂系统的魔咒。无论是从单机时代的文件系统，还是后来C/S或B/S结构下数据库这样的存储中间件兴起，还是如今炙手可热的云存储服务来说，存储都很复杂，而且是越来越复杂。

miie 2014-07-10   15252   0
存储   数据挖掘   数据库   C/C++   Go  
P38

  Hadoop 介绍 - API 文档

主要内容Hadoop项目简介 HDFS体系结构 HDFS关键运行机制 Hadoop VS.Google（分布式文件系统） Hadoop API Hadoop环境搭建 3. Hadoop项目简介Apache的解决方

zoujl 2012-08-29   4332   0
Hadoop   分布式/云计算/大数据   方案   报告   Apache  
P38

  Hadoop 技术讲解 文档

主要内容Hadoop项目简介 HDFS体系结构 HDFS关键运行机制 Hadoop VS.Google（分布式文件系统） Hadoop API Hadoop环境搭建 3. Hadoop项目简介Apache的解决方

aaron509 2012-03-01   4567   0
Hadoop   分布式/云计算/大数据   方案   报告   Apache  
P38

  Hadoop 技术讲解 文档

主要内容Hadoop项目简介 HDFS体系结构 HDFS关键运行机制 Hadoop VS.Google（分布式文件系统） Hadoop API Hadoop环境搭建 3. Hadoop项目简介Apache的解决方

xiexiantao 2012-06-20   2317   0
Hadoop   分布式/云计算/大数据   方案   报告   Apache  
P38

  Hadoop项目简介 文档

主要内容Hadoop项目简介 HDFS体系结构 HDFS关键运行机制 Hadoop VS.Google（分布式文件系统） Hadoop API Hadoop环境搭建 3. Hadoop项目简介Apache的解决方

451237450 2011-11-10   4302   0
云计算   Hadoop   分布式/云计算/大数据   方案   报告  
P38

  Hadoop 技术讲解 文档

主要内容Hadoop项目简介 HDFS体系结构 HDFS关键运行机制 Hadoop VS.Google（分布式文件系统） Hadoop API Hadoop环境搭建 3. Hadoop项目简介Apache的解决方

ning042712 2012-12-03   498   0
Hadoop   分布式/云计算/大数据   方案   报告   Apache  

国外程序员整理的系统管理员资源大全 资讯

-监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。 Rsnapshot -文件系统快照工具 SafeKeep -使用rdiff-backup，集中的，基于pull的备份 TarSnap

jopen 2015-01-18   61556   0
管理员资源  
P13

  国外程序员整理的系统管理员资源大全 文档

Lsyncd -监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。 · Rsnapshot -文件系统快照工具 · SafeKeep -使用rdiff-backup，集中的，基于pull的备份 ·

itudoumao 2015-03-31   4235   0

Hadoop五分钟入门指南 经验

使用简单的编程模型做跨集群的分布式处理。Hadoop在设计上可以从单服务器节点扩展到成千上万的服务器节点，每个节点都能提供本地计算和存储。 HDFS——分布式文件系统，MapReduce模式的实现。

jopen 2013-12-12   21448   0
Hadoop   分布式/云计算/大数据  
P33

  Hadoop中HDFS源代码分析 文档

3、Hadoop基本架构模型 - 3 - 1.4、Hadoop集群 - 5 - 二、Hadoop文件系统（HDFS） - 6 - 2.1、HDFS主要功能组件 - 7 - 2.2、HDFS体系结构 -

gps2012 2013-01-14   519   0
Hadoop   分布式/云计算/大数据  

Hadoop安装指南 博客

Hadoop已在有2000个节点的GNU/Linux主机组成的集群系统上得到验证。 Win32平台是作为 开发平台 支持的。由于分布式操作尚未在Win32平台上充分测试，所以还不作为一个 生产平台 被支持。 所需软件 Linux

jopen 2012-09-06   2803   0
jeecg  

Hadoop是什么 博客

Apache Lucene 下的一个子项目，它最初是从 Nutch 项目中分离出来的专门负责分布式存储以及分布式运算的项目。简单地说来， Hadoop 是一个可以更容易开发和运行处理大规模数据的软件平台。下面列举

jopen 2012-02-01   1098   0
lamp  

别再比较Hadoop和Spark了，那不是设计人员的初衷 资讯

在一些方面又并不相互重叠。 比如说，Spark没有文件管理功能，因而必须依赖Hadoop分布式文件系统(HDFS)或另外某种解决方案。将Hadoop MapReduce与Spark作一番比较来得更

jopen 2016-03-09   8767   0
Spark   Hadoop  

分布式文件系统 的相关搜索

1 2 3 4 5 6 7 8 9 10

关键词

云计算 Apache Pregel 数据库 Hadoop C/C++ 数据挖掘 lamp 大数据 Spark jeecg 管理员资源 图形/图像处理 分布式/云计算/大数据 Hadoop YARN