0推荐
55K 浏览

hadoop压缩与解压

一 般来说,计算机处理的数据都存在一些冗余度,同时数据中间,尤其是相邻数据间存在着相关性,所以可以通过一些有别于原始编码的特殊编码方式来保存数据, 使数据占用的存储空间比较小,这个过程一般叫压缩...
0推荐
49K 浏览

YARN资源调度器

随着Hadoop的普及,单个Hadoop集群的用户量越来越大,不同用户提交的应用程序往往具有不同的服务质量要求,典型的应用有以下几种: 批处理作业。这种作业往往耗时较长,对完成时间一般没有严格...
0推荐
41K 浏览
0推荐
13K 浏览

多功能存储服务器:ZFSguru

ZFSguru 是一个注重存储的多功能服务器设备。ZFSguru之前是为ZFS提供简单的web界面前端,但已经成长为一个FreeBSD 衍生品并拥有自己的基础设施。
0推荐
31K 浏览

针对Hadoop数据处理应用程序的新分布式执行框架: Apache Tez

你可能听说过Apache Tez,它是一个针对Hadoop数据处理应用程序的新分布式执行框架。但是它到底是什么呢?它的工作原理是什么?哪些人应该使用它,为什么?如果你有这些疑问,那么可以看一下B...
0推荐
79K 浏览

大数据相关资源集合:Awesome Big Data

大数据相关的框架,资源和其实用的内容。
0推荐
25K 浏览

Hadoop YARN的发展史与详细解析

Apache Hadoop于2005年推出,提供了核心的MapReduce处理引擎来支持大规模数据工作负载的分布式处理。7年后的今天,Hadoop正在经历着一次彻底检查,不仅支持MapReduc...
0推荐
59K 浏览

基于Hadoop2.5.0的集群搭建

基于Hadoop2.5.0的集群搭建
0推荐
28K 浏览

分布式实时计算系统:Apache Storm

Apache Storm 的前身是 Twitter Storm 平台,目前已经归于 Apache 基金会管辖。 Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的...
0推荐
25K 浏览

网络存储系统:Rockstor

RockStor 是一个免费而且开源的 NAS(Network Attached Storage) 网络存储系统解决方案,支持常用的文件分享协议,包括 NFS、Samba/CIFS 和 SFTP 等。
0推荐
10K 浏览

Hadoop集群搭建(-v1.2.1)

Hadoop集群搭建(-v1.2.1)
0推荐
101K 浏览

Spark与Hadoop的结合

Spark可以直接对HDFS进行数据的读写,同样支持Spark on YARN。Spark可以与MapReduce运行于同集群中,共享存储资源与计算,数据仓库Shark实现上借用Hive...
0推荐
41K 浏览

开源的云存储和同步服务工具:Syncthing

  Syncthing 是一款开源工具,它的原理是将电脑里的文件夹当作是服务器,对特定的电脑进行同步分享。下载解压 Syncthing 后就可以使用了,会打开默认浏览器显示其网页 GUI。
0推荐
18K 浏览

有趣的个人云平台:Sandstorm

Sandstorm 是国外一款开源的项目,是由我们熟知的开发Protocol Buffers的前谷歌工程师 Kenton Varda 创立的,旨在基本改变现有的网络应用方式,目前已被数百个技术公司使用。
0推荐
31K 浏览

Spark2: 对RDD进行编程系列

Spark2: 对RDD进行编程系列
0推荐
27K 浏览

什么是Hadoop即服务(Hadoop-as-a-Service)

两周前的VMworld 2014大会上,EMC演示了一段基于EMC Hybrid Cloud混合云架构之上的HaaS(Hadoop-as-a-Service,Hadoop即服务)和Vir...
0推荐
51K 浏览

Spark实战1:单节点本地模式搭建Spark运行环境

Spark实战1:单节点本地模式搭建Spark运行环境
0推荐
48K 浏览

一个开源的云存储和文件共享应用程序:Syncany

Syncany是一个开源的云存储和文件共享应用程序。能够安全地同步您以任何形式存储文件!比如:FTP, SFTP, WebDAV, Amazon S3 和 Samba。 虽然基本思路类似Drop...
0推荐
22K 浏览

分布式数据存储:ModeShape

ModeShape是一个分布式,层次化,事务性的,一致的数据存储。支持查询、全文搜索、事件,版本控制,引用和灵活的动态架构。它非常快的,高度可用,高度可扩展,100%开源和采用Java编写。
0推荐
18K 浏览

hadoop增加新节点实践

之前已经有了namenode和datanode1,现在要新增节点datanode2
1 2 3 4 5 6 7 8 9 10

经验分享,提升职场影响力

投稿

热门问答

    热门文档