基于Mesos和Docker的分布式计算平台 经验
以运行不同的 分布式计算平台，如Spark、Storm、Hadoop、Marathon和Chronos等。Spark、Storm和Hadoop这样的计算平台有 任务调度功能，可以直接使用Mesos S
jopen 七牛首席架构师李道兵：分布式存储的元数据设计 资讯
常规的存储设计方法主要有以下几类。 无中心的存储设计，如GlusterFS。 有中心的存储设计，如Hadoop。 基于数据库的存储设计，如GridFS和HBase。 绕过元数据的存储设计，如FastDFS。
pjp 
P19 hbase运维参考手册(项目实战) 文档
Server前台查看： 1.1.4 CDH检查日志 CDH有强大的系统事件和日志搜索功能，每一个服务(如：hadoop,hbase)的主页都提供了事件和告警的查询，日常运维除了CDH主页的告警外，需要查看这些事件以发现潜在的问题：
分布式流式处理框架：Storm 经验
理方式。Hadoop 在本质上是一个批处理系统，数据被引入 Hadoop 文件系统 (HDFS) 并分发到各个节点进行处理。当处理完成时，结果数据返回到 HDFS 供始发者使用。Hadoop的高吞吐，
避免Java堆空间错误的5个步骤 经验
chip，它是一个逻辑概念，一个节点的slot的数量用来表示某个节点的资源的容量或者说是能力的大小，因而slot是 Hadoop的资源单位。详见 这里 。 在这篇博文里，我将详细讲解每个步骤，帮助大家更好地理解并正确管理实例（task
P17 如何让SQL在Spark上运行的更快 文档
来自于知名外企的创业团队 注册资金一千万元的高科技公司 成功完成近千万美元级别的A轮融资 中国最久的企业级Hadoop核心开发团队 比肩硅谷的企业级架构及功能模块 数十个国内的落地应用案例2星环科技www.transwarp
P26 Facebook 海量数据处理论文 文档
Apache Hadoop Goes Realtime at Facebook(译) 分类： Database/Nosql2011-10-01 23:07 230人阅读 评论(0) 收藏 举报
P44 中国移动Big Cloud平台(经分培训)v1.0 文档
Cloud云平台中国移动通信研究院 业务支撑研究所 2. 提纲云计算技术发展及应用概述 Google/Hadoop云计算架构 “大云”计划及进展状况 3. 解决相同问题的性价比（PC vs Unix服务器）服务器价格1/3来源：Google
微软大数据框架：REEF 经验
REEF 是微软开发的一个大数据框架。 REEF运行在YARN的上层。YARN是 新一代Hadoop资源管理器，通过YARN，用户可以运行和管理同一个物理集群机上的多种作业，例如MapReduce批处理和图形处理作业。这样不仅
Ubuntu下Spark开发环境搭建 经验
安装 Spark ，下载 spark-1.3.1-bin-hadoop2.6.tgz ，解压到 /opt/spark-hadoop 下载地址： http://spark.apache.org/downloads
Pentaho开源部分大数据产品，移植Kettle项目到Apache 2.0许可 资讯
开发商近日开源了部分数据集成软件，并将整个 Kettle 数据集成平台移植到 Apache 2.0 许可证下，以便从目前蓬勃发展的 Hadoop 和 NoSQL 业务中得到更多的份额，从而奠定其在大数据市场的地位。 Pentaho
fmms 大数据领域的顶级开源工具大集合 资讯
四个领域：数据存储、开发平台、开发工具和集成、分析和报告工具。 数据存储： Apache Hadoop – Cloud Foundry (VMware), Hortonworks , Hadapt
实现HDFS数据上传和下载代码 代码段
apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path;
Apache基金会亚洲巡演，10月23日，上海大学，品开源、论技术 资讯
Keynotes 演讲，我们在下午还有12个围绕不同技术主题的 Session，涵盖了 OSGi、Web、Hadoop 和开源软件法律保护等主题。 OSGi: OSGi & Apache Felix OSGi
分布式数据仓库系统，Apache Tajo v0.9 发布 资讯
complex queries; - Enhanced Hadoop integration, including support for Hadoop 2.2.0 up to Hadoop 2.5.1, and expan
菜鸟也能玩转大数据：Airbnb开源Presto数据库SQL工具 资讯
游房屋短租网站Airbnb近日开源了一款SQL工具—— Airpal ，使普通员工也能够用Hadoop系统分析大数据。 Airpal是Airbnb一年前就已经开发并使用的Presto数据查询工具，
自适应分析平台：Hadapt 经验
Hadapt 是个自适应分析平台，为 Apache Hadoop 开源项目带来了 SQL 实现。Hadoop 非常健壮，并且可伸缩。所以通过其合并了关联数据存储的混合存储层，Hadapt 允许进行基于
大规模并行处理计算平台 HPCC Systems 经验
是一个大规模并行处理计算平台，用于解决大数据问题。类似 Hadoop 平台。 The most obvious and direct competitor to Hadoop is HPCC Systems, an
openkk
Apache Bigtop 开源项目
Bigtop 是一个 Apache Hadoop 生态系统的开发、打包和测试系统。 其主要目的是建立社区驱动的 Hadoop 相关项目的交互性测试。 Hadoop并不仅仅是一个用于存储的分布式文件系
码头工人 Spark，一种快速数据分析替代方案 经验
虽然 Hadoop 在分布式数据分析方面备受关注，但是仍有一些替代产品提供了优于典型 Hadoop 平台的令人关注的优势。Spark 是一种可扩展的数据分析平台，它整合了内存计算的基元，因此，相对于 Hadoop