Apache Hadoop 开源项目

的目的是想为Nutch搜索引擎提供分布式。 hadoop有三个子项目:Hadoop core,HBase, Zookeeper。 收录时间:2010-09-30 21:36:59

码头工人 2019-01-17   727   0
P42

  Cassandra讲座 文档

https://issues.apache.org/jira/browse/CASSANDRA-598 Thrift不支持流(streaming),读写请求的数据都需要存放在内存中,因此大对象可能需要切分后存取。http://issues

css0613 2011-05-13   6970   0
P69

  大数据技术平台调研报告 文档

第 页 共 5 页 密级 机密 WJRJ-000053-1101XQ 4.1.3.7 HBase HBase 是一个有趣的项目,因为它在 HDFS 之上提供了 NoSQL 数据库功能。它同时是一个面

dszhao 2017-03-22   3018   0
P51

  自己动手写网络爬虫(二) 文档

开源BigTable——HBase Google提出“云计算”理论之后,很多团队都开始根据这一理论,开发自己的云计算存储模型。其中,HBase是一个比较成功的实例。本小节就讲述HBase的相关知识。 HBase是一个A

Wyh_D_Void 2011-05-23   890   0

Apache Kylin 综述 经验

数据源(Hive/Kafka等) 获取源数据,基于MapReduce 构建多维立方体(Cube) ,并充分利用 HBase 的列式特性来分布式的 存储立方体数据 ,提供标准SQL解析与查询优化,以及ODBC/JDBC驱动及REST

caotans 2017-01-04   26137   0

持久层框架 DataNucleus Access Platform 资讯

bidirectional relations when using IDENTITY strategy HBase : fix problem in table management Cache : support

fmms 2011-12-09   10274   0
Java  

阿里巴巴数据库连接池Druid发布0.2.5版本 资讯

DRUID-131 - Druid内置提供Web监控页面 Task DRUID-132 - 移除支持hbase的hdriver 下载 你可以在这些地方下载: http://code.alibabatech

openkk 2012-08-02   11548   2

JProfiler 8.0 发布,Java的性能监控工具 资讯

,从一个到另一个异机的JVM。添加NoSQL和大数据(MongoDB, Cassandra与 HBase )探针。 A class loader probe has been added which includes

jopen 2013-07-18   21850   0

分布式 SQL 数据库,TiDB v0.5 Alpha 发布 资讯

scale 能力;MySQL 协议兼容;在线 schema 变更。TiDB 在 Alpha 版本使用 HBase 作为分布式存储引擎。详细改进请看 发行说明 。 下载: https://github.co

cncde 2015-12-01   7783   0
TiDB  

Spring for Apache Hadoop 2.0.3 发布 资讯

框架用于创建和运行 Hadoop MapReduce、Hive 和 Pig 作业的功能,包括 HDFS 和 HBase。如果你需要简单的基于 Hadoop 进行作业调度,你可添加 Spring for Apache

jopen 2014-11-03   23195   0

Spring for Apache Hadoop 2.0.4 发布 资讯

框架用于创建和运行 Hadoop MapReduce、Hive 和 Pig 作业的功能,包括 HDFS 和 HBase。如果你需要简单的基于 Hadoop 进行作业调度,你可添加 Spring for Apache

jopen 2014-12-17   22073   0

Spring for Apache Hadoop 2.1.0.M3 发布 资讯

框架用于创建和运行 Hadoop MapReduce、Hive 和 Pig 作业的功能,包括 HDFS 和 HBase。如果你需要简单的基于 Hadoop 进行作业调度,你可添加 Spring for Apache

码头工人 2014-12-19   20627   0
P9

  Ganglia简介 文档

监控内容内置 CPU负荷 网络流量 磁盘I/O,使用率 内存使用情况 应用程序内置,比如hadoop&hbase Jvm gc事件 MapReduce Task数量 HDFS 使用情况 7. Ganglie vs

yinzi_1224 2014-08-14   2759   0

Spring Hadoop - 整合Spring框架和Apache Hadoop平台的开源项目 经验

Groovy、JRuby、Jython 和 Rhino——提供了对 HDFS 数据访问的支持,为 HBase 提供了声明式配置的支持,以及对 Hadop 工具(包括 FS Shell 和 DistCp)提供了声明和编程的支持。

openkk 2012-03-02   89770   0

从零开始写分布式数据库 经验

数据库的隔离级别 分布式系统的 CAP 理论 Google Spanner 简介 Google F1 简介 HBase 简介 Google percolator 事务模型 Yahoo 的 omid 事务模型 TiDB

jopen 2015-11-12   19661   0

Hue 3.7 发布,Hadoop 图形化用户界面 资讯

History Simpler interface More details here… HBase Kerberos 支持 Indexer 支持 Zookeeper 配置,如果指向错误的

jopen 2014-11-09   9968   0
Hadoop  

三个大数据处理框架:Storm,Spark和Samza 介绍比较 经验

箱 即用的分布式RPC(DRPC)就可以了。最后但同样重要的原因:Storm使用Apache Thrift,你可以用任何编程语言来编写拓扑结构。如果你需要状态持续,同时/或者达到恰好一次的传递效果,应当看看更高层面的Trdent

jopen 2015-03-11   50791   0

面向Hadoop框架的高级语言: Apache Pig 经验

果跟Hive说“分区”(Partition)他还是能明白的。 Server:Hive可以依托于Thrift启动一个服务器,提供远程调用。Pig没有发现有这样的功能。 Shell:在Pig 你可以执行一些个

jopen 2014-12-04   22140   0

高性能场景下,HashMap的优化使用建议 经验

HashMap(srcMap.size())这样的写法肯定是不对的,有25%的可能会遇上扩容。 Thrift里的做法比较粗暴, Map map = new HashMap( 2* srcMap.size())

laew4880 2016-08-31   13518   0
高性能   JDK  
P26

  分布式系统日志处理调研 文档

统,在facebook内部已经得到大量的应用。 Scribe是基于一个使用非阻断C++服务器的thrift服务的实现。它能够从各种日志源上收集日志,存储到一个中央存储系统 (可以是NFS,分布式文件系

290259325 2012-02-15   559   0
1 2 3 4 5 6 7 8 9 10