Oozie4.2.0配置安装实战 经验

1,Hive0.14,Pig0.15.0,Maven3.2,JDK1.7,zookeeper3.4.6,HBase1.1.2,MySQL5.6 集群部署: node1~4.centos.com     node1~4

ltww3128 2016-01-23   82306   0

影响数据检索效率的几个因素 经验

取的数据也就非常少了。另外一个变种就是支持遍历的主键,比如hbase的rowkey。如果查询的是一个基于rowkey的范围,那么像hbase这样的数据库就可以支持只读取到这个范围内的数据,而不用读取不

jopen 2015-06-09   35005   0

Hadoop面试题,看看你能答对多少?答案在后面 经验

分析:lucene是支持随机读写的,而hdfs只支持随机读。但是HBase可以来补救。HBase提供随机读写,来解 决Hadoop不能处理的问题。HBase自底层设计开始即聚焦于各种可伸缩性问题:表可以很“高”

jopen 2014-12-12   31918   0

关于CarbonData+Spark SQL的一些应用实践和调优经验分享 经验

据分析,优化之前,老的系统需要用Impala和Hbase两个系统,建立4个二级索引才可以完成业务需要的性能。这其中,Impala用来做报表输出,Hbase做关键维度查询。这两个系统有各自存在不足:Im

AAFDell 2017-09-11   32989   0
P76

  淘宝数据开发平台介绍 文档

系统Hadoop Map ReduceHadoop HDFSDatax报表需求(淘数据)数据开发界面Hbase元数据中心 和 知识库…即席查询(adhoc)数据分析数据挖掘数据产品数据开发平台——产品架构数

hans511002 2012-06-24   4302   0

Linux 基金会发布了 2014 年全部活动安排 资讯

件开发的工作。它主导了与许多当前 最热门的开源项目的合作,包括Apache自己的项目 比如Cassandra, Cordova, CloudStack, CouchDB, Geronimo, Hadoop

jopen 2014-05-04   6491   0
Linux  

12种类型黑客 你遇见过哪种? 资讯

【最喜爱的技术/语言:Redis,MongoDB,CouchDB,Riak,Hadoop,Cassandra,Web Sockets】 6. The Bare-Metal Programmer

openkk 2012-06-15   11694   0
黑客  

Kong技术调研&curl简介 经验

Kong Kong是一款开源的API网关,基于Lua和Cassandra,支持分布式操作,有很强的可移植性和可扩展性。作为应用和API之间的中间层,加上众多功能强大的插件,可以实现认证授权、访问控制等功能;

jopen 2015-08-09   37638   0
kong  

Spark学习-RDD编程基础 经验

Spark可以从任何Hadoop支持的存储上创建RDD,比如本地的文件系统,HDFS,Cassandra等。Spark可以支持文本文件,SequenceFiles等。 这种方法更为常用。 python:

风云决 2017-03-09   13473   0

2016年 IT 趋势大预测! 资讯

WSA 通过实时数据处理框架扩展了如 Storm,Spark Steam,Kafka, Cassandra,Elastic Search 等早已广受欢迎的微服务架构和云基础架构。这些数据处理框架正在成为最前沿应用的一个标准部分。

jopen 2016-01-14   7842   0

Twitter 数据实时分析处理攻击 Storm 经验

快速进行开发和单元测试。 Storm 没有内建数据存储层 ,如果需要持久化,需要一个类似于Cassandra或Riak这样的外部数据库。 3、Storm组成部分及常用术语 可以拿Storm和Hadoop组成部分做一个类比:

jopen 2012-11-12   22492   0

五大理由从 Python 转到 Go 语言 经验

主页 后端和认证服务 Node.js API 服务 PostgreSQL 数据库 、Cassandra 日志系统 自定义容器注册表是使用 Rust 语言 从上面你可以看到基础的框架是完全

HellenMaier 2017-04-11   20601   0

程序员追求的是什么? 资讯

Clojure、 Erlang 或者 Go),但也包括框架和应用(例如 Hadoop 或 Cassandra)。这可能是某些公司有问题的地方。如果它们的应用是用某个语言(比如C++)写的,它就不会改了

jopen 2013-03-30   5255   0

Twitter背后的开源技术 资讯

被大量使用,是Tweet的主要存储工具;我们开发了 MySQL fork in the open 用来和开源社区合作; Cassandra , Hadoop , Lucence , Pig 以及一些其他的Apache基金会的项目被

openkk 2012-08-15   21404   2
Twitter  

剖析Docker Swarm和Mesos:是什么?如何结合?有什么优势? 资讯

DCOS,这也使得Docker Swarm同Marathon、 Cronos、Spark、Storm、Hadoop以及Cassandra一样成为Mesos和Mesosphere生态系统里面的一等公民。 使用Mesos API集成Docker

jopen 2015-03-01   14192   0
Docker  

程序员内心真正的需求到底是什么? 资讯

,Clojure、Erlang和 Go语言等),也包括框架和应用程序(例如Hadoop和 Cassandra等)。不过这一点很多公司都无法满足我们。因为一个公司一旦为他的程序选择了某种语言(如C+ +

jopen 2014-10-13   5903   0

环游世界,就用开源的GIS 资讯

与云基础设施的集成更为简单;第二个,更多的使用 NOSQL 系统,像 MongoDB 和 Cassandra。在未来,我们可能会有想 Hadoop 那样的大数据分析软件。并不是说只有数据会增多,使用者

jopen 2014-12-12   12352   0
GIS  

Thirft框架介绍 经验

%E6%9C%BA%E5%88%B6%E5%8F%8A%E5%85%B6%E5%9C%A8cassandra%E4%B8%AD%E7%9A%84%E5%BA%94%E7%94%A8 本文链接地址:

jopen 2014-01-18   18763   0

Yelp研发实践:使用服务拆分单块应用 经验

时使用。 Yelp服务中有很大一部分需要对数据进行持久化,工程师团队使用了MySQL、Cassandra和ElasticSearch的组合。 Yelp工程师在博客上说,无论数据库存储选用什么产品,

cd33 2015-03-29   15106   0

容器的持久化存储 资讯

持久化存储方案的应用使用场景,它不需要共享基础设施来实现弹性和恢复。例如非关系型数据库,如Cassandra,它有可用性架构在应用程序层,并且它比遗产应用程序有不同的基础设施预期。在这个方案中,持久层

jopen 2016-02-24   12563   0
1 2 3 4 5 6 7 8 9 10