大数据领域一些实用工具 经验

Apache Hadoop NoSql 数据库 – MongoDB , Cassandra , Hbase SQL 数据库 – MySql (Oracle), MariaDB , PostgreSQL

y37f 2015-03-15   37847   0

基于hadoop 网络爬虫 经验

4.reduce阶段:主要任务是把所有的存储到hdfs货hbase种去。 三。心得 爬虫程序并不是hadoop典型应用场景。hadoop一般应用于海量数据

jopen 2013-12-26   84009   0

ZOOKEEPER基础 经验

搞数据开发的对一些产品非常熟悉,比如: HBase Hadoop … 但是对它们背后共同的“男人”没有太多的了解,太不应该了。这篇是一个基础的介绍,看完之后应该会对ZOOKEEPER有大概了解。 安装部署

jopen 2015-12-22   15093   0

Hortonworks宣布一款Hadoop数据平台 资讯

,一个元数据管理系统,此外还有一些常见的与 Hadoop 平台相结合使用的,Pig、Hive、HBase 及 Zookeeper 等。在接下来的几周里,Hortonworks 计划发布基于 Hadoop

openkk 2011-11-06   12989   1
Hadoop  

Apache Drill 1.0发布 资讯

Hadoop就成了竞争最激烈的技术领域。 5月19日,Apache基金会 宣布 针对Hadoop、NoSQL(MongoDB和HBase)和云存储(Amazon S3, Google Cloud Storage, Azure Blog

jopen 2015-05-20   10665   0

青云QingCloud上线分布式关系型数据库PolonDB 资讯

另一方面,青云 QingCloud 在大数据领域已经陆续推出 Spark、Hadoop、Storm、HBase、ZooKeeper、Hive、SparkMR、QingMR 等一系列大数据服务,能为企业提供计

五嘎子 2020-05-29   1686   0

介绍6个不同类型的开源协作管理系统 资讯

Lily以NoSQL技术为主题,是建立在云计算上的内容仓库(content repository)。它是基于Apache的 HBase(存储)和Solr(索引/搜索),并提供了大型内容集合存储与检索的解决方案。可运用在门户网站,内

jopen 2012-07-14   9663   0

如何定义NoSQL 资讯

非正式的会议 上。与会人员来自 Voldemort, Cassandra, Dynomite, HBase, Hypertable, CouchDB, VPork, 以及 MongoDB 的公司。这个词

openkk 2012-02-15   23708   0
NOSQL  

eBay开源新数据库技术Kylin,支持TB到PB级数据量 资讯

取数据;使用 MapReduce 预处理大型查询;然后将这些结果作为键值 cuboids 存储在 HBase 上。当用户用一组特定的变量值运行一个 Kylin 查询,结果已经准备就绪,不需要再重新处理,这和已经使用多年的分析型数据库完全不同。

jopen 2014-10-23   11724   0
Kylin  

Zookeeper注册中心的搭建 经验

Zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、名字服务、分布式同步、组服务等。

jopen 2016-01-19   12921   0

大数据(一) - hadoop生态系统及版本演化 经验

推荐(Recommendation) 、 聚类(Clustering) 、 分类(Classification) HBase:分布式 数据库 ,源自Google的Bigtable论文 , 发表于2006年11月 , 是Google

jopen 2016-01-20   22814   0
P1

  hadoop面试小结 文档

combiner? use compression? pig latin, Hive 简单语法 HBase, zookeeper 搭建 最新: 关注cloudera, hortonworks blog next

wujiuliu 2013-05-31   7460   0

大数据处理一定需要Hadoop吗? 资讯

」 Cloudera Search能够与Hadoop分散式档案系统(HDFS)或资料库系统Hbase整合,使用者可以输入搜寻字串后就找到一串搜寻结果。这项搜寻工具是以Apache Solr搜寻器为基础。

dy223 2015-03-26   12892   0
P29

  Hive开发资料 文档

Java 客户端访问元数据库,在服务器端启动一个 MetaStoreServer,客户端利用 Thrift 协议通过 MetaStoreServer 访问元数据库。 Hive 的数据存储 首先,Hive

东皇太一 2011-07-19   479   0

Kafka实战:从RDBMS到Hadoop,七步实现实时传输 经验

hive flumeagent1.sinks.hive_sink.hive.metastore = thrift://sandbox.hortonworks.com:9083 flumeagent1.sinks

P28

  Mina2与netty4 文档

dPrepender 27. Dubbo的10wTPS1K的复杂POJO对象 Netty + Thrift 28. 参考资料mina2线程总结 http://blog.csdn.net/mrliu20

jwei2006 2014-09-05   2750   0

Go语言总结和学习指南 经验

具体见官网:http://golang.org/pkg/os/#Remove 7、 Golang通过Thrift框架完美实现跨语言调用 http://my.oschina.net/u/572653/blog/165285

jopen 2015-01-10   40888   0

Scala开发资源集合:Awesome Scala 经验

for working with binary data. Scrooge — An Apache Thrift code generator for Scala. validation — Advanced

jopen 2014-10-11   83020   0

一些知名App用到的第三方库汇总 经验

AFNetworking amdefine apache-cordova Apache Thrift Appirater Reachability AQGridView art

dwd4 2015-03-31   68245   0

采用Serverless架构 经验

时,由于各种RPC协议,例如WebSocket、协议缓冲区、AMQP、MQTT、Apache Thrift都需要一个一直处于激活状态的侦听器,因此为信息接收通道选择无状态协议也是非常重要的。而且,实现

nvcp5370 2017-03-16   14726   0
1 2 3 4 5 6 7 8 9 10