P2

  big资料 文档

2. Hadoop生态圈 架构师和开发人员通常会使用一种软件工具,用于其特定的用途软件开发。例如,他们可能会说,Tomcat是Apache Web服务器,MySQL是一个数据库工具。 然而,当提到H

fangunun 2016-12-22   643   0
P94

  经典分布式文件系统全介绍 文档

University启动,现在已经发展成为应用最广泛的分布式文件系统。 Lustre已经运行在当今世界上最快的集群系统里面,比如Bule Gene,Red Storm等计算机系统,用来进行核武器相关的模拟,以及分子动力学模拟等等非常关键的领域。

zhufugui 2012-09-16   6784   0

OpenStack部署工具:Fuel for OpenStack 经验

zzly版 OpenStack®平台。最新特性包括简单快速部署OpenStack云平台: 部署和 HA 配置支持: 支持最新的RedHat企业版本; OpenStack 健康检查: 部署后会对云平台进

jopen 2013-08-20   38721   0

Redis Cluster架构优化 经验

Cluster: Meet and Gossip with your neighbors》 。Redis为集群操作的消息通信单独开辟一个TCP通道,交换二进制消息: PING/PONG :Cluster的心跳

jopen 2015-09-26   39506   0

手把手教你配置Hbase完全分布式环境 经验

配置相对比较简单,下面的教程也是基于我上面 2 篇 Hadoop 配置的环境下继续往下添加 HBase 的分布式配置,这次我的 HBase 安装目录放在跟 Hadoop 同一目录下面,节点信息跟我前一篇 Hadoop 完全分布式配置完全一样,不清楚的话可以参考我那篇文章。

jopen 2014-11-24   40063   0

Codis作者黄东旭细说分布式Redis架构设计和踩过的那些坑们 经验

最终替换Twemproxy。从豌豆荚最后上线的结果来看,最后完全替换了Twem,大概2T左右的内存集群。 Redis Cluster :与Codis同期发布正式版的官方cluster,我认为有优点

jopen 2015-07-08   464071   0

细说分布式 Redis 架构设计和那些踩过的坑 资讯

最终替换Twemproxy。从豌豆荚最后上线的结果来看,最后完全替换了Twem,大概2T左右的内存集群。 2、Redis Cluster  : 与Codis同期发布正式版的官方cluste

jopen 2016-03-01   33540   0

Hbase/Hdfs删除节点 经验

"new_hbase_node_hostname" >> ./regionservers 2、如果你hbase集群使用自身zk集群的话,还需要修改hbase-site.xml文件,反之不用操作! # cd hbase_install_dir/conf

jopen 2015-11-30   23405   0
P19

  hbase运维参考手册(项目实战) 文档

compact队列较大,集群正在进行大量压缩操作。 2.正在执行mapreduce作业 可以通过CDH前台查看整个集群综合的数据或进入指定机器的前台查看单台机器的数据: b. Io wait 磁盘IO对集群的影响比较大,如果io

beauty2003 2016-05-10   1321   0
报告   手册  
P15

  HBase 简介与实践分享 文档

ConceptsRegionServer Region读写操作的场所; Master 管理Region的分配; 基于zookeeper来保证HA; 6. HBase Architecture图来源于: http://goo.gl/d1T3Q

zhpboy 2013-10-12   2979   0

High Availability启示录 经验

com/articles/5555 文/秣马 最近对HA(High Availability,以下简称HA)有些感想,在此以一个理工男的视角将其记录下来,希望能以飨读者。 很多年以前,HA是个高大上的东西,只有一些大公

MolliePiper 2016-02-14   11553   0
P9

  Hbase分布式多结点安装运行手册 文档

6,其他版本的Linux应该也可以。       jdk:sun jdk 1.6 32bit       hadoop:apache hadoop 1.0.4       hbase:apache hbase 0.94 实验环

lison4open 2015-01-01   340   0
P6

  Yarn是一个分布式的资源管理系统 文档

 Yarn 背景 Yarn是一个分布式的资源管理系统,用以提高分布式的集群环境下的资源利用率,这些资源包括内存、IO、网络、磁盘等。其产生的原因是为了解决原MapReduce框架的不足。最初MapR

光荣复兴 2014-03-30   3987   0
P8

  NOSQL数据库介绍 文档

5、 HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google

synart 2012-04-18   8205   0
P5

  HBase 原理及实例 文档

锁,而浏览却不会。 8、  簇(cluster)的访问 客户端代码通过ZooKeeper来访问找到簇,也就是说ZooKeeper quorum将被使用,那么相关的类(包)应该在客户端的类(classe

liu2511981 2012-05-17   6311   0

Apache Mesos是什么? 经验

esos kernel利用资源管理和调度的API在整个数据中心或云环境中运行和提供引用(例如,Hadoop,Spark,Kafaka,Elastic Search)。即Apache Mesos在整个数

jopen 2015-03-21   155049   0

13款开源Java大数据工具 经验

下面将介绍大数据领域支持Java的主流开源工具 : 1. HDFS HDFS是Hadoop应用程序中主要的分布式储存系统, HDFS集群包含了一个NameNode(主节点),这个节点负责管理所有文件系统的元数

jopen 2014-04-30   52548   0
开源  

Spring下ActiveMQ实战 经验

息跨网段、跨集群的分发出去,就可以用这个。一些典型的示例就是: 1、集群A中的消息需要发送给多个机器共享; 2、集群A中消息需要主动推送,但彼此的网络不是互通的(如集群A只有过HA才能被外界访问);

jopen 2015-11-06   22704   0

开源大数据处理工具汇总(上) 经验

某些测试下,Stinger能提升10倍左右的性能,同时会让Hive支持更多的SQL, 其主要优点包括: ❶让用户在Hadoop获得更多的查询匹配。其中包括类似OVER的字句分析功能,支持WHERE查询,让Hive的样式系统更符合SQL模型。

jopen 2016-01-05   78569   0

分布式流式处理框架:Storm 经验

理方式。Hadoop 在本质上是一个批处理系统,数据被引入 Hadoop 文件系统 (HDFS) 并分发到各个节点进行处理。当处理完成时,结果数据返回到 HDFS 供始发者使用。Hadoop的高吞吐,

jopen 2014-12-03   27828   0
1 2 3 4 5 6 7 8 9 10