Storm0.9.4安装 经验

[grid@hadoop4 ~]$ cat /etc/hosts 127.0.0.1 localhost ::1 localhost 192.168.0.106 hadoop4 192.168.0

xg48 2015-04-12   41139   0
P4

  access日志分析例子 文档

上传待统计日志文件 hadoop fs –put 本地日志路径 hadoop路径 java代码,统计日志中不同IP访问次数 package com.ice.stat; import java.io.IOException;

xiefei 2013-10-17   421   0
P18

  Nutch 安装使用 文档

1 安裝好Hadoop 1. 單機版 2. 叢集版 4. step 2 nutch下載與安裝 1. 2.0 設定環境 2. 2.1 下載 nutch 並解壓縮 3. 2.2 部屬hadoop,nutch目錄結構

n8cx 2014-08-24   3417   0
P7

  hdfs命令 文档

1、列出所有Hadoop Shell支持的命令 $ bin/hadoop fs -help 2、显示关于某个命令的详细信息 $ bin/hadoop fs -help command-name 3、

开开123 2016-08-08   524   0

搭建MESOS大数据平台的总结 资讯

r配置方式,而后面的hadoop、spark、storm等等举例又用的是zookeeper配置方式,所以这里要先做一下P108页的zookeeper配置。 三. hadoop 基本上可以参照P23~27页操作,需要注意:

jopen 2015-11-18   32507   0
Mesos  

HDFS API详解 经验

Hadoop中关于文件操作类基本上全部是在" org.apache.hadoop.fs "包中,这些API能够支持的操作包含:打开文件,读写文件,删除文件等。 Hadoop类库中最终面向用户提供的

jopen 2014-04-24   54586   0

一个电话 改变大数据命运的故事 资讯

运行很缓慢,因为 App 启用开源数字平台 Hadoop 时的一串软件代码写得很糟糕。谁也不会想到,这个小 bug,数年后却促成了官方 Hadoop 2.0 的诞生,改变了 Hadoop 的命运。 虽然是别人写的,但

jopen 2013-07-04   6842   0
P14

  CDH4.1.2 集群安装配置详细过程 文档

是Cloudera 完全开源的Hadoop 分布式系统架构,为了满足企业的需求而特别构建的系统。即一个开源的企业级分布式存储系统。全称:Cloudera Hadoop。 它是在Apache Hadoop基础上打入了很

sandyfog 2014-09-25   4353   0
P14

  Oozie 安装配置手册(培训版) 文档

servlet容器中—即tomcat Oozie工作流是放置在控制依赖DAG(有向无环图)中的一组动作(hadoop的mapreduce作业,hive作业等),其中指定动作执行的顺序。 一 .Oozie workflow

huihui8510 2013-09-23   618   0

mapreduce实现"浏览该商品的人大多数还浏览了"经典应用 经验

apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path;

jopen 2013-10-10   14569   0
P16

  Map/Reduce工作原理 文档

Annotated Hadoop: 第一节 Hadoop是什么 Hadoop是什么 Hadoop原来是Apache Lucene下的一个子项目,它最初是从Nutch项目中分离出来的专门负责分布式存储

jsyzthz 2011-08-13   8574   0
P4

  hbase错误小节 文档

重启网络服务:/etc/rc.d/init.d/network restart 3. org.apache.hadoop.hbase.NotServingRegionException: Region is not

taoxinrui 2013-08-20   2454   0

年度最佳硬件、软件、开发工具和云服务 资讯

错方式来运行计划任务(cron job)。面向Mesos的其他流行框架包括Cassandra、Hadoop、Storm和Spark。 如果你需要另外的动力在今年关注Mesos,不妨看看支持Meso

jopen 2016-01-22   63864   0

Hbase安装手册 经验

解压hbase-0.98.6-hadoop2.tar.gz到/home/hadoop/目录下 $tar -zxvf hbase-0.98.6-hadoop2.tar.gz /home/hadoop/ $mv hbase-0

jopen 2015-05-27   12062   0
P2

  big资料 文档

2. Hadoop生态圈 架构师和开发人员通常会使用一种软件工具,用于其特定的用途软件开发。例如,他们可能会说,Tomcat是Apache Web服务器,MySQL是一个数据库工具。 然而,当提到H

fangunun 2016-12-22   643   0

mapreduce实现全局排序 经验

直接附代码,说明都在源码里了。 package com.hadoop.totalsort; import java.io.IOException; import java.util.ArrayList;

jopen 2013-10-10   36005   0

storm集群搭建 经验

设置主机名 (1)执行命令hostname hadoop0 该操作只对当前会话有效 (2)编辑文件vi /etc/sysconfig/network 修改为hadoop0 验证:重启linux,查看是否生效

jopen 2015-12-31   14469   0

Hbase基于Mapreduce的编程 经验

由于用到rcfile格式需要导入hive-exce包,还需要加载hbase包,如果这两个包都已经被集群管理员放到各节点的hadoop/lib下那就可以省去这一步,废话不说,干货,看代码: package test.hbase;

openkk 2012-08-26   34241   0

RHadoop环境搭建 经验

如何搭建RHadoop开发环境? 2.搭建RHadoop和Hadoop环境搭建的区别? 3.如何执行rmr2任务? 4.hadoop命令与RHadoop命令有哪些区别? 环境准备

jopen 2014-10-31   21736   0

spark用程序提交任务到yarn 经验

先介绍官网提交的例子,我用的是spark 0.9.0 hadoop2.2.0 一.使用脚本提交 1.使用spark脚本提交到yarn,首先需要将spark所在的主机和hadoop集群之间hosts相互配置(也就是

jopen 2014-04-11   186436   0
1 2 3 4 5 6 7 8 9 10