基于Ubuntu的Hadoop集群安装与配置一、目的掌握Hadoop原理机制,熟悉Hadoop集群体系结构、核心技术。2、安装和配置Hadoop集群。二、原理Hadoop分布式计算平台是由Apache软件基金会开发的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。Hadoop中的分布式文件系统HDFS由一个管理结点(NameNode)和N个数据结点(DataNode)组成,每个结点均是一台普通的计算机。在使用上同我们熟悉的单机上的文件系统非常类似,一样可以建目录,创建,复制,删除文件,查看文件内容等。但其底层实现上是把文件切割成Block,然后这些Block分散地存储于不同的DataNode上,每个Block还可以复制数份存储于不同的DataNode上,达到容错容灾之目的。
HBase是一个开源的高可靠性、高性能、可伸缩、并非建立在关系模型基础上的分布式数据库,用以存储大规模结构化数据,是非关系型(NoSQL)数据库,由Chang等人基于Google的Bigtable开发而成的。HBase的目标是存储并处理大型的数据,更具体来说是只需要使用普通的硬件配置即可处理成千上万的行和列组成的大数据。
Jenkins安装与配置
Maven是跨平台的项目管理工具, 主要服务于基于Java平台的项目构建、依赖管理和项目信息管理。
Redis的安装与配置:一、安装Redis $ wget $ tar xzf redis-3.0.7.tar.gz $ cd redis-3.0.7 $ make 二、启动Red...
src目录下的redis-server和redis-cli两个命名就是redis服务端和客户端的应用程序,这两个命令可以直接调用,建议直接复制到用户bin目录下,
Solr安装与配置
介绍:Puppet可以实现如下功能:随着服务器的增加,传统的系统维护方法有点捉襟见肘,于是出现了配置管理软件,利用配置管理,可以把整个公司的服务器的所有配置内容管理起来,方便大规模的管理以及快速的部署。Puppet就是一个为实现数据库中心自动化管理而设计的C/S模式配置管理软件。
其实理论上现在这样就可以直接安装服务了,但是因为是默认配置,我们使用的时候会出现很多问题。比如里面的汉字全是乱码之类的,所以建议你先配置一下默认文件。在mysql根据自己的情况)目录下,新建个my.ini。复制下面的代码保存就ok了。my.ini会替换掉下面的my-default.ini文件。.ini文件是window里面的配置文件。保存里面各种默认的数据。
CheckStyle是SourceForge下的一个项目,提供了一个帮助JAVA开发人员遵守某些编码规范的静态java代码分析工具。它能够自动化代码规范检查过程,从而使得开发人员从这项重要,但是枯燥的任务中解脱出来。
Redmine在项目实施中的作用在于作为项目管理的工具。Redmine是一个RubyonRails工程,因此需要先安装RubyonRails环境,另外,可通过Passenger将Redmine通过Apache对外提供服务,因此,需要安装Passenger并在Apache中进行配置。
Nagios是一个用来监控主机、服务和网络的开放源码软件,很多大的公司和组织都在使用它。首先,我们来看看实际工作中需要监控的对象有哪些?在这里我总结出两种类型的监控对象:网络服务监控及主机资源监控。网络服务监控可包括主机存活检查、Web服务监控、FTP服务监控、数据库服务监控、自定义服务监控等;主机资源监控可包括系统负载、当前IP连接数、磁盘空间使用情况、当前进程数以及自定义的资源监控等。
Nginx ("engine x") 是一个高性能的 HTTP 和 反向代理 服务器,也是一个 IMAP/POP3/SMTP 代理服务器。 Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的,它已经在该站点运行超过两年半了。 Igor 将源代码以类 BSD 许可证的形式发布。尽管还是测试版,但是,Nginx 已经因为它的稳定性、丰富的功能集、示例配置文件和低系统资源的消耗而闻名了。
zookeeper集群安装与配置
Gradle 的安装和配置:官网下载地址:www.gradle.org 下载之后,解压放到自己想要放置的位置,如:D:\tools\gradle-1.12 然后配...
Oracle的关系数据库是世界第一个支持SQL语言的数据库OCAOCPOCM认证概述Oracle数据库是一种网络上的数据库,它在网络上支持多用户,支持服务器/客户机等部署(或配置)服务器与客户机是软件概念,它们与计算机硬件不存在一一对应的关系.即:同一台计算机既可以充当服务器又可以充当客户机,或者,一台计算机只充当服务器或只充当充当客户机.Oracle服务器端的安装Oracle客户机的安装
WebLogic 安装及配置说明
TOMCAT(SSL)安装与配置