Hadoop 集群配置(最全面) 经验

通常,集群里的一台机器被指定为 NameNode,另一台不同的机器被指定为JobTracker。这些机器是 masters 。余下的机器即作为DataNode 也 作为TaskTracker。这些机器是

fmms 2012-02-06   120812   0

Hadoop集群数据处理API:Cascading 经验

Cascading 是一个架构在 Hadoop 上的API,用来创建复杂和容错数据处理工作流。它抽象了集群拓扑结构和配置来快速开发复杂分布式的应用,而不用考虑背后的MapReduce。 Cascading目前依赖于

jopen 2011-12-22   28341   0

mongos 集群安装部署文档 经验

弃。 灵活配置分片 不设置表分片,表就不会进行分片,会完整保存在该库所在的主Shard。可以在配置某数据库信息启用分片之后,单独设定某个表的信息在其他分片中分散存储。并设定尽量有规律的分片条件。

fmms 2012-02-06   35268   0

Nutch+Hadoop集群搭建 经验

:将WebDB所存储的连接分成多个组,来用于分布式检索 Fetchers :检索Fetch list的内容并下载到本地,共有两项输出:分别是连接的update 信息和内容content Updates

fmms 2012-02-07   169808   0

Google集群资源管理系统:Omega 经验

1. 背景 Google的第一代/第二代集群(资源)管理系统被称为Borg,Borg设计细节因零零星星出现在各种文章而知名,但一直未公开(比如发一篇 paper)。然而,我们可从腾讯公布的Tor

jopen 2014-03-27   45205   0

Debian6配置Mysql集群 经验

root@debian:/usr/local/mysql/bin# ./mysqld_safe & 此处若启动出错,先查看第4步 安装System tables是否正确。 7.测试 (MySQLD节点192.168.225.135

jopen 2012-07-11   17301   0

高速集群监控系统:SuperMon 经验

Supermon 是一个高速集群监控系统,特点是低侵入、高采样率和一个可扩展的数据协议和编程接口。可从最基本的单处理器到1024个处理器的大规模集群. 项目主页: http://www

jopen 2013-04-13   41945   0

Nginx+tomcat配置集群 经验

配置目录 |_  contrib |_  docs 文档目录 |_  logs  日志目录 |_  temp 临时文件目录 |_  html 静态页面目录 |_ 

jopen 2014-09-23   54334   0

集群上高效的随机学习:Splash 经验

Splash提供了一套简单的编程框架,它允许用户实现单线程的SGD、Gibbs Sampling等各类流式算法。而系统在Spark框架内实现单线程算法的自动并行化。

cebp 2015-07-12   9737   0

Mesos 集群运维:vagrant-mesos 经验

vagrant-mesos 是一款运维工具,可以使 Mesos 集群的安装和运行更加容易。 vagrant-mesos 支持 Mesos 0.21.0 集群,同时包括 Marathon (0.8.0) 和 Chronos

jopen 2015-06-10   17224   0

Redis多集群主从部署 经验

com/item/ee7ae4df4d6693bfde88.html 一、背景 这两天在策划一套Redis多机房多集群的部署方案,一主多从部署;目的是将一些重要、核心、且敏感的数据放在Redis中进行管理,通过异步消息队列的方式,同步到db。

jopen 2015-08-02   14500   0

使用JGroups TCP实现EHCache的集群 经验

最近一个项目采用ehcache作为缓存技术,因为负载需要,使用两台服务器做负载均衡,所以需要做缓存的集群处理,综合各方面因素,决定使用JGroups的方式,接下来是连续3天的折磨,今天终于搞定,把这个过

ygp8 2015-09-04   36907   0

搭建hadoop/spark集群环境 经验

hadoop和spark集群的搭建,主要用到了hadoop2.5.2、spark1.2.0、scala2.11.4 hadoop2.5.2的安装可以参照 http://blog.csdn.ne

jopen 2014-12-25   113517   0

mysql galera cluster集群的监控 经验

一、集群复制状态检查 1、SHOW GLOBAL STATUS LIKE 'wsrep_%'; +------------------------------+----------------

jopen 2015-12-31   19350   0

部署Spark 0.9集群 经验

Spark 0.9 1 部署Spark集群 这种是运维人员在生产环境下,搭建起一个Spark集群。 (可选)创建新用户 Spark 一般我倾向于把需要启动daemon进程,对外提供服务的程序,

jopen 2016-01-03   15823   0

在Ubuntu环境部署Apache Spark集群 经验

1、软件环境 本文主要讲述怎样在Ubuntu系统上部署Apache Spark独立集群(Standalone Cluster)的过程。所需的软件如下: Ubuntu 15.10 x64 Apache

jopen 2016-01-08   22110   0

使用Mesos和Marathon管理Docker集群 经验

分布式系统是难于理解、设计、构建 和管理的,他们将比单个机器成倍还要多的变量引入到设计,使应用程序的根源问题更难发现。SLA(服务水平协议)是衡量停机和/或性能下降的标准,大多数现代应用程序有一个期

jopen 2016-01-03   21454   0
Docker  
P5

  kafka集群架构 文档

1. Kafka集群方案--Kafka --Zookeeper 2. Kafka集群ProducerProducerProducerProducerConsumerConsumerConsumerCo

dreamziyou 2016-10-02   1181   0
P10

  Linux 下配置 WebLogic Server 集群 文档

Linux下配置WebLogic Server集群 2007-06-20 17:08 本文讲述如何在WebLogic Server 8.1上配置集群,以及通过Proxy Server来访问集群,可以参照这个文档进行lin

victorwzf 2012-08-29   596   0
Linux  
P24

  WebLogicServer9.2集群图解 文档

配置WebLogic Server 9.2集群 (本文讲述如何在WebLogic Server 9.2上配置集群,以及通过Proxy Server来访问集群) 预备知识 什么是Domain和Server

jisk999 2010-12-13   3087   0
1 2 3 4 5 6 7 8 9 10