P15

  淘淘商城第十二天笔记 文档

Java学院 传智.入云龙 } 4 项目总结 第一天:电商行业的了解。分布式架构的理解。后台工程的搭建,使用maven管理工程,后台工程是一个聚合工程。Svn的使用。Ssm框架整合。 第二天:商品列表

zyingwu 2016-11-09   3827   0

浅谈分布式消息技术 Kafka 经验

Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消

wgpd9383 2017-07-26   17443   0

Tachyon:一个高性能、高容错、基于内存的开源分布式存储系统 资讯

的底层文件系统、兼容Hadoop MapReduce和 Apache Spark 等特征。Tachyon能够为集群框架(如Spark、MapReduce等)提供内存级速度的跨集群文件共享服务。Tach

dy223 2015-03-26   11635   0
Tachyon  

浅析Apache Storm 0.10.0-beta发布:剑指Heron 资讯

浅析Storm 0.10.0-beta //顺序按照官网的要点顺序,翻译+个人见解 一、集群安全性以及多用户调度部署。 我们先把官网列的点列出: Kerberos Authentication

jopen 2015-06-17   19186   0

Apache kafka 工作原理介绍 经验

动进行负载均衡,当某一队列管理器出现故障时,其它队列管理器可以接管 它的工作,从而大大提高系统的高可靠性。 Apache Kafka 原理 Kafka 是一个消息系统,原本开发自 LinkedIn,用作

jopen 2015-08-11   22359   0
P8

  hbase分页查询实现 文档

StringUtils; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration;

Swear_Max 2013-01-15   5343   0
P82

  京东金融大数据分析平台总体架构-v1.0 文档

统数据清洗、整合,为未来金融集团数据平台提供了丰富的数据源。通过数据平台和BI应用建设,金融集团将搭建统一的大数据共享和分析平台,对各类业务进行前瞻性预测及分析,为集团各层次用户提供统一的决策分析支持

guet_lee 2017-01-12   6513   0

JStorm-介绍 经验

com/smartloli/p/4810362.html 1.概述 JStorm 是一个类似于 Hadoop 的MapReduce的计算系统,它是由Alibaba开源的实时计算模型,它使用Java重写了

jopen 2015-09-15   17743   0
P12

  drbd+heartbeat+lvs+keepalived+mysql 可行性分析(第一讲) 文档

1. Mysql高可用集群应用 主讲人:高俊峰华章培训网、[www.hztraining.com]华章培训网版权所有 2. Mysql高可用集群应用 华章培训网、[www.hztraining.com]华章培训网版权所有内容概述

benevolenc 2013-12-19   548   0

分布式消息系统 Kafka 简介 经验

Consumers:消息和数据消费者,订阅topics并处理其发布的消息的过程叫做consumers。 Broker:缓存代理,Kafa集群中的一台或多台服务器统称为broker。 4、消息发送的流程: Producer根据指定的pa

jopen 2014-08-19   61665   0
P2

  Storm 简介 文档

Storm为分布式实时计算提供了一组通用原语,可被用于“流处理”之中,实时处理消息并更新数据库。这是管理队列及工作者集群的另一种方式。 Storm也可被用于“连续计算”(continuous computation),

wuxiaofeng 2013-06-24   7836   0

分布式消息系统:Kafka 资讯

topics 并处理其发布的消息的过程叫做 consumers。 Broker:缓存代理,Kafa 集群中的一台或多台服务器统称为 broker。 消息发送的流程: Producer 根据指定的

jopen 2014-08-15   31250   0
Kafka  

分布式消息系统:Kafka 经验

Consumers:消息和数据消费者,订阅topics并处理其发布的消息的过程叫做consumers。 Broker:缓存代理,Kafa集群中的一台或多台服务器统称为broker。 消息发送的流程: Producer根据指定的pa

jopen 2014-12-03   34316   0
P18

  admaster海量数据分析架构-admaster_谢超 文档

提纲传统的BI数据分析系统介绍 米国互联网企业的工具和架构 AdMaster的业务特性和数据分析架构 -- 中小企业快速搭建一个海量数据分析平台 3. 传统BI产品的组成Data Warehousing Tool ETL Tool

mvpzhou 2013-10-08   3208   0
Intel   Java   Scala   SQL   Go  

Motan框架 - 轻量级 RPC 框架 经验

在进行RPC请求时,Client通过代理机制调用cluster模块,cluster根据配置的HA和LoadBalance选出一个可用的Server,通过serialize模块把RPC请求转换为字

vclhfrpql 2016-05-06   145202   0
P21

  浅析Storm流式计算 文档

日志中记录了客户端IP 把IP转换成地域 按照地域进行统计 4. Storm简介 - 案例分析Hadoop貌似就可以轻松搞定 日志存HDFS 运行MapReduce程序 map做ip提取,转换成地域

nd7b 2015-12-09   6398   0

MySQL数据库的高可用性分析 经验

on用两个或以上的实例搭建了MySQL主从复制集群,提供单点写入,多点读取的服务,实现了读的scale out。 图1. MySQL Replication主从复制集群 如图一所示,一个主

ybbwcd 2016-11-28   7819   0

Mesosphere 携手Kubernetes 拥抱Google Cloud Platform 资讯

集群管理服务 Mesos 最 早由伯克利大学提出,后来被Twitter引入生产环境,并以此为基础构建资源管理平台。Mesosphere在Mesos的基础上构建而成,可以支持在 同一个集群上对不同的分布

jopen 2015-01-21   11116   0

分布式数据处理引擎Apache Flink v1.1.0发布 资讯

FLINK-3411 : Failed recovery can lead to removal of HA state FLINK-3444 : env.fromElements relies on the

jopen 2016-08-08   33518   0

LinkedIn是如何优化Kafka的 经验

配额(Quotas) 在LinkedIn,不同的应用使用同一个Kafka集群,所以如果某个应用滥用Kafka的话,将会对共享集群的其他应用带来性能和SLA上的 负面影响。有些合理的使用场景有可能也会带

jopen 2015-09-22   18951   0
1 2 3 4 5 6 7 8 9 10