Kafka入门经典教程 经验

rs,这样集群就会据有较好的负载均衡。 Producers Producer将消息发布到它指定的topic中,并负责决定发布到哪个分区。通常简单的由负载均衡机制随机选择分区,但也可以通

ra5t2pj38 2016-02-18   52631   0

大型互联网架构概述 经验

cache是属于不务正业,得益于nginx强大的插件机制。 LB LB(Load Balance,负载均衡)就是将负载(用户的请求)根据某些策略,将负载分摊给多个操作单元执行。该技术可以提供服务器的响应速度以及利用效率,避免出现单点失效。

jopen 2014-02-24   276467   0

大型网站及架构演进过程 经验

http://www.hollischuang.com/archives/1036 关于负载均衡session的解决方案 关于负载均衡session问题的解决方案: 1.使用无状态(cookie)的会话请求

JeannetteKQ 2016-02-03   13580   0

Yelp研发实践:使用服务拆分单块应用 经验

我们使用HTTP和JSON是一种折中的选择。使用标准化HTTP协议有一个巨大的好处,那就是可以使用业内成熟优秀的工具去调试、缓存和负载均衡。而最显著的缺点是在不考虑数据接口实现的情况下,没有标准的方案去定义服务的接口(这一点与Thri

cd33 2015-03-29   15106   0
P48

  大数据(离线/实时)计算架构 文档

torm 4.数据输出:对分析后的结果持久化,暂定用mysql 对应的大数据组件架构是: Zookeeper+Flume-ng+Kafka+Storm+Mysql 4. Flume是Cloudera提

sum154346 2017-07-25   1698   0

谈Dubbo服务框架 经验

sync-over-async 和 request-response 消息机制. RPC: 一个远程过程调用的抽象,支持负载均衡、容灾和集群功能 Registry: 服务目录框架用于服务的注册和服务事件发布和订阅 连通性说明

jopen 2015-07-28   31086   0

Apache Solr 4.0 发布亮点介绍 资讯

real-time)和NoSQL特性。 2. 高可用性且无单点故障。 3. 可与Apache Zookeeper集成,分布式协调和集群元数据和配置存储。 4. 解决抗干扰性脑分裂的问题。 5

jopen 2012-10-12   12626   0
Solr  

互联网公司总结的Java技术知识点 经验

罗列了一个清单,多数都谈到了。 负载均衡 F5:特点、安装、配置、与其他技术的区别 Apache Httpd和Ngix的异同 LVS:特点、安装、配置、与其他技术的区别 服务 soap框架:Axis;CXF

jopen 2015-03-09   66997   0
技术  

Java开源: Voyage - Java 实现的基于 Netty 的轻量、高性能分布式 RPC 服务框架 经验

数据层提供protostuff和hessian的实现,可以自定义扩展ISerializer接口 负载均衡算法采用LRU算法,可以自定义扩展ILoadBlance接口 客户端支持服务的同步或异步调用 快速开始

wenqingbao 2017-03-28   26120   0

基于Thrift的跨语言、高可用、高性能、轻量级的RPC框架 经验

功能介绍 跨语言通信 方便的使Java、Python、C++三种程序可以相互通信 负载均衡和容灾处理 方便的实现任务的分布式处理 支持服务的水平扩展,自动发现新的服务节点 能

jopen 2015-10-17   50494   0

消息中间件ActiveMQ与Kafka对比之Kafka 经验

所以,不像AMQ,Kafka从设计开始极为高可用为目的,天然HA。broker支持集群,消息亦支持负载均衡,还有副本机制。同样,Kafka也是使用Zookeeper管理集群节点信息,包括consumer的消费信息也是保存在zk中,下面我们分话题来谈:

jopen 2015-06-03   116132   0

大数据技术栈之配置&发布系统 经验

com/Qihoo360/QConf 。 正好我们之前也做了一套配管系统,于是点进去看了看,基于Zookeeper做的,恩,我们也是,所以我估计我们实现的方式和他们是一样的。 然后早上的时候和运维聊天,

jopen 2015-04-10   16905   0
P26

  Hive and Hbase入门 文档

这个东东还有点兴趣,有空来磋磨一下。 一、2个注意事项: 1、需要的软件有 Hadoop、Hive、Hbase、Zookeeper,Hive与HBase的整合对Hive的版本有要求,所以不要下载.0.6.0以前的老版本,Hive

hywhyw1985 2013-05-24   3884   0

基于Spring Cloud的微服务落地 经验

Hystrix:容器管理组件,实现断路器模式,倘若依赖的服务出现延迟或故障,则提供强大的容错功能。 Ribbon:客户端负载均衡的服务调用组件。 Feign:基于Ribbon和Hystrix的声明式服务调用组件。 Zuul:

MorBEQP 2018-04-07   45410   0

[Apache Kafka]Kafka设计 经验

r订阅(一个或多个)topic来获取消息。这里,broker和consumer之间分别使用ZooKeeper记录状态信息和消息的offset。如下图所示: 图中展示的是单节点单broker架构

jopen 2016-01-02   17691   0

Kubernetes v1.0特性解析 资讯

下文是本次的分享整理: 首先介绍 k8s v1.0的部分较新的特征,包括dns负载均衡,k8s监控和k8s ha高可用性的方式等 1. DNS,负载均衡 k8s服务发现通用两种方式, kube-proxy和DNS,

jopen 2015-07-30   19751   0

HBase 系统架构 经验

ubby                                         Zookeeper HBase关系图: HBase位于结构化存储层,围绕HBase,各部件对HBase的支持情况:

jopen 2012-06-03   35865   0

Docker集群中服务发现工具的概念及优势 经验

当一个服务的消费者上线时,它能够在预设的终端查询该服务的相关信息。然后它就可以基于查到的信息与其需要的组件进行交互。负载均衡就是一个很好的例子,它可以通过查询服务发现门户得到各个后端节点承受的流量数,然后根据这个信息来调整配置。

jopen 2015-03-21   17460   0
Docker  

如何设计一个复杂的分布式爬虫系统? 经验

的服务都注册到Zookeeper来统一管理和便于线上扩展。模块之间通过thrift(或是protobuf,或是soup,或是json,等)协议来交互和通讯。 Zookeeper负责管理系统中的

BlaSidney 2016-09-29   37085   0

浅谈Web网站架构演变过程 经验

阶段二、应用服务器与数据库分离 随着网站的上线,访问量逐步上升,服务器的负载慢慢提高,在服务器还没有超载的时候,我们应该就要做好准备,提升网站的负载能力。假如我们代码层面已难以优化,在不提高单台机器的性能的情况

DebDla 2016-02-29   40413   0
1 2 3 4 5 6 7 8 9 10