Kafka简要介绍 经验

),它的性能基本达到了O(1)的复杂度。 一些特点: 消息持久化及其缓存更多的依赖文件系统,而不是内存。 通过巧妙的顺序读写设计,与内存读写相比,依然很强悍。 消息持久化操作的复杂度几乎都是O(1) 。

jopen 2014-11-05   20972   0
P31

  VMware虚拟架构解决方案简介 文档

market demand will affect final delivery. 16. VMware分布式资源调度(DRS):按需自动资源调配功能 跨资源池动态调整计算资源 基于预定义的规则智能分配资源 优势

guoxiaohui 2011-08-13   4311   0
方案   x86  

基于Kubernetes打造SAE容器云 资讯

针对这种需求,Kubernetes并没有提供解决方案,于是SAE基于GlusterFS改进了一套分布式共享文件存储SharedStorage来满足用户。 如图所示,以4个节点(brick)为例

jopen 2016-03-03   21154   0
SAE   Kubernetes  
P43

  Java的输入输出1 文档

java的输入输出19 20. 介绍 File 类第八章 java的输入输出File类用来访问本地文件系统中的文件和目录。 1. 创建File类 myFile = new File(" myfile. txt");

biojft 2011-10-05   453   0
P13

  JBOSS集群配置方案 文档

否不一致,如果同步,注意开销。 3. 不能使用静态变量,如在线用户数,要搞成分布式的 Cache。 4. 外部资源如文件系统(一台机器上没有另外一台机器的文件),存成DB或者使用SAN 5 . 特别服务:如timer服务,基于事件的服务

javaso 2016-07-13   2171   0
P23

  淘淘商城第三天笔记 文档

4 图片服务器的搭建 4.1 什么是FastDFS FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、

zyingwu 2016-11-09   5967   0

Flume-ng的原理和使用 经验

1. 介绍 Flume 是 Cloudera 提供的日志收集系统,具有分布式、高可靠、高可用性等特点,对海量日志采集、聚合和传输,Flume 支持在日志系统中定制各类数据发送方,同时,Flume提

jopen 2015-02-07   60948   0

京东消息中间件JMQ:架构,与Kafka的对比,主要特性和应用场景 经验

送,每条消息到达服务端MASTER后会强制刷入磁盘同时并行推送一份到SLAVE上,SLAVE写入文件系统后不等待强制刷盘就反馈给MASTER。根据不同的场景为了提高服务的可用性,普通级别的消息SLAV

hpdy4567 2016-10-13   8145   0
P9

  node.js入门之buffer类的使用详解 文档

于扩展的网络应用。Node.js 使用事件驱动, 非阻塞I/O 模型而得以轻量和高效,非常适合在分布式设备上运行数据密集型的实时应用。 正是由于Node.js的这些特性使得其在如今的编程中越来越受欢迎

麦子学院 2016-05-24   457   0

Kafka——性能逆天的存在 经验

least on c e ,两外两种在分布式系统中都不可能做到完全的绝对实现,只能无限靠近,降低错误率。 3、消息存储方式 Parition是以文件的形式存储在 文件系统 中,比如创建了一个名为 tip

IsaHta 2016-12-22   44933   0

消化单例设计模式(Java版本) 经验

保证单例序列化安全: 在分布式系统中,我们有时需要在单例类中实现 Serializable 接口。通过实现Serializable可以将它的一些状态存储在文件系统中以供后续使用。让我们来测试一下

Valeria00D 2017-01-11   12845   0

蘑菇街11.11:私有云平台的Docker应用实践 资讯

OpenStack,这样能同时管理Docker和KVM虚拟机。相对来说,Docker适合于无状态,分布式的业务,KVM适合对安全性,隔离性要求更 高的业务。 对于上层业务来说,它不需要关心是运行在容

jopen 2015-11-11   25948   0
Docker  
P15

  Git 学习笔记 文档

Git学习笔记 2014-10-4 1.git初识 1.1.git历史 Git是一个分布式版本控制/软件配置管理软件(工具),原是Linux内核开发者林纳斯·托瓦兹(Linus Torvalds)为

mg0324 2014-11-16   4899   0
P6

  通过JavaMail访问Hotmail邮箱 文档

事实上Hotmail使用的是WebDAV来提供基于HTTP协议的应用编程接口,WebDAV(Web 分布式创作和版本控制)已经成为重要的 Web 通讯协议。WebDAV所要解决的问题是: 1.改写保护:HTTP

franktang 2011-12-04   8069   0
P4

  000-Oracle 数据库简介 文档

  Oracle数据库有如下几个强大的特性:   支持多用户、大事务量的事务处理   数据安全性和完整性的有效控制   支持分布式数据处理   可移植性很强   Oracle大体上分两大块,一块是应用开发,一块是系统管理。   

hahaytao 2013-08-12   2131   0

Hadoop不是万能的 资讯

给它带来了好处,或者至少没有什么坏处。” MapR 在特定应用场景下做出了贡献 2011年 5 月,MapR 公司推出分布式文件系统和 MapReduce 引擎——MapR Distribution for Apache Hadoop,号称比开源版本的

jopen 2012-02-29   27177   1
Hadoop  

Strata+Hadoop World 2015见闻 资讯

Cloudera、Hortonworks这些大数据领头羊一样,得到了广泛的关注。 随着“大数据时代”的到来,在高并发、大数据量、分布式及实时性的要求之下,传统的关系型数据库,因为其数据模型及预定义的操作模式,在很多情况 下不能很好地

n7w77 2015-03-19   20792   0
Hadoop  

六问Ceph:在中国的发展还有哪些障碍? 资讯

灾、快照、压缩、去重)缺失、运维人员成本高、3副本带来的额外开销等多种不足,他表示,测试结果传统存储的成本其实还是低于分布式存储的。清华大学助理 教授徐葳(部署了60节点)关注的是软件定义存储的特性还不能真正用上,还需要一

jopen 2015-07-03   17916   0
Ceph  

2015年开源项目荣登GitHub十强榜单 资讯

Maven开发的,这是一种软件项目管理和理解工具。 此外,Spark使用Hadoop核心代码库,与Hadoop分布式文件系统(HDFS)及支持Hadoop的其他存储系统进行对话。在Apache GitHub页面上,建议

jopen 2016-01-19   23359   0

[Apache Kafka]Kafka设计 经验

支持自定义实现的producer和consumer的API 以低开销的网络和存储实现消息持久化 支持百万级消息订阅和发布的高吞吐量 分布式和高可伸缩性架构以实现低延迟传输 在consumer失效时自动平衡多个consumer 服务器故障的容错保证

jopen 2016-01-02   17691   0
1 2 3 4 5 6 7 8 9 10