Zookeeper简单概念介绍 经验

暴漏了一套简单的额API,能够让开发者实现公共需要协调的任务。例如 配置维护、组服务、分布式消息队列 、 分布式通知/协调 等。Zookeeper有两套实现的分别是C和java。另外集群的zookee

jopen 2016-01-17   8581   0

数据网格平台 Infinispan 经验

据结构(一个Cache)来存储对象。虽然可以在本地模式下运行Infinspan,但其真正的价值在于分布式,在这种模式下,Infinispan可以将集群缓存起来并公开大容量的堆内存。这可比简单的复制强大的多

openkk 2012-06-09   13392   0

HDFS架构设计 经验

HDFS是一个具有高度容错性的分布式文件系统,适合部署在廉价的机器上,它具有以下几个特点: 1)适合存储非常大的文件 2)适合流式数据读取,即适合“只写一次,读多次”的数据处理模式 3)适合部署在廉价的机器上

jopen 2013-06-11   25896   0

开源的Java读写MS Office文件库,Apache POI 3.13 版发布 资讯

用Java程序创建,修改和显示MS Office文件。这由Apache软件基金会开发使用Java分布式设计或修改Microsoft Office文件的开源库。它包含类和方法对用户输入数据或文件到MS Office文档进行解码。

jopen 2015-09-28   18272   0
POI  

针对.NET开发者的NuoDB 1.1发布 资讯

Azure,同时还对性能做了提升。 NuoDB 是一个分布式云数据库系统,全面支持 SQL 查询和 ACID 事务,它基于一个能够向文件系统、Amazon S3 或者 HDFS 中持久化数据的键-值存储管理器构建。NuoDB

jopen 2013-06-09   8666   0
NuoDB  

微软现使用Git和GVFS来开发Windows 资讯

左右。需要指出的是,Git 本身并不是为了管理如此大型的项目而开发的,因此微软特地推出了“Git 虚拟文件系统”(简称 GVFS),关注过该公司开发者大会(//Build)的网友们应该不会对它感到陌生。

jopen 2017-05-25   12301   0
微软  

Spark2: 对RDD进行编程系列 经验

cluster. 其实就是说一个数据集,比如吧,一个100G的大文件,就是一个RDD,但是它是分布式的, 也就是说会分成若干块,每块会存在于集群中的一个或者多个节点上。 简单来说,就是分而存之。

jopen 2014-09-19   30627   0

Hadoop子项目 ZooKeeper 3.3.4 发布 资讯

ZooKeeper是Hadoop的正式子项目,它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护、名字服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务

fmms 2011-11-29   17508   1
Hadoop  

提高日志质量的 5 大技巧 经验

当多个线程写入服务器日志,但你需要集中在单一线程上时,这将会非常有用。如果你在一个分布式 /SOA 环境下运行,更能看到它得天独厚的优势。 2. 分布式的标识符 在 SOA 或消息驱动的架构,任务执行很可能跨多

jopen 2015-07-13   11370   0
日志  
P30

  Hadoop 淘宝方案 文档

9. 分布式索引9 10. 10Hadoop 核心 Hadoop Common 分布式文件系统HDFS MapReduce框架 并行数据分析语言Pig 列存储NoSQL数据库 Hbase 分布式协调器Zookeeper

qsf113 2012-05-09   664   0
P24

  JavaEE简介 文档

有可能与其它企业的相关应用连接,从而构成一个结构复杂的、跨越Intranet和Internet的分布式企业应用群集。e.g. CRM 作为企业级应用,其不但要有强大的功能,还要能够满足未来业务需求的变化,易于升级和维护。

hefeixz 2011-07-15   8308   0
J2EE   Java开发   方案   Apache   Java  
P30

  淘宝Hadoop与数据分析 文档

9. 分布式索引9 10. 10Hadoop 核心 Hadoop Common 分布式文件系统HDFS MapReduce框架 并行数据分析语言Pig 列存储NoSQL数据库 Hbase 分布式协调器Zookeeper

lxz 2014-01-03   3863   0

不可忽略的数据库缓存重建 问答

对传统的分布式Cache系统进行了分析,指出了其在缓存重建中会对数据库产生巨大压力的问题。并分析了MongoDB的mmap方案是如何规避这一问题的。 如下图的架构,在数据库前端加上分布式的Cach

pleo 2013-06-23   8857   0
MongoDB   数据库   C/C++   Go  

消息中间件ActiveMQ与Kafka对比之Kafka 经验

S的规范,后者看上去有一些“野路子”,并没有纠结于JMS规范,剑走偏锋的设计了另一套吞吐非常高的分布式发布-订阅消息系统,目前非常流行。接下来我们结合三个点(消息安全性,服务器的稳定性容错性以及吞吐量

jopen 2015-06-03   116132   0

2014 年 Ember 会带来如何改变? 资讯

正,自动被Ember应用所调用: 为AMD修正提供shim.json和shim目录。 根据所在的文件系统位置命名木块(包括版本) 在app.js中对模块进行关联 (根据资源地图) 从bower集成资源地体

jopen 2013-12-27   7424   0
Ember  

ELK 集群部署 经验

意味着你的程序将做非常大的改动来利用这些新添加的设备。对比来说,Elasticsearch天生是分布式的:它知道如何管理节点来提供高扩展和高可用。这意味着你的程序不需要关心这些。 对于Elasti

jopen 2015-12-25   21200   0

0x0F 大数据职位,数据场技能(下) 经验

等等。 Linux脚本能力,简单服务配置能力,正则表达式能力,Vim或者Emacs编辑能力,文件系统常用操作命令,远程登录ssh等等,这些都能快速的处理很多问题。任何的分析或挖掘都会依托与一个系统

ersm3365 2016-01-29   41293   0

考验阿里云【深度分析】 资讯

绕其云计算核心业务组群,阿里云已经 低调部署了数据中心、直流电服务器、分布式文件系统分布式文件系统(数百T的容量)、分布式数据库(应用于金融)、弹性计算平台、弹性计算运营系 统、虚拟机集群、手机

fmms 2011-08-12   19497   0

FEX 技术周刊 - 2015/10/19 资讯

HTTPS 正在普及,是得了解相关知识了。可以当 HTTTPS 的科普来看。 HTTP的分布式网络真的被它替代了么? http://mp.weixin.qq.com/s?__biz=MjM

jopen 2015-10-19   41760   0
FEX  
P10

  Linux面试 文档

。   2. Linux内核引导时,从文件 /etc/fstab 中读取要加载的文件系统。   3. Linux文件系统中每个文件用 i节点 来标识。   4. 全部磁盘块由四个部分组成,分别为引导块

jianglei 2011-11-13   4641   0
1 2 3 4 5 6 7 8 9 10