分布式健康检查:实现OpenStack计算节点高可用 资讯

在上面的OpenStack集群中,包含3个控制节点,3个计算节点,同时还部署了Ceph分布式存储作为Cinder的后端存储。控制节点和计算节点之间使用管理网互联,虚拟机全部从Cinder V

jopen 2015-12-28   29189   0

Java 分布式中文分词组件,word v1.3.1 发布 资讯

word 分词是一个Java实现的分布式的中文分词组件,提供了多种基于词典的分词算法,并利用ngram模型来消除歧义。能准确识别英文、数字,以及日期、时间等数量词,能识别人名、地名、组织机构名等未登录

jopen 2015-10-05   12527   0
word  

雅虎如何在Hadoop集群上实现大规模分布式深度学习 资讯

Noel、Jun Shi 和 Andy Feng 撰文 介绍了雅虎在 Hadoop 集群上构建大规模分布式深度学习的实践 。 深度学习(DL)是雅虎的许多产品都需要的功能。比如, Flickr 的场景

vgtr 2015-10-27   15225   0
Hadoop  

C++实现的GFS--分布式文件系统KosmosFS的编译和简单部署 经验

KosmosFS像Hadoop HDFS一样,是google GFS的开源实现,不过KFS是C++语言写成,目前只支持linux和solaris系统。由于使用了C++开发,所以必然比HDFS在性能和稳定性上有先天优势,在研究其源码之前,先看看如何编译部署它吧。

fmms 2012-01-19   32018   0

深入解析:分布式系统的事务处理经典问题及模型 经验

摘要: 分布式系统需要在数据完整、一致性和性能间做平衡。本文系统介绍了处理分布式数据一致性的技术模型,如:Master-Slave,Master-Master,2PC/3PC,经典的将军问题,Paxo

jopen 2014-08-31   47014   0

Redis的Java客户端Jedis的八种调用方式(事务、管道、分布式)介绍 经验

客户端jedis也非常强大和稳定,支持事务、管道及有jedis自身实现的分布式。 在这里对jedis关于事务、管道和分布式的调用方式做一个简单的介绍和对比: 一、普通同步方式 最简单和基础的调用方式,

jopen 2014-09-11   390163   0

介绍企业级分布式监控zabbix的一些常用特性 经验

bix来做监控的初学者,能够在短时间内快速上手 前言 zabbix是一个基于WEB界面的提供分布式系统监控以及网络监视功能的企业级开源解决方案。zabbix能监视各种网络参数,保证服务系统的安全运营,

jopen 2015-04-09   59575   0

Paracel:豆瓣开发的大型分布式计算框架,用于机器学习、图算法 经验

1. Paracel的是什么? Paracel是豆瓣开发的一个分布式计算框架,它基于参数服务器范式,最初是为机器学习算法设计的。 Paracel支持数据和模型的并行,为用户提供简单易用的通信接口,

yne7 2015-03-30   17278   0

安全可靠的、支持扩展的分布式网路服务器:maple 经验

maple 是一个安全可靠的、支持扩展的分布式网路服务器。 一. gateway 2个epoll_fd,分别对应 外网链接 和 内网链接(之前也考虑过将accept线程单独放出来,后来发现会导致复杂度升高)

dwd4 2015-03-31   10401   0
maple  

高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南 经验

(WJW)高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南 为了部署HA集群,应该准备以下事情: namenode服务器: 运行namenode的服务器应该有相同的硬件配置

jopen 2015-01-08   56311   0

设计全球级的分布式、任务关键型应用 - 从实际项目中得来的教训(下) 经验

肯定代码的功能。而且,随着代码的修改,单元测试要不断进行,从而保证代码的功能正确性。 在一个分布式应用中,即使你拥有全世界最好的功能测试覆盖,系统仍然有可能出问题。 单元测试永远不够! 你需要测试

lolek 2015-12-01   12606   0

承载千万级并发的分布式系统架构设计思想 经验

数据库服务器集群无非也是想达到负载均衡提高吞吐量的作用,传统的数据库如 MySQL /oracle/ sqlserver 等,可以采用分布式安装部署,通过分表分区技术达到负载均衡,但是,为了保护数据的一致性,只能均衡读操作的负载,无法均衡

saintmyi0 2016-02-22   43672   0

一个综合的分布式项目之项目环境准备 经验

一个综合的分布式项目之项目环境准备:    统一JDK为1.7     tomcat端口上下游各为8080和8088,其他服务端口默认     开发工具ecl...

hteg4955 2016-01-22   7239   0

Codis作者黄东旭:细说分布式Redis架构设计和那些踩过的坑 经验

来自: http://dbaplus.cn/news-21-270-1.html Codis是一个分布式Redis解决方案,与官方的纯P2P模式不同,Codis采用的是Proxy-based的方案。今天

warmsaaa 2016-02-29   41247   0

分布式压缩贴图加快 Unity3D 的打包过程 经验

经过简单的考察,我发现,打包流程中最慢的环节是贴图压缩。在不同的平台,需要把原始贴图文件压缩成对应平台的压缩贴图格式: ios 平台对应的是 PVR 压缩格式;Android 平台对应的是 ETC 压缩格式,等等。

zpjg9555 2016-12-12   33878   0
P29

  海量数据处理的大杀器 - 腾讯分布式数据仓库(TDW) 文档

1. 海量数据处理的大杀器 ——腾讯分布式数据仓库(TDW)2012年7月腾讯公司 郭玮 2. Agenda 腾讯公司的海量数据处理平台 腾讯分布式数据仓库(TDW) TDW的技术点分享 TDW技术发展展望

andyxiemu 2012-08-13   1111   0
P21

  谭俊青 - 途牛多数据中心分布式数据库同步 文档

1. (本页无文本内容) 2. 多机房分布式数据库同步谭俊青@途牛 mysqlab.net 3. 背景 南、北数据同步存在延时 南、北专线可能会意外中断 南、北业务都不能中断 本地读取数据一致性不能得到保证

dfwm 2014-10-19   5265   0
方案   SQL  

分布式分析引擎 Apache Kylin v1.5.3 正式发布 资讯

Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。

jopen 2016-07-29   12355   0
P39

  腾讯TDW分布式数据仓库用户手册 文档

 项目编号 XXXXXXX 密级 秘密 项目名称 TDW 部门 数据平台部 TDW分布式数据仓库用户手册 作者 brantzhang 时间 2010-5-27 审核 时间 批准 时间 深圳腾讯计算机系统有限公司

gtimehero 2013-01-04   1102   1

百度的Hadoop分布式文件系统图解:4000节点集群 经验

法和Map-Reduce和DAG算法应用等。而通过调度的分配,可以让HPC高性能计算集群和大规模分布式集群各得其所的计算相应数据。 百度通过HCE对streaming作业的排序,压缩,解压缩,内存

openkk 2012-08-25   23315   0
1 2 3 4 5 6 7 8 9 10