搜狗商业平台分布式消息中间件应用实践 经验

低数据处理的成本。Apache Kafka 是 Linkin 开源的高吞吐分布式消息系统,它具备高稳定、高吞吐、低延迟、分布式等方面的特征,同时能够支持消息消费者的自动水平扩展,有效解决消息堆积问题。因此,

jopen 2015-10-29   16636   0

彻底厘清真实世界中的分布式系统 经验

编者的话:本文从一个实践者的角度,首先介绍了分布式系统的一些理论结果,例如 FLP 不可能性和 CAP 定理等;然后介绍了构建实际分布式系统最重要的一个原则:端到端;最后讨论了实际系统经常用到的协调服务。

jopen 2016-01-18   23750   0

PaddlePaddle:百度分布式深度学习平台开源了 经验

百度分布式深度学习平台Paddle宣布开源,支持Python、C++和SWIG,支持多机数据并行的深度学习模型训练,并提供了Sequence to Sequence模型的Demo。 还记得百度内部

han840129 2016-09-01   92828   0

使用 Python 进行分布式系统协调 经验

随着大数据时代的到来,分布式是解决大数据问题的一个主要手段,随着越来越多的分布式的服务,如何在分布式的系统中对这些服务做协调变成了一个很棘手的问题。今天我们就来看看如何使用Python,利用开源对分布式服务做协调。

darcy_yang 2016-10-31   11976   0

分布式系统互斥性与幂等性问题的分析与解决 经验

经逐渐无法满足要求,分布式系统被使用在更多的场景中。 分布式系统由独立的服务器通过网络松散耦合组成。在这个系统中每个服务器都是一台独立的主机,服务器之间通过内部网络连接。分布式系统有以下几个特点:

一个实现 Twitter SnowFlake 算法 的 Go 分布式 UID 生成器 经验

SnowFlake 算法, 实现的分布式线程安全 UID 生成器 Feature 线程安全的 UID 生成器 绿色可插拔,无需依赖 Redis,Mysql,无状态 适合分布式系统 实现 Twitter

gaoxuzhao 2016-03-05   31571   0

关于分布式存储,这是你应该知道的 经验

前言 分布式存储存在的风险,其实就是因为“共享”、“大数据量”、“高性能”和X86服务器+廉价的磁盘为载体之间的矛盾所产生的,不是有些读者说的“数据架构”的问题。其实任何存储都存在这个问题,只是分布式存储更严重。

使用Apache Mesos打造分布式资源调度系统 经验

Mesos打造云端原生调度机制 为了从不同EC2实例为任务分配资源,我们需要一种能对可用资源进行调度,并能在分布式EC2实例上启动和监控任务的资源管理器。Apache Mesos可将要使用集群的“框架”的资源分配

hzatwhed 2016-08-19   35354   0

微店分布式监控系统实践 经验

早期我们和很多公司一样使用的是zabbix监控, 应该说zabbix的功能还是蛮强大的。但是随着公司的业务发展,我们很快发现有很多问题zabbix很难解决。

dhphmm 2016-12-03   13791   0

用大白话聊聊分布式系统 经验

一提起“分布式系统”,大家的第一感觉就是好高大上啊,深不可测,看各类大牛关于分布式系统的演讲或者书籍,也大多是一脸懵逼。本文期望用浅显易懂的大白话来就什么是分布式系统、分布式系统有哪些优势、分布式系统会

30分钟概览Spark分布式计算引擎 经验

一定点到。 详细内容可参考Spark入门教程-1 Spark是继Hadoop之后的下一代分布式内存计算引擎,于2009年诞生于加州大学伯克利分校AMPLab实验室,现在主要由Databrick

P23

  分布式运算平台-Hadoop-基础篇 文档

1. 分布式运算平台-Hadoop-基础篇马云龙 2. 1:大规模数据处理的问题 2:Hadoop的由来 3:Hadoop需要解决的问题 4:Hadoop介绍 5:HDFS介绍 6:MapReduce介绍

zhpboy 2013-10-12   3298   0
P40

  spark--高效的分布式计算架构 文档

1. spark ----高效的分布式计算架构 ---- 何奇14112852181Life is short,you need spark! 2. Life is short,you need spark

cador 2017-03-13   721   0

分布式深度学习平台,Apache SINGA 0.2.0 发布 资讯

Apache SINGA 是 Apache 在 2015 年 3 月 17 日接纳的一个孵化项目,是个分布式深度学习平台。 Apache SINGA 0.2.0 发布,此版本主要更新内容如下: Training

jopen 2016-01-16   10386   0

ElasticSearch 1.7.5 发布,分布式搜索引擎 资讯

发布,下载地址: v1.7.5 Elastic Search 是一个基于Lucene构建的开源,分布式,RESTful搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。支持通过HTTP使用JSON进行数据索引。

jopen 2016-02-02   13774   0

Zabbix 3.0.0beta1 发布,分布式系统监视 资讯

zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。 Zabbix 3.0.0beta1 发布,更新如下: [ ZBXNEXT-3082 ] implemented

jopen 2016-01-19   5636   0

微服务架构会和分布式Monolith高度重合吗? 资讯

Christensen在最近举办的 Microservices Practitioner Summit 峰会上分享构建分布式系统经验和微服务趋势的时候如此解释网络服务的要点,尤其是在当前这种对二进制依赖比较强烈的系统正在翻倍增长的情况下,更要搞懂微服务是什么!

jopen 2016-02-26   22969   0

分布式的内存平台Apache Ignite v1.7.0发布 资讯

Apache Ignite内存数据组织是高性能的、集成化的以及分布式的内存平台,他可以实时地在大数据集中执行事务和计算,和传统的基于磁盘或者闪存的技术相比,性能有数量级的提升。 特性一览

jopen 2016-08-05   13194   0
P17

  淘宝分布式数据处理实践 文档

1. 1淘宝分布式数据处理实践淘宝数据平台及产品部 周敏 zhouchen.zm@taobao.com 2010-09-04 2. 主要内容淘宝的数据 云梯介绍 对Hadoop的主要功能扩展与改造 Hive实践

P27

  SDN控制器集群中的分布式技术实践 文档

其它Controller上相同App已经生成的运行时数据。 KeyStore实现了一个非常简单的数据库功能,采用Key-Value机制,不支持范围查找,只提供了设置和获取接口,没有通知接口。APP1A

byc2 2014-11-19   668   0
1 2 3 4 5 6 7 8 9 10