AWS运维的一些经验 资讯

Q:前端放不同az还好说,后端数据库不同az怎么搞? 数据库如果是自己在EC2上部署的话,比如我们使用的Cassandra,多台同样可以采用不同AZ,至于AWS本身的数据库服务RDS、Aurora、DynamoDB,里面有一个multi-AZ的功能。

jopen 2015-11-17   56053   0
AWS  

讲给普通人听的分布式数据存储 资讯

ioned replica set)。 (点击放大图像) 不论是Hadoop、Cassandra或者MongoDB集群,所有这些基本上都符合这种模式,许多AWS数据服务也是如此。让我们了解一下分隔的副本集合的一些共同特征:

jopen 2015-09-25   6495   0

物联网的开源工具 经验

用间的通信、数据校验和标准化、长期数据存储和数据恢复功能。它是基于Java和Apache Cassandra NoSQL数据库的。 5. Node-RED Node-RED是基于Node.

jopen 2014-09-02   99059   0
开源  

Apache Thrift设计概要 经验

Facebook是Thrift的原作者,还开源有 Nifty 与 Swift 两个子项目, Cassandra是另一个著名用户, 其跨语言的Client包 就是基于Thrift的,这些在下一篇文章中展开讨论。

jopen 2015-06-11   45954   0

Kubernetes 架构浅析 经验

Kubernetes之上的分布式存储 Kubernetes官方提供了一个在 Kubernetes上部署cassandra 的 例子,只需要重写一个基于Kubernetes apiserver的SeedProvider,就可以避免静态配置seed

jopen 2015-11-25   78108   0

程序员技术练级攻略 问答

Cabinet(升级版为Kyoto Cabinet)、Flare、MongoDB、CouchDB、Cassandra、Voldemort等。 写了那么多,回顾一下,觉得自己相当的有成就感。希望大家不要吓着

openkk 2011-10-22   117099   79
程序员   C/C++   PHP   Go   SQLite  

Awesome 干货系列索引 经验

Plugins and resources for CakePHP 2 and 3. awesome-cassandra awesome-chef – Cookbooks, handlers, add-ons and

dwd4 2015-03-31   48958   0
awesome  

持续可用与CAP理论 – 一个系统开发者的观点 经验

一致系统无法做到。业内也有一些流行的NOSQL系统,例如各 种类Dynamo系统,如开源的Cassandra,对同一个最小数据单位(同一行数据)允许多台服务器同时写入,虽然采用NWR机制处理冲突,但是由于

jopen 2015-04-22   40361   0
CAP  
P8

  程序员技术提升必读 文档

Cabinet(升级版为Kyoto Cabinet)、Flare、MongoDB、CouchDB、Cassandra、Voldemort等。 写了那么多,回顾一下,觉得自己相当的有成就感。希望大家不要吓着,我

huzh_68 2011-09-13   489   0

Linux容器将颠覆虚拟化 资讯

Andersen展示了一些在虚拟化环境中的测试基准,其中一个是使用Hadoop TeraSort测试而另一个是对Cassandra NoSQL数据存储的压力测试。这两个测试中,主机运行的是在峰会期间发布的最新OpenStack

ffc8 2015-12-04   14454   0
Linux  

成为专业程序员路上用到的各种优秀资料、神器及框架 经验

Hadoop:分布式的文件系统,结合其MapReduce编程模型可以用来做海量数据的批处理(Hive,Pig,HBase啥的就不说了),值得介绍的是Cloudera的Hadoop分支CDH5,基于YARN MRv2集

ymquan1987 2017-03-09   38211   0

zookeeper简介 经验

Hadoop,使用Zookeeper的事件处理确保整个集群只有一个NameNode,存储配置信息等. HBase,使用Zookeeper的事件处理确保整个集群只有一个HMaster,察觉HRegionServer联机和宕机

jopen 2014-11-08   606829   0

兼顾稳定和性能,58大数据平台的技术演进与实践 经验

据接入问题)、还有大量的数据采用Flume解决方案; 存储层,典型的系统HDFS(文件存储)、HBase(KV存储)、Kafka(消息缓存); 再往上就是调度层,这个层次上我们采用了Yarn的统一调度

vb236376 2017-05-18   26289   0

全面Docker化之后,京东弹性数据库的最新实践与突破! 经验

: 通过Spark Streaming把它同步到HBase里,目前京东内部实际上是有一个项目叫做实时数据快照,就是通过这种方式,实现了HBase中的数据与线上MySQL实例中的数据的完全实时同步更新。

mask830609 2018-01-10   31316   0
MySQL   Docker  

Firouzian:数据工程师是IT行业最热门的工作 资讯

果说这些橱柜是白色的话,我们可以节 约电能,可以省下好几千的美金。大家有没有听过 HBASE?每天有一个 HBASE 的演讲,所以大家要关注明天的演讲日程。我们有各种各样的产品,你可以去下载,在你的设

jopen 2012-10-26   13433   0
P19

  zookeeper使用简介 文档

Hadoop,使用Zookeeper的事件处理确保整个集群只有一个NameNode,存储配置信息等. HBase,使用Zookeeper的事件处理确保整个集群只有一个HMaster,察觉HRegionServer联机和宕机

xnbw 2016-01-11   611   0
P44

  中国移动Big Cloud平台(经分培训)v1.0 文档

MapReduce:MapReduce并行程序框架 HDFS:海量数据的分布式文件系统 Zookeeper: 分布式锁系统 HBase:结构化数据存储 Avro:高效消息序列化协议 16. Hadoop HDFS  Google

ljp123456 2014-03-22   2311   0
P9

  透过12306五大焦点看高性能高并发系统 文档

的瞬间并发最大的特点就是写操作非常频繁,而Facebook的解决之道则在于通过利用HBase写速度快的特点来构建数据库(据邵铮的说法是HBase 在读取上并不尽如人意),并对整个架构 进行优化来达到缩短时间的目的,

ccn4 2013-10-18   422   0
P37

  分析IBM产品实现SaaS解决方案 - 建立开源SaaS软件开发途径 文档

强的扩展性,这时也可对选择一些基于列的数据库,如Google的Bigtable、Apache的HBase等。 1、关系数据库的选择问题 关系数据库,是建立在关系模型基础上的数据库,借助于集合代数等数学

david_g5 2011-11-03   578   0
方案  

Go语言框架,类库,软件汇总:awesome-go 经验

migration handling in Golang support MySQL,PostgreSQL,Cassandra and SQLite. myreplication - MySql binary log replication

jopen 2015-12-28   108215   0
1 2 3 4 5 6 7 8 9 10