NoSQL来了一茬又一茬，从HBase到Cassandra到MongoDB，解决的是数据的扩展性问题，通过裁剪业务的存储和查询的模型来在CAP上平衡。但是几乎还是都丢掉了跨行事务（插一句，小米上在HBase上加入了跨行事务，不错的工作）。

依赖的，可能还有少部分历史遗留的代码，缓存是memcached+redis。 Hbase是分成两个小块专门负责HBase，也会提出一些BUG的提示，最新的0.98的应该打进去了，后面应该会看到豌豆荚会进入到名单里面去。

HDFS ，还可以访问 Cassandra, HBase, Hive, Tachyon 以及任何 Hadoop 的数据源。这极大地方便了已经使用 HDFS 、 Hbase 的用户顺利迁移到 Spark 。 2

我先后考虑过MySQL、Cassandra、HBase。后面两种都属于列式存储的NoSQL数据库。团队中没有一个人有Cassandra的经验，至于HBase，虽然支持高效的数据查询，但对聚合运算的支持

处理的全生命周期提供了必要的配套和补充。这些软件常用的有ZooKeeper、Hive、Pig、HBase、Storm、Kafka、Flume、Sqoop、Oozie、Mahout等。2012年5月，Hadoop

S）、分布式SQL数据库（MySQL）、分布式 NoSQL数据库（Redis、MongoDB、HBase）、分布式消息队列（Apache Kafka）、分布式搜索引擎（Apache Solr） 以及必

深入的挖掘SIMD等CPU潜力。此外，除了 Spark，Flink这样的分布式计算框架，HBase(HBASE-11425)，HDFS(HDFS-7844)等项目也在部分性能相关的模块通过 自己管理内

众所周知Google BigTable是重要的NoSql产品，提供很好的扩展性，开源世界有HBase与之对应。为什么Google还需要F1，而不是都使用 BigTable呢？因为BigTable提

NoSQL来了一茬又一茬，从HBase到Cassandra到MongoDB，解决的是数据的扩展性问题，通过裁剪业务的存储和查询的模型来在CAP上平衡。但是几乎还是都丢掉了跨行事务（插一句，小米上在HBase上加入了跨行事务，不错的工作）。

，包含各种前端框架以及中介软体（Middleware）。而最下层则包含MySQL、Redis、HBase等资料库架构，而底部资源的中介软体，则部署于中间Web层。 微博内部总共有2个机房，两者

协议啊、序列化协议啊，等等。在这一块，我的强烈建议是不要重复造轮子。利用公司现有的RPC框架：Thrift也好，Dubbo也好，或者是其他自定义的框架也好。因为消息队列的RPC，和普通的RPC没有本质

http://blog.sina.com.cn/mpl398235717 4 列存系列 4 Hadoop之Hbase 4 耶鲁大学之HadoopDB 4 GreenPlum 4 FaceBook之Cassandra

dbcached Memcached 和 dbcached 在功能上一样吗? 列存系列 Hadoop之Hbase 耶鲁大学之HadoopDB GreenPlum FaceBook之Cassandra Cassandra特点

源起：Google 的论文 BigTable 。 数据模型：列簇，每一行在理论上都是不同的 例子：HBase, Hypertable, Cassandra 优点：处理大量数据，应对极高写负载，高可用，支持跨数据中心，

infrastructure)颇有渊源，回顾我们对MySQL， Cassandra，Hadoop，Hive和Hbase所做的贡献可以看出这一点。2013年也不例外，仅仅在过去的几个月里，我们就上线了两个新的旗 舰级数据项目。

13. Teradata Relational DBMS 67.05 -0.35 14. 15. HBase Wide column store 53.59 +2.51 15. 14. FileMaker

第二种访问状态的方法是将Storm的工作进程连接到一个集中式的或者分布式的持久化存储 当中，例如Cassandra或HBase。采用这种方法，Storm的处理代码能够访问GB或者TB级别的状态信息，并且能够简单地、独立地从

的技术框架，在这个过程中遇到过哪些挑战？ 胡宁：在我们的框架中，应用了很多的开源系统，如 Hadoop、HBase、Hive、Redis、Scribe、Kafka、Storm、Spark 等。但这些开源系统本身

数据存储无需声明和保持一致的格式（无模式） NoSQL数据库分类 主要有四类： 列族（HBase，Cassandra，Amazon SimpleDB，Hypertable） 文档（Mong

的 TFS ，facebook自主研发的 Haystack ），还有一些公司在现有开源项目(如hbase，fastdfs，mfs等)基础上做针对性改造优化以满足业务存储需求； 一. 通过对若干分布