Hadoop 2.x HDFS新特性 HDFS联邦 HDFS HA（要用到zookeeper等，留在后面再讲） HDFS快照

云计算的“横空出世”让很多人将其视为一项全新的技术，但事实上它的雏形已出现多年，只是最近几年才开始取得相对较快的发展。确切地说，云计算是大规模分布式计算技术及其配套商业模式演进的产物，它的发展主...

还是很多很多年前，做过一个小系统，是一个和支付相关的小系统。因为是一个小系统，所以一切都那么简单。一台应用服务器，一台数据库服务器；文件、图片都放在应用服务器上，一切都是那么的平淡，一切都是那么...

Hadoop一直是我想学习的技术，正巧最近项目组要做电子商城，我就开始研究Hadoop，虽然最后鉴定Hadoop不适用我们的项目，但是我会继续研究下去，技多不压身。

最近从Hadoop 1.x 转到Hadoop 2.x 同时将一些java 程序转为Scala的程序将平台上的代码减少了很多，在实施的过程中，开到一些Spark相关的YARN的部署上都是基于之前的...

Pig 最早是雅虎公司的一个基于Hadoop的并行处理架构，后来Yahoo将Pig捐献给Apache（一个开源软件的基金组织）的一个项目，由Apache 来负责维护，Pig是一个基于 Hadoo...

SpockFS 是一个基于 HTTP 的文件系统，其基于纯 HTTP 方法和 Header 构建，支持所有 FUSE POSIX 相关的方法，包括符号链接。

云计算的“横空出世”让很多人将其视为一项全新的技术，但事实上它的雏形已出现多年，只是最近几年才开始取得相对较快的发展。确切地说，云计算是大规模分布式计算技术及其配套商业模式演进的产物，它的发展主...

用 Go 语言开发的图片存储和实时处理项目 zimg 的 golang 版本, 支持 SSDB 和 Redis 作为存储后端.

(WJW)高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南

数据挖掘基于数据库理论，机器学习，人工智能，现代统计学的迅速发展的交叉学科，在很多领域中都有应用。涉及到很多的算法，源于机器 学习的神经网络，决策树，也有基于统计学习理论的支持向量机，分类回归树...

Google Cloud Dataflow是一种构建、管理和优化复杂数据处理流水线的方法，集成了许多内部技术，如用于数据高效并行化处理的Flume和具有良好容错机制流处理的MillWheel。D...

Petuum是 一个机器学习专用分布式计算框架，本文介绍其架构，并基于文章 More Effective Distributed ML via a Stale Synchronous Paral...

GraphLab是一个面向大规模机器学习/图计算的分布式内存计算框架，由CMU在2009年开始的一个C++项目，这里的内容是基于论文

GraphX是 Spark中用于图(e.g., Web-Graphs and Social Networks)和图并行计算(e.g., PageRank and Collaborative Fi...

Spark是一个通用的分布式内存计算框架，本文主要研讨Spark的核心数据结构RDD的设计思路，及其在内存上的容错。内容基于论文

这篇博文是关于Zookeeper官网上zookeeperInternals的翻译讲述了Zookeeper的内部机制

F君：“我来介绍一下OpenStack，美国有句名言叫做‘两只火鸡也成不了雄鹰’，OpenStack就是这种指导思想下的产物。” “为了彻底解决这个历史问题，OpenStack的战略...

近日，在UnitedStack组织的存储技术研讨会上，三位来自于UnitedStack、IBM和HP的存储专家分别就UnitedStack 文件共享服务、IBM弹性存储和HP Helion VS...

这篇论文比较新，发表于2014年11月SC(supercomputing)会议上。SC是高性能计算领域的旗舰会议，每年录取约80篇论文，但参会人数经常超过万人，今年在新奥尔良召开。IndexFS...