P23

  Spanner 技术分析 文档

2011(2008),支持SQL、ACID(NewSQL) Spanner/F1 2012(2009),首个全球分布式事务数据库OLAP MapReduce 2004,成为大数据分析的业界标准 Dremel 2010

kinfion 2013-04-23   3093   0

雅虎架构师谈MapReduce和Hadoop的未来 博客

Scott Delap 译者 Terry Hadoop 是一个开源的分布式计算平台,它主要由MapReduce的算法执行和一个分布式文件系统等两部分组成。InfoQ曾经 刊登过 一 篇Jeremy Za

Hadoopp 2012-09-28   840   0
P59

  上规模网站架构 文档

在任意时刻,只有两项能同时成立 不要浪费精力可能突破上面限制可用性一致性 分区耐受性 8. 新的事务策略-BASE策略避免分布式事务 基本可用(Basically Available) 软状态(Soft state) 选择最终一致(Eventually

jinpujun 2011-08-17   5269   0

Google的十个核心技术 经验

分为四大类: 1.分布式基础设施:GFS,Chubby和Protocol Buffer。 2.分布式大规模数据处理:MapReduce和Sawzall。 3.分布式数据库技术:BigTable和数据库Sharding。

jopen 2012-12-06   74726   0
Google  
P8

  Hadoop集群测试方案及计划 v1.0 文档

Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop

lygkkk123 2012-08-21   570   0

Linux 3.11新特性 资讯

Zswap;例行的 Btrfs 和 XFS 文件系统 bug 修正和性能改进,F2FS 修正了 Linux 3.10 中发现的一个性能退化 bug,首次加入高性能并行分布式文件系统 Lustre;动态电源管理支持从

jopen 2013-07-14   4352   0
Linux  

“Ceph 顾问委员会”接替 Red Hat 管理 Ceph 资讯

Red Hat 的 Ceph 是一个很受欢迎的分布式文件系统,虽然它本身是开源的,但项目的战略方向一致掌握在 Red Hat 手里。现在这一情况将得到改变,Red Hat 近日宣布,将把 Ceph 的管理交到新成立的

jopen 2015-10-30   5679   0
Ceph  
P133

  Hadoop快速入门 文档

· 伪分布式模式的操作方法 o 配置 o 免密码ssh设置 o 执行 · 完全分布式模式的操作方法 目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统

beanshell 2011-07-16   599   0

豆瓣的基础架构 经验

据挖掘、数据分析等,技术组件分别是海量分布式文件系统MooseFS,这 个文件系统的结构类似HDFS,用C语言编写,其好处在于FUSE模块实现的比较好,用文件系统就可以直接进行操作,而不需要专门的命令,可以支持的数据

jopen 2014-06-08   23480   0
P32

  基于hadoop的数据仓库技术 文档

Doug Cutting Hadoop项目负责人 5. Hadoop简介Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高

xcxc 2015-08-24   524   0
P4

  云计算层次架构(浪潮计算机 王洪亮) 文档

  云操作系统,是负责云计算数据中心基础软件、硬件资源管理监控的系统软件。通过基础软硬件监控、分布式文件系统和虚拟计算,云操作系统实现了云基础设施即服务层,通过安全管理中心实现资源多用户共享的数据和信息

gtimehero 2013-01-04   659   0
P32

  基于hadoop的数据仓库技术 文档

Doug Cutting Hadoop项目负责人 5. Hadoop简介Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高

cqn1512 2013-05-02   3410   0

豆瓣的基础架构 问答

挖掘、数据分析等,技术组件分别是海量分布式文件系统 MooseFS,这 个文件系统的结构类似HDFS,用C语言编写,其好处在于FUSE模块实现的比较好,用文件系统就可以直接进行操作,而不需要专门的命令,可以支持的数据

miie 2014-07-10   19134   3
P33

  最新大型网站技术架构探讨 文档

库缓存网站架构演变及其技术脉络减少对网站的访问减少对Web应用服务器的请求减少对数据库的查询减少文件系统I/O操作 10. ■[Step2]技术点—客户端(浏览器)缓存技术点说明根据HTTP协议特性,

jasonyunwu 2012-05-27   581   0
软件架构   方案   Apache   Go   Basic  

后Hadoop时代的大数据架构 经验

SQL的查询语言,通过使用该语言,可以方便地进行数据汇总,特定查询以及分析存放在Hadoop兼容文件系统中的大数据。 Hbase :一种分布的、可伸缩的、大数据储存库,支持随机、实时读/写访问。 Sqoop

b77m 2015-04-22   140189   0
P33

  “大型”网站技术架构探讨 文档

库缓存网站架构演变及其技术脉络减少对网站的访问减少对Web应用服务器的请求减少对数据库的查询减少文件系统I/O操作 10. ■[Step2]技术点—客户端(浏览器)缓存技术点说明根据HTTP协议特性,

zhangyy130 2011-10-20   9511   0
前端技术   方案   Apache   Go   Basic  

用JavaScript阐述MapReduce原理 博客

able。GFS是文件系统相关的,其对后来的分布式文件系统设计具有指导意义;MapReduce是一种并行计算的编程模型,用于作业调度;BigTable是一个用于管理结构化数据的分布式存储系统,构建在G

码头工人 2013-10-15   4778   0
P30

  git版本管理器 文档

开源分布式版本控制工具 —— Git 之旅 背景 Git 是一个开源的分布式版本控制软件。在英式英语中,Git 指一个愚笨或者不开心的人,恐怕与 Git 发明人——Linux 教父 Linus Torvalds

1428353237 2016-11-07   658   0
P11

  云计算Hadoop:快速部署Hadoop集群 文档

中未来的霸主地位。   Hadoop简介   Apache Hadoop 是一个软件框架,它可以分布式地操纵大量数据。它于2006年首次提及,由 Google、Yahoo! 和 IBM 等公司支持。可以认为它是一种

pdffile 2013-01-05   503   0

GitLab 的高可用性 经验

幸运的是,GitLab 提供了一个稳定的设置,即使实在一个没有特别措施的服务器上也能应用. 而由于分布式的天然特性,即使GitLab不能使用,git使用者也仍然能够提交代码. 不过,GitLab的一些特

jopen 2014-12-15   37928   0
1 2 3 4 5 6 7 8 9 10