第2章 大型网站架构模式 经验

务分割开来,包装成高内聚低耦合的模块单元,一方面有助于软件的开发和维护;另一方面,便于不同模块的分布式部署,提高网站的并发处理能力和功能扩展能力。 大型网站分割的粒度可能会很小。比如:在应用层,将

jopen 2015-03-10   24888   0
架构  
P57

  nosql之redis 文档

列存储数据库Cassandra, HBase, Riak分布式文件系统以列簇式存储,将同一列数据存在一起查找速度快,可扩展性强,更容易进行分布式扩展功能相对局限 6. NoSQL数据库的四大分类分类举

mma5694 2017-02-22   1229   0

如果Google重返中国,能够击倒百度吗? 资讯

Glass、Android,有甩开 Hidoop 几条街的 Caffeine、Pregel、Dremel,还有 GFS 文件系统和全球数据库 Spanner,百度却只有搜索。 这很可能是关于搜索引擎技术非常大的误区,我个人感觉,Google

jopen 2014-07-18   12993   0
百度  

三个大数据处理框架:Storm,Spark和Samza 介绍比较 经验

许多分布式计算系统都可以实时或接近实时地处理大数据流。本文将对三种Apache框架分别进行简单介绍,然后尝试快速、高度概述其异同。 Apache Storm 在 Storm 中, 先要设计一个

jopen 2015-03-11   50791   0

流式大数据处理的三种框架:Storm,Spark和Samza 经验

csdn.net/zhyooo123/article/details/50680767 许多分布式计算系统都可以实时或接近实时地处理大数据流。本文将对三种Apache框架分别进行简单介绍,然后尝试快速、高度概述其异同。

sam2015 2016-02-17   17945   0
P83

  计算机操作系统教程(张尧学_史美林_张高)(第三版)第一章 文档

Microsoft Press, 2000 4. 课程主要内容用户接口 进程管理 处理机管理 存储管理 文件系统 外部设备管理 操作系统的功能 管理系统软硬件资源 扩展计算机的功能 向用户提供服务 5. 课程的目的与要求课程目的

jiangjiang 2012-10-02   4459   0
Intel   x86   Basic  

你应该知道的大数据领域12大动向 经验

储使用情况,用于更准确的容量规划、优化成本效益,并满足数据治理和合规要求。新功能支持Hadoop文件系统的存储级别,还支持众多Hadoop数据处理引擎,包括MapReduce、Tez、Hive和Cloudera

axcu9192 2016-07-05   27761   0

版本控制软件SourceAnywhere Standalone 的十大优势盘点 资讯

Standalone的独特技术可以减少对带宽的需求。可选的缓存服务器,可以进一步提高远程访问的性能和提高分布式开发团队的生产力。 防火墙友好性 SourceAnywhere Standalone具有防

panda456 2013-03-04   17568   0

RedHat开源其Hadoop存储系统 资讯

插件,作为 HDFS 的替代产品。 RedHat Storage hadoop 插件基于 Gluster 文件系统——Red Hat 于 2011 年以 1.36 亿美元收购了 Gluster,目前已经将 Gluster

jopen 2013-02-22   8798   0
Hadoop  

介绍6个不同类型的开源协作管理系统 资讯

的一个主要优点是,它不绑定到任何特定的底层架构。例如,JSR-170 实现的后端数据存储可以是文件系统、WebDAV 仓库、支持 XML 的系统,甚至还可以是 SQL 数据库。此外,JSR-170

jopen 2012-07-14   9663   0

一个Hadoop老兵的自白 资讯

中的文件,只能通过 HDFS 命令行接口来查询。 MapR-FS 是一个操作系统级的文件系统,兼容 POSIX。查看该分布式文件系统中的文件,只需要使用 LS 命令。编辑其中的文件,也不需要专门的工具。Linux

jopen 2015-11-27   6478   0
Hadoop  
P2

  big资料 文档

进行介绍: 1) HDFS:Hadoop生态圈的基本组成部分是Hadoop分布式文件系统(HDFS)。HDFS是一种数据分布式保存机制,数据被保存在计算机集群上。数据写入一次,读取多次。HDFS为HBase等工具提供了基础。

fangunun 2016-12-22   643   0

SQL 与 NoSQL 混合数据库正在取得进展 资讯

Service)”,混合了SQL与NoSQL。前端是MySQL查询引擎,面向现有的海量MySQL应用,而存储中用的API使用了内存中的分布式 NoSQL对象存储,大小可达50GB。Xeround的CEO Razi Sharir这样对InfoQ说。

openkk 2012-02-12   9725   0
NOSQL  

深入浅出解析大数据平台架构 经验

据量较大,只不过这些数据输入到的不是电脑,而是人脑并最终通过计算分析得出结论。 Google分布式计算的三驾马车 Google File System用来解决数据存储的问题,采用N多台廉价的电脑,

jopen 2014-12-12   66149   0

SparkES 多维分析引擎设计 经验

优秀的全文检索能力 高效的列式存储与查询能力 数据分布式存储(Shard 分片) 其列式存储可以有效的支持高效的聚合类查询,譬如groupBy等操作,分布式存储则提升了处理的数据规模。 相应的也存在一些缺点:

rdth7674 2016-03-03   21980   0

多图技术贴:深入浅出解析大数据平台架构 经验

据量较大,只不过这些数据输入到的不是电脑,而是人脑并最终通过计算分析得出结论。 Google分布式计算的三驾马车 Google File System用来解决数据存储的问题,采用N多台廉价的电脑,

jopen 2015-03-11   33285   0
P18

  深入浅出解析大数据平台架构 文档

且数据量较大,只不过这些数据输入到的不是电脑,而是人脑并最终通过计算分析得出结论。 Google分布式计算的三驾马车 · Google File System用来解决数据存储的问题,采用N多台廉价的电

guet_lee 2017-01-12   1828   0

红帽PaaS平台 OpenShift 经验

Framework、Twisted、Django和Java E。它包含SQL和NoSQL数据存储和一个分布式文件系统。 项目主页: http://www.open-open.com/lib/view/home/1332408184718

fmms 2012-03-22   69215   0
PaaS  

Facebook测试屏幕跟踪软件 资讯

Hadoop。Facebook 不是第一家这么做的公司,营销公司 Shutterstock 也是利用 Hadoop 分布式文件系统分析用户在网站上的光标移动数据。 来自: Solidot

jopen 2013-10-31   7942   0

轻博客系统 doudangQb 经验

开发,非常方便进行插件开发,欢迎下载使用。 doudangQb 支持 fastdfs 轻量级分布式文件系统,还可以扩展使用其它的图片存储系统。 doudangQb 图片处理支持gd库 和 imageMagick

openkk 2012-01-05   22527   0
1 2 3 4 5 6 7 8 9 10