大数据实时处理:百分点实时计算架构和算法 经验

存储,包括分布式文件系统(Hadoop HDFS)、分布式SQL数据库(MySQL)、分布式 NoSQL数据库(Redis、MongoDB、HBase)、分布式消息队列(Apache Kafka)、分布式搜索引擎(Apache Solr)

jopen 2014-03-01   101750   0

Tumblr 架构设计 经验

内部服务从C/libevent为基础正在转向Scala/Finagle为基础。 开始采用新的NoSQL存储方案如HBase和Redis。但大量数据仍然存储在大量分区的MySQL架构中,并没有用HBase代替MySQL。

jopen 2013-05-26   78089   0
P26

  Mysql 优化笔记 文档

mix/sysbase/sql server 非关系型数据库: (特点: 面向对象或者集合) NoSql数据库: MongoDB(特点是面向文档) 2NF: 表中的记录是唯一的, 就满足2NF, 通常我们设计一个主键来实现

hello12345 2013-11-24   391   0

ElasticSearch详解与优化设计 经验

肯定是最佳选择。当然,如果你的文档是JSON的,你也可以把ElasticSearch当作一种“NoSQL数据库”, 应用ElasticSearch数据聚合分析(aggregation)的特性,针对数据进行多维度的分析。

jopen 2016-01-05   115893   0

浅谈Web网站架构演变过程 经验

就是类似{ip:errorNumber}这样的key:value数据。对于这种数据,我们可以用NOSQL数据库来代替传统的关系型数据库。 2、 页面缓存 除了数据缓存,还有页面缓存。比如使用H

DebDla 2016-02-29   40413   0

“PostgreSQL+金融”的架构演进 经验

比较,经过测试验证,我们发现 PostgreSQL 的性能并不差。而 MongoDB 由于属于 NoSQL,并不支持表(或者说 collection)之间的关联,PostgreSQL 恰好填补这方面的空缺。对于一些有

ShaDuby 2016-10-18   12430   0

Firebase 教程 —— 一个实时聊天室 经验

数据结构 在开始让数据实时同步之前,先花点时间来看看数据结构。 Firebase 数据库是 NoSQL 数据库,也就是说,在 Firebase 数据库中的每个对象都是 JSON 对象,这个 JSON

TamelaBunde 2016-09-14   28338   0

高性能高并发服务的瓶颈及突破思路 经验

存储类的解决思路基本是类似的,都是 将数据拆分,通过引入多个存储服务实例提升整体存储服务的能力, 不管对于SQL类的还是NoSQL类的或文件存储系统等都可以采用这个思路。 2、服务拆分 图2 服务拆分 应用程序自身

lideng 2016-09-13   10476   0

Hadoop开发使用备记 经验

部分数据挖掘算法,解决了并行挖掘的问题。 Apache Cassandra :是一套开源分布式NoSQL数据库系统。它最初由Facebook开发,用于储存简单格式数据,集Google BigTable的数据模型与Amazon

jopen 2014-05-20   52523   0

2011年度最佳开源软件:Bossie奖结果公布 资讯

http://www.sencha.com/products/touch/ MongoDB(NoSQL数据库) http://www.mongodb.org/ Node.js(基于JS的Web服务器)

码头工人 2011-09-09   27096   2
开源  

为什么你应当将应用迁移到云服务上? 资讯

缩架构的前提条件之一),在这种情况下要实现大规模化,可能要对整体功能进行大规模的重新设计。而 NoSQL数据库就实现了高度的可伸缩性。与之类似,你的应用程序或许托管在一个多核的服务器上,但如果你的应用没有实现多线程应用,那么这点优势也没有

jopen 2015-08-07   35130   0

细说分布式 Redis 架构设计和那些踩过的坑 资讯

已和最初的面目全非,但协议和接口永存,比如SQL和Redis Protocol。 NoSQL来了一茬又一茬,从HBase到Cassandra到MongoDB,解决的是数据的扩展性问题,通过

jopen 2016-03-01   33540   0
P77

  Jdon Framework Domain-Driven Design(DDD)开源框架 文档

领域模型通过JMS驱动技术架构实现功能。 JMS= 集群无单点+分布式事务架构 业务数据装在领域模型中,关系数据库只是用来做存储,NoSQL(Not Only SQL),领域模型数据和数据库数据不高度一致,低延迟。 44. JdonFramework特点DDD

xusong0924 2012-02-02   5423   0
JEE框架   方案   Java   Scala   SQL  
P69

  大数据技术平台调研报告 文档

大数据的目标是创造更多的财富和利润 3) 大数据的手段是海量数据处理技术 大数据是支持一系列技术(如各种 Hadoop 项目、NoSQL 产品,甚至 MPP 数据库系统)的术语, 它通过驱动更好的分析和从数据中获得有价值的信息为世界

dszhao 2017-03-22   3018   0
P30

  mongodb 学习笔记 文档

1. Mongodb简介 mongo取自“humongous”(海量的),是开源的文档数据库──nosql数据库的一种。 MongoDB是一种面向集合(collection)的,模式自由的文档(document)数据库。

huafenged 2012-07-20   3133   0

Redis使用手册 经验

的提高,传统的数据查询方式已无法满足我们需求。为此我们需要寻找另外一种模式来提高数据查询效率。NoSQL内存数据库是最近兴起的新型数据库,它的特点就是把数据放在内存中操作,数据处理速度相对于磁盘提高了

jopen 2014-09-02   71105   0

Codis作者黄东旭:细说分布式Redis架构设计和那些踩过的坑 经验

的存储早已和最初的面目全非,但协议和接口永存,比如SQL和Redis Protocol。 NoSQL来了一茬又一茬,从HBase到Cassandra到MongoDB,解决的是数据的扩展性问题,通过

warmsaaa 2016-02-29   41247   0
P24

  大数据分析系统架构之探讨 文档

方案一: 对于该架构,只适合于较为传统的数据处理,着重考虑的是将各种数据,如关系型数据库的数据,NoSQL数据库的数据,Log形式的数据统一到一种格式并存入分布式HDFS上,然后通过一系列的机器算法,计

guet_lee 2017-01-12   2237   0

机器学习框架,类库和软件汇总 经验

model(s) used for prediction(s), are stored into a NoSQL datastore. XGBoost - Python bindings for eXtreme

jopen 2015-11-23   70827   0

R语言知识体系概览 经验

,原创了大量的R语言技术实战文章,包括 R的极客理想系列文章、RHadoop实践系列文章、R利剑NoSQL系列文章 ,并出版图书《R的极客理想》系列图书。 谢益辉个人博客 ,统计之都创始人,现任RS

jopen 2016-01-05   47925   0
1 2 3 4 5 6 7 8 9 10