MongoDB 那些坑 经验

follower_user_ids 转移到了内存数据库 redis 中,避免了频繁更改 MongoDB 中的 User, 从而彻底解决问题。如果不使用 redis,也可以建立一个 UserFollower 集合,使用外键形式关联。

jopen 2014-06-29   50573   0

分布式跟踪系统调研 经验

数据库的请求量突然上涨了,如何排查来源是怎么样的?链路分析。 这个操作需要依赖哪些东西?是数据库还是消息队列?如果某个redis挂了,哪些业务会受影响?依赖分析。 架构 (~~stolen from~~)Inspired

jopen 2015-01-25   38455   0

Storm笔记 经验

t,然后Bolt自己在内存里管理数据。 当然,也可以用共享的NoSQL存储如Redis,但此时压力就都在Redis上了。 定时任务 如下设置,所有Bolt都会在定时收到一条消息,一般用于触发sliding

jopen 2015-03-29   37998   0

Python性能分析指南 经验

这是一个使用上述代码片段的例子: from timer import Timer from redis import Redis rdb = Redis() with Timer() as t: rdb.lpush("foo"

jopen 2013-09-09   16810   0

ELK 维护的一些点 经验

继承安装包/shell脚本/fabric实现部署/升级/增删/加黑名单等等功能 每天日志量大概10G上下, 几十个采集端, 两个redis, 两个indexer, 两台es机器扛起 以下, 不那么严谨地, 记录一些遇到的问题 1.

hepeace 2016-02-16   24120   0

MongoDB的正确使用姿势 经验

在内存足够的情况下,索引会被加载到Cache中,如果执行的查询是索引覆盖的,其性能甚至可以媲美Redis等内存数据库等。TTL索引在保存日志或监控数据等场景下大有用武之地,通过创建TTL索引,实现自动

kvsh8744 2016-12-12   35641   0

关系型数据库和NoSQL数据库 经验

数据不会丢失 两者兼具 Redis属于这种类型。Redis有些特殊,临时性和永久性兼具,且集合了临时性key- value存储和永久性key-value存储的优点。Redis首先把数据保存到内存中,在

jopen 2014-03-11   32210   0

开源大数据利器汇总 经验

eper之上。 Redis http://redis.io/ 使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、单机版KV数据库。从2010年3月15日起,Redis的开发工作由VMware主持

dgy7 2015-05-21   56121   0

大数据环境下互联网行业数据仓库/数据平台的架构之漫谈 经验

口,从HBase中获取数据来展示。 其它数据接口 这种接口有通用的,有定制的。比如:一个从Redis中获取用户属性的接口是通用的,所有的业务都可以调用这个接口来获取用户属性。 华丽的分割线:您可以关注

jopen 2015-10-17   110870   0
数据  

如何合理地估算Java线程池大小? 经验

写到这里,我突然冒出一个问题。 是否使用线程池就一定比使用单线程高效呢? 答案是否定的,比如Redis就是单线程的,但它却非常高效,基本操作都能达到十万量级/s。从线程这个角度来看,部分原因在于:

jopen 2016-01-12   9491   0

一个基于 Koa2 构建的类似于 Rails 的 nodejs 开源项目 经验

还是有点距离。于是参考Rails的大致框架搭建了个网站框架kails, 配合postgres和redis, 实现了MVC架构,前端webpack,react前后端同构等网站开发基本框架。本文主要介绍kails搭建中的各种技术栈和思想。

lpzlby144 2016-09-05   62273   0

Twitter技术VP:我在眼泪中学会的6点架构设计经验 经验

Blobstore:Twitter的图片、视频,以及大型文件的存储量已经达到了数以百亿计。 Cache:Redis和Memcache集群,缓存Twiiter用户、时间表、推文,以及其他一些内容。 SQL:包

zoyn7910 2017-02-22   6989   0

当Node.js遇见Docker 经验

├─dockerd─┬─docker-containe─┬─docker-containe─┬─redis-server───2*[{redis-server}] │ │ │ └─8*[{docker-containe}]

AlvinGraynd 2017-04-05   94783   0

Twitter技术VP:我在眼泪中学会的6点架构设计经验 经验

Blobstore:Twitter的图片、视频,以及大型文件的存储量已经达到了数以百亿计。 Cache:Redis和Memcache集群,缓存Twiiter用户、时间表、推文,以及其他一些内容。 SQL:包

VeoCarruthe 2017-02-22   13654   0

8种Nosql数据库系统对比 经验

NoSQL数据库。针对这种情况,这里对 Cassandra 、 Mongodb 、 CouchDB 、 Redis 、 Riak 、 Membase 、 Neo4j 和 HBase 进行了比较: (编注1:

jopen 2014-05-13   28131   0

Node.js 的 DAO 框架:bearcat-dao 经验

        "value": "${redis.port}"     }, {         "name": "host",         "value": "${redis.host}"     }] }]

jopen 2015-03-02   29664   0

Node.js框架、库、资源集合:Awesome Node.js 经验

protocol. Node-redis - Redis Driver, use hideredis for native parser, and checkout then-redis for a Promise-based

jopen 2015-06-29   34620   0

使用ELK(Elasticsearch + Logstash + Kibana) 搭建日志集中分析平台实践 经验

Centos 6.5 安装nginx日志分析系统 elasticsearch + logstash + redis + kibana - http://blog.chinaunix.net/xmlrpc.php

jopen 2015-09-01   41937   0

Node.js 运行环境一键安装包 - BitNami Node.js Stack 经验

Node.js 和使用 NPM 作为模块管理和 node-waf 用于构建原生扩展,同时包含了对 Redis 服务器的支持环境,以及如下模块: Coffee Script : A friendly language

jopen 2012-05-30   81861   0

FnordMetric: 实时应用/事件跟踪仪表盘 经验

Eventmachine( EventMachine :高速可伸缩的事件驱动IO框架)和NoSQL数据库Redis。你可以定义自己策划和计数功能。 FnordMetric提供一个实况仪表盘实时显示谁正在使用

openkk 2012-05-18   18888   0
1 2 3 4 5 6 7 8 9 10