近千节点的Redis Cluster高可用集群案例:优酷蓝鲸优化实战 经验

量级的请求与操作类型有: 客户端请求 集群通讯 从节同步 AOF 文件 其它定时任务 Redis 服务端采用 Reactor 设计模式,它是一种基于事件的编程模型,主要思想是将

WilHennessy 2016-07-30   44058   0

ODPS跨集群迁移与数据同步经验分享 经验

5,复制任务是 否成功取决于修改meta和SQL作业修改meta的先后,如果复制任务在SQL作业之后修改meta,此时有效meta已被修改为V5,而复制作业的有 效meta是V4,此时复制任务会失败。

jopen 2014-10-30   20242   0

HTTP API自动化测试从手工到平台的演变 资讯

YAML有一个一致的信息模型 YAML易于实现 听起来YAML试图用一种比XML更敏捷的方式,来完成XML所完成的任务。下面通过一段实际例子说明配置生成的YAML代码段: 被测接口通过web界面配置 主接口配置界面:

jopen 2016-02-16   51565   0
P5

  iquartz通用调度框架 文档

的意见对iquartz进行改进。 通用任务调度框架iquartz提供定时任务的定制化,能够开发出特定的任务并进行调度,如数据交换、数据处理、文件上传下载等各类任务,iquartz采用类似tomcat的

gx4air 2014-09-17   467   0
P4

  阿里双十一流量处理系统 文档

行扩展,实现分布式任务列队。 系统水平和垂直扩容能力 每个GROUP能处理的订单量在可控范围之内,一旦某一块出现瓶 颈的时候,可以随时部署一个或一套GROUP。 分布式任务处理 分布式任务队列 1.采用工作流机制,支持灵活的流程配置

xinkong6 2016-12-03   1364   0
P12

  微信红包之CBA实践 文档

12 2. 内容微信红包业务简介 CAP 在微信红包中的应用 BASE在微信红包中的应用 ACID及分布式事务处理 3. 微信红包业务特性发抢拆看似简单 发—支付 抢—抢资格 拆—资金入帐基于朋友圈互动 一种新型企业营销工具解决海量支付问题

c6g3 2015-02-18   545   0
Basic  
P112

  第三方数据交换平台方案v1.1.4 文档

Piston远程数据交换中间件 32 3.3 领域模型和逻辑设计 34 3.3.1 概述 34 3.3.2 任务调度引擎 34 3.3.3 规则处理引擎 37 3.3.4 系统核心功能设计概述 43 3.3.5

ralphone 2015-01-26   1654   0
方案  
P54

  2017年上半年 系统分析师 答案详解 文档

流水线的吞吐率是指流水线在单位时间里所完成的任务数或输出的结果数。设某流水线有 5 段,有 1 段的时间为 2ns ,另外 4 段的每段时间为 lns,利用此流水线完成 100 个任务的吞吐率约为(16)个/s 。

tp01256 2018-06-07   1626   0

王团结:如何用Hadoop/Spark构建七牛数据平台 资讯

作。关注大数据处理,高性能系统服务,关注Hadoop、Flume、Kafka、Spark等离线、分布式计算技术。 下为讨论实录 数据平台在大部分公司都属于支撑性平台,做的不好立刻会被吐槽,这点和运

jopen 2015-07-30   15456   0
Hadoop  

魅族应用商店云端架构实践 经验

Time,QPS),为服务治理提供了详实有力的数据支撑。 消息队列(MetaQ) 消息队列是分布式应用间交换信息的一种技术。为了解核心业务及辅助业务,我们引入消息队列,将搜索团队、大数据团队需要的

jopen 2015-12-07   22467   0
P33

  J2EE工作流管理系统jBPM详解 文档

这个可以用来为jBPM管理员. jBPM调度程序 所有定时器的执行. 调度程序在新手工具箱里配置成了一个servlet.这个Servlet会为产生一个线程来监视每个定时器的执行. 一个流程例子 已经发布进了jBPM

altanxiang 2011-04-06   6973   0
P33

  J2EE工作流管理系jBPM 文档

这个可以用来为jBPM管理员. jBPM调度程序 所有定时器的执行. 调度程序在新手工具箱里配置成了一个servlet.这个Servlet会为产生一个线程来监视每个定时器的执行. 一个流程例子 已经发布进了jBPM

daodaodaod 2012-01-13   3035   0

Hadoop YARN的发展史与详细解析 经验

负载的分布式处理。7年后的今天,Hadoop正在经历着一次彻底检查,不仅支持MapReduce,还支持其他分布式处理模型。 带有 MapReduce 的 Apache Hadoop 是分布式数据处

jopen 2014-10-09   24967   0

Java开源CMS系统,Jspxcms 5.1 发布 资讯

2、增加邮件加密发送。 3、采集新闻下一页的错误。 4、邮件发送要求SSL加密时出现错误。 5、定时任务没有分站点。 6、评论设置页没有返回按钮。 7、模版管理中,zip打包出错。 8、采集管理的字段列表不在角色的权限控制。

jspxcms 2014-09-18   23707   0
P20

  海量数据处理之大跃进 文档

2、开发中心、调度中心功能完备,不仅可以在上面正式调度任务、还可以在上面进行任务开发 3、支持MR、Hive、Shell等多种任务 4、Zeus支持单机和分布式、在分布式场景下,整个集群自动切换主备,无需人工干预 5、任务失败晚上的告警方案

nd7b 2015-12-09   2250   0
P36

  Hadoop / MapReduce 讨论与学习 文档

生态系统Hadoop 核心 Hadoop Common 分布式文件系统HDFS MapReduce框架 并行数据分析语言Pig 列存储NoSQL数据库 Hbase 分布式协调器Zookeeper 数据仓库Hive(使用SQL)

jphnny 2016-06-28   3381   0

Hadoop是什么 博客

Apache Lucene 下的一个子项目,它最初是从 Nutch 项目中分离出来的专门负责分布式存储以及分布式运算的项目。简单地说来, Hadoop 是一个可以更容易开发和运行处理大规模数据的软件平台。下面列举

jopen 2012-02-01   1098   0
lamp  
P16

  Google Map-Reduce 中文版 文档

中计算机之间必要的通信。采用Map-Reduce架构可以使那些没有并行计算和分布式处理系统开发经验的 程序员有效利用分布式系统的丰富资源。 我们的Map-Reduce实现运行在规模可以灵活调整的由普通

hadooper 2013-05-30   2639   0

腾讯TDW:大型Hadoop集群应用 经验

TDW(Tencent distributed Data Warehouse,腾讯分布式数据仓库)基于开源软件Hadoop和Hive进行构建,打破了传统数据仓库不能线性扩展、可控性差的局限,并且根据腾

jopen 2015-07-28   19632   0
P339

  电子政务公共服务平台升级改造项目 文档

政府信息共享业务现状 15 1.3 项目建设目标 17 1.4 项目建设内容 18 1.5 项目建设任务 18 1.5.1 基础支撑中间件部分 18 1.5.2 数据交换系统升级建设 18 1.5.3 数据处理系统开发

nettea 2016-07-21   553   0
1 2 3 4 5 6 7 8 9 10