设计高可用性、容错和数据隔离的Hadoop集群 资讯

HDFS集群是由一个NameNode和多个DataNodes组成的主从结构,如图2所示。NameNode是个数据管理器,负责管理HDFS 文件和块,还有文件系统的命名空间。该信息作为命名空间镜像和可编辑的日志永久

jopen 2015-01-22   14728   0
Hadoop  

算法金融——AI金融应用的新物种 经验

模式(见图1)。 在风险信贷领域,智能算法可以应用于 对公企业的风险管理,实现客户多维度数据管理、财务侦测、信用评级违约判定、授信额度计量、风险定价等功能, 也可以用于审批针对零售小微客户的线

jxxn3139 2018-01-01   28452   0
财经   算法  

分布式文件系统,Ceph v0.94.4 发布 资讯

client合并到内 核2.6.34中。IBM开发者园地的一篇文章 探讨了Ceph的架构 ,它的容错实现和简化海量数据管理的功能。 Ceph 中国社区 —— http://www.ceph.org.cn Ceph

jopen 2015-10-27   9010   0
Ceph  
P4

  网站主界面设计方案设计方案 文档

交易平台数据库 交易信息发布、后台订单生成、后台订单处理、历史订单查询 会员数据库 会员数据的建立、会员数据管理 虚拟主机 200M全能虚拟主机(头年费用已记入,以后每年购买1次) 域名的申请及审核 国际域om/

fb1989 2013-08-14   3562   0
方案  

Hive详细教程 经验

基于 Hadoop 的大数据的计算 / 扩展能力 支持 SQL like 查询语言 统一的元数据管理 简单编程 Hive的安装 1.1在hadoop生态圈中属于数据仓库的角色。他能够管

jopen 2014-05-01   58657   0
Hive  

像写SQL一样编写Java数据应用-TinySqlDsl 经验

,只是看起来不够漂亮而已。 应用实践 支持类编写 使用Tiny元数据开发 如果使用Tiny元数据管理数据表,那么只要在工具中如下操作,即可自动生成POJO、表定义、及Dao层代码实现: 也

bgn4 2015-05-06   14636   0
SQL   TinySqlDsl  

事件流如何提高应用程序的扩展性、可靠性和可维护性 经验

Actor框架——像Akka、Orleans和Erlang OTP等框架也是基于不可变事件的流。不过,它们更多的是一种并发机制,而不是数据管理机制; “响应式(Reactive)”——它似乎是一个定义松散的 概念集合 ,像函数响应式编程,主要是将事件流提供给用户界面使用;

jopen 2015-04-03   22838   0

Zookeeper简单概念介绍 经验

溃或者失去连接 组成员管理 Master必须能够确定哪些worker能够执行任务 元数据管理 Master和worker必须能够存储一些执行时的状态信息。 为什么分布式系统是困难的。

jopen 2016-01-17   8581   0

React + Redux 组件化方案 经验

展示组件和数据组件之间的分离实现了低耦合,而连接两者的高阶组件实现了高内聚。 全部由 tnpm 管理,模块管理方便。 即使使用了不同了数据管理架构,也可以直接使用展示组件。 一些待解决的问题 公用的 css 无法管理,需要引入新的构建工具

tencow 2016-08-31   48343   0

2017年值得关注的JavaScript框架与主题 经验

中,这一点也就导致了Reflows与Repaints的性能表现非常差。React并没有预置专门的数据管理系统,不过官方推荐基于Flux的解决方案。React 的单向数据流的概念借鉴了很多函数式编程的设

CharleneMcK 2016-12-14   26026   0
P38

  第3章 企业架构之应用架构建设 文档

体 系数据中心综合布线屏蔽机房网络设备科研生产 管理数据库综合业务 管理数据库容灾备份 数据库产品数据管理(PDM)仿真 管理设计 管理生产 管理测试 试验 管理售后 管理设计选 用管理物料管理项目计划管理质量管理资源规划管理(ARP)人

wz_316 2017-02-28   2965   0
P39

  台台阶香精erp解决方案 文档

多仓库、多库位管理 多计量单位转换 物料多成本核算方法 物性管理和质量追踪 安全库存管理 安全/健康和环保数据管理 强大的批次追踪功能香精香料行业--绿环ERP 15. 绿环ERP-库存流程E-R图收货单生产工

zouhuayou 2016-12-05   1632   0
方案   报告   SQL  
P41

  DB2 基础培训 文档

Manager多维报表工具二维报表数据挖掘工具DB2 IMCognos PowerplayCognos Impromptu元数据管理工具 3. 内容纲要 DB2介绍 系统管理基础 管理工具Quest Central介绍 4. DB2

gao_pengcheng 2012-03-23   603   0
P58

  大数据的十个技术前沿 文档

降低空间、时间复杂度 并行化/分布式 35. 内存计算35在硬件平台层:大内存,全闪存,NVRAM,RDMA 在数据管理和存储层:cache,堆外内存/in-memory FS 在计算处理层:in memory data

cpp45 2015-01-18   4260   0

我所经历的大数据平台发展史(二):非互联网时代 • 下篇 资讯

lph kilmbal是星型结构。 Bill Inmon对EDW 的定义是面向事物处理、面向数据管理,从数据的特征上需要坚持维护最细粒度的数据、维护最微观层次的数据关系、保存数据历史。所以在构建完

jopen 2016-02-29   25323   0
P10

  网上订票系统概要设计说明书 文档

可以安装不间断电源以防止停电或电压不稳造成的数据丢失的损失。 2. 选择比较可靠的服务器,保证数据的运行畅通。 3. 时常检查自己的数据管理,若发生错误以便及时更改。 4. 可在出错的相应模块中,输出简单的出错语句,找到原因并处理错误。

闭眼聆听 2014-10-28   1065   0
P13

  Hadoop:分布式大数据处理架构 文档

和开发的云产品,现在被SmartCloud取代。 Informatica 向云更进一步 大多数的数据管理软件供应商(如IBM、Oracle、Syncsort、Talend)都涉及到Hadoop。Inf

xcxc 2015-08-24   614   0
P3

  从某保险集团看企业级数据仓库迁移技术 文档

元测试、集成测试、项目上线发布等阶段。 2、迁移总体架构 该保险集团有产险、寿险,财务,投资,主数据管理(MDM,Master Data Management)等源系统需要做在异构数据库平台间做数据仓

candhaohao 2014-04-28   1822   0
P11

  大数据方案介绍 文档

MapReduce,离线批处理计算框架 ü Kafka,消息队列式流失数据接入 ü HCatlog,元数据管理 ü Ambari,Hadoop平台监控、管理界面 ü ZooKeeper,保证系统无单点运行 ü

guet_lee 2017-01-12   1929   0

常用移动web开发框架研究分析 经验

Sencha Touch 做的 Web App看起来更像Native App, 用户界面组件和丰富的数据管理,全部基于最新的HTML 5和CSS3的 WEB标准,全面兼容Android和iOS设备。 Sencha

jopen 2015-01-13   366477   0
1 2 3 4 5 6 7 8 9 10