每个软件工程师都应该知道的有关实时数据的统一概念 经验

表与事件的二相性。 让我们继续聊数据库。数据库中存在着大量变更日志和表之间的二相性。这些日志有点类似借贷清单和银行的流程,数据库表就是当前的盈余表。如果你有大 量的变更日志,你就可以使用这些变更用以创建捕获当前状

jopen 2014-02-10   98975   0
P44

  the log:每个程序员都应该知道有关实时数据的统一抽象 文档

变更日志101:表与事件的二象性(duality) 让我们继续聊一下数据库。变更日志 和 表之间有着迷人的二象性。 日志类似借贷清单和银行处理流水,而数据库表则是当前账户的余额。如果有变更日志,你就可以应用这些变更生成数据表并得到当前状态。

june.zk 2016-09-12   479   0

Firouzian:数据工程师是IT行业最热门的工作 资讯

存储的数据,并且分析诠释数据。 对于大数据的定义,Firouzian 认为大数据不是一个大的数据仓库。大数据包括价值、速度、种类、流量等。大数据并不是说有很多数据聚集带一起,而是说你怎么使用这个数据,大数据其实还包含很多技术可以使用。

jopen 2012-10-26   13433   0
P69

  大数据技术平台调研报告 文档

案例一:中信银行玩转大数据,以客户为“上帝” 案例二:IBM助力民生银行应对金融业的大数据挑战 案例三:大数据助力青岛银行提升运营能力 案例四:工行运用大数据打击电信诈骗 案例五:光大银行用“大数据”推动理财业务转型

dszhao 2017-03-22   3018   0

商务智能 BI开发入门 问答

纳等技术,用来发现数据之间的关系,做出基于数据的推断。 4.数据集市(Data Mart)和数据仓库(Data Warehouse)产品。包括数据转换、管理和存取等方面的预配置软件,通常还包括一些业务模型,如财务分析模型。

fmms 2011-11-01   20997   7

大数据时代的裸奔 资讯

民信 息的权力人士的一念之差。 最近有报道称银行内鬼贩卖账户信息,银行方面居然称这事主要靠自觉,他们内部查不出来。这事也是大恶!查不出来是因为银行内部缺乏相应的技术手段,根本就没有建立起相应的信息

jopen 2015-01-14   13354   0
P252

  数据挖掘:概念与技术 文档

什么是数据挖掘? 10 1.3 数据挖掘——在何种数据上进行? 12 1.3.1 关系数据库 12 1.3.2 数据仓库 14 1.3.3 事务数据库 15 1.3.4 高级数据库系统和高级数据库应用 16 1.4

bluesky8318 2011-09-24   4695   0

数据库故障恢复技术解析 经验

/50465075 一、数据仓库的定义 将来自多个数据源的数据,以统一的模式,集中存储在某个站点上。其特征是:历史数据,海量的数据,数据只添加,只读,无修改. 二、数据仓库的开发过程 先看一张图,如下

yxy 2016-01-27   14611   0

大数据分析需要把hbase、mysql等数据导入hive吗? 经验

base/mysql(数据库)“导入”到hive(数据仓库)中进行分析。 “导入”的过程中会做一些元数据转换等操作。 相关知识如下 数据仓库的几个概念 http://www.ppvke.c

jannyarj 2016-02-17   24504   0
P7

  《××项目数据采集需求说明书》 文档

《××项目数据采集需求说明书》 一、引言 1.编写目的 这部分说明文档编写目的,描述本系统特点及使用数据仓库技术实现的业务目标。 2.背景 这部分是项目背景描述。 3.参考资料 这部分列出本文档引用资料的名称,并说明文档上下级关系。

winner008 2011-08-18   2692   0
P24

  区域综合分析平台技术方案 文档

平台技术架构 8 第3章 平台关键技术 8 3.1 BTP基础平台 8 3.2 数据仓库 9 3.3 润乾报表 10 3.4 数据仓库各个阶段工具介绍 11 第4章 核心应用设计 11 4.1. 平台功能框架

114046323 2013-06-03   1714   0
方案  
P14

  元数据管理模块方案 文档

元数据管理解决的问题就是如何把业务系统中的数据分门别类地进行管理,并建立数据与数据之间的关系,为数据仓库的数据质量监控提供基础素材。 1.1 目前的困境 使用者(决策层、业务分析人员): 1) 经营分

ralphone 2015-01-26   13732   0
方案  
P101

  中国电信经分系统介绍 文档

大数据量、业务多、异构数据、决策分析 技术发展的结果 数据库与数据仓库 人工智能 数据挖掘 联机分析 6. 企业信息化的四个进程数据信息知识施效在 线 分 析数 据 挖 掘客户 关系 管理数据仓库=营销自动化 =销售队伍自动化 =客户服务与技术支持=事实

joeblack 2012-05-27   3687   0
方案   培训   HTML   Intel   Scala  
P50

  SharePoint 2010 商业智能(BI)解决方案 文档

决策的工具。 从技术上讲,商业智能的建设过程并不复杂,它只是多个工具的结合使用。 包括的内容有:数据仓库(Data Wavehouse)、联机分析处理(OLAP,也称多维分析)、报表制作和终端用户查询、数据挖掘 商业智能的概念

fujita731 2012-12-13   10417   0
数据挖掘   方案   培训   C#   Basic  
P19

  系统分析师技术指南 文档

心。 第6章 数据仓库技术 面向事务处理的传统数据库的问题:系统的响应问题、数据集成问题、数据的动态集成和更新、历史数据问题、决策操作问题。 数据仓库是一个面向主题的(指用户使用数据仓库进行决策时所关

jelly0812 2011-12-21   2891   0
P4

  数据挖掘与分析心得体会 文档

个基本步骤! 由此而产生数据挖掘的定义:从大量数据中挖掘有趣模式和知识的过程!数据源包括数据库、数据仓库、Web、其他信息存储库或动态地流入系统的数据。作为知识发现过程,它通常包括数据清理、数据集成、

xsh1019 2013-01-05   10919   0

BI商业智能系统四大主题 问答

1、数据获取。数据获取负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取加载到数据仓库或数据集市中,成为联机分析处理、数据挖掘的基础。 BI-Pilot 的数据获取的方式将采用 ELT

njgghhe 2016-01-12   11310   0

指点迷津的现代数据数据架构之道 资讯

企业组织如何发挥其潜力 如何将其价值引入到企业组织的更广泛部门 如何将该数据与之前就有的企业数据仓库结合起来,比如企业数据仓库(EDW)和数据集市 如今商业化应用的主流大数据技术是Apache Hadoop

jopen 2016-03-09   4973   0

大数据架构和模式(三) - 理解大数据解决方案的架构层 经验

数据可公开为领域实体,或者数据改动和存储层可将它转换为领域实体。 数据存储 — 数据存储包含企业数据仓库、操作数据库和事务数据库。此数据通常是结构化数据,可直接使用或轻松地转换来满足需求。这些数据不一

jopen 2015-02-01   35557   0

余额宝技术架构及演进 经验

近一年来很多工作都是考虑数据后处理这块。其中数据来源于业务数据、日志数据和其他数据。我们推进数据仓库的建设和数据的产出。工具方面我们有很多自主开发的,同时也采用了阿里采云间,以及其他外采工具,具体

Anh3538 2016-07-20   38199   0
1 2 3 4 5 6 7 8 9 10