• 1. 第4章 企业架构之数据架构建设
  • 2. 数据架构共六类视图数据架 构主线I1 数据主题 域视图I2 概念数据 模型视图I3 逻辑数据 模型视图I4 物理数据 模型视图I2 数据分布与 流转视图派生业务 架构I1 数据主题域 关系视图派生展现数据域和数据主题,并定义数据主题对业务能力的支撑关系。展现数据主题之间的逻辑关系。展现数据主题之下的数据实体,并展现数据实体之间的关联关系。展现数据实体所分布到的应用,并展示数据在应用间的流转。对数据实体的分解细化成为逻辑实体 ,对数据实体的属性、属性类型、长度和主外键关系等做了定义,遵从“第三范式”以达到最小的数据冗余。 结合数据存储的物理实现,定义物理实体,描述数据模型的细节,需要考虑所使用的数据库产品、对应的字段类型、长度、索引等因素,并对数据冗余与性能进行平衡。 2
  • 3. 盲人摸象的启示决策业务。。。代理人业务地勤业务行李管理业务航班业务企业
  • 4. 数据处理危机历史上的数据处理危机 发达国家遇到“数据处理危机” 为走出困境出现“信息工程”、IDEF等方法论最终用户新需求压力日益增加旧应用堆积严重 维护愈加困难源自詹姆斯.马丁《信息工程》原著我们今天遇到 了同样的问题CIO的困境 老 总 的 困 境
  • 5. 更深层次的危机: 历史上的今天
  • 6. 数据架构的理论相关概念 数据架构 数据架构的内容数据架构的工程方法目录数据架构的实例数据架构目的与意义
  • 7. 一、相关概念数据?信息? 数据架构?
  • 8. 1、数据与信息数据是使用约定俗成的关键字,对客观事物的数量、属性、位置及其相互关系进行抽象表示,以适合在这个领域中用人工或自然的方式进行保存、传递和处理。 信息是具有时效性的,有一定含义的, 有逻辑的、经过加工处理的、对决策有价值的数据流。 通过人们的参与对信息进行归纳、演绎、比较等手段进行挖掘,使其有价值的部分沉淀下来,并于已存在的人类知识体系相结合,这部分有价值的信息就转变成知识。 智慧是人类基于已有的知识,针对物质世界运动过程中产生的问题根据获得的信息尽行分析、对比、演绎找出解决方案的能力。这种能力运用的结果是将信息的有价值部分挖掘出来并使之成为知识架构的一部分。
  • 9. 2、数据架构企业生产经营所需要的信息,从采集、处理、传输到使用的全面规划,侧重信息流的分析,为整合信息资源,实现信息共享的总体规划左右信息流内外信息流上下信息流 经营 管理 营销 管理财务 管理 … 总部 :地区:生产管理营销管理财务管理… 工商 单位税务单位……政府部门 客户关联单位:省级:经营管理营销管理财务管理…
  • 10. 3、数据架构与应用架构应用架构就是对系统的分类、分层的组织。例如:分层信息有决策层、管理层、操作层等信息;分类信息有财务信息、营销信息、生产信息等数据架构就是对数据的分类、分层的组织。例如:分层数据有概念数据模型、逻辑数据模型、物理数据模型
  • 11. 4、数据架构与应用架构的关系业务过程1业务过程2一组业务活动二组业务活动业务 梳理...用户视图 1用户视图 2登记 1,组成 1登记 2,组成 2信息 分析...基础 数据 标准1.2.3....系统数据 模型服务参考 模型业务架构应用架构统一的信息平台账号管理借贷管理…企业管理理财管理应用架构数据 架构
  • 12. 数据架构的理论相关概念 数据架构数据架构的内容数据架构的工程方法议程 / Agenda数据架构实例数据架构目的与意义
  • 13. 二、数据架构目的与意义为什么要做数据架构? 企业是否遇到了数据环境混乱的问题?
  • 14. 1、企业信息化建设的基本问题分析基本问题: 两滞后——信息资源开发利用滞后于网络建设;管理层和决策层的应用滞后于运作层 两缺乏——缺乏总体数据架构(重硬件与网络规划); 缺乏数据标准化(泛“标准化”,不实用) 核心任务: 数据环境改造;应用系统集成 基本手段 搞好数据架构;搞好数据标准化
  • 15. 2、企业信息化建设中的信息孤岛问题分散开发,单项引进,数据自采自用, 所在即所得模式建表,接口复杂,信息无法共享。混乱的数据环境,无序、矛盾、冗余的数据 ……客户关系管理航空乘客航空行李座位管理航班信息
  • 16. 3、点到点集成解决方案的灾难多对多的数据交换,牵一发而动全身 商业逻辑多处重复,浪费开发资源 难以进行业务流程调整,对业务变化适应性差 开发质量难以控制 系统开销太大,性能严重下降
  • 17. 4、信息孤岛走向信息共享的愿景在进行业务流程梳理优化的同时搞好数据管理,规划信息资源,则更能使信息系统发挥(资源)效益,也有利于信息技术真正起到作用,而不至于使在信息技术上的投资掉入“黑洞”(乌家培)。Ⅰ.数据文件(Data-Files) Ⅱ.应用数据库(Application Data Bases) Ⅲ.主题数据库(Subject Data Bases) Ⅳ.数据仓库(Data Warehouse) 综合 办公人力 资源 技术 管理计划 统计 生产 管理用电 管理安全 监督财务 管理工程 管理物资 管理主题 数据库综合 办公计划 统计 物资 管理人力 资源 技术 管理生产 管理用电 管理安全 监督财务 管理工程 管理
  • 18. 5、信息孤岛走向信息共享的实践方案综合 办公人力 资源 技术 管理计划 统计 生产 管理用电 管理安全 监督财务 管理工程 管理物资 管理数据 中心综合 办公计划 统计 物资 管理人力 资源 技术 管理生产 管理用电 管理安全 监督财务 管理工程 管理DBDBDBDBDBDBDBDBDBDB
  • 19. 6、小结意义: 规范化表达企业业务 规范数据源,解决数据源唯一性问题 规范数据模型,明确数据关系 目标: 归类整理包括业务表单、统计报表等在内的应用架构 建立包含基本数据集、信息分类编码和数据模型等在内的数据架构 建立业务信息分布矩阵以及数据架构与应用架构的关系,使数据源分析定位到业务活动层面
  • 20. 数据架构的理论相关概念 数据架构数据架构的内容数据架构的工程方法议程 / Agenda数据架构实例数据架构目的与意义
  • 21. 1、威廉·德雷尔的数据管理理论没有卓有成效的数据管理,就没有成功高效的数据处理,更建立不起来全组织的计算机信息系统 数据元素是最小的信息单元,数据管理工作必须从数据元素标准化做起 组织中要设立数据管理部门,职责是集中控制和管理数据定义,建立数据管理基础标准和规范化的数据结构,指导协调信息系统开发和使用人员执行标准和规范——信息中心的职责 数据管理标准化是长期的工作过程,会遇到许多困难,持之以恒才能见到效果
  • 22. 2、霍顿的信息资源管理(IRM)理论企业的信息资源与其它资源有同等地位,IRM是一种新的管理职能。 必须将IRM与企业的战略规划联系起来,把信息资源作为战略资产进行管理,在企业的每个层面上识别信息资源和获利机会,并借以构建新的竞争优势 企业IRM的目标是“3E”:Efficient(高效)、Effective(实效)、Economical(经济)。
  • 23. 3、詹姆斯·马丁的信息工程方法论系统 & 软件数据仓库 主题数据库 元库数据生成数据维护单据生成审计信息查询“如果—那么”分析决策支持汇总分析图表和报告生成信息工程作为一个学科要比软件工程更为广泛,它包括了基于当代数据库系统的计算机化企业所必须的相关学科。信息系统以数据为中心 (不是以处理为中心); 数据结构稳定,处理多变; 最终用户必须真正参加信息系统开发工作。
  • 24. 创建所需要的信息系统需要什么数据? 数据分析 交易数据 分析数据 绩效数据 转换数据 测试数据 非结构化数据考虑 数据生命周期 数据管理 数据清洗 数据迁移 数据治理 数据架构的交付物 当前数据模型 R/A SWOT 分析 R/A 新的/改进的数据模型 R/A 数据路线图 R/A 输出更新愿景 更新ADD 更新需求 4、数据架构内容
  • 25. 本阶段目的 为支持业务,以利益相关者能够理解、完整一致和稳定的方式来定义主要的数据类型和所需数据源(值得注意的是,这一工作并不关注具体的数据库设计,也不是设计逻辑和物理的存储系统,而是定义与企业相关的数据实体) 本阶段方法 数据定义 – 什么实体是必须的,为什么? 数据管理 – 主数据、支持、参考、商业智能、会话、转换规则、接口状态等。 数据迁移 – 数据转换、数据保留、接口-批处理还是实时。 数据治理 – 结构、管理系统、人 数据架构储藏库 与行业垂直部门相关的通用数据模型,例如零售业的ARTS、电信业的eTOM数据架构内容
  • 26. 数据参考模型建立了一个通用的可理解的分类,识别重复数据资源,以及使信息在机构和部门之间共享。一个通用的数据分类明细模型会使联邦政府内部以及政府与其伙伴之间的信息交换过程更加流畅。 数据参考模型是在一个业务线的基础上产生,而不是靠单个累积的努力。这就要考虑并集中关注对关键改进域的识别,产生明显地可辨识和可度量的结果。数据分类业务背景数据结构数据元素数据交换信息交换包5、数据参考模型
  • 27. 数据分类数据结构信息交换包业务背景主题域超类型数据交换数据元素数据对象数据属性数据表示识别那些执行活动的业务线;这些活动生成和利用紧密相关的信息以达到相似的成果识别数据的概念分类,它具有映射相似的由政府使用的数据组的意图 由一个工作单元产生或要求的信息,并且按序传送到另一个工作单元。工作单元使用或产生数据。用明确的业务含义识别的思想、抽象和事物,而且其属性和行为遵从相同的规则表示数据的实际描述表示一个数据元素的值类型数据参考模型
  • 28. 数据共享查询点和交换包数据描述数据和数据资产数据背景分类(编目)如何发现数据?是什么数据?如何交换数据?数据参考模型
  • 29. 数据参考模型的抽象模型
  • 30. 数据架构的理论相关理论介绍 数据架构数据架构的内容数据架构的工程方法议程 / Agenda数据架构实例数据架构目的与意义
  • 31. 1、数据架构的内容数据架构描述了一个组织的逻辑、物理数据资产和数据管理资源的结构,它是一组分层的模型,为战略性的计划提供坚实的基础。
  • 32. 2、数据战略:应用孤立到信息共享的跨越在进行业务流程重组的同时搞好数据管理,规划信息资源,则更能使信息系统发挥(资源)效益,,也有利于信息技术真正起到作用,而不至于使在信息技术上的投资掉入“黑洞”Ⅰ.数据文件(Data-Files) Ⅱ.应用数据库(Application Data Bases) Ⅲ.主题数据库(Subject Data Bases) Ⅳ.数据仓库(Data Warehouse) 综合 办公人力 资源 技术 管理计划 统计 生产 管理用电 管理安全 监督财务 管理工程 管理物资 管理主题 数据库综合 办公计划 统计 物资 管理人力 资源 技术 管理生产 管理用电 管理安全 监督财务 管理工程 管理
  • 33. 3、概念数据模型供应商材料科目客户销售合同财务凭证采购订单销售订单计划产品发货单收货单组织人员企业数据概念模型:是在整个企业的范围内,划分企业数据的基本类别(数据实体),以及识别出它们之间的关系。
  • 34. 概念数据模型:关注的是支撑所有企业业务的主数据主数据Meta DataEntity 3 Entity 2 Entity 1 企业的所有业务运作都是主数据中数据的组合应用 例如: 销售、建销售订单这个业务场景是以下主数据的组合演绎:客户、产品、时间、公司、销售组织Entity 1Entity 2Entity 3….Transaction Transaction Data:订单、合同、凭证、…企业数据架构
  • 35. 4、逻辑数据模型逻辑数据模型,是对数据实体的进一步细分,并找出逻辑关系与识别主要属性。
  • 36. 5、物理数据模型物理数据模型应在IT系统实施项目中,根据逻辑数据模型去建立。
  • 37. 数据元标准化的作用名称标识值含义数据格式颜色代码ColorCode01红色Char(2)信息化的目标:实现各种不同业务系统间跨地域、跨行业、跨部门的信息共享和业务协同。 数据名称的不一致 数据长度的不一致 数据表示的不一致 数据含义的不统一 应用应用应用应用应用名称标识值含义数据格式颜色Color红色红色Varchar(20)颜色类型Colorrtype001红色Char(3)正确和适当的数据使用和解释的先决条件之一是,这两个数据的使用者和所有者对数据有一个共同的理解和描述
  • 38. 信息分类编码标准化的作用信息分类编码标准化是简化信息交换、实现信息处理和信息资源共享的重要前提,是建立各种信息管理系统的重要技术基础和信息保障依据,是企业标准化的重要组成部分,目的是以满足在企业信息化建设中实现互联互通、资源共享和信息交换、处理的需要。 通过分类编码标准化,可以最大限度地消除对信息命名、描述、分类和编码的不一致造成的混乱、误解等现象,可以减少信息的重复采集、加工、存储等操作,使事物的名称和代码的含义统一化、规范化,确立代码与事物或概念之间的一一对应关系,以保证数据的准确性和相容性,为信息集成与资源共享提供良好的基础,而且为建立公共数据库创造有利条件。
  • 39. 6、数据管理数据是一种重要的资源,数据管理不仅在技术上而且在管理和组织上都有不同的需求。 数据管理制度 数据安全 数据迁移 数据部署 数据备份/容灾数据管理的主要功能: 审核:资料的合法性、真实性和全面性 纠错:依据历史数据对新数据对比分析,确保其准确与完整 校验:通过数据库系统与收集资料的核对,有效揭示潜在风险 服务:为业务人员提供数据支持 挖掘:开展数据研发,开发数据产品
  • 40. 数据架构的理论相关理论介绍 数据架构数据架构的内容数据架构的工程方法议程 / Agenda数据架构实例系数据架构目的与意义
  • 41. 数据架构的工程方法
  • 42. (本页无文本内容)