CDC简介CDC是一种数据增量处理技术在构建数据仓库系统的ETL过程中,增量数据的抽取是一个非常关键的环节.对解决方案一般有两点要求:准确性,能够将业务系统中的数据按一定的频率准确的取到数据仓库中性能,不能对业务系统造成太大的压力,影响现有业务目前，最为常用的ETL增量数据处理方式有三种:时间戳日志对比(CDC)全面数据对比三种方式各有优劣，时间戳是目前应用比较普遍的方式。在Oracle=中推出了两种主要的ETL方案，一种是我们熟悉的物化视图(materialized view),另一种就是本文将要介绍的CDC组件(Change Data Capture改变数据捕获)。

Oracle存储过程基础知识商业规则和业务逻辑可以通过程序存储在Oracle中，这个程序就是存储过程。存储过程是SQL,PL/SQL,Java语句的组合，它使你能将执行商业规则的代码从你的应用程序中移动到数据库。这样的结果就是，代码存储一次但是能够被多个程序使用。要创建一个过程对象（proceduralobject），必须有CREATEPROCEDURE系统权限。如果这个过程对象需要被其他的用户schema使用，那么你必须有CREATEANYPROCEDURE权限。执行procedure的时候，可能需要excute权限。或者EXCUTEANYPROCEDURE权限。如果单独赋予权限，如下例所示： grant executeonMY_PROCEDURE toJelly调用一个存储过程的例子：executeMY_PROCEDURE('ONEPARAMETER');存储过程(PROCEDURE)和函数(FUNCTION)的区别。function有返回值，并且可以直接在Query中引用function和或者使用function的返回值。

Oracle数据库是第一个为企业网格计算而设计的数据库，她为管理信息和应用提供了灵活、低成本、高效益的方式。企业网格计算把存储及服务能力转化为符合业界标准、模块化的资源池 （resource pool）。在这种体系结构之下，新系统可以从组件化的资源池中组合资源而迅速构成。企业也无需建设尖锋负荷系统 （peak workloads），因为计算能力可以在需要时轻松地从资源池中获得或重新分配。

本次数据库采用11GASM单机版，我们准备计划采用ASM安装并进行建库。下面的计划主要是针对ASM方式的数据库安装。

理解数据库、DBMS的作用和意义，了解数据库管理系统的发展过程理解各种数据库模型。理解数据库相关的基本概念。

Derby数据库是一个纯用Java实现的内存数据库，属于Apache的一个开源项目。由于是用Java实现的，所以可以在任何平台上运行；另外一个特点是体积小，免安装，只需要几个小jar包就可以运行了

Javadb概述，JavaDB是Sun的支持分布的开源ApacheDerby的100％Java技术的数据库。它是完全事务性，安全，易于使用，基于标准的集-SQL，JDBCAPI和JavaEE的-然而小，只有2.5MB的。Derby是一个名为Cloudscape的小公司构思的；当Cloudscape卖给Informix后，该产品得到了加强；当IBM加入时，在“bigblue”期间，它的高端工程特性得到增强；现在已经成为一个有最自由的许可的开源项目而存在。<br> 什么是Java数据库？JavaDB是Sun支持的开源Apache Derby数据库。JavaDB是用Java编写的，提供“一次编写，到处运行”的可移植性。其易用性，标准，完整的功能集，和小型使它成为理想的Java开发数据库。它可以嵌入在Java应用程序，需要由发展商或用户无需管理。它也可以用在客户端服务器模式。JavaDB是完全事务，并提供一个标准的SQL接口以及一个JDBC4.0兼容驱动程序。Apache的Derby项目有一个强大的和不断增长的社会，其中包括如Sun微系统公司和IBM公司以及个人捐助的大公司开发。

数据库调整中最为重要的一部分是重写运行效率差的SQL代码,重写之后的SQL代码在运行效率方面可能会与之前的产生极大的差别！但是当遇到重写之后性能还是未能突破瓶颈或者你是用户(无法访问SQL代码)的时候,可以通过调整ORACLE的共享内存结构SGA(System Global Area),最大限度地提高性能！SGA中比较重要的组件就是Shared Pool(共享池),它的作用就是高速缓存SQL语句!共享池由一个最近最少使用(LRU,Least Recently Used)算法来管理!

针对用户群为已经使用过mysql环境，并有一定开发经验的工程师<br> 针对高并发，海量数据的互联网环境。<br> 本文语言为口语，非学术标准用语。<br> 以实战和解决具体问题为主要目标，非应试，非常规教育。友情提醒，在校生学习本教程可能对成绩提高有害无益。<br> 非技术挑战，非高端架构师培训，请高手自动忽略。

为什么Oracle数据库中会有锁呢？设想，如果世界上只有你一个人，你有一箱子金币，你会弄把锁来把它锁起来吗？不会，因为如果世界上只有你一个人，根本就不会有锁这种东西出现，因为没有其他人会去打开它，除了你。Oracle的锁和这个锁一样吗？答案是一样的。

本文主要从大型数据库ORACLE环境四个不同级别的调整分析入手，分析ORACLE的系统结构和工作机理，从九个不同方面较全面地总结了ORACLE数据库的优化调整方案。

事务性日志记录是什么？数据库存储了供应用程序访问和处理的数据。那些应用程序会插入、读取、更新或删除数据。每一个这样的活动都是在一个事务中执行的，该事务被定义成“应用程序过程中一个可恢复的操作序列”。除非已经提交了事务（也称作“工作单元”），否则它不会影响数据库。

RACLE提供了CBO、RBO两种SQL优化器。CBO在ORACLE7 引入，但在ORACLE8i 中才成熟。ORACLE 已经明确声明在ORACLE9i之后的版本中(ORACLE 10G )，RBO将不再支持。因此选择CBO 是必然的趋势。

PostgreSQL 采用的是比较经典的 C/S （client/server）结构，也就是一个客户端对应一个服务器端守护进程的模式， 这个守护进程分析客户端来的查询请求，生成规划树，进行数据检索并最终把结果格式化输出后返回给客户端。为了便于客户端的程序的编写， 由数据库服务器提供了统一的客户端 C 接口。而不同的客户端接口都是源自这个 C 接口，比如 ODBC，JDBC，Python，Perl ，Tcl，C/C++，ESQL 等， 同时也要指出的是，PostgreSQL接口的支持也是非常丰富的，几乎支持所有类型的数据库客户端接口。这一点也可以说是PostgreSQL 一大优点。

双机容错系统，是由IBM的全套硬件设备和微软的群集软件系统组成，安装ORACLE 8.1.7标准版数据库，一台机器作为ORACLE的主数据库服务器，一台作为主数据库服务器的备份服务器，保证ORACLE的数据库的可用性。