网站首页
JSP空间
动态资讯
开源项目
技术文档
资源下载
J2EE资源
客户论坛
在线支付
 
  技术文档>>数据库技术>>Oracle技术>>Oracle开发>查看文档  
  深入讲解oracle9i数据仓库的增强及其价值     
  文章作者:未知  文章来源:赛迪网技术社区  
  查看:71次  录入:管理员--2008-01-28  
 

数据仓库需要从各种不同的数据源取得各种不同的数据,并且把这些巨大数据量的数据转换成对于用户可用的数据,为企业的决策支持提供数据支持。这个过程常常被称为etl(提取、转换、装载)。提取过程涉及把数据从不同的来源提取出来,比如,一些服务提供商需要从上百个网站提取数据,然后生成用户可用的数据。这个过程中,最最消耗时间的部分是转换和装载数据这两个步骤,在这些步骤中,要根据现有数据指定规则,然后按照这些规则来过滤数据,并且把合格的数据装载到数据仓库里边去。而这个步骤地最大困难就是要尽量不影响数据仓库和源数据库的性能,并且对于不同的数据量能够有一定的可伸缩性,并且在最短的时间内完成。

当前绝大多数的etl步骤都是通过第三方工具来进行的。这些工具能够在把数据转换并装入到数据仓库之前,对数据进行一些特定的处理。当数据转换完成以后,再用oracle的并行插入和装载工具把这些数据插入到oracle数据库。oracle数据库的最主要的作用是管理这些数据行、索引和约束。有些etl过程是串行进行的,因此需要使用更多的数据库资源来进行这些转换和装载过程。如果使用这类串行装载方法的话,首先利用一些第三方工具,数据先被提取出来,然后放到一个中间过渡区域里边,在使用pl/sql或者java 再在数据库里边进行转换,最后再把结果插入到数据库的表里边。这个复杂的过程导致了这种方法不可避免的弱点:可伸缩性差、在万一出现差错时难以控制。

oracle9i 引进了新的"边装载边转换"的办法来取代那些过时的串行处理步骤:先转换然后装载或者先装载然后转换。在这种新方法里,数据库参与了数据转换和装载的过程,成为了etl过程的一个有机组成部分。而另外有些原来是必须的步骤则没有继续存在地必要了,另一些则可以得到改进。oracle 9i提供以下功能来帮助这个转换、装载步骤更加快速而高效。

oracle change data capture (ocdc)framework 可以用来优化etl过程中的数据提取这个步骤,建立一个可重复使用的执行步骤。ocdc能够捕获oracle数据库中变化的数据。使用对称复制技术和logminer技术,如果原始数据是来自oracle数据库的话,那么oracle能够很容易实现几个数据库的改变了的数据的同步化和异步化工作。对于非oracle数据库,oracle公司也提供了api,帮助第三方软件厂商开发工具,来实现非oracle数据库和oracle数据库的集成。

external tables这个特性能够使一些外部数据源(比如一个普通文本文件)能够像存储在oracle数据库普通表里边的数据一样被透明地存取。这个特性的唯一限制是:这张表是只读的,不能修改。对于sql,pl/sql和java程序来讲,这些虚拟表不用首先被装载到数据库里边然后才能读取。这样的话,装载和转换步骤就被集成到一起了,不再需要在数据库里边存储中间数据。

multi table insert 这是一个任何dba和开发人员都会欣赏的新特性。在8i和以前的版本里面,想要把同样的数据插入到多张表里边,你不得不编写一个存储过程,或者执行多次sql语句。在oracle 9i里边,这些都可以不用了。一个sql语句就可以解决这个问题。另外一个值得注意的新特性是upset语句,它用一个语句提供了update和insert的功能,根据条件分别执行insert或者update语句。还有一个很有用的增强就是允许在一个oracle数据库里边有多个block的大小。这对于在不同oracle数据库之间使用可移动表空间这个特性是非常关键的。从9i开始,可移动表空间的大小不一定需要是同样的块大小了。

有了以上这些新特性以及其他一些本文没有提及的新特性之后,oracle不仅仅适用于数据处理,也更加适用于数据仓库环境下的使用。

 
 
上一篇: 实例讲解oracle9i中的一个特殊等待事件    下一篇: oracle 11g最有特点的五大特性都有哪些
  相关文档
如何在oracle中释放flash_recovery_area (1) 05-05
由浅入深讲解oracle数据库进程的相关概念 (1) 04-23
实例解析:用Oracle创建实例的参数需求 09-01
详细讲解oracle数据库sys密码的找回方法 08-01
用一个实例讲解oracle数据库的pl/sql语句块 07-30
linux自动备份mysql数据库的实用方法 03-10
用一个存储过程实现分步删除数据表记录 04-10
Oracle中用Rowid查找和删除重复记录 04-11
深入讲解vb与oracle数据库的日期转换 02-29
怎样解决cpu高度消耗(100%)的数据库问题 (1) 11-23
巧用dbms_rowid包获得rowid的详细信息 05-16
利用SQL *Plus复制遗留的Oracle数据表 05-13
在线日志文件都是active或current的现象 02-26
快速掌握一个获取单据编号存储过程示例 04-09
oracle数据库中按用户名重建索引的方法 04-29
oracle的window服务启动时并不启动实例 03-04
带你深入了解oracle数据库的"sys"口令 (1) 07-30
实例讲解如何重复利用这个外部表的表结构 05-07
个人经验总结:oracle数据库scn号详解 08-12
redo copy latch未命中率并不需要调整 04-16
返回首页 | 关于我们 | J网章程 | JSP空间合租 | 客服中心 | 免责声明 | 常见问题 | 参观机房
本站主机空间代理至厦门市华众网络科技有限公司
《中华人民共和国增值电信业务经营许可证》
编号:闽B2-20050079
@2005-2008福建JSP技术网 版权所有 闽ICP备05000928号
厦门(总部):13616026886 福州:0591-87655121
邮箱:admin@fjjsp.com 站长QQ,点击这里给我发消息