服务热线:13616026886

技术文档 欢迎使用技术文档,我们为你提供从新手到专业开发者的所有资源,你也可以通过它日益精进

位置:首页 > 技术文档 > 数据库技术 > Oracle技术 > Oracle开发 > 查看文档

详细讲解oracle sql*loader的使用方法

【赛迪网-it技术报道】sql*loader是oracle数据库导入外部数据的一个工具.它和db2的load工具相似,但有更多的选择,它支持变化的加载模式,可选的加载及多表加载.

如何使用 sql*loader 工具

我们可以用oracle的sqlldr工具来导入数据。例如:

sqlldr scott/tiger control=loader.ctl

控制文件(loader.ctl) 将加载一个外部数据文件(含分隔符). loader.ctl如下:

load data

infile 'c:\data\mydata.csv'

into table emp

fields terminated by "," optionally enclosed by '"'

( empno, empname, sal, deptno )

mydata.csv 如下:

10001,"scott tiger", 1000, 40

10002,"frank naude", 500, 20

下面是一个指定记录长度的示例控制文件。"*" 代表数据文件与此文件同名,即在后面使用begindata段来标识数据。

load data

infile *

replace

into table departments

( dept position (02:05) char(4),

deptname position (08:27) char(20)

)

begindata

cosc computer science

engl english literature

math mathematics

poly political science

unloader这样的工具

oracle 没有提供将数据导出到一个文件的工具。但是,我们可以用sql*plus的select 及 format 数据来输出到一个文件:

set echo off newpage 0 space 0 pagesize 0 feed off head off trimspool on

spool oradata.txt

select col1 || ',' || col2 || ',' || col3

from tab1

where col2 = 'xyz';

spool off

另外,也可以使用使用 utl_file pl/sql 包处理:

rem remember to update initsid.ora, utl_file_dir='c:\oradata' parameter

declare

fp utl_file.file_type;

begin

fp := utl_file.fopen('c:\oradata','tab1.txt','w');

utl_file.putf(fp, '%s, %s\n', 'textfield', 55);

utl_file.fclose(fp);

end;

/

当然你也可以使用第三方工具,如sqlways ,toad for quest等。

加载可变长度或指定长度的记录

如:

load data

infile *

into table load_delimited_data

fields terminated by "," optionally enclosed by '"'

trailing nullcols

( data1,

data2

)

begindata

11111,aaaaaaaaaa

22222,"a,b,c,d,"

下面是导入固定位置(固定长度)数据示例:

load data

infile *

into table load_positional_data

( data1 position(1:5),

data2 position(6:15)

)

begindata

11111aaaaaaaaaa

22222bbbbbbbbbb

跳过数据行:

可以用 "skip n" 关键字来指定导入时可以跳过多少行数据。如:

load data

infile *

into table load_positional_data

skip 5

( data1 position(1:5),

data2 position(6:15)

)

begindata

11111aaaaaaaaaa

22222bbbbbbbbbb

导入数据时修改数据:

在导入数据到数据库时,可以修改数据。注意,这仅适合于常规导入,并不适合 direct导入方式.如:

load data

infile *

into table modified_data

( rec_no "my_db_sequence.nextval",

region constant '31',

time_loaded "to_char(sysdate, 'hh24:mi')",

data1 position(1:5) ":data1/100",

data2 position(6:15) "upper(:data2)",

data3 position(16:22)"to_date(:data3, 'yymmdd')"

)

begindata

11111aaaaaaaaaa991201

22222bbbbbbbbbb990112

load data

infile 'mail_orders.txt'

badfile 'bad_orders.txt'

append

into table mailing_list

fields terminated by ","

( addr,

city,

state,

zipcode,

mailing_addr "decode(:mailing_addr, null, :addr, :mailing_addr)",

mailing_city "decode(:mailing_city, null, :city, :mailing_city)",

mailing_state

)

将数据导入多个表:

如:

load data

infile *

replace

into table emp

when empno != ' '

( empno position(1:4) integer external,

ename position(6:15) char,

deptno position(17:18) char,

mgr position(20:23) integer external

)

into table proj

when projno != ' '

( projno position(25:27) integer external,

empno position(1:4) integer external

)

导入选定的记录:

如下例: (01) 代表第一个字符, (30:37) 代表30到37之间的字符:

load data

infile 'mydata.dat' badfile 'mydata.bad' discardfile 'mydata.dis'

append

into table my_selective_table

when (01) <> 'h' and (01) <> 't' and (30:37) = '19991217'

(

region constant '31',

service_key position(01:11) integer external,

call_b_no position(12:29) char

)

导入时跳过某些字段:

可用 postion(x:y) 来分隔数据. 在oracle8i中可以通过指定 filler 字段实现。filler 字段用来跳过、忽略导入数据文件中的字段.如:

load data

truncate into table t1

fields terminated by ','

( field1,

field2 filler,

field3

)

导入多行记录:

可以使用下面两个选项之一来实现将多行数据导入为一个记录:

concatenate: - use when sql*loader should combine the same number of physical records together to form one logical record.

continueif - use if a condition indicates that multiple records should be treated as one. eg. by having a '#' character in column 1.

sql*loader 数据的提交:

一般情况下是在导入数据文件数据后提交的。

也可以通过指定 rows= 参数来指定每次提交记录数。

提高 sql*loader 的性能:

1) 一个简单而容易忽略的问题是,没有对导入的表使用任何索引和/或约束(主键)。如果这样做,甚至在使用rows=参数时,会很明显降低数据库导入性能。

2) 可以添加 direct=true来提高导入数据的性能。当然,在很多情况下,不能使用此参数。

3) 通过指定 unrecoverable选项,可以关闭数据库的日志。这个选项只能和 direct 一起使用。

4) 可以同时运行多个导入任务.

常规导入与direct导入方式的区别:

常规导入可以通过使用 insert语句来导入数据。direct导入可以跳过数据库的相关逻辑(direct=true),而直接将数据导入到数据文件中。

导入数据时修改数据:

在导入数据到数据库时,可以修改数据。注意,这仅适合于常规导入,并不适合 direct导入方式.如:

load data

infile *

into table modified_data

( rec_no "my_db_sequence.nextval",

region constant '31',

time_loaded "to_char(sysdate, 'hh24:mi')",

data1 position(1:5) ":data1/100",

data2 position(6:15) "upper(:data2)",

data3 position(16:22)"to_date(:data3, 'yymmdd')"

)

begindata

11111aaaaaaaaaa991201

22222bbbbbbbbbb990112

load data

infile 'mail_orders.txt'

badfile 'bad_orders.txt'

append

into table mailing_list

fields terminated by ","

( addr,

city,

state,

zipcode,

mailing_addr "decode(:mailing_addr, null, :addr, :mailing_addr)",

mailing_city "decode(:mailing_city, null, :city, :mailing_city)",

mailing_state

)

将数据导入多个表:

如:

load data

infile *

replace

into table emp

when empno != ' '

( empno position(1:4) integer external,

ename position(6:15) char,

deptno position(17:18) char,

mgr position(20:23) integer external

)

into table proj

when projno != ' '

( projno position(25:27) integer external,

empno position(1:4) integer external

)

导入选定的记录:

如下例: (01) 代表第一个字符, (30:37) 代表30到37之间的字符:

load data

infile 'mydata.dat' badfile 'mydata.bad' discardfile 'mydata.dis'

append

into table my_selective_table

when (01) <> 'h' and (01) <> 't' and (30:37) = '19991217'

(

region constant '31',

service_key position(01:11) integer external,

call_b_no position(12:29) char

)

导入时跳过某些字段:

可用 postion(x:y) 来分隔数据. 在oracle8i中可以通过指定 filler 字段实现。filler 字段用来跳过、忽略导入数据文件中的字段.如:

load data

truncate into table t1

fields terminated by ','

( field1,

field2 filler,

field3

)

导入多行记录:

可以使用下面两个选项之一来实现将多行数据导入为一个记录:

concatenate: - use when sql*loader should combine the same number of physical records together to form one logical record.

continueif - use if a condition indicates that multiple records should be treated as one. eg. by having a '#' character in column 1.

sql*loader 数据的提交:

一般情况下是在导入数据文件数据后提交的。

也可以通过指定 rows= 参数来指定每次提交记录数。

提高 sql*loader 的性能:

1) 一个简单而容易忽略的问题是,没有对导入的表使用任何索引和/或约束(主键)。如果这样做,甚至在使用rows=参数时,会很明显降低数据库导入性能。

2) 可以添加 direct=true来提高导入数据的性能。当然,在很多情况下,不能使用此参数。

3) 通过指定 unrecoverable选项,可以关闭数据库的日志。这个选项只能和 direct 一起使用。

4) 可以同时运行多个导入任务.

常规导入与direct导入方式的区别:

常规导入可以通过使用 insert语句来导入数据。direct导入可以跳过数据库的相关逻辑(direct=true),而直接将数据导入到数据文件中。

sqlldr使用例子说明

先把excel另存为.csv格式文件,如test.csv,再编写一个insert.ctl

用sqlldr进行导入!

insert.ctl内容如下:

load data           --1、控制文件标识

infile 'test.csv'       --2、要输入的数据文件名为test.csv

append into table table_name     --3、向表table_name中追加记录

fields terminated by ','   --4、字段终止于',',是一个逗号

(field1,

field2,

field3,

...

fieldn)-----定义列对应顺序

注意括号中field排列顺序要与csv文件中相对应

然后就可以执行如下命令:

sqlldr user/password control=insert.ctl

扫描关注微信公众号