Oracle sql加载器加载带有标识列的表所花费的时间太长

Question

我有一个固定长度的数据文件，有130万条记录，我使用sql加载器将数据加载到一个stage表中。如果表没有任何标识列，那么直接路径加载将占用9秒，而常规路径加载则需要17秒来加载130万条记录。但是，如果我在表中包含标识列(名为ROW_NUM)，那么两个负载都需要超过11分钟才能完成加载。在这种情况下，请建议如何提高性能。我的控制文件如下所示。提前感谢您的帮助。ROW_NUM标识存在于表中，我们不传递来自sql的值。

OPTIONS (ROWS=200000,DIRECT=FALSE,ERRORS=0)
    LOAD DATA
    CHARACTERSET 'AL32UTF8'
    DISCARDMAX 100
    INFILE 'path/datafile.dat'
    BADFILE 'path/datafile.bad_rec.txt'
    DISCARDFILE 'path/datafile_dsc_rec.txt'
        REPLACE PRESERVE BLANKS INTO TABLE ABCD.STAGE_TABLE
        TRAILING NULLCOLS
(
A1  POSITION(1:11),
A2  POSITION(12:13),
A3  POSITION(14:19),
A4  POSITION(20:22),
A5  POSITION(23:23),
A6  POSITION(24:38),
A7  POSITION(39:53),
A8  POSITION(54:68),
A9  POSITION(69:83),
A10 POSITION(84:98)
)

command:
sqlldr "connection string" control=control_file.ctl

请注意：

1. ROW_NUM identity，用于从STAGE到基表进行合并，并在every2000行之后执行提交。我不能使用外部表，因为我的数据文件位于与DB服务器不同的服务器中。

。

Answer 1

这就是我的看法(这不一定是正确的)。

"Identity列“意味着您在Oracle 12c或更高版本上。对吗？因为，在以前的Oracle数据库版本中，我们必须使用序列和数据库触发器的组合，这将触发每一行，从序列中获取下一个值并将其插入ID列。

我不知道Oracle是如何实现identity列的，但我认为它看起来有点类似于我之前描述的内容，但是一切都是“幕后”完成的，这使开发人员更加容易。

如果是这样的话，那么“幕后触发”仍然要发射130万次，这是很费时的。正如您已经注意到的，没有标识列，SQL*Loader工作得非常快。

你能做什么？一种选择可能是

update stage set id = myseq.nextval;重新创建舞台表，使其不使用标识列；将ID设为普通数字数据类型列

• 加载数据快速

• 更新表

另一个选项:在SQL*Loader会话期间加载序列值；控制文件将如下所示( ID列也是，而不是，一个标识列！)：

load data
infile ... 
into table stage
  (id      SEQUENCE(MAX, 1),            --> this
   a1,
   ...
  )

看看这有什么帮助。如果没有，恐怕我目前没有任何其他的想法。