首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >SQLPlus -从PL/SQL块对多个文件进行后台处理

问SQLPlus -从PL/SQL块对多个文件进行后台处理
EN

Stack Overflow用户
提问于 2010-04-13 13:56:30
回答 6查看 54.1K关注 0票数 5

我有一个查询,它将大量数据返回到CSV文件中。事实上,Excel无法打开它--行太多了。是否有一种方法可以在每次处理65000行时将spool控制为一个新文件?理想情况下,我希望将输出按顺序命名,如large_data_1.csv、large_data_2.csv、large_data_3.csv等.

我可以在PL/SQL块中使用dbms_output来控制输出了多少行,但是如何切换文件,因为spool似乎无法从PL/SQL块中访问。

(Oracle 10g)

更新:

我没有访问服务器的权限,所以将文件写入服务器可能无法工作。

更新2:

有些字段包含自由形式的文本,包括换行符,因此在写入文件后计数行中断并不像返回数据时计数记录那样容易.

EN

回答 6

Stack Overflow用户

回答已采纳

发布于 2010-04-13 18:42:37

找到解决办法了,不知道为什么我不早点想到这个.

基本思想是,主sqplplus脚本生成一个中间脚本,该脚本将将输出拆分为多个文件。执行中间脚本将执行对rownum施加不同范围的多个查询,并对每个查询执行不同的文件。

代码语言:javascript
复制
set termout off
set serveroutput on
set echo off
set feedback off
variable v_rowCount number;
spool intermediate_file.sql
declare
     i number := 0;
     v_fileNum number := 1;
     v_range_start number := 1;
     v_range_end number := 1;
     k_max_rows constant number := 65536;
begin
    dbms_output.enable(10000);
    select count(*) 
    into :v_err_count
    from ...
    /* You don't need to see the details of the query... */

    while i <= :v_err_count loop

          v_range_start := i+1;
          if v_range_start <= :v_err_count then
            i := i+k_max_rows;
            v_range_end := i;

            dbms_output.put_line('set colsep ,  
set pagesize 0
set trimspool on 
set headsep off
set feedback off
set echo off
set termout off
set linesize 4000
spool large_data_file_'||v_fileNum||'.csv
select data_string
from (select rownum rn, data_object
      from 
      /* Details of query omitted */
     )
where rn >= '||v_range_start||' and rn <= '||v_range_end||';
spool off');
          v_fileNum := v_fileNum +1;
         end if;
    end loop;
end;
/
spool off
prompt     executing intermediate file
@intermediate_file.sql;
set serveroutput off
票数 9
EN

Stack Overflow用户

发布于 2010-04-14 07:48:43

尝试一下这个纯SQL*Plus解决方案..。

代码语言:javascript
复制
set pagesize 0
set trimspool on  
set headsep off 
set feedback off
set echo off 
set verify off
set timing off
set linesize 4000

DEFINE rows_per_file = 50


-- Create an sql file that will create the individual result files
SET DEFINE OFF

SPOOL c:\temp\generate_one.sql

PROMPT COLUMN which_dynamic NEW_VALUE dynamic_filename
PROMPT

PROMPT SELECT 'c:\temp\run_#'||TO_CHAR( &1, 'fm000' )||'_result.txt' which_dynamic FROM dual
PROMPT /

PROMPT SPOOL &dynamic_filename

PROMPT SELECT *
PROMPT   FROM ( SELECT a.*, rownum rnum
PROMPT            FROM ( SELECT object_id FROM all_objects ORDER BY object_id ) a
PROMPT           WHERE rownum <= ( &2 * 50 ) )
PROMPT  WHERE rnum >= ( ( &3 - 1 ) * 50 ) + 1
PROMPT /

PROMPT SPOOL OFF

SPOOL OFF

SET DEFINE &


-- Define variable to hold number of rows
-- returned by the query
COLUMN num_rows NEW_VALUE v_num_rows

-- Find out how many rows there are to be
SELECT COUNT(*) num_rows
  FROM ( SELECT LEVEL num_files FROM dual CONNECT BY LEVEL <= 120 );


-- Create a master file with the correct number of sql files
SPOOL c:\temp\run_all.sql

SELECT '@c:\temp\generate_one.sql '||TO_CHAR( num_files )
                                   ||' '||TO_CHAR( num_files )
                                   ||' '||TO_CHAR( num_files ) file_name
  FROM ( SELECT LEVEL num_files 
           FROM dual 
        CONNECT BY LEVEL <= CEIL( &v_num_rows / &rows_per_file ) )
/

SPOOL OFF

-- Now run them all
@c:\temp\run_all.sql
票数 4
EN

Stack Overflow用户

发布于 2010-04-13 14:09:04

对结果文件使用拆分。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/2630068

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档