iq load 问题

whw

免费乐捐，感谢支持

问题已经解决，特别感谢l5066113 和 jonse的热心帮助！

我用下面的命令导出数据

select * from "DW"."d_tax_kind";
output to 'c:\d_tax_kind.out'
delimited by '|'
format ASCII

然后用下面的命令导入数据，但老是报connot convert to a datetime（column end_date)的错误

LOAD TABLE d_tax_kind
( TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '\x0d\x0a',
END_DATE     '\x0d\x0a',
)
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
QUOTES Off
format ASCII
WITH CHECKPOINT ON

我知道是日期的问题，已经改到下面方式还是不行

LOAD TABLE d_tax_kind
( TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE  datetime ('yyyy-mm-dd Thh:mm:ss.m'),
END_DATE datetime('yyyy-mm-dd Thh:mm:ss:m')
)
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
QUOTES Off
format ASCII
WITH CHECKPOINT ON 

[此贴子已经被作者于2007-1-10 10:36:20编辑过]

l5066113

文本导出应该加上quotes '',否则字符类型的数据会用'引起来的。

select * from "DW"."d_tax_kind";
output to 'c:\d_tax_kind.out'
delimited by '|'
format ASCII
quotes '';

文本导入的load语句也有点问题，行结束符应该只在最后一列指定。改成下面的语句试试看。

LOAD TABLE d_tax_kind
(
 TAX_KIND_KEY '|',
 TAX_KIND_CODE '|',
 TAX_KIND_NAME '|',
 TAX_ITEM_CODE '|',
 TAX_ITEM_NAME '|',
 TAX_FLAG '|',
 EFFECTIVE_DATE '|',
 END_DATE '\x0a'
)
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
QUOTES Off
format ASCII
WITH CHECKPOINT ON

[此贴子已经被作者于2007-1-6 20:29:33编辑过]

whw

谢谢2楼的答复，但是我按照下面的方法导出的时候报syntax error near "DW",报语法错误。即使去掉也报语法错误

select * from "DW"."d_tax_kind"
output to 'c:\d_tax_kind.txt'
delimited by '|'
format ASCII
quotes '';

jonse

语法错误：

应该是： output to 'c:\d_tax_kind.txt'
format ascii
delimited by '|'
quote '';

quote 没有s.

whw

非常感谢l5066113 and jonse 的热心帮助。

但是还是load 不进去，

报number of bytes (512) for a column from an input file has exceeded the maxinum allowed(4)的错误

导出的command

select * from d_tax_kind;
output to 'c:\d_tax_kind.out'
delimited by '|'
format ASCII
quote '';

导入的command

LOAD TABLE d_tax_kind
( TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '|',
END_DATE     '\x0a')
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
delimited by '|'
QUOTES Off
format ASCII
WITH CHECKPOINT ON 

l5066113

可以将你的

导入的command

LOAD TABLE d_tax_kind
( TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '|',
END_DATE     '\x0a')
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
delimited by '|'
QUOTES Off
format ASCII
WITH CHECKPOINT ON

中的'\x0a'换成'

'试试看，就是在''中按回车键。

同时感谢jonse的指正。

whw

To：l5066113

我刚才用您的方法试了一下，但还是报connot convert to a datetime（column end_date)的错

LOAD TABLE d_tax_kind
( TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '|',
END_DATE     '

')
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
delimited by '|'
QUOTES Off
format ASCII
WITH CHECKPOINT ON

l5066113

免费乐捐，感谢支持

可以先建立一张临时表,插入几条测试数据,测一下SQL.

create table test_load (
 load_date char(8) not null,
 effective_date datetime not null,
 end_date datetime not null
);

insert into test_load
select
 '20070108',
 now(),
 now()
;

select * from test_load;
output to 'c:\test_load.out'
delimited by '|'
format ascii
quote '';

load table test_load
(
 load_date '|',
 effective_date '|',
 end_date '
'
)
from 'c:\test_load.out'
escapes off
delimited by '|'
quotes off
format ascii
with checkpoint on;

如果成功,则说明datetime类型的数据用这种方法没问题。

是你表d_tax_kind中的数据有问题：

1、EFFECTIVE_DATE、END_DATE中有空值或非法数据

2、TAX_KIND_NAME、TAX_ITEM_NAME等长字符型数据中有字符“|”

whw

非常感谢l5066113的热心帮助

确实是这样的在end_date字段里面有很多都是空值，那请问一下应该如何处理空值问题呢？谢谢！

jonse

0、卸载数据一般采用set option语句完成，

你的错误很可能就入l5066113所说

1、EFFECTIVE_DATE、END_DATE中有空值或非法数据

如果出现此情况，你可以通过NULL子句描述什么是空值

2、TAX_KIND_NAME、TAX_ITEM_NAME等长字符型数据中有字符“|”

此种情况，你需要修改你的卸载脚本，字段分隔符号采用多字节符号，在加载脚本中也需要修改分隔符号。

[此贴子已经被作者于2007-1-9 13:32:03编辑过]

whw

谢谢您，jonse

我用了您的方法，设置了set temporary option，但end_date这个字段里的空值还是无法处理。请问如何解决？

(虽然数据已经导进去了，但是是用etl工具生成的脚本和数据，导进去的，我现在就想用脚本的方法把数据导出并且导入）

set temporary option TEMP_EXTRACT_COLUMN_DELIMITER='|';
set temporary option TEMP_EXTRACT_BINARY='OFF';
set temporary option TEMP_EXTRACT_SWAP='OFF';
SET TEMPORARY OPTION ALLOW_NULLS_BY_DEFAULT='ON';
SET TEMPORARY OPTION ANSINULL='ON';
select * from "DW"."d_tax_kind";
output to 'c:\d_tax_kind.out'
delimited by '|'
format ASCII
quote '';

[此贴子已经被作者于2007-1-9 14:48:55编辑过]

l5066113

set option与output是IQ的两种不同数据卸载方式。set option的方法数据只能卸载到数据库服务器端，output的方法数据卸载到当前运行端，既可以是服务器端也可以是客户端。

set option的方法是通过temporary option TEMP_EXTRACT_NAME1来指定文件输出的名称及路径，因此你的数据卸载SQL中的set temporary option都是没用的。

1、EFFECTIVE_DATE、END_DATE中有空值或非法数据

如果出现此情况，你可以通过NULL子句描述什么是空值

jonse的意思是说，你可以在load语句中用NULL字句来描述空值，例：

LOAD TABLE d_tax_kind
(

TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '|' null(''),
END_DATE     '

' null('')

)
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
delimited by '|'
QUOTES Off
format ASCII
WITH CHECKPOINT ON

你可以先看看你生成的文本文件中的空值是什么，然后在null('')中加以描述。