iq load 问题

jonse

免费乐捐，感谢支持

l5066113 说得很对。

以下是测试例子：

数据文件是c:\test.txt, 内容如下：

abc|234|123|123
cde|111|2006-12-11|2007-11-13

数据结构如下：

CREATE TABLE TEST2
( A char(10),
  b integer,
  c date,
  d date
);

最后两个字段是日期型，我期望将数据123转换日期型的空值，Load脚本如下：

LOAD TABLE test2
(

a '|',
b '|',
c '|' null('123'),
d   '\x0d\x0a'
null('123')

)
FROM 'c:\test.txt'
ESCAPES OFF
QUOTES Off
format ASCII
WITH CHECKPOINT ON;

如果你仅仅是从IQ卸载，再装入IQ，可以采用二进制方式卸载和装载，就完全避免了分隔符和空值等问题

--二进制方式导出数据
SET TEMPORARY OPTION temp_extract_directory='/upload/data';
SET TEMPORARY OPTION temp_extract_name1='test.bin';
SET TEMPORARY OPTION Temp_Extract_Append = 'OFF';
SET TEMPORARY OPTION Temp_Extract_Binary =ON;
SELECT *  from test.test;
--SET TEMPORARY OPTION Temp_Extract_Name1 = '';

---加载二进制数据
LOAD INTO TABLE WAP_CDR_DATA_FACT_test
(
TIMEID        BINARY WITH NULL BYTE ,
FILE_COLUMN_ID    BINARY WITH NULL BYTE ,
CITY_ID       BINARY WITH NULL BYTE ,
USER_BRAND_ID    BINARY WITH NULL BYTE ,
CODE_ID       BINARY WITH NULL BYTE ,
STATSTIME      BINARY WITH NULL BYTE ,
MSISDN        BINARY WITH NULL BYTE ,
TS_INCOMING_HTTP_REQ  BINARY WITH NULL BYTE ,
TS_OUTGOING_HTTP_REQ  BINARY WITH NULL BYTE ,
TS_INCOMING_HTTP_RESP  BINARY WITH NULL BYTE ,
TS_OUTGOING_HTTP_RESP  BINARY WITH NULL BYTE ,
TS_ACK_OR_ABORT     BINARY WITH NULL BYTE ,
DURATION_TIME      BINARY WITH NULL BYTE ,
URL           BINARY WITH NULL BYTE ,
SP_DOMAIN        BINARY WITH NULL BYTE ,
FILE_TYPE        BINARY WITH NULL BYTE ,
SERVICE_TYPE       BINARY WITH NULL BYTE ,
USER_AGENT_ORIGIN    BINARY WITH NULL BYTE ,
USER_AGETN        BINARY WITH NULL BYTE ,
SOFT_VERSION       BINARY WITH NULL BYTE ,
HTTP_STATUS_CODE     BINARY WITH NULL BYTE ,
HTTP_STATUS_SUBCODE   BINARY WITH NULL BYTE ,
BEARER_TYPE       BINARY WITH NULL BYTE ,
PROTOCAL_TYPE      BINARY WITH NULL BYTE ,
CLIENT_ADDRESS      BINARY WITH NULL BYTE ,
VOLUMESTREAM       BINARY WITH NULL BYTE ,
WAPGW_IP         BINARY WITH NULL BYTE ,
CDR_TYPE         BINARY WITH NULL BYTE ,
PROVINCENODE_ID     BINARY WITH NULL BYTE ,
MANUFACTURER_ID     BINARY WITH NULL BYTE ,
SYSTEM_ID        BINARY WITH NULL BYTE ,
SESSION_ID        BINARY WITH NULL BYTE ,
GW_AVG          BINARY WITH NULL BYTE ,
SP_AVG          BINARY WITH NULL BYTE ,
FILE_NAME     BINARY WITH NULL BYTE
)
FROM '/upload/data/test.bin'
QUOTES OFF
ESCAPES OFF
FORMAT binary; 

 

[此贴子已经被作者于2007-1-10 10:08:37编辑过]

whw

谢谢您l5066113，我明白您的意思了，确实是我导出数据的问题，end_date这个字段如果为空的话，就什么也不显示了。我的数据是下面的样子，请问我在导出数据的时候应该做什么操作呢 ，谢谢！

256|59|水资源费费展\x00费|5903|自来水厂自来水厂保险\x00船\x00船\x00\x00|0|2006-12-01 02:15:19.0|2006-12-02 02:15:19.0
257|59|水资源费费展\x00费|5904|自来水厂取地自来保险\x00船\x00船\x00\x00|0|2006-12-01 02:15:19.0|2006-12-02 02:15:19.0
258|59|水资源费费展\x00费|5905|工业生产取地表水保险\x00船\x00船\x00\x00|0|2006-12-01 02:15:19.0|为空
259|59|水资源费费展\x00费|5906|工业生产取地下水保险\x00船\x00船\x00\x00|0|2006-12-01 02:15:19.0|为空

jonse

我用你的测试数据，进行测试，脚本如下，加载没有问题：

LOAD TABLE d_tax_kind
(

TAX_KIND_KEY '|',
TAX_KIND_CODE '|',
TAX_KIND_NAME '|',
TAX_ITEM_CODE '|',
TAX_ITEM_NAME '|',
TAX_FLAG      '|',
EFFECTIVE_DATE '|' null(''),
END_DATE    '\x0d\x0a' null('')
)
FROM 'c:\d_tax_kind.out'
ESCAPES OFF
QUOTES Off
format ASCII
WITH CHECKPOINT ON;

需要注意的问题：

ASCII变长数据加载时，字段分割符号和行分隔符一般需要描述，

你的脚本重复描述了字段分隔符，没有描述行分隔符。