load data一次导入多个文件的数据时报错

首页    知识库    常见问题    load data一次导入多个文件的数据时报错

【问题分类】数据导入导出

【关键字】load data,多个文件

【问题描述】

load data一次导入多个文件的数据,尝试了使用空格或逗号间隔都失败了,这里正确的命令格式是?

LOAD DATA OPTIONS(

  DEGREE_OF_PARALLELISM=4,

  DECODER_THREAD_TIMES=3,

  ENABLE_BULK=TRUE,

  ENABLE_DEDUP=TRUE,

  ERRORS=10000

)

INFILE '?/xx-2020.csv' '?/xx-2020-1.csv'

FIELDS csv

WITH EMBEDDED

BADFILE '/home/yashan/test/bad'

APPEND INTO TABLE uk_price_paid(id,c1,c2,c3);

【问题原因分析】导入多个数据文件时的命令格式错误。

【解决/规避方法】

在 LOAD DATA 语句中,如果要一次导入多个文件的数据,正确的命令格式是将每个文件单独指定在 INFILE 子句中,并用空格分隔。示例:

--导入多个数据文件LOAD DATA OPTIONS(DEGREE_OF_PARALLELISM=3)

INFILE '/data/discardfile.csv' FIELDS TERMINATED BY ','

DISCARDFILE '/data/discardfile.dsc'

INFILE '/data/discardfile1.csv' FIELDS TERMINATED BY ','

DISCARDFILE '/data/discardfile1.dsc'

INSERT INTO TABLE discard_load(c1,c2);

【影响范围】当前所有版本

【修复版本】-

浏览量:0