MySQL LOAD DATA LOCAL INFILE 只导入单行答案

【问题标题】：MySQL LOAD DATA LOCAL INFILE only imports a single rowMySQL LOAD DATA LOCAL INFILE 只导入单行
【发布时间】：2013-01-14 21:20:55
【问题描述】：

我们有一个包含数千条记录的 CSV 文件。我想通过 phpmyadmin 将这些行导入 MySQL 表。这是使用的命令：

load data local infile '/var/www/html/deansgrads_201280.csv' 
into table ttu_nameslist
fields terminated by ','
enclosed by '"'
lines terminated by '\r\n'
(firstname, middlename, lastname, city, county, state, termcode, category)

表中有一个 ID 字段设置为自动递增。当我们执行这个 SQL 时，只有第一行被导入到表中。

输入数据文件行：

"Aaron","Al","Brockery","Cookeville","Putnam","TN","201280","deanslist"
"Aaron","Dan","Mickel","Lebanon","Wilson","TN","201280","deanslist"

表结构：

CREATE TABLE `ttu_nameslist` (
  `id` int(11) NOT NULL,
  `firstname` varchar(50) NOT NULL,
  `middlename` varchar(50) NOT NULL,
  `lastname` varchar(50) NOT NULL,
  `city` varchar(50) NOT NULL,
  `county` varchar(50) NOT NULL,
  `state` varchar(2) NOT NULL,
  `termcode` varchar(6) NOT NULL,
  `category` varchar(10) NOT NULL,
  PRIMARY KEY (`id`)
 ) ENGINE=MyISAM DEFAULT CHARSET=latin1

我做错了什么为什么添加一行后退出？

【问题讨论】：

如果没有看到一些示例数据，真的很难判断。
显示警告是否提供任何提示？ dev.mysql.com/doc/refman/5.5/en/show-warnings.html
@CodeMonkey show warnings 表示“ID”字段没有默认值。然后有一系列关于某些数据被截断的警告。 ID 设置为自动递增。它不应该有默认值吗？
向我们展示您的表架构。运行SHOW CREATE TABLE ttu_nameslist。
我将它添加到上面的帖子中。这有帮助吗？

标签： mysql sql csv import phpmyadmin

【解决方案1】：

您说 ID 字段具有 AUTO_INCREMENT 属性，但在 CREATE TABLE 语句中没有提及它。这是问题的一部分。

另一部分是那些截断警告。 CSV 文件中的某些行可能包含太长而无法容纳在列中的数据。将这些文本列的大小增加到更大的值（比如 200），然后重试。

您确定 CSV 文件有效吗？（又名每一行都有相同数量的值等）。您可能应该检查这些字符串是否包含逗号 (,)，尽管这应该不是问题。

【讨论】：

我同意缺少自动增量。如果它尝试为每一行插入 0，并且由于键冲突而导致除 1 之外的所有内容都失败，我不会感到惊讶。
诀窍是什么？真希望我知道这个问题的答案。自动增量对我来说似乎不是问题
对于那些在这个问题上苦苦挣扎的人 - 这解决了我的问题：stackoverflow.com/questions/1268273/…

【解决方案2】：

为什么 MySQL LOAD DATA INFILE 命令只加载一行？

发生的情况是你加载第一列很好，然后当你加载第二列时它失败了，因为它违反了唯一索引约束。

MySQL LOAD DATA LOCAL INFILE 将在列上强制执行您的唯一索引，然后跳过任何有问题的重复行而不做任何事情，甚至不记录警告！

如何重现此现象：

创建一个包含 int 和 varchar 列的表：

mysql> create table foo(id INT, mytext VARCHAR(255));
Query OK, 0 rows affected (0.02 sec)

在 varchar 列上添加唯一约束：

mysql> alter table foo add constraint my_epic_constraint unique(mytext);
Query OK, 0 rows affected (0.02 sec)
Records: 0  Duplicates: 0  Warnings: 0

创建您的输入文本文件 /tmp/foo.txt，由制表符分隔，这违反了唯一性约束：
```
1   fred
2   fred
```

尝试导入它：

mysql> load data local infile '/tmp/foo.txt' into table foo fields 
       terminated by '\t' lines terminated by '\n' (@col1,@col2) 
       set id=@col1, mytext=@col2;

Query OK, 1 row affected (0.01 sec)
Records: 2  Deleted: 0  Skipped: 1  Warnings: 0

砰！你的问题是：为什么它只导入一行？因为你有一个唯一的键约束，数据文件中的行违反了它。

解决方案：

删除表上的唯一键约束，然后重试。
进入文本文件并删除违反唯一约束的重复行。

【讨论】：

【解决方案3】：

我遇到了同样的问题，我用双引号解决了 "\r\n" 而不是 '\r\n'

【讨论】：

【解决方案4】：

对于那些感兴趣的人，我遇到了与上述相同的问题，但它与 LINES TERMINATED BY 分配、主键违规或错误字符集无关。

升级到 MySQL 8 后我开始收到此错误，我的问题最终是我通过 col_name_or_user_var 选项发送的列名。最初我在导入文件中有额外的列，我没有使用，这对原始实现没有造成任何问题。但是，升级后，我必须为这些列添加变量条目以使其正常工作并导入多行（我无权更改 import.csv 中的这些列）。使用这样的导入文件：

FIELD_1, FIELD_2, FIELD_3, FIELD_4, FIELD_5

我必须从：

LOAD DATA INFILE 'import.csv'
INTO TABLE tableName
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '\"'
LINES TERMINATED BY '\n'
(FIELD_1, FIELD_2, FIELD_3)

到：

LOAD DATA INFILE 'import.csv'
INTO TABLE tableName
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '\"'
LINES TERMINATED BY '\n'
(FIELD_1, FIELD_2, FIELD_3, @FIELD_4, @FIELD_5)

【讨论】：