将多个文本文件导入mysql数据库中的不同表

Question

我需要将一堆文本文件 (3098) 导入数据库。每个文件必须在不同的表中。我的想法是使用一个循环为每个文件创建一个新表。我是否必须在 php 中使用foreach 来遍历所有文件或只是 mysql 循环以及我应该在LOAD DATA LOCAL INFILE 之后放置什么文件名。我还想知道如何创建这些表（也许为他们使用一个变量名称）。完成我的任务的任何其他想法都会有所帮助。

Answer 1

只需使用 php 的 glob() 遍历所有 .txt 文件，然后在每个文件上运行 MySQL 的 LOAD DATA INFILE 命令。但首先，在 MySQL 中创建具有适当数据类型列的目标表。然后在 PHP 中运行导入代码。如上所述，此方法假定所有 .txt 文件都具有相同的结构以全部导入到 one 数据库表中。

MYSQL （在控制台或代码中一次性运行）

CREATE TABLE destinationTable (
    ID int NOT NULL AUTO_INCREMENT PRIMARY KEY,
    col1 int(11),
    col2 varchar(255),
    col3 decimal(10,2),
    col4 date,
    ...
);

PHP （使用迭代循环；以下假设以逗号分隔的文件，调整为实际分隔符）

// OPEN DATABASE CONNECTION
$dbh = new PDO("mysql:host=$host;dbname=$database",$username,$password);
$dbh->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);

foreach (glob("/path/to/folder/*.txt") as $file) {

    $sql = "LOAD DATA INFILE '".$file."' 
            INTO TABLE destinationTable 
            FIELDS TERMINATED BY ',' 
            OPTIONALLY ENCLOSED BY '\"' 
            LINES TERMINATED BY '\r\n';";

    $dbh->query($sql);

}

// CLOSE CONNECTION
$dbh = null;