文件导出脚本挂在大输出上

Question

下面是我用来将 MySQL 数据库导出到 .csv 文件的脚本。

对于较小的输出（大约 30,000 行以下）似乎可以正常工作，但会挂在较大的输出上并且无法完成（总共 100 万行）。

有什么想法吗？

此外，PHPMyAdmin 导出实用程序可以非常快地转储它（只需几秒钟）。想知道它是如何做到的。

if(isset($_POST['submit'])) {
// Fetch Record from Database
$output = "";
$table = "tt_output";
$sql = mysqli_query($connection,"select * from {$table}");
$columns_total = mysqli_num_fields($sql);

// Get The Field Name
$query = "SHOW COLUMNS FROM {$table}"; $result_set = mysqli_query($connection,$query);
while ($result = mysqli_fetch_array($result_set)) {
    $heading = $result[0];
    $output .= trim($heading.',');
}

$output = substr($output,0,strlen($output)-1)."\r\n";

// Get Records from the table
while ($row = mysqli_fetch_array($sql)) {
    for ($i = 0; $i < $columns_total; $i++) {
        $output .='"'.$row["$i"].'",';
    }
    $output = substr($output,0,strlen($output)-1)."\r\n";
}

// Download the file
$filename = "output".".csv";
header("Pragma: public", true);
header("Expires: 0"); // set expiration time
header("Cache-Control: must-revalidate, post-check=0, pre-check=0");
header("Content-Type: application/force-download");
header("Content-Type: application/octet-stream");
header("Content-Type: application/download");
header('Content-Disposition: attachment; filename='.$filename);
header("Content-Transfer-Encoding: binary");
header('Connection: Keep-Alive');

echo $output;
exit;

}

Answer 1

我可以看到的问题是您正在将所有内容读入变量/内存，然后才开始输出它。

您应该将循环放在标题下方并立即输出：

...
header('Connection: Keep-Alive');

// Get Records from the table
while ($row = mysqli_fetch_array($sql)) {
    for ($i = 0; $i < $columns_total; $i++) {
        $output .='"'.$row["$i"].'",';
    }
    echo substr($output,0,strlen($output)-1)."\r\n";
}

另一个可能的问题是你如何构建你的行。如果任何字段包含未转义的 " 字符，它将破坏您的 csv。您可能希望使用 fputcsv() 将 csv 保存到临时文件中，然后再将其发送给客户端。

您还可以为自己保存一个查询，因为列名将是结果数组的键，如果您真的想手动构建 csv，您可以使用 implode() 而不是循环，但您必须测试是否这样更快。