从 PHP 中的多个 (2) 文本文件中删除重复行

Question

我有 2 个 .txt 文件。 第一个 .txt 文件是 curl 数据（机器人），它总是得到 2000 行 .txt 行，包括新行

第二个 .txt 文件有第一个 .txt 文件的新数据。 我使用第二个 .txt 文件作为脚本。

我无法删除重复项。 （我的意思是我尝试根据旧值获取新值）所以脚本总是使用新旧数据。

有没有办法打开所有文件，删除重复项并将行相应地保存到第二个文件？

有三个刷新示例

这是第一次刷新和 2 个 .txt 文件

第一个 .txt 文件（你应该认为它有 2000 行）刷新 curl 机器人

Something here10
Something here9
Something here8
Something here7
Something here6
Something here5
Something here4
Something here3
Something here2
Something here1

我将使用的第二个 .txt 文件

Something here10
Something here9
Something here8
Something here7
Something here6
Something here5
Something here4
Something here3
Something here2
Something here1

这是第二次刷新和 2 个 .txt 文件

第一个 .txt 文件（你应该认为它有 2000 行）刷新 curl bot

Something here14
Something here13
Something here12
Something here11
Something here10
Something here9
Something here8
Something here7
Something here6
Something here5

我将使用的第二个 .txt 文件

Something here14
Something here13
Something here12
Something here11

这是第三次刷新和 2 个 .txt 文件

第一个 .txt 文件（你应该认为它有 2000 行）刷新 curl bot

Something here16
Something here15
Something here14
Something here13
Something here12
Something here11
Something here10
Something here9
Something here8
Something here7

我将使用的第二个 .txt 文件

Something here16
Something here15

编辑： 我发布了两个新的刷新

这是第四次刷新和 2 个 .txt 文件

第一个 .txt 文件（你应该认为它有 2000 行）刷新 curl bot

Something here20
Something here19
Something here18
Something here17
Something here16
Something here15
Something here14
Something here13
Something here12
Something here11

我将使用的第二个 .txt 文件

Something here20
Something here19
Something here18
Something here17

这是第五次刷新和 2 个 .txt 文件

第一个 .txt 文件（你应该认为它有 2000 行）刷新 curl bot

Something here24
Something here23
Something here22
Something here21
Something here20
Something here19
Something here18
Something here17
Something here16
Something here15

我将使用的第二个 .txt 文件

Something here24
Something here23
Something here22
Something here21

Answer 1

（读取和解释 cmets）我认为您需要以下代码，使用 PHP array push

<?php

error_reporting(E_ALL); ini_set('display_errors', 1);

$array1 = array('here9', 'here8', 'here7', 'here6', 'here5', 'here4', 'here3', 'here2', 'here1');
$array2 = array('here4', 'here3', 'here2', 'here1');

echo"Array 1:<br />"; // just checking -> will be removed
print_r($array1); // just checking -> will be removed

echo"<br /><br />Array 2:<br />"; // just checking -> will be removed
print_r($array2); // just checking -> will be removed

echo"<br /><br />"; // will be removed

$newarray = array(); // create new empty array to receive new data

foreach ($array1 as $value) { /* parse array */

// here, we'll make use of PHP array_push
if( !in_array($value, $array2) ) { // if value is not in 2nd array

array_push($newarray, $value); // we add to new array we created

} else { /* do nothing */ }
    }

echo"New array with duplicate removed:<br />"; // just checking -> will be removed
print_r($newarray); // just checking -> will be removed

file_put_contents('output.txt', $newarray); // we write new content of array to file

?>

Answer 2

我试图将其保持在尽可能高的水平，但本质上是将每一行推入一个数组，然后使用 array_unique 删除重复项：

    $line_array = array();
    $files = getFiles();
    foreach($files as $file)
    {
        $lines = $file->getAllLines();
        foreach($lines as $line)
        {
            $line_array[] = $line;
        }
    }
    $without_duplicates = array_unique($line_array);