如何从 PHP 中的指定 url 获取大数据（json）

Question

我有一个 php 应用程序，我需要它从一个 url 获取一个大的 json 响应。使用 curl，当我从终端使用它时，一切都按预期进行。但是 php curl 没有得到整个文件。好像被截断了。

我从终端使用的 curl 命令是：

 curl -v -H 'Accept-Encoding:gzip,deflate,sdch' resultsURL --compressed

resultsURL 是我想从中获取 json 的 url。

这通常给我大约 10,000kb (9-10mb)，但从 php curl 我得到最多 400-500kb。

如何获取整个文件？

（执行不是一个选项）

Answer 1

set_time_limit(0);
    $url  = 'http://www.example.com/a-large-file.json';
    $path = '/path/to/a-large-file.json';
    $fp = fopen($path, 'w+');

    $ch = curl_init($url);
    curl_setopt($ch, CURLOPT_FILE, $fp);

    $data = curl_exec($ch);

    curl_close($ch);
    fclose($fp);