只下载文件的一部分

Question

我想使用 go 从 Internet 下载类似文本的文件的一部分。我想从中下载的网站似乎不尊重 curl --max-filesize 和 --range。此外，我读到 http MaxBytesReader 仍然会下载整个文件，但只存储其中的一部分。

有没有办法只获取文件的第一个 kb 然后关闭连接？相当于在 chrome 上加载大页面时按“x”。 我在想我可以运行一个将网站读取到文件的线程，然后在一两毫秒后终止该线程。这可能吗？

Answer 1

一种无需太多错误处理的简单方法（可能必须添加）：

import (
    "fmt"
    "io"
    "io/ioutil"
    "net/http"
)

const readLimit = 1024 // bytes

func main() {
    resp, err := http.Get("http://example.com/")
    if err != nil {
       // handle error
    }

    fixedReader := io.LimitedReader{R: resp.Body, N: readLimit}

    data, _ := ioutil.ReadAll(fixedReader)
    resp.Body.Close()
    fmt.Println(string(data))
}