【问题标题】:Stream multiple HTTP file requests into a zipped response stream in Django将多个 HTTP 文件请求流式传输到 Django 中的压缩响应流中
【发布时间】:2016-06-08 05:41:50
【问题描述】:

我的问题本质上与this very helpful answer 相似,但我想同时流入和流出。

我有一个 django 应用程序,它在外部 http 文件服务器上存储对文件的引用。现在,当用户请求 zip 集合时,它会执行以下操作(伪):

generate session_id
for url in url_list:
    download file to sessionid/filename.ext
for file in session_id folder:
    zip.write
close
http response

显然这不太理想,因为它:1. 需要清理,2. 速度很慢,3. 在用户看到任何下载进度之前会导致很长的延迟。

我无法重新编码的是 io 缓冲区/“类似对象的文件”。 Zipfile 在写入时查找文件,但我想提供一个流。简而言之,我如何通过管道将 requests 传输到 zipfile 到 HttpResponse?

【问题讨论】:

    标签: python django zipfile


    【解决方案1】:

    您可以使用 writestr 命令下载流式文件,我推荐requests library。

    Zipfile.writestr Documentation

    ZipFile.writestr(zinfo_or_arcname, bytes[, compress_type])
    

    编辑:示例

    zipinfo = ...
    zip = ...
    
    for url in list:
        r = requests.get(url, stream=True)
        for line in r.iter_lines():
            # filter out keep-alive new lines
            if line:
                print(zip.writestr(zipinfo, line))
    

    【讨论】:

    • 看起来这可能让我整理好了。试图将其流式传输到 StringIO 而不是 BytesIO。我会在一分钟内标记为答案,一切都在计划中。
    • @Linef4ult 这个答案对你有帮助吗?
    猜你喜欢
    • 1970-01-01
    • 2011-01-25
    • 1970-01-01
    • 1970-01-01
    • 2018-02-19
    • 1970-01-01
    • 1970-01-01
    • 2022-01-06
    • 2020-11-28
    相关资源
    最近更新 更多