【发布时间】:2014-02-09 00:18:09
【问题描述】:
我正在尝试创建 python 智能代理服务器,它应该能够将大型请求正文内容从客户端流式传输到一些内部存储(可能是 amazon s3、swift、ftp 或类似的东西)。在流式传输服务器之前,应该请求一些内部 API 服务器来确定上传到内部存储的参数。主要限制是它应该使用方法 PUT 在一个 HTTP 操作中完成。它也应该异步工作,因为会有很多文件上传。
什么解决方案允许我从上传内容中读取块并开始将这些块流式传输到内部存储,因为用户将上传整个文件?我知道的所有 python web 应用程序都会等待整个内容,然后再将管理权交给 wsgi 应用程序/python web 服务器。
我找到的解决方案之一是 tornado fork https://github.com/nephics/tornado 。但它是非官方的,tornado 开发人员并不急于将其包含在主分支中。 那么您可能知道我的问题的一些现有解决方案吗?龙卷风?扭曲?事件?
【问题讨论】:
-
如果使用
urllib和一堆线程/greenlets 有什么具体问题?或者这是一个普遍的“什么是最好的解决方案”问题? -
@Carpetsmoker 看来我问错了问题。我已经澄清了描述:“什么解决方案允许我从上传内容中读取块并开始将这些块流式传输到内部存储,因为用户将上传整个文件。我知道的所有解决方案都会等待整个内容,然后再对 wsgi 应用程序进行管理/ python网络服务器"
标签: python asynchronous twisted tornado gevent