【问题标题】:how to pipe a network image to an s3 upload link using request.js如何使用 request.js 将网络图像通过管道传输到 s3 上传链接
【发布时间】:2015-08-04 22:25:29
【问题描述】:

我正在尝试从 url 获取照片并将其传送到上传到 amazon s3 存储桶的 PUT 链接中。这个 PUT 链接是一个预签名的上传 url,所以需要做的就是 PUT 请求的正文需要包含照片数据。

我尝试了以下方法,但它似乎不起作用 - 它似乎没有通过 get 中的任何数据。

var request = require('request');

request.get('https://SomeUrlThatRedirectsAFewTimes.com').pipe(request.put('https://mys3uploadlink.com'));

【问题讨论】:

  • 在 PUT 到 S3 时,对于任意大小有一些有趣的要求。如果可能,我建议使用 AWS 开发工具包。否则,您必须自己实现所有分段。不幸的是,它不像管道那么简单。 AWS 开发工具包确实支持管道。
  • 哦,好的,有使用管道方法的例子吗?是新的 AWS.S3().pipe() 吗?
  • 不,你创建了一个新的 put 请求,但不是磁盘上的文件,而是一个可读的流。

标签: node.js node-request


【解决方案1】:

使用 AWS 开发工具包,您可以将流作为上传的 Body 传递。所以我只是将流保存到一个变量中,并将其作为正文传递。您可以查看此here 的文档。

我自己从来没有这样做过,但我假设你会这样做:

function upload(cb) {
   var s3 = new AWS.S3(...);
   var stream = request.get(myURL);
   stream.on('error', cb)
         .on('close', cb);
   var params = {Bucket: 'bucket', Key: 'key', Body: stream};
   var options = {partSize: 10 * 1024 * 1024, queueSize: 1};
   s3.upload(params, options, cb);
}

【讨论】:

    猜你喜欢
    • 2016-09-17
    • 2021-12-29
    • 2016-03-14
    • 1970-01-01
    • 2011-08-15
    • 1970-01-01
    • 2019-10-26
    • 2019-01-27
    相关资源
    最近更新 更多