如何从 url 下载文件而不将其保存到磁盘？

Question

我正在尝试从 url 下载文件并将它们上传到 AWS 中的 S3 存储桶。到目前为止，我最好的方法是将文件保存到磁盘中的临时文件夹并在将其上传到 S3 存储桶后将其删除。

这就是我的做法：

private File downloadFileFromUrl(String fileUrlToUpload) {
    try {
        URL url = new URL(fileUrlToUpload);
        String tempDir = System.getProperty("java.io.tmpdir");
        File file = new File(tempDir + FilenameUtils.getName(url.getPath()));
        FileUtils.copyURLToFile(url, file);
        return file;
    } catch (IOException e) {
        LOGGER.error("Could not download file from: {}!", fileUrlToUpload);
        return null;
    }
}

然后将文件上传到调用downloadFileFromUrl方法的服务中删除。

但是，我正在寻找一种从 url 下载文件并将其直接上传到 S3 存储桶而不将其保存到磁盘的方法。我什至不确定这是否是一种更好的方法，但它似乎比将某些内容保存到磁盘更清洁。

我也对其他方法持开放态度。谢谢！

Answer 1

可能，在这种情况下，最好的方法是使用AWS Signed URL 上传和下载文件 - 而不是充当代理。

如果你坚持自己下载文件，你可以这样做：

BufferedInputStream bufferedInputStream = new BufferedInputStream(url.openStream());
StringBuilder sb = new StringBuilder();
byte[] buffer = new byte[1024];
while ((buffer = bufferedInputStream.read(buffer)) != -1) {
    sb.append(new String(buffer));
}

sb - 包含文件的内容。

你也可以使用Apache Commons Lang：

IOUtils.toString(new InputStreamReader(url.openStream()));