WebClient 下载文件损坏答案

【问题标题】：WebClient download file corruptedWebClient 下载文件损坏
【发布时间】：2019-01-28 08:28:36
【问题描述】：

我正在尝试使用 C# WebClient 下载文件。

这里是网址： http://www.czce.com.cn/cn/DFSStaticFiles/Future/2018/20180821/FutureDataClearParams.txt

如果我手动下载它，一切看起来都很好。但是，如果我使用 WebClient 下载文件，则内容已损坏。我尝试使用许多不同的编码方法。下面是重现问题的最少代码。

class Program
{
    static void Main(string[] args)
    {
        WebClient client = new WebClient();
        client.Proxy = new WebProxy("some company proxy");
        string url = "http://www.czce.com.cn/cn/DFSStaticFiles/Future/2018/20180821/FutureDataClearParams.txt";
        client.DownloadFile(url, @"D:\file.txt");
    }
}

问题现已解决，感谢大家的帮助（@Gauravsa，@John）。该文件确实是 GZipped。

解决办法是：

public class MyWebClient : WebClient
{
    protected override WebRequest GetWebRequest(Uri address)
    {
        HttpWebRequest request = base.GetWebRequest(address) as HttpWebRequest;
        request.AutomaticDecompression = DecompressionMethods.Deflate | DecompressionMethods.GZip;
        return request;
    }
}

【问题讨论】：

你能解释一下它是如何损坏的吗？
请发布一些代码，最好是minimal reproducible example。
你是如何确定文件的编码是 UTF-8 的？
WebClient.Encoding 用于上传，而不是下载。下载时使用服务器设置的编码代替，所以这是一个红鲱鱼。
@Lasse That 和 DownloadFile 可以正常工作。我得到的文件与通过网络浏览器下载的文件完全相同（因此我对这个问题投了反对票）。

标签： c# .net webclient downloadfile

【解决方案1】：

使用WebClient.DownloadFile:

using (WebClient client = new WebClient())
{
    client.DownloadFile("http://www.czce.com.cn/cn/DFSStaticFiles/Future/2018/20180821/FutureDataClearParams.txt", 
                        @"c:\Users\Jon\Test\foo.txt");
}

或

using (WebClient client = new WebClient())
{
        client.DownloadFile("http://www.czce.com.cn/cn/DFSStaticFiles/Future/2018/20180821/FutureDataClearParams.txt", 
                            "c:\\Users\\Jon\\Test\\foo.txt");
}

您可以执行其他文件 I/O 操作，例如

if(!Directory.Exists("c:\\Users\\Jon\\Test\\")
    Directory.CreateDirectory("c:\\Users\\Jon\\Test\\");

...

【讨论】：

我试过了，如果你打开 foo.txt，一切都被破坏了。对比手动下载的结果
使用 Fiddler 找出 HTTP 级别发生的情况。您需要找出服务器需要什么作为输入来响应正确的内容。
@David 你能改进你的问题，以便人们可以给你有用的答案吗？ DownloadFile 对我来说很好用，并且与通过 Google Chrome 下载的文件逐字节相同。
@David：服务器可能会返回 GZip 格式的文件
可能的解决方案：stackoverflow.com/questions/26206141/…

【解决方案2】：

我测试它并工作。

例如，看看这个控制台应用程序。它从 URL 下载您的文件，并将其作为 file.txt 保存到桌面。：

class Program
{
    static void Main(string[] args)
    {
    WebClient client = new WebClient();
                string address = "http://www.czce.com.cn/cn/DFSStaticFiles/Future/2018/20180821/FutureDataClearParams.txt";
                // Save the file to desktop for debugging
                var desktop = Environment.GetFolderPath(Environment.SpecialFolder.Desktop);
                string fileName = desktop + "\\file.txt";
                client.DownloadFile(address, fileName);
    }
}

【讨论】：

这不应该作为评论发布吗？如“嗯，它对我来说很好用。你能发一个minimal reproducible example 来证明这个问题吗？”
@John，我已经用一个最小的完整和可验证的示例更新了代码，除了代理部分，如果有帮助，我还附上了损坏的结果