【问题标题】:.net downloadstring(url) returning 503 error suddenly.net downloadstring(url) 突然返回 503 错误
【发布时间】:2011-06-28 04:21:28
【问题描述】:

我有一个简单的函数可以从特定页面的以下代码中抓取突然出现 503 错误的网页:

try
{
  WebClient client = new WebClient();
  client.Proxy = null;
  string webhtml = client.DownloadString(strURL);
  client.Dispose();
  return (webhtml);
}

当我在 IE 或 FF 中输入 URL 时,该 URL 有效,但运行此代码时返回错误。其他网址工作正常。我猜来自 .net 的 http 请求与来自任何一个浏览器的请求有所不同。有什么方法可以更好地模拟基于浏览器的 http 请求?

谢谢。

【问题讨论】:

  • 他们可能会禁止您的请求,因为他们不希望自己的网站被抓取。
  • 可以发网址吗?如果有的话,我可以提供更多帮助。

标签: .net webclient httprequest downloadstring


【解决方案1】:

找到了我在这个网站上寻找的 http 标头。很有用。

http://www.ericgiguere.com/tools/http-header-viewer.html

【讨论】:

  • 试试Fiddler。它拥有您所需要的所有优点。
  • 谢谢,cgatian。我忘了提琴手,但你是对的。那也可以解决我的问题。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2015-06-12
  • 2012-06-16
  • 2012-08-17
  • 1970-01-01
  • 2020-01-26
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多