【问题标题】:Apify task suddenly returning 403 and 503 errors after working for months工作几个月后,Apify 任务突然返回 403 和 503 错误
【发布时间】:2020-03-13 06:55:55
【问题描述】:

不知道为什么会这样。几个月来我每天都在使用它,今天早上它突然坏了。它返回以下错误。

CrawlerError:无法打开页面(状态:失败,url:https://history.com/this-day-in-history/,lastResourceError:{“errorCode”:403,“errorString”:“下载时出错https://history.com/this-day-in-history/ - 服务器回复:服务不可用”, "id":1,"status":503,"statusText":"服务不可用","url":"https://history.com/this-day-in-history/"}, lastResourceTimeoutResponse: null)

代码中没有任何变化,网站仍然正常运行。有什么原因可能会突然停止工作吗?

【问题讨论】:

    标签: web-scraping apify


    【解决方案1】:

    这可能意味着该网站现在将您识别为机器人并阻止了您的请求。我会查看this docs section 中的一些文章。我们也在制定防刮指南。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-02-18
      • 2018-11-20
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-02-25
      相关资源
      最近更新 更多