在spider中 主动关闭爬虫:

self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)

在pipeline 和downloadermiddlewares 主动关闭爬虫:

spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)

相关文章:

  • 2021-10-16
  • 2021-10-04
  • 2021-07-19
  • 2022-01-16
  • 2021-11-19
猜你喜欢
  • 2021-09-11
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-06-02
  • 2021-11-26
相关资源
相似解决方案