【发布时间】:2015-01-10 17:00:07
【问题描述】:
在 Scarpy 中是否有任何方法可以安排我们的蜘蛛在某个时间运行?
【问题讨论】:
-
您在哪个操作系统中工作? (win, Unix, Mac)
-
当然,您可以从 cron 或任务调度程序运行它。
-
我使用的是 ubuntu 14.04。
-
我在其中使用了时间延迟 { time.sleep(120) },但有一段时间它超时了。
标签: python web-scraping scrapy screen-scraping scrapyd