项目中维护爬虫

由于服务器会不定期的给重启一下,这样每次都要登录服务器去手动在schedule下爬虫很麻烦,所以想办法在服务器重启后自己去调取起爬虫的程序。

首先,爬虫是用scrapyd管理调度的,所以服务器启动后,先执行scrapyd.exe

然后,再调度spider

 

第一步:start_scrapyd.bat

bat----服务器重启后爬虫自动运行

第二步:schedule.bat

bat----服务器重启后爬虫自动运行

 

第三步:设置开机启动task

windows server 2008服务器,打开server manager,

bat----服务器重启后爬虫自动运行

 

 

创建新的task 

bat----服务器重启后爬虫自动运行

配置general | Triggers | Actions

general 选项填写任务名

bat----服务器重启后爬虫自动运行

Triggers选项,选择At Startup开机启动,任务启动延时

bat----服务器重启后爬虫自动运行

 

Actions选项添加bat文件路径

bat----服务器重启后爬虫自动运行

 

 添加完成后如下图信息

bat----服务器重启后爬虫自动运行

 

相关文章:

  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-05-29
  • 2022-12-23
  • 2021-05-29
猜你喜欢
  • 2022-12-23
  • 2022-12-23
  • 2021-11-18
  • 2021-12-03
  • 2021-09-09
  • 2022-12-23
  • 2021-05-24
相关资源
相似解决方案