一般运行Scrapy项目的爬虫是在命令行输入指令运行的:

先 cd到项目文件目录,在scrapy crawl 爬虫名称

Scrapy在pycharm中运行爬虫项目

这样写还是比较麻烦得,而且也没法调试,Scrapy提供了一个命令行工具

可以这样:

Scrapy在pycharm中运行爬虫项目

在项目得同级目录下创建一个 begin.py  文件中添加 如图两行代码,右键运行begin.py即可

 

还可以这样:

在spider文件中加入以下代码

Scrapy在pycharm中运行爬虫项目

直接右键运行即可

 

相关文章: