紧接上文内容(https://www.cnblogs.com/guanguan-com/p/13535351.html),来细化爬虫程序

3.制作爬虫

详细教程可以参考慕课网@大壮老师的课程https://www.imooc.com/video/17518

编写细致化的爬虫文件如下

scrapy抓取豆瓣网细化抓取到的信息(2)

注意代码之间的缩进规则,没有红波浪的下划线即没有错误,鼠标移动到红波浪的下划线位置会提示错误

然后我们到main.py中运行爬虫程序如下,即为成功

scrapy抓取豆瓣网细化抓取到的信息(2)

4.储存内容

(1)在cmd执行程序下输入scrapy crawl douban_spider -o test.json回车

(2)继续输入scrapy crawl douban_spider -o test.csv回车

scrapy抓取豆瓣网细化抓取到的信息(2)

相关文章:

  • 2021-06-19
  • 2022-12-23
  • 2021-04-06
  • 2022-02-17
  • 2021-04-18
  • 2021-10-03
  • 2021-10-05
  • 2021-07-16
猜你喜欢
  • 2021-04-26
  • 2021-10-03
  • 2021-10-05
  • 2021-11-21
  • 2022-01-04
  • 2021-12-30
相关资源
相似解决方案