Datawhale爬虫学习Task 4

作业要求

1.了解ajax加载
2.通过chrome的开发者工具,监控网络请求,并分析
3.用selenium完成爬虫

用selenium爬取某网热点

Datawhale爬虫学习Task 4
信息来源

爬取某视频评论

Datawhale爬虫学习Task 4
信息来源

知乎爬取

用requests库实现,不能用selenium网页自动化
提示:该链接需要登录,可通过github等,搜索知乎登录的代码实现,并理解其中的逻辑,此任务允许复制粘贴代码
与上面ajax加载类似,这次的ajax加载需要用requests完成爬取,最终存储样式随意,但是通过Chrome的开发者工具,分析出ajax的流程需要写出来
Datawhale爬虫学习Task 4
Datawhale爬虫学习Task 4
Datawhale爬虫学习Task 4
Datawhale爬虫学习Task 4Datawhale爬虫学习Task 4

相关文章:

  • 2021-12-06
  • 2021-07-03
  • 2021-06-08
  • 2021-12-14
  • 2021-12-04
猜你喜欢
  • 2021-03-31
  • 2021-08-10
  • 2021-06-15
  • 2021-06-18
  • 2021-07-27
  • 2021-04-29
  • 2021-12-06
相关资源
相似解决方案