别和我说selenium中的webdriver用driver.page_source,我就是不想把整篇HTML文档每次都全部提出来做Soup。因为,对下面这样左右结构的论坛而言,每次内容的改变对于整个HTML页面而言实在是一个很小的部分,如果我想把整个网站所有MOOC课程评论爬下来的话,将要做多少无用功!
selenium中webdriver的局部HTML提取
     然而,百度遍中文内容并无解答。于是翻出去Google了一把,发现世界上已有前辈对该问题进行了解答: 
selenium中webdriver的局部HTML提取

     主要思路是使用get_attribute方法,提取innerHTML,如下:
selenium中webdriver的局部HTML提取
     经验证,一切OK:
selenium中webdriver的局部HTML提取

相关文章:

  • 2022-12-23
  • 2021-09-22
  • 2022-12-23
  • 2021-10-08
  • 2022-12-23
  • 2021-05-22
猜你喜欢
  • 2021-09-15
  • 2022-12-23
  • 2022-12-23
  • 2022-03-01
  • 2021-06-09
  • 2021-09-12
  • 2021-07-16
相关资源
相似解决方案