如何提取评论中“阅读更多”背后的文字？答案

【问题标题】：How to Extract the texts behind the "Read More" in reviews?如何提取评论中“阅读更多”背后的文字？
【发布时间】：2020-09-23 07:44:35
【问题描述】：

如果我在 python 中使用该类进行提取。它只返回“READ MORE”字符串，它无法获取“READ MORE”后面的文本我的代码是，

extra = []
e = j.find_all('span', {'class' : '_1EPkIx'})
extra.append([k.get_text() for k in e])

然后它返回

[['READ MORE', 'READ MORE', 'READ MORE', 'READ MORE', 'READ MORE', 'READ MORE', 'READ MORE', 'READ MORE']]

你对此有什么想法吗？？？

【问题讨论】：

【解决方案1】：

这种 javascript 事件由 selenium 处理，但不是 beautifulsoup。

import selenium
selenium.webdriver.find_element_by_css_selector('span._1EPkIx').click()

之后你可以获取 webdriver.page_source 并且假设是整个文本

【讨论】：