用 Beautiful Soup 抓取 Facebook 的点赞、评论和分享

Question

我想用 Beautiful soup 和 Python 收集点赞、cmets 和分享的数量。 我写了一个代码，但它返回给我一个空列表，我不知道为什么：

这是代码：

from bs4 import BeautifulSoup
import requests


website = "https://www.facebook.com/nike"

soup = requests.get(website).text
my_html = BeautifulSoup(soup, 'lxml')


list_of_likes = my_html.find_all('span', class_='_81hb')
print(list_of_likes)

for i in list_of_likes:
    print(i)

cmets 和 likes 也是如此。我该怎么办？

Answer 1

Facebook 使用客户端渲染...这意味着在您获得的 HTML 文档中并将其存储在 soup 变量中只是 javascript 代码，仅当您在其中显示内容时才会实际呈现内容浏览器。

Answer 2

或许，您可以尝试使用Selenium。