Python BeautifulSoup：相当于浏览器的nod​​e.innerText

Question

我一直在尝试使用 pythons beautifulsoup 库从抓取的站点中提取一些数据。我发现搜索节点并在其上使用 .text 来获取其内容确实有效，但不知何故弄乱了格式，并且字符串最终没有像在网页上那样被格式化。我发现有一种在浏览器中使用 .innerText 的方法，它返回一些 html 文本的字符串，就好像用户会复制粘贴它一样。在 python 中是否有等价物，还是我真的需要在浏览器中运行它？

Answer 1

你可以用beautifulsoup做到这一点，你只需在你的汤对象后面使用这个.text就可以了

from bs4 import BeautifulSoup
import requests

r = requests.get("https://YourUrl.com")
soup = BeautifulSoup(r.text, "html.parser")
result = soup.find_all('body') # this will give you everything in body, 
# if you want anything else, you can specify by adding a dictionary into the parameters