使用 bs4 进行 Web 抓取输出空结果

Question

我正在抓取，但我遇到了一个网页问题，它给了我空值（我正在寻找值 59.5 和 61） 这是代码

import requests
import lxml
from bs4 import BeautifulSoup

r = requests.get("https://dolarbalanz.com")
soup = BeautifulSoup(r.text, 'lxml')
info = soup.find_all("div", attrs={"class": "marco-dolarcobrar"})
print(info)

输出是一个字符串，它是应该包含我需要的值的 div 类。但是值的特定部分是空的('': '')。问题是什么？这是因为内容是动态的，我应该使用硒吗？如果是这种情况，如何从我的代码中做到这一点？ 谢谢！

埃里克

Answer 1

此数据由 javascripts 呈现。 但是，如果您转到 nextwork 选项卡，您将看到下面的 API，它以 json 格式返回数据。

https://dolarbalanz.com/api/dolarBalanz

import requests
r = requests.get("https://dolarbalanz.com/api/dolarBalanz").json()
print(r['precioCompraVenta'][0]['precioventa'])
print(r['precioCompraVenta'][0]['preciocompra'])

输出：

61
59.5

网络标签：