在 Python 中如何抓取页面每个链接上的哪些内容变化？

Question

在 Python 3 中，我需要在 this page 或 this 上抓取一个表

它是具有“Descrição”、“Tipo”和“Valor do Bem”列的表

我做了一个检查元素，表格是：

<table class="table table-stripped dvg-table responsive">

但是在显示请求的内容时，并没有出现这个项目

这是一个有政治概况的网站，所以标题会相对固定。永远在变化的底面

显然，标头中的站点链接就是请求找到的内容。但是表的内容以不同的方式访问。对于每个政治家，该网站是否会查看指向该表格的另一个链接？

我这样做了：

from bs4 import BeautifulSoup
import requests

requisicao = requests.get('http://divulgacandcontas.tse.jus.br/divulga/#/candidato/2010/14417/AC/10000000001/bens')
# requisicao.content
sopa = BeautifulSoup(requisicao.content, "html.parser")
sopa.find("table", {"class": "table table-stripped dvg-table responsive"})

请问，有人知道我如何访问此表吗？

Answer 1

您可以通过以下请求获取所需的数据：

import requests
import json

url = "http://divulgacandcontas.tse.jus.br/divulga/rest/v1/candidatura/buscar/2016/71072/2/candidato/250000004975"
response = requests.get(url)
print(response.json())

您可以获得更多具体信息

print(response.json()['bens'])

或

print(response.json()['partido'])

等等……