使用 python、BeautifulSoup 和 pandas 'read_html' 进行网页抓取的问题

Question

感谢大家的帮助！

我正在抓取一张关于 covid19 的数据表并将其推送到 pandas 数据框中，它一直工作到今天早上。

那个代码：

import pandas as pd
import requests
from bs4 import BeautifulSoup


url = 'https://www.worldometers.info/coronavirus/'

req = requests.get(url)

page = BeautifulSoup(req.content, 'html.parser')

table = page.find_all('table',id="main_table_countries_today")[0]

print(table)

df = pd.read_html(str(table))[0]

今天早上我开始收到下一个错误：

ValueError: No tables found matching pattern '.+'

你能帮我弄清楚吗？

Answer 1

尝试将最后一行更改为：df = pd.read_html(str(table), displayed_only=False)[0] url 处的表头已将其样式属性更改为 style="width:100%;margin-top: 0px !important;display:none;"。以前它没有设置“显示”标签。