AttributeError：'NoneType' 对象在 tbody 中没有属性 'find'

Question

我是 python 领域的新手，并尝试设置一个网络抓取工具。所以我正在试验一些代码。

import requests
import bs4

website = requests.get("https://www.hltv.org/stats/teams")

soup = bs4.BeautifulSoup(website.text, "html.parser")

leaderboard = soup.find("table", {id: "stats-table player-ratings-table"})
tbody = leaderboard.find("tbody")

for tr in tbody.find.all('tr'):
    team = tr.find.all('td')[0].text.strip()
    maps = tr.find.all('td')[1].text.strip()
    kd = tr.find.all('td')[3].text.strip()
    rating = tr.find.all('td')[4].text.strip()

    print(team, maps, kd, rating)

我收到以下错误，有什么帮助吗？我用的是 2.7。

 File "/Users/*****/Python/New Webscraping/WebS.py", line 11, in <module>
    tbody = leaderboard.find("tbody")
AttributeError: 'NoneType' object has no attribute 'find'

Process finished with exit code 1

Answer 1

尝试以下操作以获得所需的输出。我通过像[1:] 那样索引它来忽略第一个tr，因为其中没有td。而且BeautifulSoup中没有.find.all()这样的方法。您可以改用.find_all() 或.findAll()。

import requests
from bs4 import BeautifulSoup

res = requests.get("https://www.hltv.org/stats/teams")
soup = BeautifulSoup(res.text, "html.parser")
for tr in soup.find("table",class_="player-ratings-table").find_all("tr")[1:]:
    team = tr.find_all('td')[0].text.strip()
    maps = tr.find_all('td')[1].text.strip()
    kd = tr.find_all('td')[3].text.strip()
    rating = tr.find_all('td')[4].text.strip()
    print(team, maps, kd, rating)

Answer 2

查看您尝试抓取的网站的源代码，您查找的关键字似乎不是id，而是class：

<table class="stats-table player-ratings-table">

所以你应该把你的代码改成：

leaderboard = soup.find("table", {'class': "stats-table player-ratings-table"})

您还应该将find.all 更改为findAll。

Answer 3

阅读错误是一项在编程时会大大受益的技能。对您而言，错误的重要部分是：

AttributeError: 'NoneType' object has no attribute 'find' 上的line 11 ...WebS.py

以及引发错误的实际代码行：tbody = leaderboard.find("tbody")。

属性find在该行的引用leaderboard上被调用，错误告诉你NoneTypes没有find，所以这意味着leaderboard == None。

为了进一步分解错误，如果您仍然感到困惑（对不同的错误），您应该阅读该冒号之前的内容，在本例中为 AttributeError。但最常见的情况是，您应该在 Google 上搜索错误。

Answer 4

这意味着有些项目没有团队或地图或孩子或评级。 你应该做'错误处理'

import requests
import bs4

website = requests.get("https://www.hltv.org/stats/teams")

soup = bs4.BeautifulSoup(website.text, "html.parser")

leaderboard = soup.find("table", {id: "stats-table player-ratings-table"})
tbody = leaderboard.find("tbody")

for tr in tbody.find.all('tr'):
    try:
        team = tr.find.all('td')[0].text.strip()
    except AttributError:
        team = ''
    
    try:
        maps = tr.find.all('td')[1].text.strip()
    except AttributError:
        maps = ''

    try:
        kd = tr.find.all('td')[3].text.strip()
    except AttributError:
        kd = ''

    try:
        rating = tr.find.all('td')[4].text.strip()
    except AttributError:
        rating = ''

    print(team, maps, kd, rating)