如何在 BeautifulSoup 中获取选定行的表数据

Question

我正在尝试以编程方式从该网站上抓取所有表格数据 http://www.virginiaequestrian.com/main.cfm?action=greenpages&GPType=8.

理想情况下，这将逐行进行。因此，例如，我可以说抓取每一行的所有表数据，然后能够跳过特定的行。

  from bs4 import BeautifulSoup
import requests

r=requests.get('http://www.virginiaequestrian.com/main.cfm?action=greenpages&GPType=8')
soup=BeautifulSoup(r.content,'lxml')

data = []
info = {}
DataGrid=soup.find('table')
for tr in DataGrid.find_all('tr')[1:]:
    for td in tr.find_all('td')[0]:
            info['Name']=td
    for td in tr.find_all('td')[1]:
            info['City']=td
    for td in tr.find_all('td')[2]:
            td=td.strip().replace(',','')
            info['Phone']=td
    for td in tr.find_all('td')[3]:
            info['more']=td
            data.append(info)

我尝试过切片，虽然它似乎在 tr 级别工作，但一旦我执行循环要求它查找每一行的所有表数据，我只能取回整个值列表。

Answer 1

页面中有多个表格。如果你检查它们，你会发现你想要的数据在第三个。所以代码可能是：

from bs4 import BeautifulSoup
import requests

r=requests.get('http://www.virginiaequestrian.com/main.cfm?action=greenpages&GPType=8')
soup=BeautifulSoup(r.content)

tbl = soup.findAll('table')[2]   # Get third table
for tr in tbl.findAll('tr'):     # Get all rows
    for td in tr.findAll('td'):  # Get all cells of row
        if td.p:
            print(td.p.string)