【发布时间】:2020-03-28 18:30:34
【问题描述】:
我刚刚完成了一些编程入门课程,主要是 Python,我正在尝试编写一个基本的抓取工具来从特定站点提取使用过的特斯拉的数据(稍后添加差异站点并存储在数据库中并执行使用 SQL 进行一些数据分析等),我马上就遇到了问题。
我正在尝试提取 8 条信息,最后 3 条信息在同一个 div 中,而不是循环显示每辆车的信息(上市日期、位置和里程),而是在每个循环中将所有汽车的信息吐回.
我知道问题出在我的循环代码中,从“for listing_details”开始,但每当我尝试调整不同的元素时,我都会用回溯错误将其炸毁。
这是下面的代码,我真诚地希望有人能指出我明显的疏忽!
from bs4 import BeautifulSoup
import requests
source = requests.get('https://onlyusedtesla.com/listings/?_sft_model=model-s&_sfm_out_asking_price=699+150004&_sfm_state=Arizona').text
soup = BeautifulSoup(source, 'lxml')
for listing in soup.find_all('div', class_='out-list-item'):
listing_info = listing.h2.a.text
listing_separate = listing_info.split("/")
for list in listing_separate:
print(list)
price_info = listing.find('div', class_='asking-price')
price = price_info.text
p = price.split(' ')
print(p[3], p[10])
for listing_details in soup.find_all('div', class_='out-summary-data small-12 medium-4 columns'):
details = listing_details
listing_date = details.find_all("p")[0]
ld = listing_date.text
print(ld)
location = details.find_all("p")[1]
loc = location.text
print(loc)
mileage = details.find_all("p")[3]
mil = mileage.text
print(mil)
【问题讨论】:
-
你的预期输出是什么?
标签: python python-3.x loops web-scraping beautifulsoup