【发布时间】:2017-11-11 18:57:53
【问题描述】:
我收到了错误:
编写爬虫脚本时没有定义yelp_soup
我不知道为什么,这是从 udemy 课程复制的代码,但它适用于他们。这是为什么呢?
这是 github 的链接,我从那里复制它作为最后的手段,但不起作用:
有什么建议吗?我尝试了一些想法,但没有任何改变?
【问题讨论】:
标签: python python-3.x web-scraping yelp
我收到了错误:
编写爬虫脚本时没有定义yelp_soup
我不知道为什么,这是从 udemy 课程复制的代码,但它适用于他们。这是为什么呢?
这是 github 的链接,我从那里复制它作为最后的手段,但不起作用:
有什么建议吗?我尝试了一些想法,但没有任何改变?
【问题讨论】:
标签: python python-3.x web-scraping yelp
为了达到这个目的,我做了一些修改。运行它,如果您遇到更多问题,请告诉我:
import requests
from bs4 import BeautifulSoup
base_url = 'https://www.yelp.com/search?find_desc=Restaurants&find_loc='
loc = 'Newport+Beach,+CA'
page = 10
url = base_url + loc + "&start=" + str(page)
yelp_soup = BeautifulSoup(requests.get(url).text, 'lxml')
for biz in yelp_soup.find_all(class_='biz-listing-large'):
title = biz.find_all(class_='biz-name')[0].text
address = biz.select('address,.biz-parent-container')[0].text
phone = biz.find_all(class_='biz-phone')[0].text
print(title.strip(),address.strip(),phone.strip())
【讨论】:
requests 和BeautifulSoup 库吗?