先尝试爬去一个电影的详情页

start_urls = ['https://www.80s.tw/movie/676']

然后再response中提取我们需要的数据,为了方便调试我们可以调用scrapy shell将页面数据缓存下来,不用我们每次都去请求;

python scrapy学习笔记(二)

按道理显示的是上面这样,会有一大段信息返回,这时候就可以直接在命令行中进行数据获取调试了,比如像这样

python scrapy学习笔记(二)

python scrapy学习笔记(二)

这样我们就提取出我们需要的数据了。



相关文章: