用python抓取瓜子二手车数据

python selenium

瓜子二手车数据的抓取

一、使用selenium与phantomjs爬取瓜子网js生成的动态数据信息

• 1，phantomjs简介

phantomjs安装的下载地址http://phantomjs.org/download.html

• 2.selenium简介

• 3.selenium的安装

打开cmd-----pip install selenium

• 4.创建浏览器

通过dirver.get方法获取浏览器加载完成后的源码

• 5.利用beautifulsoup对网页解析

• 6.获取需要的字段