最近在练习爬虫的时候, 爬取网站时常常需要模拟浏览器去访问, 但是使用request发送请求时, 需要填写headers也就是头部信息, 但我又是一个懒得复制的人, 尝试了很多软件, 最后找到了一款特别适合我自己的, 方便快捷, 话不多说, 放链接
下载地址:
https://wws.lanzous.com/b01nl5lxa
密码:dbjg
当然想用最新版或者不想用我的的话, 可以去Google商店自行下载
安装:
如果是去谷歌商店自己下载的话, 点击下载之后就可以了, 如果时使用压缩包添加扩展程序的话, 可以执行以下步骤:
- 解压压缩包
- 打开
Google扩展中心, 按下图方式点击或直接在地址栏中输入chrome://extensions/ - 点击
加载已解压的扩展程序选择刚才解压的文件夹进行添加就可以了
使用方法:
-
选择插件点击
OFF按键打开抓包程序 -
将刚才安装的谷歌应用改为开启状态
-
随便访问一个网站, 可以看到已经抓到数据了
-
点击
send按钮发送抓到的请求, 可以看到已经请求到数据了 -
然后就可以一键生成python代码了
-
点击
Generate Code, 选择python->request代码就生成好了 -
最后点击
Copy to Clipboard就可以复制到粘贴板上了
运行代码测试
注意
使用一键生成代码是不会复制Cookie的, 如果使用到了需注意