要抓指定网站的内容,首先要知道它对应的链接,这里推荐使用的Fiddler抓包软件分析,走HTTP的模式大体归纳为两种请求方式,GET和PSOT,单纯GET请求的,直接丢链接过去就能拿到数据,POST的有封装表单。手动在浏览器上刷一下目标站点的链接,用Fiddler监控找到对应的实际请求链接,以表单形式提交的链接,分析出每个参数所代表的意思,很快就能上手请求到对应数据。
另外需要初步测试下该站点的防御机制,要不要账号,对IP有没有限制,这些都可以借用提琴手来达到目的。
例如目标站点:https://www.atobo.com.cn/Companys/