jackwuyongxing

服务器端做爬虫我是使用Jsoup这个jar包来对网页源码进行分析,但是在使用getElementsByClass获取新闻列表的时候,却始终为空。我直接查看了网页源码,发现源码上根本没有新闻列表的信息。然后我使用firebug去分析新闻列表的ajax地址,直接访问改地址,Access denied。。。

使用firebug分析请求头信息发现居然还有我的qq号在Cookie属性里面,直接复制请求头的所有信息,放入HttpURLconnection的setProperty里面,再次访问,成功获取qq新闻列表的json格式信息。

分类:

技术点:

相关文章:

  • 2021-12-05
  • 2021-11-17
  • 2021-11-11
  • 2021-12-28
  • 2021-11-15
  • 2021-11-19
猜你喜欢
  • 2021-10-05
  • 2021-09-18
  • 2018-04-25
  • 2021-10-08
  • 2021-08-18
  • 2021-04-14
  • 2021-11-27
相关资源
相似解决方案