【问题标题】:How to curl ajax page? [duplicate]如何卷曲ajax页面? [复制]
【发布时间】:2015-12-02 08:14:37
【问题描述】:

我想知道有没有办法爬取通过 ajax 显示数据的页面。

特别想爬取这个website data

需要以上述网站为例进行详细解答。

【问题讨论】:

  • 检查使用浏览器开发者工具完成的 ajax 请求,用curl 发送它们?
  • 为什么不只抓取使用 ajax 请求加载的链接?
  • @jerodev 你能提供一个链接吗?

标签: php web-crawler


【解决方案1】:

我看到请求是通过 HTML 中的 $.getJSON() 完成的,这就是为什么它在 firebug 控制台中不可见,这里是 link 的示例

【讨论】:

  • 正在通过上面的链接获取主页,让我知道完整的详细信息以获取上面的链接和后续页面数据。
  • 请提供后续页面解决方案,以便我接受这个答案。
  • 实际上我没有任何解决方案,我只是回答您提供该页面中的一个 ajax 链接的请求 - “@jerodev 你能提供其中一个链接吗?”
猜你喜欢
  • 1970-01-01
  • 2012-12-15
  • 1970-01-01
  • 2020-01-08
  • 2015-08-05
  • 1970-01-01
  • 2011-10-08
  • 2011-03-02
  • 1970-01-01
相关资源
最近更新 更多