【问题标题】:Extracting web page with jquery content data使用 jquery 内容数据提取网页
【发布时间】:2015-09-23 16:03:35
【问题描述】:

我需要从特定网站中提取数据,比如网站中的评论部分。我已经尝试过使用 jsoup 提取 html 文本,但由于评论部分使用了 jquery,它只提取 jquery 代码而不是 cmets 文本。有什么建议可以解决我的问题吗?谢谢你

【问题讨论】:

  • 为什么不为此目的使用 xsl 转换?

标签: java jquery html dom jsoup


【解决方案1】:

您可以使用 HTMLUnit 来呈现包含所有需要内容的页面,然后从构建 DOMTree 中提取数据。 Here您可以找到有关如果 AJAX 无法运行 OOTB 时该怎么办的信息。

【讨论】:

  • 把我带到这个兄弟:找不到声明的字段类 org.apache.http.impl.client.HttpClientBuilder.sslContext
  • 谢谢兄弟它成功了。现在我要解决我的第一个问题
  • 现在您需要等到 cmets 部分呈现并从中提取数据。
  • 在真实浏览器中渲染是否也会出现js异常?
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2016-05-17
  • 1970-01-01
  • 1970-01-01
  • 2021-01-14
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多