【问题标题】:Writing a web crawler in Java [closed]用Java编写网络爬虫[关闭]
【发布时间】:2011-07-16 10:06:07
【问题描述】:

我如何用 Java 编写一个页面抓取器来抓取网络并获取与特定主题相关的信息。在搜索 Google 时,我在 youtube 上只找到了一个视频,没有后续部分和 Jeff Heaton 的一本书。如果有人有任何好的链接或知道从哪里开始制作Java页面抓取工具,请您发布它。

【问题讨论】:

  • “bot”是一个不好的词。您应该搜索的是“页面爬虫”或“页面抓取工具”。
  • okay.Sorry.Have chnaged it now
  • 我不久前写了一个多线程网络爬虫,没有使用任何库。也许这对您来说是一个很好的起点:stackoverflow.com/questions/6005137/…

标签: java web-crawler web-scraping


【解决方案1】:

您可以为此使用JSoup 库。 JSoup CookBook 是一个好的开始。

【讨论】:

    猜你喜欢
    • 2011-07-07
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2023-04-01
    • 1970-01-01
    • 2015-06-19
    • 2011-06-07
    相关资源
    最近更新 更多