【发布时间】:2011-07-16 10:06:07
【问题描述】:
我如何用 Java 编写一个页面抓取器来抓取网络并获取与特定主题相关的信息。在搜索 Google 时,我在 youtube 上只找到了一个视频,没有后续部分和 Jeff Heaton 的一本书。如果有人有任何好的链接或知道从哪里开始制作Java页面抓取工具,请您发布它。
【问题讨论】:
-
“bot”是一个不好的词。您应该搜索的是“页面爬虫”或“页面抓取工具”。
-
okay.Sorry.Have chnaged it now
-
我不久前写了一个多线程网络爬虫,没有使用任何库。也许这对您来说是一个很好的起点:stackoverflow.com/questions/6005137/…
标签: java web-crawler web-scraping