抓取时如何更改apache nutch的配置

Question

我的爬虫（apache nutch2.2.1）处于爬取状态。我必须在 nutch-site.xml 中更改爬虫的一些配置。我了解到，爬虫在运行状态下，避免改变配置。

我的问题是。

1. 我们可以在运行状态下更改爬虫的配置吗？
2. 如果是，那么在对爬虫进行一些更改时是否有任何阳离子？
3. 或者如果我们不能改变爬虫的配置，那么如果改变配置，它的缺点是什么？

Answer 1

Nutch 2.2.1 的爬取是一个循环的 Hadoop 作业，我们可以在运行时更改 Nutch 爬虫的配置，但是更改只会在下一个 Hadoop 作业中激活。例如，如果您在生成作业期间更改配置，则更改会在获取作业时激活。

希望这会有所帮助，

乐国岛