【问题标题】:How to build lucene index in a mapReduce way?如何以 mapReduce 方式构建 lucene 索引?
【发布时间】:2014-06-04 05:04:40
【问题描述】:

我正在使用 hadoop 构建一个小型图像相似性搜索应用程序。我决定使用LIRE,在this 演示代码中,它使用lucene indexWriter 将索引写入本地磁盘。我现在所做的是让我的减速器生成 LIRE 记录。但是如何让reducers 将这些记录写入HDFS 中的Lucene 索引文件?我在 Google 上搜索并找到了一些工具,如 solrCloud、Blur,但没有好的文档和代码示例来展示如何操作。

有没有人知道一些好的参考资料?

附言。我注意到有一个标题相似的问题,但它是从 3 年前开始的,答案还不清楚。

【问题讨论】:

    标签: hadoop solr lucene indexing mapreduce


    【解决方案1】:

    如果您使用的是 Solr 4.7,则可以选择使用 HDFS 使用风筝吗啉代码进行索引。这是现在 Solr 发行版的一部分 (>4.7)。查看此 JIRA 以获取更多信息。 https://issues.apache.org/jira/browse/SOLR-5729

    也可以看看之前的git仓库https://github.com/markrmiller/solr-map-reduce-example

    【讨论】:

      猜你喜欢
      • 2019-09-25
      • 1970-01-01
      • 2012-07-26
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2012-02-11
      相关资源
      最近更新 更多