使用数据导入处理程序将数据上传到 Solr

Question

您好，我正在努力使用数据导入处理程序将我的数据上传到 solr。我正在做的是使用服务器文件夹中的命令启动 solr 服务器

solr start

然后，这允许我在我的计算机上打开一个本地主机，其中显示了我之前设置的核心。

然后我编辑了文件 solrconfig.xml 和 schema.xml

在 solrconfig.xml 中，我将以下代码行放入

<lib dir="${solr.install.dir:../../../..}/dist/" regex="solr-dataimporthandler-.*.jar" /> 

<schemaFactory class="ClassicIndexSchemaFactory"/>

和

<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler" startup="lazy">
<lst name="defaults">
    <str name="config">data-config.xml</str>
</lst>

在 schema.xml（从托管模式文件重命名）我添加了

<field name="_version_" type="plong" indexed="true" stored="true"/>
<field name="id" type="string" indexed="true" stored="true" required="true"/>
<field name="title" type="string" indexed="true" stored="true"/>
<field name="revision" type="pint" indexed="true" stored="false"/>
<field name="user" type="string" indexed="true" stored="false"/>
<field name="userId" type="pint" indexed="true" stored="false"/>
<field name="text" type="text_en" indexed="true" stored="false"/>
<uniqueKey>id</uniqueKey>

然后我使用以下代码创建了一个 data-config.xml 文件

<dataConfig>
<dataSource type="FileDataSource" encoding="UTF-8"/>
<document>
    <entity name="page"
            processor="XPathEntityProcessor"
            stream="true"
            forEach="/mediawiki/page"
            url="/Volumes/BACKUP/enwiki-latest-pages-articles.xml"
            transformer="RegexTransformer,DateFormatTransformer"
            >
        <field column="id" xpath="/mediawiki/page/id" />
        <field column="title" xpath="/mediawiki/page/title" />
        <field column="revision" xpath="/mediawiki/page/revision/id" />
        <field column="user" xpath="/mediawiki/page/revision/contributor/username" />
        <field column="userId" xpath="/mediawiki/page/revision/contributor/id" />
        <field column="text" xpath="/mediawiki/page/revision/text" />
        <field column="timestamp" xpath="/mediawiki/page/revision/timestamp" dateTimeFormat="yyyy-MM-dd'T'hh:mm:ss'Z'" />
        <field column="$skipDoc" regex="^#REDIRECT .*" replaceWith="true" souceColName="text"/>
    </entity>
</document>

在这里，我希望索引的 xml 存储在我计算机的外部硬盘驱动器上。在我在浏览器中输入以下内容之前，一切似乎都运行良好

http://localhost:8983/solr/wiki/dataimport?command=full-import

如下所示

有谁知道如何解决这个问题？我正在使用 solr 7.7，Stackoverflow 上的所有问题似乎都是针对早期版本的。我要遵循的教程是https://www.youtube.com/watch?v=2VkFQTqrRYo&t=310s，它很旧，所以我认为这就是我收到此错误的原因。

Answer 1

原来我需要做的就是在 solrconfig.xml 中进行更改：

<updateRequestProcessorChain name="add-unknown-fields-to-the-schema" default="${update.autoCreateFields:false}"

（假而不是真）

Answer 2

错误说明了一切...clasNotFoundException...检查您的类路径，看起来 DataImportHandler 不在您的类路径中...

<lib dir="../../../dist/" regex="apache-solr-dataimporthandler-.*\.jar" />

配置更改后重启码头服务器。