NLP 解析一个查询中包含的多个问题

Question

如果来自用户的单个查询包含属于不同类别的多个问题，如何识别、拆分和解析它们？

例如 -

User - what is the weather now and tell me my next meeting  
Parser - {:weather => "what is the weather", :schedule => "tell me my next meeting"}  

解析器识别问题属于两个不同类别的句子部分

User - show me hotels in san francisco for tomorrow that are less than $300 but not less than $200 are pet friendly have a gym and a pool with 3 or 4 stars staying for 2 nights and dont include anything that doesnt have wifi  
Parser - {:hotels => ["show me hotels in san francisco",  
          "for tomorrow", "less than $300 but not less than $200",
          "pet friendly have a gym and a pool",
          "with 3 or 4 stars", "staying for 2 nights", "with wifi"]}

解析器只识别属于一个类别的问题，但有额外的步骤来微调答案，并创建了一个根据要采取的步骤排序的数组

据我了解，这需要句子分割器、多标签分类器和共同参考解析

但是我遇到的句子分割器在很大程度上依赖于语法、标点符号。

多标签分类器，就像一个训练有素的朴素贝叶斯分类器在大多数情况下都有效，但由于它们是多标签的，大多数时候为明显属于一个类别的句子输出多个类别。仅依靠数组输出来检查存在的标签会失败。

如果使用多类分类器，也可以检查可能类别的数组输出，但显然它们不能准确地告诉句子的不同部分，更不用说以何种方式进行下一步了。

作为第一步，我如何调整句子分割器以在没有任何严格语法规则的情况下正确分割句子。良好的准确性将有助于分类。

Answer 1

作为第一步，我如何调整句子分词器以在没有任何严格语法规则的情况下正确分割句子。

我建议您直接使用解析树（依赖解析器或选区解析），而不是这样做。

这里我展示了依赖解析的输出，你可以看到这两个段是通过一个“CONJ”箭头分开的：

（来自这里：http://deagol.cs.illinois.edu:8080/）

我会尝试的另一个解决方案是 ClausIE： https://gate.d5.mpi-inf.mpg.de/ClausIEGate/ClausIEGate?inputtext=what+is+the+weather+now+and+tell+me+my+next+meeting++&processCcAllVerbs=true&processCcNonVerbs=true&type=true&go=Extract

Answer 2

如果您想要的 segmentation 不太依赖语法，那么 chunking 就会出现。在 NLTK 书中有 a fragment on that。作者在这里采用的方法仅取决于词性标签。

BTW Jurafsky 和 ​​Martin 的 Speech and Language processing 第 3 版在解析章节中包含有关分块的信息，并且还包含有关信息检索和聊天机器人的章节。