【问题标题】:Best NLP tool for Apache SparkApache Spark 的最佳 NLP 工具
【发布时间】:2019-04-19 14:48:06
【问题描述】:

我希望在 Apache Spark 上构建一个基于 NLP 的应用程序,该应用程序专注于从客户评论中提取关键词,并在此基础上找到每个关键词的情绪。谁能帮我决定最好的火花 NLP 工具?我在 Spark 中使用了 NLTK(自然语言工具包)并正在寻找更好的。

【问题讨论】:

  • 好吧,NLP 的任务是什么?博士。分类?信息提取?聚类文档?
  • 创建一个 ETL,主要关注从段落中提取关键字并从中提取情感。例如,从客户评论中提取关键字,然后从中获取情绪。
  • “从客户评论中提取关键字,然后从中获取情绪”,您的意思是关键字是产品的属性或特征,然后您想推断每个属性的情绪,如在,基于方面的情感分析?
  • 正是,根据关键字我想推断情绪
  • 好的,所以第一个建议,为什么不相应地编辑你的问题,并具体说明你想要什么,然后你想大规模地对它做什么?

标签: apache-spark nlp bigdata nltk


【解决方案1】:

我建议您尝试 Spark-NLP,并结合使用 TextMatcher 和 Sentiment Detector- 更多文档在这里, https://nlp.johnsnowlabs.com/components.html

最好, 阿尔贝托。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2016-12-06
    • 1970-01-01
    • 1970-01-01
    • 2015-08-05
    • 1970-01-01
    • 2010-12-31
    • 2015-03-23
    • 2011-05-26
    相关资源
    最近更新 更多