实时分析和情绪分析

Question

我的项目是通过对推文（板球）进行情绪分析来进行预测。 我将收集推文作为流。 为此，我需要对推文进行实时分析，然后对推文进行情绪分析。 我正在使用 Kafka 和 Spark Streaming。

如何使用 kafka 对推文进行实时分析？我需要那些与板球有关的推文 实时分析后如何使用火花流对推文进行情感分析？

您能告诉我哪种语言最适合完成整个任务，Python 还是 java？

Answer 1

我建议使用 python 以流的形式收集推文 - 使用 Kafka：https://www.rittmanmead.com/blog/2017/01/getting-started-with-spark-streaming-with-python-and-kafka/

要对推文进行实时分析，您将需要 nltk、word2vec 或一些自然语言处理 api：https://github.com/ankitagarwal/nltk_kafka_twitter

https://github.com/emumba-com/live_twitter_sentiment_analysis

我希望这能给你的任务一个启动。