【问题标题】:Comparison of Handling Logs and PDFs in Solr & Elasticsearch and Data Visualization in Banana & KibanaSolr 和 Elasticsearch 中处理日志和 PDF 与 Banana 和 Kibana 中的数据可视化的比较
【发布时间】:2015-10-29 15:09:26
【问题描述】:

Elasticsearch 和 Solr 在以下方面的比较:

  1. 索引日志。
  2. 索引事件。
  3. 为 PDF 文档编制索引。
  4. 易于创建和分发可视化。 Kibana 与 Banana。
  5. 为开发人员提供支持和文档。

感谢任何帮助。

编辑

更具体地说,我试图弄清楚 PDF 文档或事件究竟是如何被索引的。我在 Elasticsearch 上做了一些工作,因为我是 JSON 的粉丝,所以当我尝试索引结构化数据时,我发现它非常有用。

例如,日志大多是结构化的,因此我想更容易索引和搜索。现在,如果我想索引整个日志文件本身怎么办?

跟进

Kibana 是唯一可用于 Elasticsearch 的可视化工具吗?

Banana 是 Solr 唯一可用的可视化工具吗?

【问题讨论】:

  • 因此,由于您专注于日志记录,因此这根本没有专门回答您的问题,而只是可能值得一看的东西:stackoverflow.com/questions/10213009/solr-vs-elasticsearch。我认为这篇文章可能真的可以归结为香蕉与 kibana 的比较(不是标题所传达的内容)。另一个关键是处理您可能需要查看插件的 pdf 文档(至少对于 Elasticsearch 而言)。
  • 否决票?我应该更具体吗?
  • 哦,我没有对此投反对票。我认为这个问题可以稍微更新一下,把重点放在你的需求上,并去掉一般的 elasticsearch 和 solr 的东西。但对我来说,这似乎是一个我自己很好奇的好问题。考虑到我之前引用的 stackoverflow 帖子以及它的受欢迎程度,我不明白为什么 kibana vsbanana 不应该是一个好帖子。当然,您的帖子不止于此。您是否将 Logstash 视为一个整体?但我认为帖子标题和内容本身确实需要一些改进。
  • 谢谢!同时,如果您有任何建议,请随时编辑问题
  • 我试了一下 - 必须经过同行评审。我尽量坚持小修改,而不是为海报说话。但如果接受,请查看,如果您不喜欢,请更改。

标签: elasticsearch solr lucene kibana-4 banana


【解决方案1】:

这是一个尝试解决帖子的 Elasticsearch 方面的答案。

查看https://github.com/elastic/elasticsearch-mapper-attachments 处理 PDF

对于事件/日志,您需要将它们转换为结构化数据以在 Elasticsearch 中编制索引。您可以在其中有一个字段用于源(数据来自的日志文件和其他类似信息) - 您将以这种方式索引整个日志文件中的所有数据。您可以利用 ES 聚合根据日志文件对结果进行分组、计算统计数据等。

ELK stack 绝对值得一看。

我不知道 Kibana 是否是唯一的可视化工具,但它可能是最受欢迎的并且可能提供比其他工具更多的东西。

【讨论】:

  • 谢谢 :) 映射器附件很棒! Solr 有类似的东西吗?
  • 抱歉,不太确定 Solr - 从未使用过它。
猜你喜欢
  • 1970-01-01
  • 2016-02-07
  • 2019-07-03
  • 1970-01-01
  • 2023-01-30
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多