【问题标题】:Could you recommend an unstructured data indexing software? [closed]你能推荐一个非结构化数据索引软件吗? [关闭]
【发布时间】:2008-10-07 08:54:31
【问题描述】:

我正在从几个定制的应用程序中收集日志。每个应用程序都有自己的日志格式。我正在寻找的是一个中心工具,它可以让我搜索我的所有日​​志。这意味着该工具必须能够为每个日志文件定义不同的正则表达式(或类似的)(标记记录的开始位置、结束位置以及字段是什么)。我一直在尝试 Splunk,但我对此并不满意,因为性能很慢,我每天的索引数据量有限(免费版),而且它不像我想要的那样灵活. 你能推荐一个软件(最好是免费或便宜的)来完成这项任务吗?

【问题讨论】:

    标签: search indexing


    【解决方案1】:

    你可以试试Lucene。这是免费的。它是用 Java 编写的,它允许对大量数据进行全文搜索。它不是一个完整的应用程序,而是一个库,因此您必须编写代码来使用它来索引和搜索您的日志。您可能必须为您的日志定义不同的文档类型或至少不同的索引功能,但搜索效果很好。

    【讨论】:

    • 除了Lucene,还可以使用solr
    【解决方案2】:

    如果您可以使用 Windows,请试用 Microsoft 有史以来最好的工具 Logparser。我希望 Unix 有这么简单的工具。但是没有。虽然我一直想制作一个 Unix 版本的 Logparser,但我只是没有时间。

    注意:对于有时间的人或某个地方的研究生来说,这将是一个很棒的项目!

    【讨论】:

      【解决方案3】:

      http://www.splunk.com/

      没用过,听说过。

      【讨论】:

      • 是的,我提到我一直在使用 Splunk。由于免费版本的限制,我对此不满意。
      • 哦,是的,没看到。哎呀。
      猜你喜欢
      • 2010-09-25
      • 2010-09-07
      • 2011-02-28
      • 2010-09-07
      • 1970-01-01
      • 2010-12-21
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多