如何在 Linux 中查看日志文件并在查看时应用自定义过滤器？

Question

我需要阅读 Linux 系统上的一些巨大的日志文件。日志中有很多混乱。目前我正在做这样的事情：

cat logfile.txt | grep -v "IgnoreThis\|IgnoreThat" | less

但这很麻烦——每次我想添加另一个过滤器时，我都需要退出less并编辑命令行。有些过滤器比较复杂，可能是多行的。

我想要在阅读日志时应用过滤器的方法，以及将这些过滤器保存在某处的方法。

有什么工具可以帮我做到这一点吗？我无法安装新软件，所以希望它是已经安装的软件——例如，less、vi、Python 或 Perl lib 中的软件等。

将生成日志的代码更改为生成更少不是一种选择。

Answer 1

在less中使用&pattern命令。

来自少的手册页

&模式

          Display  only  lines which match the pattern; lines which do not
          match the pattern are not displayed.  If pattern  is  empty  (if
          you  type  &  immediately  followed  by ENTER), any filtering is
          turned off, and all lines are displayed.  While filtering is  in
          effect,  an  ampersand  is  displayed  at  the  beginning of the
          prompt, as a reminder that some lines in the file may be hidden.

          Certain characters are special as in the / command:

          ^N or !
                 Display only lines which do NOT match the pattern.

          ^R     Don't interpret regular expression  metacharacters;  that
                 is, do a simple textual comparison.

Answer 2

试试multitail 工具 - 除了让您一次查看多个日志外，我敢肯定它还可以让您以交互方式应用正则表达式过滤器。

Answer 3

基于ghostdog74's answer 和less 手册页，我想出了这个：

~/.bashrc:

export LESSOPEN='|~/less-filter.sh %s'
export LESS=-R  # to allow ANSI colors

---

~/less-filter.sh:

#!/bin/sh
case "$1" in
*logfile*.log*) ~/less-filter.sed < $1
  ;;
esac

---

~/less-filter.sed:

/deleteLinesLikeThis/d  # to filter out lines
s/this/that/  # to change text on lines (useful to colorize using ANSI escapes)

---

然后：

• less logfileFooBar.log.1 -- 自动应用过滤器。
• cat logfileFooBar.log.1 | less -- 无需过滤即可查看日志

目前这已经足够了，但我仍然希望能够即时编辑过滤器。

Answer 4

见man page 少。例如，您可以使用一些选项来搜索单词。它也有行编辑模式。

Answer 5

Casstor Software Solutions 有一个名为 LogFilter (www.casstor.com) 的应用程序，它可以编辑 Windows/Mac/Linux 文本文件，并且可以轻松执行文件过滤。它支持多个过滤器以及正则表达式。我想这可能就是你要找的东西。