【问题标题】:tail -f | sed to file doesn't work [duplicate]尾-f | sed 到文件不起作用[重复]
【发布时间】:2018-02-13 13:49:22
【问题描述】:

我在过滤正在写入的日志文件并将输出写入另一个文件时遇到问题(如果可能,请使用tee,因此我可以看到它正在运行)。

我可以使用tee 或>> 将其输出到标准输出,但不能写入文件。 我也可以让它写入文件,但前提是我需要从 tail 中删除 -f 选项。

所以,这里是命令的概述:

  1. tail -f 不写入文件:tail -f test.log | sed 's/a/b/' 有效
  2. tail 写入文件:tail test.log | sed 's/a/b/' | tee -a a.txt 有效
  3. tail -f 写入文件:tail -f test.log | sed 's/a/b/' | tee -a a.txt 不输出到标准输出也不写入文件。

我想 3. 工作。

【问题讨论】:

  • 在查看输出文件之前,您允许运行多少数据?如果刷新缓冲区还不够……好吧,这就是你的问题。一旦输入足够多,或者tail 进程退出,sed 将完成写入。
  • 这是BashFAQ #9。
  • ...所以,(2) 有效,因为您的 tail test.log 命中 EOF,因此 sed 在没有更多输入时刷新其输出。并且 (1) 有效,因为 sed 如果其输出到 TTY,则默认情况下以行缓冲模式运行。
  • 也就是说,如果您尝试通过强制行缓冲或非缓冲模式来“修复”问题,那么您正在创造性能损失以换取延迟改进(较小的写入 == 更多上下文-将操作从用户空间切换到内核)。这可能对您的工作负载有意义 - 请注意延迟改进不是免费的。

标签: shell sed pipe filtering tail


【解决方案1】:

这是sed 缓冲。使用sed -u。 man sed:

-u, --unbuffered

          load  minimal amounts of data from the input files and flush the
          output buffers more often

这是一个测试(创建文件foo和bar):

$ for i in {1..3} ; do echo a $i ; sleep 1; done >> foo &
[1] 12218
$ tail -f foo | sed -u 's/a/b/' | tee -a bar
b 1
b 2
b 3

快点或增加{1..3} 以适合您的技能。

【讨论】:

    猜你喜欢
    • 2012-10-19
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2021-07-07
    • 2018-03-31
    • 1970-01-01
    相关资源
    最近更新 更多