【发布时间】:2020-05-30 13:40:32
【问题描述】:
我有一个 perl 脚本,可以将消息写入 STDOUT 和 STDERR(通过 print/croak 语句),但我还将 STDOUT 和 STDERR 重定向到日志文件:
File::Tee::tee STDOUT, ">>", "$logFile" ;
File::Tee::tee STDERR, ">>", "$logFile" ;
现在输出日志文件中有来自 STDOUT 和 STDERR 的消息乱序显示。终端上的实际输出也有问题。我试过刷新缓冲区(这里推荐:https://perl.plover.com/FAQs/Buffering.html),但没有帮助:
select(STDERR) ;
$| = 1 ;
select(STDOUT) ;
$| = 1 ;
有谁知道我必须做什么才能按顺序查看输出(我也尝试过另外刷新与 $logfile 对应的文件句柄,但它仍然是一样的)?
编辑:
感谢所有回复的人。很多关于这个的讨论最终都在 cmets 中结束,所以我将根据你们所有人的反馈列出我尝试过的一些事情。
- 在使用 File::Tee 之前,我已经在刷新 STDOUT 和 STDERR。正如@jimtut 所怀疑的那样, File::Tee 确实是罪魁祸首——删除它恢复了控制台上的排序。但我确实想重定向 STDOUT 和 STDERR。
- @mob 建议改用 IO::Tee,但我还没有完全理解如何在我的代码中按照我想要的方式进行这项工作。
- @briandfoy 指出,没有可靠的方法来确保以正确的顺序实时查看 2 个单独的文件句柄,并且还建议使用日志记录例程,这是唯一可以写入 STDOUT/STDERR 的位置。 @zimd 进一步指出 File::Tee 使用 fork,这是问题的核心,因为 2 个进程不能保证输出的任何顺序。
- 由于 File::Tee 是罪魁祸首,我试图从代码中删除它。我更新了我的记录器功能以打印到 STDOUT/STDERR 以及另外打印到 $log 文件句柄。为了进一步捕获日志中的警告,我执行了以下操作:
sub warning_handler {
my $msg = $_[0] ;
print STDERR $msg ;
print $log $msg if defined $log ;
}
$SIG{__WARN__} = \&warning_handler ;
这对我控制下的所有代码都很有效。现在在控制台和日志文件上都按顺序打印。但是我意识到我不能使用这个解决方案,因为我还调用了其他人的 perl 包以获得某些功能,并且显然我无法拦截在“现成”包中写入 STDOUT/STDERR 的 print/croak 等。所以现在,我没有一个好的解决方案。但是我怀疑如果我能找到在 perl 中拦截 STDOUT/STDERR 的方法,我可能能够得到我需要的东西。
编辑2: 我添加了自己的答案,这可能是我通过修改 mob 使用 IO::Tee 而不是 File::Tee 的解决方案来解决问题的最接近的方法,但即使这样也遗漏了一些消息(尽管它修复了排序)。
编辑3: 终于找到了“解决方案”
use IO::Tee ;
use Capture::Tiny qw(capture);
...
...
select(STDERR) ;
$| = 1 ;
select(STDOUT) ;
$| = 1 ;
open (my $log, ">", $logfilename) ;
*REALSTDOUT = *STDOUT ;
*REALSTDERR = *STDERR ;
*STDOUT = IO::Tee->new(\*REALSTDOUT, $log);
*STDERR = IO::Tee->new(\*REALSTDERR, $log);
# Regular Perl code here which sends output to STDOUT/STDERR
...
...
# system calls / calls to .so needs to be catpured
&log_streams(sub { &some_func_which_calls_shared_object() ; }) ;
sub log_streams {
my ($cr, @args) = @_; # code reference, with its arguments
my ($out, $err, $exit) = capture { $cr->(@args) };
if ($out) {
print STDOUT $out;
}
if ($err) {
print STDERR $err;
}
}
使用 IO::Tee 确保所有 perl 生成到控制台的输出也进入日志文件,这会立即发生,从而实时更新日志和控制台。由于 IO::Tee 正在将 STDOUT/STDERR 文件句柄的含义更改为现在引用 teed 句柄,它只能从 perl 语句中截取 stdio,它会错过 sys 调用,因为它们绕过了 perl 的 STDOUT/STDERR 句柄。所以我们捕获系统调用输出,然后使用 log_streams 例程将其转发到现在别名的 STDOUT/STDERR 流。这会在系统调用生成的输出中显示在日志/终端中产生延迟,但 perl 生成的输出没有延迟 - 即两全其美。请注意,调用子例程 some_func_which_calls_shared_object 生成的 stderr 和 stdout 的顺序没有保留,因为在 log_streams 例程中,我们首先打印到 STDOUT,然后打印到 STDERR - 只要系统调用是原子的并且在就交错标准输出/标准错误消息而言,我们应该没问题。 感谢 briandfoy、mob 和 zimd 的解决方案,我结合他们的答案得出了这个解决方案!从来没有想过对于一个看似非常简单的问题需要仔细研究这个细节。
【问题讨论】:
-
如果你删除了
tee的使用,只是打印到控制台,这样是否合适?我猜是的,tee是罪魁祸首。 -
确实 File::Tee::tee 是问题所在。删除它可以修复终端上的输出顺序。但我真的很想把它重定向到一个日志文件。
-
如果您使用的是命令行 Perl 脚本(不是 CGI 脚本),请创建一个“包装”脚本(Shell 或 Batch,具体取决于您的平台。在该包装内,调用您的 Perl 脚本然后重定向 STDOUT 和 STDERR。它在 Linux 上看起来像这样,我相信它在 Windows 上几乎相同:
myscript.pl >> logfile 2>>&1 -
是的,我知道我可以在脚本之外重定向 .. 但这不是 bash/csh 包装器,它应该是一个直接的 perl 实用程序。
-
您在致电
tee之前有没有做过select(STDERR) ; $| = 1 ; select(STDOUT) ; $| = 1 ;?快速查看代码表明这应该可以工作。