【问题标题】:pass stdout as file name for command line util?将标准输出作为命令行工具的文件名传递?
【发布时间】:2011-12-07 01:58:34
【问题描述】:

我正在使用一个命令行实用程序,该实用程序需要传递文件名以将输出写入,例如

foo -o output.txt

它向stdout 写入的唯一内容是一条表明它运行成功的消息。我希望能够将写入output.txt 的所有内容通过管道传输到另一个命令行实用程序。我的动机是 output.txt 最终将成为一个我不需要保留的 40 GB 文件,我宁愿通过管道传输流而不是逐步处理大量文件。

在这种情况下,有什么方法可以将实际输出(即output.txt)通过管道传输到另一个命令?我可以以某种方式神奇地将stdout 作为文件参数传递吗?

【问题讨论】:

  • 某些版本的unix/linux可以通过/dev/stdout等访问stdout/err
  • unixy 工具通常的“写入标准输出”约定是使用- 作为文件名(即foo -o -)。在您的代码中,您可以简单地检测到该特殊文件名并使用 stdout 而不是 fopened 文件进行输出。在这种情况下不要打印状态,或者将其打印到您可以单独重定向的stderr
  • 所有出色的建议,对问题的不同方面都有深刻的见解。我认为命名管道是要走的路,但是这两个答案本质上是骗人的——我应该将哪个标记为答案?

标签: linux bash file-io stdout pipe


【解决方案1】:

解决方案 1:使用process substitution

最方便的方法是使用进程替换。在 bash 中,语法如下所示:

foo -o >(other_command)

(注意这是bashism。其他shell也有类似的解决方案,但底线是它不可移植。)

解决方案 2:显式使用 named pipes

您可以按如下方式显式/手动执行上述操作:

  1. 使用mkfifo 命令创建命名管道。

    mkfifo my_buf
    
  2. 使用该文件作为输入启动您的其他命令

    other_command < my_buf
    
  3. 执行foo 并将其输出写入my_buf

    foo -o my_buf
    

解决方案 3:使用/dev/stdout

你也可以使用设备文件/dev/stdout如下

foo -o /dev/stdout | other_command

【讨论】:

    【解决方案2】:

    命名管道可以正常工作,但是您可以通过 bash 进程替换获得更好、更直接的语法,它的额外好处是不使用以后必须删除的永久命名管道(进程替换在幕后使用临时命名管道) :

    foo -o &gt;(other command)

    此外,如果您想将输出通过管道传输到命令并将输出保存到文件中,您可以这样做:

    foo -o &gt;(tee output.txt) | other command

    【讨论】:

      【解决方案3】:

      为了让 stackoverflow 开心,让我写一个足够长的句子,因为我提出的解决方案只有 18 个字符长,而不是要求的 30+

      foo -o /dev/stdout
      

      【讨论】:

      • 这个解决方案的问题是它捕获了命令的正常标准输出,如果它同时发出不需要的标准输出写一个想要的文件,那么结果也将包含不需要的内容。
      【解决方案4】:

      您可以使用 UNIX 的魔力并创建一个命名管道 :)

      1. 创建管道

        $ mknod -p mypipe
        
      2. 启动从管道读取的进程

        $ second-process < mypipe
        
      3. 启动写入管道的进程

        $ foo -o mypipe
        

      【讨论】:

        【解决方案5】:

        我使用 /dev/tty 作为输出文件名,相当于在你不想输出任何内容时使用 /dev/nul/。那么 |你就完成了。

        【讨论】:

        • tty 并不总是可用。更好地使用 /dev/stdout
        【解决方案6】:

        foo -o &lt;(cat)

        如果由于某种原因您无权写信给/dev/stdout

        【讨论】:

          猜你喜欢
          • 1970-01-01
          • 1970-01-01
          • 2011-01-24
          • 1970-01-01
          • 2015-03-29
          • 1970-01-01
          • 2014-12-16
          • 2021-02-09
          相关资源
          最近更新 更多