【问题标题】:Parse ouput of command解析命令的输出
【发布时间】:2018-10-25 10:07:10
【问题描述】:

我正在尝试提取命令输出的参数。目前我有这个:

ps -eaf | grep javaagent

输出是这样的:

-Dweblogic.system.BootIdentityFile=/u06/app/oracle/admin/domains/omservices/servers/profiling03/data/nodemanager/boot.properties -Dweblogic.nodemanager.ServiceEnabled=true -Dweblogic.security.SSL.ignoreHostnameVerification=false -Dweblogic.ReverseDNSAllowed=false -javaagent:/u01/home/app/appdyn/AppDynamics/AppServerAgent/ver4.3.1.5/javaagent.jar -Dappdynamics.agent.applicationName=BFL_PE_Omnichannel -Dappdynamics.agent.tierName=CDLV_Profiling -Dappdynamics.agent.nodeName=profiling03 -Xms3g -Xmx3g -XX:MaxPermSize=756m -verbose:gc -XX:+PrintGCDetails -XX:+PrintGCDateStamps -XX:+PrintHeapAtGC -Xloggc:/u06/app/oracle/admin/logs/omservices/profiling03/gc.log -XX:-DisableExplicitGC -Djava.net.preferIPv4Stack=true -Dweblogic.MuxerClass=weblogic.socket.NIOSocketMuxer -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/u06/app/oracle/admin/logs/omservices/profiling03/dump -Dweblogic.Stdout=/u06/app/oracle/admin/logs/omservices/profiling03/profiling03.out -Dprofiling-services.configPath=/cyberbank/profiling/v2/config/ -Dorg.apache.cxf.Logger=org.apache.cxf.common.logging.Log4jLogger -Dprofiling-services.logPath=/u06/app/oracle/admin/logs/omservices/profiling03 -Duser.timezone=GMT-5 -Dweblogic.management.server=t3://ba410018-priv:4065 weblogic.Server

我要提取参数(我对这个路径感兴趣):

-javaagent:/u01/home/app/appdyn/AppDynamics/AppServerAgent/ver4.3.1.5/javaagent.jar

我用下面的命令做了这个:

ps -eaf | grep javaagent | cut -d " " -f XX

其中“XX”是XX所在的列。这个命令的问题是进程不会总是一样的。但是,javaagent 将始终处于进程中。

简而言之,一些命令允许我在进程 X 中提取参数 javaagent。

【问题讨论】:

标签: linux string bash parsing extract


【解决方案1】:

通常是回答“如何解析...的输出?”形式的 shell 问题的第一步。是问另一个问题“如何在不解析命令输出的情况下获得[此信息]?”。

当然,某种类型的解析几乎总是必要的,但如果你能将它减少到对某个分隔符字符串的可靠拆分,你就很好地解决了问题,因为有有很多方法可以在分隔符处拆分字符串。 (请参阅下面的其中之一。)

注意:此答案的其余部分假定使用来自包 procps-ng 的 bash、Gnu awk 和 ps 进行合理标准的 Linux 安装。它可以很容易地适应其他环境,但细节会使叙述过于复杂。

ps 命令带有一组不错的输出选项,可以很容易地自定义命令的输出。例如,如果您想查看所有正在运行的进程的命令行,而没有任何其他令人困惑的数据,您可以试试这个:

ps -e -ops=,cmd=

这将打印系统上所有进程的 pid 和命令行。 (如果你愿意,你可以使用-ea,很多人都这样做。使用ps 的procps-ng 版本,没有任何区别。)

输出规范-o 包含一个以逗号分隔的字段列表(其名称记录在标记为“标准格式规范”部分的man ps 中)。每个字段名称可以选择后跟 = 和一些文本(不能包含逗号);文本用于标题行,即第一行输出。仅使用 = 而不使用文本表示该列没有标题,如果没有列有标题,则不打印标题行。这使得“解析”更容易。

ps 可以打印的许多字段很容易解析,因为它们不能包含空格。事实上,手册页列出了几个可以包含空格的字段:

以下用户定义的格式说明符可能包含空格:args、cmd、comm、command、fname、ucmd、ucomm、lstart、bsdstart、start

并且该列表实际上比不同说明符的实际数量大得多,因为args 和command 是cmd 的别名——它显示了整个命令行——而ucmd 和ucomm 是comm 的别名——显示可执行文件的名称。

这些字段可能包含空格甚至换行符这一事实肯定会使解析复杂化。在命令行参数的情况下,它实际上使解析变得不可能,因为没有办法区分包含空格的命令行参数和两个连续的命令行参数,它们之间有空格。理想情况下,我们需要一种确定的方法来提取每个进程的命令行参数。

虽然我们无法从ps 获得此信息,但我们可以转到ps 使用的信息源:/proc 文件系统。特别是,对于任何 pid,“文件”/proc/PID/cmdline 包含命令行组件,每个组件都以 NUL 字节结尾。例如,我的init 进程如下所示:

$ hd /proc/1/cmdline
00000000  2f 6c 69 62 2f 73 79 73  74 65 6d 64 2f 73 79 73  |/lib/systemd/sys|
00000010  74 65 6d 64 00 2d 2d 73  79 73 74 65 6d 00 2d 2d  |temd.--system.--|
00000020  64 65 73 65 72 69 61 6c  69 7a 65 00 31 38 00     |deserialize.18.|
0000002f

由于命令行选项不能包含 NUL 字节,因此这是完全明确的。

我们可以通过简单地通配/proc目录来提取所有正在运行的进程的所有命令行:

cat /proc/[1-9]*/cmdline

(我使用[1-9]*而不是*,因为/proc文件系统中还有其他子目录。)

但这会产生 NUL 分隔记录的换行分隔行,这对于大多数实用程序来说不是最方便的格式。 (此外,它重新引入了歧义,因为换行符可能是参数的一部分。)幸运的是,Gnu awk 很乐意将 NUL 作为记录分隔符处理,并具有正则表达式匹配工具。因此,要查找所有以-javaagent: 开头的正在运行的进程的所有参数,我们可以使用以下单行:

awk -v RS='\0' '/^-javaagent:/' /proc/[1-9]*/cmdline

注意:

我在上面的描述中跳过了一些细节。其中之一是/proc/PID/cmdline 仅包含命令行的前 4k。由于 java 调用通常很长,因此可能会丢失部分命令行。然而,由于ps 使用/proc 文件系统来获取它所显示的信息,它会遇到同样的问题。我知道没有简单的方法。

另一个问题是-ocmd= 中显示的数据可以被正在运行的进程修改,如果它想以某种方式隐藏或重新处理自己的命令行。例如,如果您查看 chrome 进程的条目,您会发现参数是用空格而不是 NUL 分隔的。

【讨论】:

    【解决方案2】:

    只要您的 javaagent.jar 路径中没有空格,以下内容应该可以工作:

    ps -eaf | grep -Eo '-javaagent:[^ ]*'
    

    它从-javaagent 选项的开头匹配到下一个排除的空格。使用grep 的-o 标志使其仅返回匹配的部分而不是整行。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2014-01-14
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2023-03-19
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多