将 awk 搜索与标准 awk 和 awk 分隔符相结合答案

【问题标题】：Combining awk search with standard awk and awk delimiter将 awk 搜索与标准 awk 和 awk 分隔符相结合
【发布时间】：2013-10-28 01:57:17
【问题描述】：

我正在处理一组需要特定字段作为输出的数据：

数据如下：

/home/oracle/db.log.gz:2013-1-19T00:00:25 <user.info> 1 2013-1-19T00:00:53.911 host_name RT_FLOW [junos@26.1.1.1.2.4 source-address="10.1.2.0" source-port="616" destination-address="100.1.1.2" destination-port="23" service-name="junos-telnet" nat-source-address="20x.2x.1.2" nat-source-port="3546" nat-destination-address="9x.12x.3.0"]

从上面我需要三样东西：

(I) - 2013-1-19T00:00:53.911  which is $4 
(II)- source-address="10.1.2.0" which is $8 of which I need only 10.1.2.0
(III) - destination-address="100.1.1.2" which $10  of which I need only 100.1.1.2

我不能像 -> awk '{ print $4 \t $8 \t $10 }' 这样使用简单的 awk，因为日志文件中的“device_name”后面有一些字段并不总是出现在所有日志行中，所以我必须使用分隔符，例如 awk -F 'source-address=' '{print $2}' | awk '{print $1} -> 这给出了源地址IP，这是（II）要求

我不确定如何使用 awk 搜索 I、II 和 III 进行组合。

有人可以帮忙吗？

【问题讨论】：

标签： awk

【解决方案1】：

我相信sed 更适合这份工作

sed -r 's/([^ ]+[ ]+){3}([^ ]+).*[ ]+source-address="([^"]+)".*[ ]+destination-address="([^"]+)".*/\2\t\3\t\4/' file

输出：

2013-1-19T00:00:53.911  10.1.2.0    100.1.1.2

【讨论】：

这就像一个魅力！我一直坚持使用 awk，并没有意识到可以使用 sed。仍然是 sed 和 awk 的新手。

【解决方案2】：

你到底想要什么？

使用任何（合理的标准）工具解决问题
使用一个 awk 实例解决这一挑战
仅使用 awk 即可解决问题，无论需要多少实例

对于第一种情况，您可以使用您选择的脚本语言（我的将是 Perl）来解析该行，或者使用 sed 和一个大替换来执行此操作。或者介于两者之间的东西——使用三个正则表达式来获得你想要的部分。

对于第二种情况，您可以调整任何以前的解决方案，最好是sed 一个。 awk 和 sed 解决方案已经发布。

对于第三种情况，您可以运行您在问题中提到的明显的 awk 解决方案，并将结果发送到单个管道，例如 { awk …; awk …; awk …; } < file | consumer。

【讨论】：

【解决方案3】：

尝试这样做：

awk '{print gensub(/.*\s+([0-9]{4}-[0-9]+-[0-9]+T[0-9]{2}:[0-9]{2}:[0-9]{2}.[0-9]+).*source-address="([0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}).*destination-address="([0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}).*/, "(I) \\1\n(II) \\2\n(III) \\3", "g"); }' file

使用perl 的另一种解决方案：

perl -lne 'print "(", "I" x ++$c, ")  $_" for m/.*?\s+(\d{4}-\d+-\d+T\d{2}:\d{2}:\d{2}.\d+).*source-address="(\d{1,3}\.\d{1,3}\.\d{1,3}\.\d{1,3}).*destination-address="(\d{1,3}\.\d{1,3}\.\d{1,3}\.\d{1,3}).*/' file

输出：

(I) 2013-1-19T00:00:53.911
(II) 10.1.2.0
(III) 100.1.1.2

【讨论】：