一些Bash 用于从命令设置变量的技巧
抱歉,答案很冗长,但由于bash 是shell,主要目标是运行其他unix 命令并对结果代码 和/或output,(命令通常是管道 filter 等...)。
将命令输出存储在变量中是基本的事情。
因此,取决于
- 兼容性 (posix)
- 输出类型(过滤器)
- 要设置的变量数(拆分或解释)
- 执行时间(监控)
- 错误捕获
- 请求的可重复性(进一步参见长期运行的后台进程)
- 交互性(在读取另一个输入文件描述符时考虑用户输入)
- 我错过了什么吗?
第一种简单、旧(过时)且兼容的方式
myPi=`echo '4*a(1)' | bc -l`
echo $myPi
3.14159265358979323844
兼容,第二种方式
由于嵌套可能会变得很重,因此为此实施了括号
myPi=$(bc -l <<<'4*a(1)')
今天要避免在脚本中使用反引号。
嵌套样本:
SysStarted=$(date -d "$(ps ho lstart 1)" +%s)
echo $SysStarted
1480656334
读取多个变量(使用Bashisms)
df -k /
Filesystem 1K-blocks Used Available Use% Mounted on
/dev/dm-0 999320 529020 401488 57% /
如果我只想要一个 used 值:
array=($(df -k /))
你可以看到一个数组变量:
declare -p array
declare -a array='([0]="Filesystem" [1]="1K-blocks" [2]="Used" [3]="Available" [
4]="Use%" [5]="Mounted" [6]="on" [7]="/dev/dm-0" [8]="999320" [9]="529020" [10]=
"401488" [11]="57%" [12]="/")'
然后:
echo ${array[9]}
529020
但我经常用这个:
{ read -r _;read -r filesystem size using avail prct mountpoint ; } < <(df -k /)
echo $using
529020
(第一个read _ 将删除标题行。)这里,在只有一个命令中,您将填充6个不同的变量(按字母顺序显示):
declare -p avail filesystem mountpoint prct size using
declare -- avail="401488"
declare -- filesystem="/dev/dm-0"
declare -- mountpoint="/"
declare -- prct="57%"
declare -- size="999320"
declare -- using="529020"
或者
{ read -a head;varnames=(${head[@]//[K1% -]});varnames=(${head[@]//[K1% -]});
read ${varnames[@],,} ; } < <(LANG=C df -k /)
然后:
declare -p varnames ${varnames[@],,}
declare -a varnames=([0]="Filesystem" [1]="blocks" [2]="Used" [3]="Available" [4]="Use" [5]="Mounted" [6]="on")
declare -- filesystem="/dev/dm-0"
declare -- blocks="999320"
declare -- used="529020"
declare -- available="401488"
declare -- use="57%"
declare -- mounted="/"
declare -- on=""
甚至:
{ read foo ; read filesystem dsk[{6,2,9}] prct mountpoint ; } < <(df -k /)
declare -p mountpoint dsk
declare -- mountpoint="/"
declare -a dsk=([2]="529020" [6]="999320" [9]="401488")
(注意Used和Blocks在此处切换:read ... dsk[6] dsk[2] dsk[9] ...)
... 也适用于 关联数组:read foo disk[total] disk[used] ...
专用fd使用未命名的fifo:
有一种优雅的方式!在这个示例中,我将阅读/etc/passwd 文件:
users=()
while IFS=: read -u $list user pass uid gid name home bin ;do
((uid>=500)) &&
printf -v users[uid] "%11d %7d %-20s %s\n" $uid $gid $user $home
done {list}</etc/passwd
使用这种方式 (... read -u $list; ... {list}<inputfile) 将 STDIN 留作其他用途,例如用户交互。
然后
echo -n "${users[@]}"
1000 1000 user /home/user
...
65534 65534 nobody /nonexistent
和
echo ${!users[@]}
1000 ... 65534
echo -n "${users[1000]}"
1000 1000 user /home/user
这可以与静态文件一起使用,甚至可以与 /dev/tcp/xx.xx.xx.xx/yyy 一起使用,x 用于 IP 地址或主机名,y 用于端口号或命令输出:
{
read -u $list -a head # read header in array `head`
varnames=(${head[@]//[K1% -]}) # drop illegal chars for variable names
while read -u $list ${varnames[@],,} ;do
((pct=available*100/(available+used),pct<10)) &&
printf "WARN: FS: %-20s on %-14s %3d <10 (Total: %11u, Use: %7s)\n" \
"${filesystem#*/mapper/}" "$mounted" $pct $blocks "$use"
done
} {list}< <(LANG=C df -k)
当然还有内联文档:
while IFS=\; read -u $list -a myvar ;do
echo ${myvar[2]}
done {list}<<"eof"
foo;bar;baz
alice;bob;charlie
$cherry;$strawberry;$memberberries
eof
解析CSV文件的实用示例:
在this answer to How to parse a CSV file in Bash? 中,我使用exec {FD}<"$file" 语法使用未命名的fifo 读取文件。
还有here is the same script, but using CSV as inline document。
填充一些变量的示例函数:
#!/bin/bash
declare free=0 total=0 used=0 mpnt='??'
getDiskStat() {
{
read _
read _ total used free _ mpnt
} < <(
df -k ${1:-/}
)
}
getDiskStat $1
echo "$mpnt: Tot:$total, used: $used, free: $free."
注意:declare 行不是必需的,只是为了便于阅读。
关于sudo cmd | grep ... | cut ...
shell=$(cat /etc/passwd | grep $USER | cut -d : -f 7)
echo $shell
/bin/bash
(请避免无用的cat!所以这只是少了一个fork:
shell=$(grep $USER </etc/passwd | cut -d : -f 7)
所有管道 (|) 表示分叉。另一个进程必须在哪里运行,访问磁盘,库调用等等。
因此,使用sed 作为示例,会将子进程限制为只有一个fork:
shell=$(sed </etc/passwd "s/^$USER:.*://p;d")
echo $shell
还有Bashisms:
但是对于许多操作,主要是针对小文件,Bash 可以自己完成这项工作:
while IFS=: read -a line ; do
[ "$line" = "$USER" ] && shell=${line[6]}
done </etc/passwd
echo $shell
/bin/bash
或
while IFS=: read loginname encpass uid gid fullname home shell;do
[ "$loginname" = "$USER" ] && break
done </etc/passwd
echo $shell $loginname ...
进一步了解变量拆分...
看看我对How do I split a string on a delimiter in Bash?的回答
替代方案:通过使用后台长时间运行的任务来减少 分叉
为了防止多次分叉
myPi=$(bc -l <<<'4*a(1)'
myRay=12
myCirc=$(bc -l <<<" 2 * $myPi * $myRay ")
或
myStarted=$(date -d "$(ps ho lstart 1)" +%s)
mySessStart=$(date -d "$(ps ho lstart $$)" +%s)
这项工作很好,但运行许多分叉很重而且很慢。
像date 和bc 这样的命令可以进行很多操作,一行一行!!
见:
bc -l <<<$'3*4\n5*6'
12
30
date -f - +%s < <(ps ho lstart 1 $$)
1516030449
1517853288
所以我们可以使用一个长时间运行的后台进程来完成许多工作,而不必为每个请求启动一个新的fork。
在bash下,有一个内置函数:coproc:
coproc bc -l
echo 4*3 >&${COPROC[1]}
read -u $COPROC answer
echo $answer
12
echo >&${COPROC[1]} 'pi=4*a(1)'
ray=42.0
printf >&${COPROC[1]} '2*pi*%s\n' $ray
read -u $COPROC answer
echo $answer
263.89378290154263202896
printf >&${COPROC[1]} 'pi*%s^2\n' $ray
read -u $COPROC answer
echo $answer
5541.76944093239527260816
由于bc 已准备好,在后台运行,I/O 也已准备好,没有延迟,无需加载、打开、关闭、操作之前或之后。只有自己操作!这比每次操作都要分叉到bc 要快得多!
边界效应:当bc 保持运行时,它们将保存所有寄存器,因此可以在初始化步骤中定义一些变量或函数,如首先写入${COPROC[1]},就在启动之后任务(通过coproc)。
进入函数newConnector
您可以在GitHub.Com 或my own site 上找到我的newConnector 函数(GitHub 上的注意事项:我的站点上有两个文件。函数和演示被捆绑到一个独特的文件中,可以获取使用或只是运行演示。)
示例:
source shell_connector.sh
tty
/dev/pts/20
ps --tty pts/20 fw
PID TTY STAT TIME COMMAND
29019 pts/20 Ss 0:00 bash
30745 pts/20 R+ 0:00 \_ ps --tty pts/20 fw
newConnector /usr/bin/bc "-l" '3*4' 12
ps --tty pts/20 fw
PID TTY STAT TIME COMMAND
29019 pts/20 Ss 0:00 bash
30944 pts/20 S 0:00 \_ /usr/bin/bc -l
30952 pts/20 R+ 0:00 \_ ps --tty pts/20 fw
declare -p PI
bash: declare: PI: not found
myBc '4*a(1)' PI
declare -p PI
declare -- PI="3.14159265358979323844"
myBc 函数让您可以通过简单的语法使用后台任务。
那么日期:
newConnector /bin/date '-f - +%s' @0 0
myDate '2000-01-01'
946681200
myDate "$(ps ho lstart 1)" boottime
myDate now now
read utm idl </proc/uptime
myBc "$now-$boottime" uptime
printf "%s\n" ${utm%%.*} $uptime
42134906
42134906
ps --tty pts/20 fw
PID TTY STAT TIME COMMAND
29019 pts/20 Ss 0:00 bash
30944 pts/20 S 0:00 \_ /usr/bin/bc -l
32615 pts/20 S 0:00 \_ /bin/date -f - +%s
3162 pts/20 R+ 0:00 \_ ps --tty pts/20 fw
从那里,如果你想结束其中一个后台进程,你只需要关闭它fd:
eval "exec $DATEOUT>&-"
eval "exec $DATEIN>&-"
ps --tty pts/20 fw
PID TTY STAT TIME COMMAND
4936 pts/20 Ss 0:00 bash
5256 pts/20 S 0:00 \_ /usr/bin/bc -l
6358 pts/20 R+ 0:00 \_ ps --tty pts/20 fw
这不是必需的,因为所有 fd 都会在主进程完成时关闭。