【发布时间】:2011-04-20 16:47:28
【问题描述】:
我认为我的 LAMP 应用程序中可能存在内存泄漏(内存已用完,swap 开始使用等)。如果我能看到各种进程正在使用多少内存,它可能会帮助我解决我的问题。有没有办法让我在 *nix 中看到这些信息?
【问题讨论】:
标签: linux unix memory-leaks memory-management
我认为我的 LAMP 应用程序中可能存在内存泄漏(内存已用完,swap 开始使用等)。如果我能看到各种进程正在使用多少内存,它可能会帮助我解决我的问题。有没有办法让我在 *nix 中看到这些信息?
【问题讨论】:
标签: linux unix memory-leaks memory-management
正确使用内存比人们想象的要棘手。最好的办法我could find is:
echo 0 $(awk '/TYPE/ {print "+", $2}' /proc/`pidof PROCESS`/smaps) | bc
其中“PROCESS”是您要检查的进程的名称,“TYPE”是以下之一:
Rss:常驻内存使用,进程使用的所有内存,包括该进程与其他进程共享的所有内存。它不包括交换;Shared:该进程与其他进程共享的内存;Private:该进程使用的私有内存,可以在这里查找内存泄漏;Swap:进程使用的交换内存;Pss:Proportional Set Size,一个很好的整体内存指标。为共享调整的 Rss:如果一个进程有 1MiB 私有和 20MiB 在其他 10 个进程之间共享,则 Pss 为 1 + 20/10 = 3MiB其他有效值为Size(即虚拟大小,几乎没有意义)和Referenced(当前标记为引用或访问的内存量) .
您可以使用watch 或其他一些 bash-script-fu 来关注您想要监控的进程的这些值。
更多关于smaps的信息:http://www.kernel.org/doc/Documentation/filesystems/proc.txt。
【讨论】:
echo 0 $(sudo awk '/TYPE/ {print "+", $2}' /proc/PID/smaps) | bc
awk 中全部完成,而不是传递给bc? awk 'BEGIN { used=0 }; /TYPE/ { used += $2 } END { print used }' /proc/PID/smaps 将为您提供以 KB 为单位的大小。
我不知道为什么答案看起来如此复杂...用ps 来做这件事似乎很简单:
mem()
{
ps -eo rss,pid,euser,args:100 --sort %mem | grep -v grep | grep -i $@ | awk '{printf $1/1024 "MB"; $1=""; print }'
}
示例用法:
$ mem mysql
0.511719MB 781 root /bin/sh /usr/bin/mysqld_safe
0.511719MB 1124 root logger -t mysqld -p daemon.error
2.53516MB 1123 mysql /usr/sbin/mysqld --basedir=/usr --datadir=/var/lib/mysql --plugin-dir=/usr/lib/mysql/plugin --user=mysql --pid-file=/var/run/mysqld/mysqld.pid --socket=/var/run/mysqld/mysqld.sock --port=3306
【讨论】:
.zshrc
rss 列(驻留集大小)包括来自共享库的内存,因此会将数字丢弃。在我的情况下,进程使用的内存比系统可用的内存多。
args:100 和 --sort %mem 选项):# utiltiy function to get memory usage mem() { ps -ef -o rss,pid,user | grep -v grep | grep -i "$@" | awk '{printf $1/1024 "MB"; $1=""; print }' }
使用ps 查找应用程序的进程ID,然后使用top -p1010(将1010 替换为真正的进程ID)。
RES 列是使用的物理内存,VIRT 列是使用的虚拟内存 - 包括库和交换内存。
可以使用“man top”找到更多信息
【讨论】:
top -p`ps -ef | grep -i $NAME_OF_PROCESS | grep -v grep | gawk '{print $2}'`
首先获取pid:
ps ax | grep [process name]
然后:
top -p PID
可以同时观看各种进程:
top -p PID1 -p PID2
【讨论】:
【讨论】:
pmap $(pgrep -f -u username /usr/bin/gnome-shell) | sed -n -e 's/ total \+//p' | numfmt --from=iec1724678144
更优雅的方法:
echo "Memory usage for PID <>:"; for mem in {Private,Rss,Shared,Swap,Pss};do grep $mem /proc/<pid>/smaps | awk -v mem_type="$mem" '{i=i+$2} END {print mem_type,"memory usage:"i}' ;done
【讨论】:
如果您没有要跟踪的当前或长期运行的进程,您可以使用/usr/bin/time。
这与 Bash time 不同(如您所见)。
例如
# /usr/bin/time -f "%M" echo
2028
这是“进程在其生命周期内的最大驻留集大小,以千字节为单位”(引自手册页)。即与top等人中的RES相同。
您可以从/usr/bin/time 获得更多信息。
# /usr/bin/time -v echo
Command being timed: "echo"
User time (seconds): 0.00
System time (seconds): 0.00
Percent of CPU this job got: 0%
Elapsed (wall clock) time (h:mm:ss or m:ss): 0:00.00
Average shared text size (kbytes): 0
Average unshared data size (kbytes): 0
Average stack size (kbytes): 0
Average total size (kbytes): 0
Maximum resident set size (kbytes): 1988
Average resident set size (kbytes): 0
Major (requiring I/O) page faults: 0
Minor (reclaiming a frame) page faults: 77
Voluntary context switches: 1
Involuntary context switches: 0
Swaps: 0
File system inputs: 0
File system outputs: 0
Socket messages sent: 0
Socket messages received: 0
Signals delivered: 0
Page size (bytes): 4096
Exit status: 0
【讨论】:
gnu-time 包提供了正确的实用程序。它安装了一个名为 gtime 的实用程序,它可以执行您所说的操作。
使用top 或htop 并注意“RES”(驻留内存大小)列。
【讨论】:
谢谢。我用它创建了这个简单的 bash 脚本,可以用来监视进程及其内存使用情况:
$ 观看 watchmypid.sh
#!/bin/bash
#
PROCESSNAME=changethistoyourprocessname
MYPID=`pidof $PROCESSNAME`
echo "=======";
echo PID:$MYPID
echo "--------"
Rss=`echo 0 $(cat /proc/$MYPID/smaps | grep Rss | awk '{print $2}' | sed 's#^#+#') | bc;`
Shared=`echo 0 $(cat /proc/$MYPID/smaps | grep Shared | awk '{print $2}' | sed 's#^#+#') | bc;`
Private=`echo 0 $(cat /proc/$MYPID/smaps | grep Private | awk '{print $2}' | sed 's#^#+#') | bc;`
Swap=`echo 0 $(cat /proc/$MYPID/smaps | grep Swap | awk '{print $2}' | sed 's#^#+#') | bc;`
Pss=`echo 0 $(cat /proc/$MYPID/smaps | grep Pss | awk '{print $2}' | sed 's#^#+#') | bc;`
Mem=`echo "$Rss + $Shared + $Private + $Swap + $Pss"|bc -l`
echo "Rss " $Rss
echo "Shared " $Shared
echo "Private " $Private
echo "Swap " $Swap
echo "Pss " $Pss
echo "=================";
echo "Mem " $Mem
echo "=================";
【讨论】:
你想要的工具是ps。 要获取有关 java 程序正在做什么的信息:
ps -F -C java
获取有关http的信息:
ps -F -C httpd
如果您的程序在您有机会运行这些程序之前就结束了,请打开另一个终端并运行:
while true; do ps -F -C myCoolCode ; sleep 0.5s ; done
【讨论】:
您可以使用pmap + awk。
很可能,我们对 RSS 内存感兴趣,它是下面示例 pmap 输出 (82564) 的最后一行的第三列。
$ pmap -x <pid>
Address Kbytes RSS Dirty Mode Mapping
....
00007f9caf3e7000 4 4 4 r---- ld-2.17.so
00007f9caf3e8000 8 8 8 rw--- ld-2.17.so
00007fffe8931000 132 12 12 rw--- [ stack ]
00007fffe89fe000 8 8 0 r-x-- [ anon ]
ffffffffff600000 4 0 0 r-x-- [ anon ]
---------------- ------ ------ ------
total kB 688584 82564 9592
然后使用 Awk 提取该值。
$ pmap -x <pid> | awk '/total/ { print $4 "K" }'
pmap 值以千字节为单位。如果我们想要它以兆字节为单位,我们可以这样做。
$ pmap -x <pid> | awk '/total/ { print $4 / 1024 "M" }'
【讨论】:
为什么所有这些复杂的答案都有各种 shell 脚本? 使用 htop,它会自动更改大小,您可以选择要显示的信息,它可以在终端中使用,因此不需要桌面。 示例:htop -d8
【讨论】:
使用
例子:
ps-of()
{
ps u `pidof "$@"`
}
$ ps-of firefox
USER PID %CPU %MEM VSZ RSS TTY STAT START TIME COMMAND
const 18464 5.9 9.4 1190224 372496 ? Sl 11:28 0:33 /usr/lib/firefox/firefox
$ alias ps-mem="ps xu --sort %mem | sed -e :a -e '1p;\$q;N;6,\$D;ba'"
$ ps-mem
USER PID %CPU %MEM VSZ RSS TTY STAT START TIME COMMAND
const 3656 0.0 0.4 565728 18648 ? Sl Nov21 0:56 /usr/bin/python /usr/lib/ubuntuone-client/ubuntuone-syncdaemon
const 11361 0.3 0.5 1054156 20372 ? Sl Nov25 43:50 /usr/bin/python /usr/bin/ubuntuone-control-panel-qt
const 3402 0.0 0.5 1415848 23328 ? Sl Nov21 1:16 nautilus -n
const 3577 2.3 2.0 1534020 79844 ? Sl Nov21 410:02 konsole
const 18464 6.6 12.7 1317832 501580 ? Sl 11:28 1:34 /usr/lib/firefox/firefox
$ ps h -o pmem -C firefox
12.7
【讨论】: