更多可到 Linux命令搜索 检索查看
1、 pidof 进程名 :获取进程的pid,例如 pidof memcached 得到5333
2、 unset Shell变量 :取消设置一个shell变量,从内存和shell的导出环境中删除它,例如 unset JAVA_HOME
3、 cat test.txt 1 > /dev/null 2>&1 & :将标准输出重定向到回收站,并将错误输出重定向到标准输出,综合起来就是不输出任何信息。第一个1表示标准输出,可以省略;&1表示文件描述符1,若没有&则变成了文件1
# 以下四者等价 cat test.txt > log.txt 2 > log.txt cat test.txt 1 > log.txt 2 > log.txt cat test.txt > log.txt 2 > &1 cat test.txt &> log.txt # 空文件(size为0) : > log.txt M>N # "M" 是一个文件描述符,如果没有明确指定的话默认为 1。 # "N" 是一个文件名。 # 文件描述符 "M" 被重定向到文件 "N"。 M>&N # "M" 是一个文件描述符,如果没有明确指定的话默认为 1。 # "N" 是另一个文件描述符。 关闭文件描述符 文件描述符是可以关闭的,典型的写法有下面几种: n<&- # 关闭输入文件描述符 n 0<&-, <&- # 关闭 stdin n>&- # 关闭输出文件描述符 n 1>&-, >&- # 关闭 stdout
4、 iptables -I INPUT -p tcp --dport 8081 -j ACCEPT :开放指定端口。机器重启后会失效,可以保存配置,使开机自动加载。详见保存防火墙规则
5、 iptables -t nat -A PREROUTING -p tcp --dport 80 -j REDIRECT --to-port 8080 :端口转发(对80的请求转到8080)。机器重启后会失效,可以保存配置,使开机自动加载。详见保存防火墙规则
6、netcat命令(“网络工具中的瑞士军刀”,也可简写为 nc)。详见:http://www.oschina.net/translate/linux-netcat-command
使用示例:查看Zookeeper节点状态: echo stat | netcat localhost 2181
netcat是网络工具中的瑞士军刀,它能通过TCP和UDP在网络中读写数据。通过与其他工具结合和重定向,你可以在脚本中以多种方式使用它。使用netcat命令所能完成的事情令人惊讶。
netcat所做的就是在两台电脑之间建立链接并返回两个数据流,在这之后所能做的事就看你的想像力了。你能建立一个服务器,传输文件,与朋友聊天,传输流媒体或者用它作为其它协议的独立客户端。
7、查看端口被哪个进程占用: netstat -lnp|awk 'BEGIN{prt=":8086$"} {if ($4 ~ prt) print $0}'
推广:根据程序所用端口号kill掉程序的脚本:
1 #!/bin/sh 2 thisPort=8087 3 thisPid=`ps x |grep KafkaOffsetMonitor-assembly-0.2.0.jar |grep $thisPort | head -c 10 | grep -o "[0-9]\+"` 4 if [ $thisPid ]; then 5 echo pid is $thisPid , killling ... 6 kill $thisPid 7 echo killed 8 else 9 echo the program is not running, pid is null 10 fi
8、linux中shell变量$#,$@,$0,$1,$2等的含义:
$$ Shell本身的PID(ProcessID)
$! Shell最后运行的后台Process的PID
$? 最后运行的命令的结束代码(返回值)
$- 使用Set命令设定的Flag一览
$* 所有参数列表。如"$*"用「"」括起来的情况、以"$1 $2 … $n"的形式输出所有参数。
$@ 所有参数列表。如"$@"用「"」括起来的情况、以"$1" "$2" … "$n" 的形式输出所有参数。
$# 添加到Shell的参数个数
$0 Shell本身的文件名
$1~$n 添加到Shell的各参数值。$1是第1参数、$2是第2参数
9、lsof使用:(更多可参阅:https://www.cnblogs.com/sparkdev/p/10271351.html)
查看某普通文件被哪些进程打开: lsof /bin/bash 、 lsof /dev/sda1 ,Linux中一切皆文件。故这里的文件可以为文本文件、二进制文件、设备文件等
查看某目录及其下的目录或文件被哪些进程打开: lsof +d /var/log 、 lsof +D /var/log ,两者区别在于前者不会对指定目录递归查询而后者则会
查看某个进程打开了哪些文件: lsof -p 3332 ,数字为进程号
查看指定的若干进程打开了哪些文件: lsof -c cr # ^cr 、 cr[ao] ,查找进程名以cr开头的若干进程打开了哪些文件。(^cr表示不以cr开头、cr[a0]表示以cr或ao开头)
查看被打开的与网络相关的文件:
查看ipv4或ipv6打开的文件: lsof -i 、 lsof -i 4 、 lsof -i 6
查看被打开的与指定端口相关的文件: lsof -i:22 、 lsof -i:22-1024 、 lsof -i TCP:22 、 lsof -i TCP:22-1024 ,可以指定端口范围、后两者进一步加协议条件约束
查看某用户打开的所有文件: lsof -u syslog 、 lsof -u -i syslog ,后者进一步加条件约束
统计系统打开的文件总数: sudo lsof -P -n | wc -l ,-P表示不解析端口号、-n表示不解析主机名,从而加快命令执行速度
恢复删除的文件:详见http://www.cnblogs.com/z-sm/p/6108689.html
10、查看内存使用情况: free [-b/k/m/g/h] ,示例:
1 ivic@test39:~/imtg$ free 2 total used free shared buffers cached 3 Mem: 16367040 8483944 7883096 676 195008 6759508 4 -/+ buffers/cache: 1529428 14837612 5 Swap: 50128892 0 50128892
(1)、Mem为内存分配统计:
total为物理总内存、used为已分配内存(包括buffers、cached),可能部分缓存并未实际使用、free为未分配内存(不包括buffers、cached)
shared为共享内存一般用不到、buffers为系统已分配但未被使用的buffers内存、cached为系统已分配但未使用的cache内存
(2)、-/+ buffers/cache为实际使用内存统计:
used -buffers/cache为已分配的不包括buffers、cached部分的内存,即实际已使用的内存
free +buffers/cache为未分配的加上buffers、cached部分的内存即实际空余的内存。
(3)、swap为磁盘交换分区,当做虚拟内存使用,通常在Mem都被进程使用完时才会使用swap,其大小应不少于物理内存大小。(swap用途:内存不够时数据移到swap、不常用数据移到swap(linux休眠数据放在swap);优点:可运行更多或更大应用程序;缺点:速度比内存慢)
通常物理内存不足以供进程使用时,系统会清理buffers/cached来腾出内存,但这是个耗cpu的操作且不保证一定清理出内存。
在linux的内存分配机制中,优先使用物理内存,当物理内存还有空闲时(还够用),不会释放其占用内存,就算占用内存的程序已经被关闭了,该程序所占用的内存用来做缓存使用,对于开启过的程序、或是读取刚存取过得数据会比较快。
A buffer is something that has yet to be "written" to disk;
A cache is something that has been "read" from the disk and stored for later use.
相关可参考:http://blog.csdn.net/tianlesoftware/article/details/6459044
11、查看内存信息、CPU信息等
查看内存信息: cat /proc/meminfo
查看CPU型号: cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c
查看CPU核数:通过查看 /proc/cpuinfo 得到:
1 # 总核数 = 物理CPU个数 X 每颗物理CPU的核数 2 # 总逻辑CPU数 = 物理CPU个数 X 每颗物理CPU的核数 X 超线程数 3 4 # 查看物理CPU个数 5 cat /proc/cpuinfo| grep "physical id"| sort| uniq| wc -l 6 7 # 查看每个物理CPU中core的个数(即核数) 8 cat /proc/cpuinfo| grep "cpu cores"| uniq 9 10 # 查看逻辑CPU的个数 11 cat /proc/cpuinfo| grep "processor"| wc -l
另外,通过 lscpu 命令也可以看到CPU的汇总信息。其中,Sockets表示物理CPU个数、Core(s) per socket表示每个物理CPU的核数、Thread(s) per core表示每个核支持的超线程数(为0则说明不支持超线程)。这些信息与上面通过查看/proc/cpuinfo得到的信息是一致的,示例如下:
1 ivic@test39:~/imtg$ lscpu 2 Architecture: x86_64 3 CPU op-mode(s): 32-bit, 64-bit 4 Byte Order: Little Endian 5 CPU(s): 8 6 On-line CPU(s) list: 0-7 7 Thread(s) per core: 2 8 Core(s) per socket: 4 9 Socket(s): 1 10 NUMA node(s): 1 11 Vendor ID: GenuineIntel 12 CPU family: 6 13 Model: 30 14 Stepping: 5 15 CPU MHz: 1197.000 16 BogoMIPS: 5852.63 17 Virtualization: VT-x 18 L1d cache: 32K 19 L1i cache: 32K 20 L2 cache: 256K 21 L3 cache: 8192K 22 NUMA node0 CPU(s): 0-7
11、查看带宽:安装工具ethtool,然后通过 ethtool eth0(网卡名) 查看,结果示例如下:
1 ivic@test39:~/imtg$ ethtool em1 2 Settings for em1: 3 Supported ports: [ TP ] 4 Supported link modes: 10baseT/Half 10baseT/Full 5 100baseT/Half 100baseT/Full 6 1000baseT/Full 7 Supported pause frame use: No 8 Supports auto-negotiation: Yes 9 Advertised link modes: 10baseT/Half 10baseT/Full 10 100baseT/Half 100baseT/Full 11 1000baseT/Full 12 Advertised pause frame use: No 13 Advertised auto-negotiation: Yes 14 Speed: 1000Mb/s 15 Duplex: Full 16 Port: Twisted Pair 17 PHYAD: 2 18 Transceiver: internal 19 Auto-negotiation: on 20 MDI-X: on (auto) 21 Cannot get wake-on-lan settings: Operation not permitted 22 Current message level: 0x00000007 (7) 23 drv probe link 24 Link detected: yes
12、top命令,可以用来查看CPU使用情况、 内存占用情况等。详见:top命令参数及显示内容含义详解
ivic@test38:~/imtg$ top top - 14:19:40 up 13 days, 4:22, 1 user, load average: 0.00, 0.01, 0.05 //任务队列信息。load average为系统负载,实际是CPU使用队列的长度的统计信息 Tasks: 146 total, 1 running, 145 sleeping, 0 stopped, 0 zombie //进程数信息。总进程数、正在运行进程数、睡眠进程数、停止的进程数、僵尸进程数 %Cpu(s): 0.0 us, 0.0 sy, 0.0 ni,100.0 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st //CPU占用信息。用户空间占用、内和空间占用、用户空间中改变过优先级的进程占用CPU、空闲CPU时间、等待IO的CPU时间、硬件CPU中断占用、软中断占用、虚拟机占用 的百分比。 KiB Mem: 16367040 total, 853116 used, 15513924 free, 181692 buffers //与下行同为内存信息 KiB Swap: 50128892 total, 0 used, 50128892 free. 368584 cached Mem PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 16815 ivic 20 0 105656 2060 1068 S 0.3 0.0 0:00.37 sshd 16893 ivic 20 0 24964 1664 1156 R 0.3 0.0 0:00.07 top 1 root 20 0 33508 2852 1440 S 0.0 0.0 0:01.06 init 2 root 20 0 0 0 0 S 0.0 0.0 0:00.14 kthreadd 3 root 20 0 0 0 0 S 0.0 0.0 0:00.61 ksoftirqd/0 4 root 20 0 0 0 0 S 0.0 0.0 0:00.00 kworker/0:0 5 root 0 -20 0 0 0 S 0.0 0.0 0:00.00 kworker/0:0H 7 root 20 0 0 0 0 S 0.0 0.0 0:26.18 rcu_sched 8 root 20 0 0 0 0 S 0.0 0.0 0:07.34 rcuos/0 9 root 20 0 0 0 0 S 0.0 0.0 0:17.18 rcuos/1
命令格式: top [-] [d] [p] [q] [c] [C] [S] [s] [n]
d 指定每两次屏幕信息刷新之间的时间间隔。当然用户可以使用s交互命令来改变之。
p 通过指定监控进程ID来仅仅监控某个进程的状态。
q 该选项将使top没有任何延迟的进行刷新。如果调用程序有超级用户权限,那么top将以尽可能高的优先级运行。
S 指定累计模式
s 使top命令在安全模式中运行。这将去除交互命令所带来的潜在危险。
i 使top不显示任何闲置或者僵死进程。
c 显示整个命令行而不只是显示命令名
交互命令(在top命令执行过程中可用这些命令,都是单字母的,若top命令加了s参数,则此交互命令会被屏蔽):
Ctrl+L 擦除并且重写屏幕。 h或者? 显示帮助画面,给出一些简短的命令总结说明。 k 终止一个进程。系统将提示用户输入需要终止的进程PID,以及需要发送给该进程什么样的信号。一般的终止进程可以使用15信号;如果不能正常结束那就使用信号9强制结束该进程。默认值是信号15。在安全模式中此命令被屏蔽。 i 忽略闲置和僵死进程。这是一个开关式命令。 q 退出程序。 r 重新安排一个进程的优先级别。系统提示用户输入需要改变的进程PID以及需要设置的进程优先级值。输入一个正值将使优先级降低,反之则可以使该进程拥有更高的优先权。默认值是10。 S 切换到累计模式。 s 改变两次刷新之间的延迟时间。系统将提示用户输入新的时间,单位为s。如果有小数,就换算成m s。输入0值则系统将不断刷新,默认值是5 s。需要注意的是如果设置太小的时间,很可能会引起不断刷新,从而根本来不及看清显示的情况,而且系统负载也会大大增加。 f或者F 从当前显示中添加或者删除项目。 o或者O 改变显示项目的顺序。 l 切换显示平均负载和启动时间信息。 m 切换显示内存信息。 t 切换显示进程和CPU状态信息。 c 切换显示命令名称和完整命令行。 M 根据驻留内存大小进行排序。 P 根据CPU使用百分比大小进行排序。 T 根据时间/累计时间进行排序。 W 将当前设置写入~/.toprc文件中。这是写top配置文件的推荐方法。
注意 CPU利用率与load average不同:(详情可见:CPU load和CPU利用率的关系)
前者是针对从CPU使用的角度来看的,为统计周期内使用CPU的时间(不是占有时间,占有时间内有可能等待,等待的时间不算在这里的使用时间内)的占比.
后者指的在一段时间内CPU正在处理以及等待CPU处理的进程数之和的统计信息,也就是CPU使用队列的长度的统计信息。
CPU有可能是 低利用率但高load状态,也有可能是高利用率但低load状态。两者没有必然联系。所以仅仅从CPU的使用率来判断CPU是否处于一种超负荷的工作状态还是不够的,必须结合Load Average来全局的看CPU的使用情况和申请情况。
(墙鈡时间wall clock指操作开始到结束所用时间,通常包括各种非运算的等待耗时如等待IO、等待线程阻塞等,详见:GC类型中第5部分与时间有关的部分)
13、统计文档中每个字符出现的次数(通过脚本,详见:http://blog.csdn.net/yutianzuijin/article/details/65627931)
1 #!/bin/sh 2 #运行命令时需要两个参数,分别为文档名、输出文件名 3 for line in `cat $1`; do 4 count=`echo $line|wc -m` 5 echo $count $line 6 7 i=1; 8 while [ "$i" -lt "$count" ]; do 9 one_word=`echo $line|cut -c$i` 10 #echo $i $one_word 11 echo "$one_word" >>temp 12 ((i++)) 13 done 14 done 15 16 sort temp|uniq -c|sort -k1nr > $2 17 18 rm -f temp