程序员生存指南-Linux篇

文件管理

awk

ps -ef | grep \'main\' | awk \'{print $2}\'

cat

显示文件内容

cat /etc/issue
cat /proc/meminfo

chattr

chgrp

修改文件或目录的所属组

chgrp admin file1 # 改变文件file1的所属组为adm

chmod

修改权限

chmod 764 /etc/services
chmod g+w file1  # 赋予文件file1所属组写权限   <ugo+rwx>

path=/opt/package/orochiplus-upgrade/buffalo/dt-buffalo-serv-server/target/logs/app
for line in `ls /opt/package/orochiplus-upgrade/buffalo/dt-buffalo-serv-server/target/logs/app`
do
 chmod -R +x $path/$line
 echo $path/$line
 find $path/$line/ -mtime +30 | xargs rm -rf
done

chown

修改文件或目录的所有者

chown liuhh /etc/services

cksum
cmp

cp

复制文件或目录

cp file1 file2 dir1 # 将文件file1、file2复制到目录dir1
cp -R dir1 dir2 # 将dir1下的所有文件及子目录复制到dir2
cp -rf Label_lvshou_fill_vertify /home/liuhuihe/workspace/code_run/  # 将一个文件夹复制到另一个文件夹下
cp -rf /home/lhh/workspace/customer_risk_pro/*  /home/lhh/workspace/code_run/customer_risk_pro/
cp -rf /usr/local/KingSTD_1/*  /usr/local/webapps/KingSTD_2/    #将dir1下的所有文件及子目录复制到dir2,覆盖

diff

diff 命令用于比较文件的差异。

diff 以逐行的方式，比较文本文件的异同处。如果指定要比较目录，则 diff 会比较目录中相同文件名的文件，但不会比较其中子目录。

diff log2014.log log2013.log

diffstat
file

find

查找文件或目录

find /etc -name init #在目录/etc中查找文件init
find / -size +204800 # 在根目录下查找大于200MB的文件
find / -user sam # 在根目录下查找所有者为sam的文件
find /etc -ctime -1  # 在/etc下查找24小时内被修改过属性的文件和目录

#!/bin/bash
log_path=(/home/dmp/logs
		  /opt/package/orochiplus/web/logs 
		  /var/log/ambari-agent 
		  /var/log/hadoop/hdfs 
		  /var/log/hadoop-yarn/yarn 
		  /var/log/ambari-server 
		  /var/log/hive 
		  /var/log/ambari-metrics-collector)
		  
for path in ${log_path[@]}
do 
  chmod -R +x $path/
  find $path -mtime +30 -regextype posix-extended -regex ".*\.(log|out|err)" | xargs rm
done
echo "clean ok..."

git
gitview

head

查看文件的前N行

head -100 /etc/services

indent
less

ln

创建链接文件,目录只能创建软链接

ln -s  /etc/issue  /issue.soft # 创建文件/etc/issue的软链接/issue.soft
ln /etc/issue  /issue.hard # 创建文件/etc/issue的硬链接/issue.hard

locate

查找文件或目录

locate ls  # 列出所有跟file相关的文件

lsattr
mattrib
mc
mcopy
mdel
mdir
mktemp
mmove
more

分页显示文件内容

more /etc/services

mread
mren
mshowfat
mtools
mtoolstest

mv

移动文件、更名

mv file1 file3 # 将当前目录下文件file1更名为file3
mv file1 file2 file3 dir2  # 将文件file1、 file2 file3移动到目录dir2下

od
paste
patch
rcp
read
rhmask

rm

删除文件或目录

rm he  # 删除文件he
rm -r river # 删除目录river

scp

# 从106复制文件到92.8

# 92.8上面
scp root@172.16.92.106:/home/Anaconda3-5.0.1-Linux-x86_64.sh /home

# 106上面
scp /home/Anaconda3-5.0.1-Linux-x86_64.sh root@172.16.92.8:/home

slocate
split

tail

查看文件的后N行

tail -100 /etc/services
tail -f ./logs/catalina.out

tee
tmpwatch

touch

创建空文件

touch student # 创建空文件student
touch  /river/student   # 创建空文件student

umask
updatedb
whereis

which

显示系统命令所在目录

which hive

文档编辑

col
colrm
comm
csplit
ed
egrep
ex
expr
fgrep
fmt
fold

grep

在文件中搜寻字串匹配的行并输出

grep ftp /etc/services

ls | grep staff
ps -ef | grep brm_distribution_function

#!/bin/sh

task=$1

source /home/digger/.bashrc
set -ex

dt=`date +%Y-%m-%d_%H-%M-%S`

echo "kill zombie task"
ps avx | grep $task | grep -v grep | awk \'{print $1}\' | xargs -I {} kill {}

echo "run today task"
python main.py $task > logs/$task.$dt.log

ispell
jed
joe
join
let
look
mtype
pico
rgrep
sed
sort
spell
tr
uniq

wc

命令用于计算字数

wc testfile           # testfile文件的统计信息  

3 92 598 testfile       # testfile文件的行数为3、单词数92、字节数598

其中，3 个数字分别表示testfile文件的行数、单词数，以及该文件的字节数。

如果想同时统计多个文件的信息，例如同时统计testfile、testfile_1、testfile_2，可使用如下命令：

wc testfile testfile_1 testfile_2   #统计三个文件的信息

输出结果如下：

3 92 598 testfile                    # 第一个文件行数为3、单词数92、字节数598  
9 18 78 testfile_1                   # 第二个文件的行数为9、单词数18、字节数78  
3 6 32 testfile_2                    # 第三个文件的行数为3、单词数6、字节数32  
15 116 708 总用量                    # 三个文件总共的行数为15、单词数116、字节数708

文件传输

bye
ftp
ftpcount
ftpshut
ftpwho
lpd
lpq
lpr
lprm
ncftp
tftp
uucico
uucp
uupick
uuto

磁盘管理

cd

切换目录

cd /   # 切换到根目录
cd ..   # 回到上一级目录
cd ./home # 当前目录下的home目录
cd ~   # 切换到HOME目录
cd -   # 切换到前一目录

#!/bin/bash
source /etc/profile

cd /home/dmp/script/py/AddressTranform /usr/bin/python3 main.py

df

显示文件系统的磁盘使用情况，默认情况下df -k 将以字节为单位输出磁盘的使用量

df -k
df -h  #使用-h选项可以以更符合阅读习惯的方式显示磁盘使用量

dirs

du

du命令用于显示目录或文件的大小。du会显示指定的目录或文件所占用的磁盘空间。

du -h --max-depth=1 /home

edquota
eject
lndir

ls

显示目录文件

ls -a # 显示所有文件，包括隐藏文件
ls -l # 详细信息显示
ls -al # 所有文件详细信息

JAR_NAME=`ls | grep jar-with-dependencies`

mcd
mdeltree
mdu

mkdir

创建新目录

参数：-p 确保目录名称存在，如果目录不存在的就新创建一个。

mkdir river 创建目录river

directory=/home/dmp/lixiaoli/yjk_dm
loaddate=`date -d "-1 day" "+%Y-%m-%d"`
mkdir -p ${directory}/log/${loaddate}/

mlabel
mmd
mmount
mount
mrd
mzip

pwd

当前工作目录

quota
quotacheck
quotaoff
quotaon
repquota
rmdir
rmt
stat
tree
umount

磁盘维护

badblocks
cfdisk
dd
e2fsck
ext2ed
fdformat
fdisk
fsck
fsck.ext2
fsck.minix
fsconf
hdparm
losetup
mbadblocks
mformat
mkbootdisk
mkdosfs
mke2fs
mkfs
mkfs.ext2
mkfs.minix
mkfs.msdos
mkinitrd
mkisofs
mkswap
mpartition
sfdisk
swapoff
swapon
symlinks
sync

网络通讯

apachectl
arpwatch
cu
dip
dnsconf
efax
getty
httpd

ifconfig

查看网络设置信息

ifconfig -a  # 查看网络设置信息

lsof

lsof(list open files)是一个列出当前系统打开文件的工具。

lsof 查看端口占用语法格式：

lsof -i:8080：查看8080端口占用

lsof abc.txt：显示开启文件abc.txt的进程
lsof -c abc：显示abc进程现在打开的文件
lsof -c -p 1234：列出进程号为1234的进程所打开的文件
lsof -g gid：显示归属gid的进程情况
lsof +d /usr/local/：显示目录下被进程开启的文件
lsof +D /usr/local/：同上，但是会搜索目录下的目录，时间较长
lsof -d 4：显示使用fd为4的进程
lsof -i -U：显示所有打开的端口和UNIX domain文件

mesg
mingetty
minicom
nc
netconf
netconfig

netstat

netstat -tunlp 用于显示 tcp，udp 的端口和进程等相关情况。

netstat 查看端口占用语法格式：

netstat -tunlp | grep 端口号

例如查看 8000 端口的情况，使用以下命令：

netstat -tunlp | grep 8000

tcp        0      0 0.0.0.0:8000            0.0.0.0:*               LISTEN      26993/nodejs

更多命令：

netstat -ntlp   //查看当前所有tcp端口
netstat -ntulp | grep 80   //查看所有80端口使用情况
netstat -ntulp | grep 3306   //查看所有3306端口使用情况

newaliases

ping

测试网络连通性

ping 192.168.1.1

ppp-off
pppsetup
pppstats
samba
setserial
shapecfg
smbclient
smbd
statserial
talk
tcpdump
telnet
testparm
traceroute
tty
uulog
uuname
uustat
uux

wall

向所有用户广播信息

write

向一个用户发信息

ytalk

系统管理

adduser
chfn
chsh

date

设置系统日期

date

date -d "-1 day" "+%Y-%m-%d" # 昨天 2019-12-21

exit
finger

free

显示系统当前内存的使用情况，包括已用内存、可用内存和交换内存的情况，默认情况下free会以字节为单位输出内存的使用量

查看所有内存的汇总，请使用-t选项，-g为GB，-m为MB，-k为KB，-b为字节

free -m
free -t　-g
free -g

fwhios
gitps
groupadd
groupdel
groupmod
halt
id

kill

在查到端口占用的进程后，如果你要杀掉对应的进程可以使用 kill 命令：kill -9 PID

如上实例，我们看到 8000 端口对应的 PID 为 26993，使用以下命令杀死进程：

kill -9 26993

# 根据名字包含来kill
ps x | grep main_LabelCustomer | grep -v grep |awk \'{print $1}\'|xargs kill -9

last
lastb
login
logname
logout
logrotate
newgrp
nice
procinfo

ps

用法：ps aux 显示所有包含其他使用者的行程

用法：ps -ef 是用标准的格式显示进程的

ps -ef
ps -ef | grep river    # 在进程显示结果中匹配与river相关的内容并输出
ps -ef | more
ps auxw|head -1;ps auxw|sort -rn -k4|head -10  # 查看内存占用前十的进程

#linux下获取占用CPU资源最多的10个进程，可以使用如下命令组合：
ps aux|head -1; ps aux|grep -v PID|sort -rn -k +3|head

#linux下获取占用内存资源最多的10个进程，可以使用如下命令组合：
ps aux|head -1; ps aux|grep -v PID|sort -rn -k +4|head

pstree

reboot

重启系统

reboot

renice
rlogin
rsh
rwho
screen

shutdown

关机

shutdown -h now

skill
sleep
sliplogin
su
sudo
suspend
swatch
tload

top

top命令会显示当前系统中占用资源最多的一些进程

# 显示指定的进程信息，显示进程号为139的进程信息，CPU、内存占用率等
top -p 139

uname

uname可以显示一些重要的系统信息，例如内核名称、主机名、内核版本号、处理器类型之类的信息

uname -a

useradd
userconf
userdel
usermod
vlock
w
who
whoami
whois

系统设置

alias
apmd
aumix
bind
chkconfig
chroot
clear
clock
crontab
declare
depmod
dircolors
dmesg
enable
eval

export

export PATH=/root/anaconda3/bin:$PATH

fbset
gpasswd
grpconv
grpunconv
hwclock
insmod
kbdconfig
lilo
liloconfig
lsmod
minfo
mkkickstart
modinfo
modprobe
mouseconfig
ntsysv

passwd

passwd用于在命令行修改密码

pwconv
pwunconv
rdate
reset
resize
rmmod
rpm
set
setconsole
setenv
setup
sndconfig
SVGATextMode
time
timeconfig
ulimit
unalias
unset

备份压缩

bunzip2

解压缩

bunzip2 -k file1.bz2

bzip2

压缩文件

bzip2 -k file1 # -k 产生压缩文件后保留原文件，压缩后文件格式：.bz2

bzip2recover
compress
cpio
dump

gunzip

解压缩.gz的压缩文件

gunzip file1.gz

gzexe

gzip

压缩文件（不能压缩目录）

lha
restore

tar

打包目录

tar -zcvf dir1.tar.gz dir1   将目录dir1压缩成一个打包并压缩的文件
tar -zxvf dir1.tar.gz 解压

    -c 产生.tar打包文件
    -v 显示详细信息
    -f 指定压缩后的文件名指定压缩后的文件名
    -z 打包同时压缩

unarj

unzip

解压.zip的压缩文件

unzip test.zip

uudecode
uuencode

zip

压缩文件或目录

zip services.zip /etc/services   # 压缩文件
zip -r test.zip /test  # 压缩目录

# 压缩文件104
cd /home/liuhuihe
zip -r workspace.zip workspace

# 92.8
scp root@172.16.92.104:/home/liuhuihe/workspace.zip /home/liuhuihe
unzip workspace.zip

zipinfo

设备管理

dumpkeys
loadkeys
MAKEDEV
rdev
setleds

其它

man

获取帮助信息

man ls

info

获取帮助信息

info ls

whatis

获得索引的简短说明信息

whatis ls

wget

使用wget从网上下载软件、音乐、视频

wget http://prdownloads.sourceforge.net/sourceforge/nagios/nagios-3.2.1.tar.gz

输入/输出重定向

或>> 输出重定向

ls -l /tmp > /river/he

< 输入重定向

wall < /etc/motd

2> 错误输出重定向

cp -R /usr /backup/usr.bak 2> /bak.error

管道

将一个命令的输出传送给另一个命令，作为另一个命令的输入。

ls -l / | grep river | wc -l

命令连接符

； # 用；间隔的各命令按顺序依次执行。
&& # 前后命令的执行存在逻辑与关系，只有&&前面的命令执行成功后，它后面的命令才被执行。
|| # 前后命令的执行存在逻辑或关系，只有||前面的命令执行失败后，它后面的命令才被执行。

命令替换符

将一个命令的输出作为另一个命令的参数。

ls -l `which touch`