常用Shell命令集合和使用技巧(推荐)

一、控制台使用技巧

基于我平时的工作经验，总结出一些我常用的快捷键

1.1 操作快捷键

      Ctrl+r：可以快速查找历史命令

      Ctrl+a / Ctrl+e：移动光标到命令行首 / 行尾

      Ctrl+w / Ctrl+k：删除光标之前 / 之后的内容

1.2 VIM文件编辑快捷键

       ZZ：文件保存并退出

1.3 进程操作快捷键

       Ctrl+c：强制终止程序

       Ctrl+z：挂起一个进程

       Ctrl+d: 终端输入exit后回车

1.4 linux命令中快捷键(top)

       Shift + p: 根据CPU使用率排序

       Shift + m: 根据Mem使用率排序

二、Shell命令合集

首先，我们先对Shell命令合集做一个分类，主要可分为 空间分析，指定文件操作，链接状态分析，IP信息提取

2.1 空间分析

场景1: 磁盘空间不足，需快速定位日志目录

该场景主要用在linux操作系统磁盘空间不足，需要快速定位磁盘使用情况，对文件的磁盘使用率做排序，需要用到如下组合命令：

du -x --max-depth=1 / | sort -k1 -rn #-x 表示跳过其他文件系统

-x表示跳过其他文件系统，只分析本文件系统里面的文件，排除一些额外的干扰项；--max-depth=1 表示只分析/ 目录下第一级目录下的所有文件大小；-k 表示具体按照那一列进行排序；-r是倒序排列；-n表示只对数值排序

场景2：系统产生很多碎片文件，导致 inode 资源不足

该场景主要是操作系统产生大量碎片文件，随之消耗大量innode，innode的过渡使用会导致innode资源不足无法创建文件，因为du 命令只能统计磁盘使用情况无法统计碎片文件的个数，所以统计碎片文件个数需要用到如下组合命令

find -type f | awk -F/ -v OFS=/ 
 '{$NF="";dir[$0]++}END
{
for (i in dir) print dir[i] i}' | sort -k1 -rn | head

这条命令比较复杂，使用了find，awk，sort，head。

通过find找出指定文件类型的文件，然后管道给 awk，它可以把文本内容按行进行格式化输出并展示，-F / 指定处理文件时字符串之间以 / 进行分割，-v OFS=/ 表示文件显示结果时以 / 进行分割展示。对于awk命令整体规则而言有一个 {} END {} 格式，前面的 {} 表示行处理操作，END{} 表示行处理后需要进行整体结果出，在行处理操作逻辑中，设置$NF 为空表示将每一行的文件名信息去除，从而只保留目录路径，dir 是一个自增数组，用于统计结果。最后通过 for 循环进行遍历输出dir关联数组中所有行信息。

2.2 指定文件操作

场景一：批量查找文件对内容做替换

场景一适用于一个目录下有多个子目录，并且子目录下有大量文件，我们需要找到指定文件然后替换文件里面的内容，需要用到如下组合命令：

(find . -name "*.txt"|xargs tar -cvf test.tar)
 && cp -f test.tar /home/.

通过find命令查找当前目录下的所有子文件夹名称为 consumer.xml 的文件，然管道给 sed ，通过-i把文件内容替换。

场景二：批量查找文件作拷贝打包

场景二主要是用在对查找到的指定文件进行打包，然后拷贝到指定路径，可以使用如下组合命令：

netstat -n | awk '/^tcp/{arr[$NF]++
} 
END {for (i in arr) print arr[i] " " i
}'

查找当前目录下的所有以 .txt结尾的文件，然后打包成test.tar，如果打包成功则把压缩包拷贝到/home目录下

2.3 网络连接状态分析

场景一：列出tcp协议下的连接,并统计所有状态的总量

场景一主要用在查看服务器当前有多少TCP类型的连接，分析TCP/IP网络状态(ESTABLISHED，TIME_WAIT)

netstat -n | awk '/^tcp/{arr[$NF]++} END {for (i in arr) print arr[i] " " i}'

对于awk命令整体规则而言有一个 {} END {} 格式，上述命令分析了TCP协议下，所有类型连接的总数，可用于分析查看当前服务器连接数。

2.4 IP信息提取

场景一：通过命令获取主机IP信息

ip a|grep "global"|awk'{print $2}'|awk -F/'{print $1}'

ip a负责查看主机上所有的网卡信息，然后过滤 global关键字，打印出第二列，再把子网掩码移除掉即可获取到主机ip

三、常见问题

问题一：Shell适不适合作多并发任务

答：不适合，Shell中一般是通过nohup的方式把需要并发执行的任务放入后台，这样做有存在一些问题，包括  进程状态不好控制，进程间信息共享一般以文件形式进行等，所以当需要进行大的并发任务执行时，建议使用Python，Go，PHP语言实现并发。

问题二：Shell适合用在什么场景中

答：Shell 适合用在追求运维高效（非性能高效）要求的简单场景中，如日志切割、进程分析、系统初始化等。

总结