当前位置 博文首页 > 常用Shell命令集合和使用技巧(推荐)

    常用Shell命令集合和使用技巧(推荐)

    作者:李俊的博客 时间:2021-02-03 15:13

    一、控制台使用技巧

    基于我平时的工作经验,总结出一些我常用的快捷键

    1.1 操作快捷键

          Ctrl+r:可以快速查找历史命令

          Ctrl+a / Ctrl+e:移动光标到命令行首 / 行尾

          Ctrl+w / Ctrl+k:删除光标之前 / 之后的内容

    1.2 VIM文件编辑快捷键

           ZZ:文件保存并退出

    1.3 进程操作快捷键

           Ctrl+c:强制终止程序

           Ctrl+z:挂起一个进程

           Ctrl+d: 终端输入exit后回车

    1.4 linux命令中快捷键(top)

           Shift + p: 根据CPU使用率排序

           Shift + m: 根据Mem使用率排序

    二、Shell命令合集

    首先,我们先对Shell命令合集做一个分类,主要可分为 空间分析,指定文件操作,链接状态分析,IP信息提取

    2.1 空间分析

    场景1: 磁盘空间不足,需快速定位日志目录

    该场景主要用在linux操作系统磁盘空间不足,需要快速定位磁盘使用情况,对文件的磁盘使用率做排序,需要用到如下组合命令:

    du -x --max-depth=1 / | sort -k1 -rn #-x 表示跳过其他文件系统

    -x表示跳过其他文件系统,只分析本文件系统里面的文件,排除一些额外的干扰项;--max-depth=1 表示只分析/ 目录下第一级目录下的所有文件大小;-k 表示具体按照那一列进行排序;-r是倒序排列;-n表示只对数值排序

    场景2:系统产生很多碎片文件,导致 inode 资源不足

    该场景主要是操作系统产生大量碎片文件,随之消耗大量innode,innode的过渡使用会导致innode资源不足无法创建文件,因为du 命令只能统计磁盘使用情况无法统计碎片文件的个数,所以统计碎片文件个数需要用到如下组合命令

    find -type f | awk -F/ -v OFS=/ 
     '{$NF="";dir[$0]++}END
    {
    for (i in dir) print dir[i] i}' | sort -k1 -rn | head

    这条命令比较复杂,使用了find,awk,sort,head。

    通过find找出指定文件类型的文件,然后管道给 awk,它可以把文本内容按行进行格式化输出并展示,-F / 指定处理文件时字符串之间以 / 进行分割,-v OFS=/ 表示文件显示结果时以 / 进行分割展示。对于awk命令整体规则而言有一个 {} END {} 格式,前面的 {} 表示行处理操作,END{} 表示行处理后需要进行整体结果出,在行处理操作逻辑中,设置$NF 为空表示将每一行的文件名信息去除,从而只保留目录路径,dir 是一个自增数组,用于统计结果。最后通过 for 循环进行遍历输出dir关联数组中所有行信息。

    2.2 指定文件操作

    场景一:批量查找文件对内容做替换

    场景一适用于一个目录下有多个子目录,并且子目录下有大量文件,我们需要找到指定文件然后替换文件里面的内容,需要用到如下组合命令:

    (find . -name "*.txt"|xargs tar -cvf test.tar)
     && cp -f test.tar /home/.

    通过find命令查找当前目录下的所有子文件夹名称为 consumer.xml 的文件,然管道给 sed ,通过-i把文件内容替换。

    场景二:批量查找文件作拷贝打包

    场景二主要是用在对查找到的指定文件进行打包,然后拷贝到指定路径,可以使用如下组合命令:

    netstat -n | awk '/^tcp/{arr[$NF]++
    } 
    END {for (i in arr) print arr[i] " " i
    }'

    查找当前目录下的所有以 .txt结尾的文件,然后打包成test.tar,如果打包成功则把压缩包拷贝到/home目录下

    2.3 网络连接状态分析

    场景一:列出tcp协议下的连接,并统计所有状态的总量

    场景一主要用在查看服务器当前有多少TCP类型的连接,分析TCP/IP网络状态(ESTABLISHED,TIME_WAIT)

    netstat -n | awk '/^tcp/{arr[$NF]++} END {for (i in arr) print arr[i] " " i}'

    对于awk命令整体规则而言有一个 {} END {} 格式,上述命令分析了TCP协议下,所有类型连接的总数,可用于分析查看当前服务器连接数。

    2.4 IP信息提取

    场景一:通过命令获取主机IP信息

    ip a|grep "global"|awk'{print $2}'|awk -F/'{print $1}'

    ip a负责查看主机上所有的网卡信息,然后过滤 global关键字,打印出第二列,再把子网掩码移除掉即可获取到主机ip

    三、常见问题

    问题一:Shell适不适合作多并发任务

    答:不适合,Shell中一般是通过nohup的方式把需要并发执行的任务放入后台,这样做有存在一些问题,包括  进程状态不好控制,进程间信息共享一般以文件形式进行等,所以当需要进行大的并发任务执行时,建议使用Python,Go,PHP语言实现并发。

    问题二:Shell适合用在什么场景中

    答:Shell 适合用在追求运维高效(非性能高效)要求的简单场景中,如日志切割、进程分析、系统初始化等。

    总结

    js