陈大剩博客

总结一些线上问题排查的命令,可能用得到!

  • 陈大剩
  • 2020-04-25 17:42:47
  • 3242

一、了解机器连接数情况;

问题:1.2.3.4的sshd的监听端口是22,如何统计1.2.3.4的sshd服务各种连接状态(TIME_WAIT/ CLOSE_WAIT/ ESTABLISHED)的连接数。

netstat -n | grep 1.2.3.4:22 | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}’
netstat -lnpta | grep ssh | egrep “TIME_WAIT | CLOSE_WAIT | ESTABLISHED”
n [阿里云运维可用]

说明:netstat是追查网络连接问题常用工具,和grep/awk结合更是神器,当然如果在阿里云上,还有更方便的方法,对于不会awk编程,有兴趣可以在慕课网上学习;

二、从已经备份好的日志中查询数据;

问题:从已备份的mysql.2020-04-25.log.bz2日志中,找出包含关键字1.2.3.4的日志有多少条;

mysql.2020-04-25.log.bz2 | grep '1.2.3.4' | wc -l
bzgrep '1.2.3.4' mysql.2020-04-25.log.bz2 | wc -l
less mysql.2020-04-25.log.bz2 | grep '10.37.9.11' | wc -l

说明:线上日志文件一般以bz2 压缩之后保留,如果解压查询,非常耗空间与时间,bzcat和bzgrep是PHP开发必须掌握的工具。

三、备份服务的技巧

问题:打包备份/www/wwwroot/c69p目录,排除掉目录中的logs和目录,打包好的文件存放在/www/backup目录下;

tar -zcvf /www/wwwroot/c69p  -exclude /www/wwwroot/c69p/storage/logs

说明:这个命令线上应用较为频繁,在项目需要打包迁移时,常常需要排除掉日志目录,-exclude是需要掌握的参数

四、查询线程数

问题:查询服务器运行服务的总线程数,当机器线程数超报警阀值时,能快速查出相关进程及线程信息;

ps -eLf | wc -l
pstree -p | wc -l
ps -ef --forest [查看进程树]

五、磁盘IO异常排查

问题:磁盘IO异常如何排查,类似写入慢或当前使用率较高,请查出导致磁盘IO异常高的进程ID;
第一步:

iotop -o

查看当前正在写磁盘操作的所有进程ID信息;
第二步:如果此时各项写入指标都很低,基本没有大的写入操作,则需要排查磁盘自身。可以查看系统 dmesg

cat /var/log/message

看看是否有相关的磁盘异常报错,同时可以在写入慢的磁盘上touch一个空文件看看,是否磁盘故障导致无法写入。

六、显示文件,过滤注释

问题:显示server.conf 文件,屏蔽掉#号开头的注释行;

sed -n '/^[#]/!p' server.conf
sed -e '/^#/d' server.conf
grep -v "^#" server.conf

说明:sed的命令很强大,开发人员应该掌握;

分享到:
0

说点儿什么吧

头像

表情

本站由陈大剩博客程序搭建 | 湘ICP备17009938号| Copyright © 2017 - 陈大剩博客 | 本站采用创作共用版权:CC BY-NC 4.0

站长统计| 文章总数[31]| 评论总数[12]| 登录用户[21]| 时间点[33]

登入

社交账号登录