去年秋天帮一个客户排查服务器故障,顺手把排查过程记在了笔记里。后来这个笔记越写越长,从一条命令到一段内核报错,从新机器初始化到老机器救火,慢慢攒了不少东西。今天把最有代表性的内容整理出来,聊几个常见的 Linux 使用场景,有些是新手容易卡住的坎,有些是运维老手也可能忽略的细节。内容偏向实际动手,每个知识点我都会说明当时是为什么踩进去的,以及后来怎么绕出来的。
1. 从一次磁盘告警说起:Linux命令不是背的,是拿来救命的
先说个典型的场景。客户那边报警说数据库服务器的磁盘空间快满了,登录上去执行 df -h 一看,根分区确实红了。但顺着 du -sh /* 往下排查的时候,却发现各个目录加起来的总量明显小于磁盘总占用——这中间差了好几十 GB。如果你也遇到过这种情况,说明有文件被删除了,但进程还在持有句柄,空间没有真正释放。
这时候 lsof | grep deleted 能直接帮你找到是哪个进程还拽着那个文件。找到 PID 之后重启对应服务,或者干脆 kill 掉,磁盘空间就回来了。这条命令平时没人会觉得重要,但真正碰到一次线上告警,比背一百遍命令列表都管用。
另外一个高频场景是删文件。很多人习惯 rm -rf 一条命令走天下,但遇到大量小文件的时候,rm 的性能非常差,比如要删除一个包含几万个图片缩略图的目录,rm 可能要跑几分钟。这种场景下我一般用 rsync 配合一个空目录来清空,rsync -a --delete empty_dir/ target_dir/ 的执行速度会比 rm 快很多。原因是 rsync 的删除逻辑走的是批量目录项清理,而 rm 是逐个文件 unlink,两者的系统调用开销差距很大。
排查类似问题的时候还需要警惕动态数据目录的干扰。比如 /var/log、/tmp、/home 这仨目录经常是藏日志和大文件的重灾区。我见过有人把 Docker 的 overlay2 目录直接扔在根分区,结果镜像和容器日志一路涨到磁盘爆满。所以检查的时候不要只看一级目录,要逐层往下走,特别是 /var/lib/docker、/opt 这类第三方应用常用的安装路径,很容易被忽略。
在排查过程中,watch 命令也经常派上用场。分析日志增长是否还在继续时,用 watch -n 1 'df -h /' 每秒刷新一次磁盘占用,能直观看到空间有没有持续下降。如果你要定位某个正在被大量写入的文件,可以按 lsof +L1 找出所有被删除但仍被打开的文件,再结合文件大小排序,基本十秒钟锁定目标。
我个人的习惯是遇到任何异常先开一个终端原地记录执行过的命令和输出,另一个终端做操作。这样不管是回溯问题还是写故障报告,都有据可查。只靠脑子里那几条命令到处试,很容易越弄越乱。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 用户与权限:为什么团队里总是有人 sudo 完就出事儿
很多从 Windows 转过来的同事,最开始接触 Linux 都习惯直接切换到 root 操作。虽然省事,但随之而来的权限问题会比想象中多得多。新建一个用户、配置 sudo、修改文件属主,这些操作用到的命令不多,但背后的模型和 Windows 差别很大,值得单独捋一遍。
新建用户这个动作,很多人只记得 useradd 加一个用户名,但忘了指定家目录和 shell。比如执行 useradd testuser 之后,系统默认创建的家目录可能是 /home/testuser,但默认的 shell 可能是 /bin/sh,也可能因为 umask 或 skel 配置的问题,家目录里缺少常规的 .bashrc、.bash_profile 文件。结果用户第一次登录进去,命令提示符长得奇怪,补全和别名也没有,新手一下就懵了。
正确的做法是创建用户时一次性指定完整信息:
bash复制useradd -m -d /home/testuser -s /bin/bash testuser
passwd testuser
-m 表示同时创建家目录,-d 指定家目录路径,-s 指定登录 shell。如果你希望新用户能执行 sudo 命令,需要把用户加入 wheel 组或者编辑 /etc/sudoers 文件。很多人直接去改 /etc/sudoers,结果语法错误导致 sudo 完全不可用,最后只能进单用户模式修复,非常被动。安全的做法是用 visudo 命令打开编辑,它会在保存时帮你做语法检查,避免把自己锁在外面。
权限这块,我见过一个特别典型的坑:项目目录已经用 chown -R appuser:appgroup /data/project 授权了,但某个子目录就是从代码仓库里带着可执行权限传上来的,或者反过来,某个脚本明明有执行权限,却因为挂载时用了 noexec 参数没法启动。这种问题查权限表是查不出来的,得检查挂载参数。建议对权限有疑问时先跑 mount 和 df -T 看文件系统类型与挂载选项,再决定是不是权限本身的问题。
sudo 的配置同样有讲究。比如想允许某个用户只执行特定的几条命令,可以在 /etc/sudoers.d/ 下放一个单独的文件:
bash复制testuser ALL=(ALL) NOPASSWD: /usr/bin/systemctl restart nginx, /usr/bin/sy
