进程死了,尸体为什么还占着 PID

top 里偶尔看到状态为 Z、命令名带 defunct 的进程,kill -9 打上去纹丝不动——很多工程师第一次遇到都会懵:杀不掉的进程是什么妖怪?答案是僵尸(zombie):一个已经完全退出、只差「最后一步」的进程。它不占内存页、不占 CPU、打不开任何文件,唯一剩下的资产是一份元数据:退出码、终止信号、资源使用统计(rusage),以及那个还没被回收的 PID。
为什么内核不直接把进程抹掉?因为退出结果必须有人来领。父进程 fork 出你,就有资格通过 wait 系列拿回你的退出状态——这是 Unix 进程模型的契约:谁创建谁负责收尸。子进程退出后,内核把这份「死亡报告」挂在进程表项里保持可读,等父进程来取。取走的动作叫 reaping(收尸),做完这一步,内核才真正释放 PID 与 task_struct。所以僵尸的本质是「等报告被领取的死进程」,杀它毫无意义——它已经死了,能解决它的是它爹。
flowchart TB
A["RUNNING"] -->|"exit / exit_group / 被信号杀死"| B["do_exit 清理:mm、文件、信号表逐一归还"]
B --> C["EXIT_ZOMBIE:只剩退出码与 rusage"]
C -->|"父进程 wait/waitpid"| D["release_task:回收 PID 与 task_struct"]
C -->|"父进程已死或忽略 SIGCHLD"| E["内核自动收尸(autoreap)"]
C -->|"父进程先退出"| F["被 init 或最近的 subreaper 收养"]
F -->|"收养者 wait"| D
do_exit 的清理清单
进程从活体到僵尸的过程由 do_exit 驱动(多线程进程的统一入口是 exit_group,由主线程或任一线程携带全组语义调用)。清理顺序大致是一条确定的清单:先把 task_struct 打上 PF_EXITING 标志让调度器不再选它;然后依次归还资源——地址空间(mm 的引用计数递减,最后一个用户释放整份页表)、打开的文件表、文件系统根与 cwd、信号处理表、各种 namespace 引用;中间还要处理线程组语义:线程定向的挂起信号作废,进程定向的信号按组规则移交。
线程组语义里有一个容易误解的点:单个线程退出与整个进程退出是两条路径。普通 pthread_exit(或从线程函数 return)只走本线程的轻量清理,线程聚合进组内的退出状态,不产生对父进程可见的僵尸——父进程眼里只有一个进程;只有最后一个线程退出(触发 exit_group)时进程才真正走进僵尸态。多线程程序的「线程泄漏」检测因此不能看僵尸,要看 /proc/[pid]/task 目录下的条目数——线程没有收尸问题,只有泄漏问题,两件事别混为一谈。
清理完成后走到 exit_notify:这一步决定两件事——给父进程发什么信号(默认 SIGCHLD,可被线程组的 exit_signal 改动),以及自己进入什么状态。父进程显式声明了忽略 SIGCHLD(SIG_IGN)或设置了 SA_NOCLDWAIT,内核认为收尸意愿明确,直接自动收尸、一步到位;否则进程停在 EXIT_ZOMBIE 等待。最后 schedule() 把 CPU 让出去,且再也不回来——do_exit 是内核里少数「永不返回」的调用点之一。系列第 87 篇讲过 pidfd 的 poll:进程进入僵尸态的那一刻,pidfd 变得可读,说的正是这个状态机节点——僵尸是「死亡可被观测」的载体,彻底消失反而没法 poll。
status 整数的编码规则
wait 拿回来的 status 是一个整数位图,低 16 位编码了全部退出信息:被信号杀死时低 7 位是信号编号,第 7 位是 core dump 标志,第 8 到 15 位在正常退出时是退出码(0 到 255)。工程上不该手工算位,用 WIFEXITED、WEXITSTATUS、WIFSIGNALED、WTERMSIG、WCOREDUMP 这组宏来读——但知道编码有实际价值:日志里常见的 exit status 256 不是「退出码 256」(退出码一个字节装不下),而是 WEXITSTATUS 位域上的 1 左移了 8 位,说明真实退出码是 1;status 9 则是低 7 位上的 SIGKILL。会读这个整数,看监控日志就能秒判进程是正常退出还是被杀。
wait 家族:尸体火化的唯一途径
wait 与 waitpid 是收尸的正统入口:wait(&status) 等价于 waitpid(-1, &status, 0),阻塞直到任一子进程退出。waitpid 的第一个参数支持精确选择(指定 PID)、同组选择(负的进程组号)与任意子进程(-1);第三个参数的 WNOHANG 把阻塞等待变成轮询——没有已退出的子进程时立即返回 0。waitid 是更新的接口,支持按 pidfd(第 87 篇)收尸,还有一个独特的 WNOWAIT 标志:拿到退出状态但保持僵尸不回收,留给别的协作者后续处理——「先看一眼报告,尸体留给别人火化」。
内核侧的对应路径是 do_wait:从自己的子进程链表里找到 EXIT_ZOMBIE 的项,取走退出码与 rusage,调 release_task 彻底回收。父子之间还有一条隐性约定:wait 返回的 rusage 会累计进父进程的 RUSAGE_CHILDREN 统计,shell 由此能报出整条管道的 CPU 消耗。
wait 家族还有一个常被遗忘的能力:报告「未死但停了」的子进程。作业控制场景下(shell 的 Ctrl+Z),子进程进入停止态,默认的 wait 看不见它;加 WUNTRACED 才能拿到停止事件,WCONTINUED 拿恢复执行事件——bash 报告 Suspended 与 Running 状态变化靠的就是这个。与 stop 状态相关的还有一组细节:被 SIGSTOP/SIGTSTP 停住的进程不是僵尸,仍占全套资源,只是不参与调度;waitid 的 WSTOPPED 与 WCONTINUED 对应同样的能力。对不做作业控制的服务端程序,这些选项可以不碰,但读 shell 代码时要知道它们是 wait 家族语义的一部分,而不是 shell 自己的魔法。
孤儿去哪儿:收养链与 subreaper
父进程先于子进程退出时,子进程(或还没被收尸的僵尸)必须被重新安置,否则报告永远无人领取。默认收养者是 init(PID 1),它被内核与用户空间约定为「永远在等、永远会 wait」的进程,收到收养的僵尸后立刻完成收尸。这就是经典的双 fork 守护进程技巧存在的原因:第一层子进程立即退出,孙子进程被 init 收养,从此退出后自动被收尸,不会产生僵尸。系列讲 daemon 进程与会话时提过这套手法,它的动机正在本篇。
现代内核(3.4 起)给这套机制加了自定义收养点:PR_SET_CHILD_SUBREAPER 可以把本进程声明为 subreaper,此后它管辖范围内的孤儿不再送给 init,而是送给「祖先链上最近的 subreaper」。systemd、容器 runtime 都是重度用户:容器内 PID 1 可能是个根本不会 wait 的应用进程,runtime 声明自己为 subreaper,把孤儿僵尸统一揽到能负责任的进程手里。这一开关对进程树语义的改动极大——「谁负责收尸」从固定答案变成了可配置项,排查僵尸时顺着 subreaper 链找收养人成了新技能。
双 fork 与 subreaper 是同一问题的两代答案,取舍值得摆明。双 fork 的优势是零配置、行为可预测,代价是进程树多一层跳转、中间进程的退出也要有人接;subreaper 的优势是进程拓扑保持原样、收养语义可控,代价是它把收尸责任压给了声明者——声明了却不 wait,问题只是换了个地方。工程判断:短生命周期的后台化需求用双 fork(或直接由 daemon 化库处理),长命管理进程(supervisor、runtime)用 subreaper 并配套自己的收尸循环,两者都建立在本篇的 wait 语义之上。
等待的三种姿势:阻塞、轮询、SIGCHLD
收尸的工程选型就三种姿势。阻塞 wait 最简单,适合「我只关心孩子何时结束」的简单父进程。WNOHANG 轮询适合已有事件循环、不想为收尸专门挂起一个线程的程序——每帧顺手 waitpid(-1, &st, WNOHANG) 一次,把能收的都收掉。SIGCHLD 驱动适合「子进程多、生灭频繁、不能漏」的场景,但要写对循环:
#include <signal.h>
#include <sys/wait.h>
static void on_sigchld(int sig)
{
int saved = errno; /* handler 里先存 errno */
while (waitpid(-1, NULL, WNOHANG) > 0)
; /* 一次事件循环收光所有已退出者 */
errno = saved;
}
int main(void)
{
struct sigaction sa = { .sa_handler = on_sigchld,
.sa_flags = SA_RESTART | SA_NOCLDSTOP };
sigaction(SIGCHLD, &sa, NULL);
/* ...业务循环... */
}
三个细节决定这段代码的正确性。第一,循环而不是单次 waitpid:SIGCHLD 是标准信号,不排队,多个孩子同时退出只触发一次 handler,循环加 WNOHANG 保证一次收光。第二,保存恢复 errno:waitpid 可能改动 errno,而 handler 打断了主流程,errno 被污染会波及被打断代码的错误处理——这是 async-signal-safe 纪律(上一篇的清单)的直接应用。第三,waitpid 返回值大于 0 才算收了一具,等于 0 表示还有孩子但都没退,小于 0 且 errno 是 ECHILD 表示孩子全收完了,循环自然终止。
事件循环型的程序还有第四种姿势:把收尸并入统一事件源。第 87 篇的 pidfd 让每个子进程的退出变成 epoll 里的一次可读事件,SIGCHLD 的 handler、标志位、循环全部可以退役;子进程数量大、退出频繁的服务(任务执行器、进程池)用这个形态代码最干净。还没有 pidfd 可用的环境,退而求其次是「SIGCHLD 触发一次 self-pipe 写入,事件循环里再跑 WNOHANG 循环」,信号只当门铃用,逻辑留在同步上下文。四种姿势的本质是同一个问题的不同时代答案:让退出状态可靠地从子进程流回父进程。
工程现场:一场僵尸风暴的排查
事故形态:一台跑批网关的机器 /proc/sys/kernel/pid_max 是数百万量级,某天监控报 fork 失败(EAGAIN),登录一看 ps 输出里几千个 defunct。排查三步:第一步确认僵尸的父进程——ps -eo pid,ppid,stat,cmd | grep Z 看 PPID 列,僵尸的归谁收归谁管,凶手必然是那个长期不 wait 的父进程;第二步看父进程代码路径,常见原因是「fork 后只管投递任务,忘了子进程会退出」或者「在某个错误分支提前 return,跳过了收尸逻辑」;第三步修复方式按程序结构选——同步收尸加 WNOHANG 循环,或挂 SIGCHLD 处理,或干脆把子进程交给 subreaper 机制托管。
pid_max 这个旋钮也值得说两句:老内核默认 32768,较新的内核默认抬到约 419 万,容器平台上单个容器的可用编号还受 PID namespace 进一步切小。把 pid_max 调大可以推迟风暴爆发,但那是拖延不是治疗——僵尸的稳定增长曲线迟早触顶,监控里正确的预警指标是「进程总数与 defunct 数量的增长斜率」,而不是等 fork 报错。另外提示一个冷知识式的事实:僵尸可以被 SIGCHLD 之外的方式影响吗?不能——它对一切信号免疫,包括 SIGKILL,因为它已经不在调度器的世界里,能动的只有它的父进程与收尸路径。
两个次生坑要提。一是僵尸骗过监控:僵尸不占内存页,内存监控看不出异常,直到 fork 开始报错才暴露,PID 类监控(比如进程数)才是预警线。二是别试图用 kill 之外的手段「清僵尸」——唯一正解是让收尸人履职,实在找不到代码归属时,杀掉僵尸的父进程让它被 init 收养也能应急,但要清楚这是手术刀式的应急动作,根因仍在代码里。
一眼收束
进程退出走 do_exit 清理清单,停在 EXIT_ZOMBIE 等父进程领取死亡报告;wait/waitpid 是唯一合法的收尸途径,status 低 16 位的位图规则值得手撕一次。三条工程纪律:SIGCHLD handler 里必须是 WNOHANG 循环并保存 errno;长命父进程要么轮询要么信号驱动,绝不裸奔;孤儿有收养链兜底,subreaper 让「谁收尸」变成架构决策。僵尸不是 bug,忘记收尸才是——它占的不是内存,是你进程模型里那份没结清的账。
读者留言
COMMENTS 暂无还没有留言,来说第一句?