现象描述

大概1个月多以前 在启动脚本中增加了tail -f

用来启动后追踪日志判断是否启动成功

后发现无法执行shutdown.sh(卡住 利用curl) 然后无奈使用kill -9

但通过ps -el 发现此时进程变为defunct 即僵尸进程

当时的解决办法无奈 只能找到僵尸进程的父进程kill

当时认为可能是tail的问题 后来启动脚本中去掉tail 发现问题解决

But

当时一直没有来得及排查是如何引起僵尸进程的问题

这两天抽时间排查了一下 发现和tail没有一毛钱关系

艰难的排查过程1-尝试复现

测试代码Defunct.java

启动脚本start.sh

启动脚本start_tail.sh 使用了tail

关服脚本stop.sh 这里使用kill关服

分别用两个脚本测试,得出下面几个结论:

所以初步结论是貌似和tail没有什么关系

此时sh和tail两个进程都结束了

而此时java进程的父进程变为了1

sh分别有两个子进程

一个是java子进程 一个是tail子进程

start.sh启动的java进程的父进程是1 即init进程

start_tail.sh启动后 java进程的父进程是sh

当启动start_tail.sh后 因为tail是前台进程 所以ctrl+c可以结束

用这个例子做各种测试 都无法复现僵尸进程的问题

艰难的排查过程2-游戏服务器尝试复现

当初出现是在游戏服务器复现的 那么应该比较复现吧

修改了一个游戏服务器的启动脚本 默认是没有加tail 现在加上了tail -f

启动游戏服务器脚本 看到日志 启动成功 ctrl+c 退出tail

调用shutdown.sh 发现服务器顺利关闭

结论:竟然无法在游戏服务器复现

艰难的排查过程3-各种思考、查阅资料

首先从僵尸进程的产生原因入手,猜测是否是sh这个父进程没有调用waitpid去回收java子进程。

查询网上类似的tomcat tail -f问题,思考当初1个多月以前的情形,其中有一个很重要的当初情形是shutdown的时候ctrl卡住了。灵光一现,难道是当初操作失误了,没有按下ctrl+c而是按下了ctrl+z。

神奇的ctrl+z 复现测试代码defunct

启动start_tail.sh 然后ctrl+z

启动stop.sh 发现进程(3974)无法被stop

使用kill -9 尝试杀死进程 此时发现进程已经是defunct了

此时只要使用fg命令从后台调到前台然后按下ctrl+c 则僵尸进程自动消失

神奇的ctrl+z 复现游戏服务器defunct

启动脚本(有tail) 等待一段时间(将所有服务器全部开启) 并ctrl+z

此时执行shutdown.sh 发现没有任何反应(卡住) 无奈ctrl+c

此时执行jstack 也发现没有任何反应(卡住) 无奈ctrl+c

此时执行kill -9 此时java进程已经变为了僵尸进程

此时用fg将暂停的脚本恢复 然后ctrl+c 则僵尸进程消失 顺利被回收

总结1

tail和造成defunct没有任何关系

根本原因是因为按下ctrl+z 将start_tail.sh切换到了后台

测试1 当start_tail.sh后 按下ctrl+z 如果直接被crt#session关闭了呢

更神奇的事情发生了 java进程直接被干掉了

!!这个在游戏服务器也测试了 一定要注意!!

测试2 执行start_tail.sh 直接关闭ctr#session 则java进程还在 因为是nohup启动

测试3 当start_tail.sh后 按下ctrl+z 再按fg 恢复执行 此时之后可以顺利shutdown

总结2

正常启动脚本 没有tail java进程的父进程是1 即init进程 使用shutdown脚本关闭java进程后 自动被init进程回收

启动脚本加了tail

此时java进程的父进程是sh进程

sh进程有两个子进程 一个是java子进程 一个是tail子进程

直接ctrl+c 则sh进程和tail进程都结束 java进程的父进程变为了1

如果不ctrl+c 直接shutdown java进程 则java进程也会正常结束,即sh父进程会回收java子进程

总结3

最终'罪魁祸首'是ctrl+z ,它会暂停程序的运行

如果我们启动脚本没有加tail 则执行完nohup & 自动到后台

但是我们加了tail后 因为tail是前台进程 所以要么ctrl+c结束 要么ctrl+z

如果我们按下了ctrl+z 则sh启动的所有子进程都会暂停

所以我们的java进程此时处于暂停状态 所以shutdown/jstack都卡住了一样 只能ctrl+c退出

然后错误的操作就是使用kill -9 这个会把进程给干掉 但是因为父进程sh被暂停了 所以无法waitPid 执行子进程的回收操作 从而导致java进程变为了僵尸进程

而通过fg恢复后 ctrl+c 父进程和tail都退出 java进程被init进程接管 自动回收

总结4

加tail -f 没有问题,但是一定不要忘了ctrl+c;

如果ctrl+z 那么一定要fg然后ctrl+c;

当出现shutdown.sh卡住或者操作jvm都没反应,则可以怀疑是暂停引起的;

————————————

原文链接:https://www.jianshu.com/u/21add3dce532

java 僵尸进程_神奇的Java僵尸(defunct)进程问题排查过程相关推荐

  1. java 僵尸进程_神奇的Java'僵尸'进程问题

    神奇的"僵尸"进程问题(java defunct) 现象描述 大概1个月多以前 在启动脚本中增加了tail -f 用来启动后追踪日志判断是否启动成功 后发现无法执行shutdown ...

  2. java old区_一次Jvm old过高的排查过程实战记录

    前言 最近遇到一个Jvm old过高的案例,现象是一个站点的jvm old区过高,分析原因是,原来的设计方案有问题,给前端返回的数据里面包含了大量的html代码,从存储中拿数据的过程.拼接数据的过程过 ...

  3. java defunct怎么杀掉_杀死Linux中的defunct进程(僵尸进程)的方法指南

    一.什么是defunct进程(僵尸进程)在 Linux 系统中,一个进程结束了,但是他的父进程没有等待(调用wait / waitpid)他,那么他将变成一个僵尸进程.当用ps命令观察进程的执行状态时 ...

  4. 易语言取java路径模块_易语言API模块制作进程取程序路径

    易语言API模块制作进程取程序路径,提高进程的PID获取程序的所在路径. 进程_取程序路径 1.CreateToolhelp32Snapshot 快照句柄 = CreateToolhelp32Snap ...

  5. java多线程面试_面试之JAVA多线程

    1如何创建线程 创建多线程实现类MyThread extends Thread,继承Thread后重载run()方法,在调用类中创建对象后调用start()方法执行该线程. 创建实现类MyThread ...

  6. futuretask java 并发请求_图文并茂理解 Java 多线程

    优质文章,及时送达 线程 线程的概念,百度是这样解释的: 线程(英语:Thread)是操作系统能够进行运算调度的最小单位.它被包含在进程之中,是进程中的实际运作单位.一条线程指的是进程中一个单一顺序的 ...

  7. linux查看java虚拟机内存_深入理解java虚拟机(linux与jvm内存关系)

    本文转载自美团技术团队发表的同名文章 https://tech.meituan.com/linux-jvm-memory.html 一, linux与进程内存模型 要理解jvm最重要的一点是要知道jv ...

  8. java 解决死锁_如何解决java中的死锁问题

    一.死锁的定义 死锁是指两个或两个以上的进程在执行过程中,由于竞争资源或者由于彼此通信而造成的一种阻塞的现象,若无外力作用,它们都将无法推进下去. 那么我们换一个更加规范的定义:集合中的每一个进程都在 ...

  9. 顺丰java面试题_顺丰java开发面试分享,顺丰java面试经面试题

    今天要给大家分享的是一个小伙伴的顺丰java开发面试过程,其中包括了面试流程,面试题目,和回答,感兴趣的朋友可以来了解一下哈. 一.面试流程 是中午进行的面试,首先是做自我介绍,之后就是讲一下项目,然 ...

最新文章

  1. android activity之间传值
  2. .net core webapi 部署windows server 2008 r2 笔记
  3. DIV+CSS常见问题的14条原因分析
  4. 科普|不同协议下远程服务器文件上传_下载优劣对比
  5. 前端教程分享:十行代码实现title滚动显示
  6. 解决: VUE 项目中表单提交中文乱码、接口请求参数中文乱码
  7. 如何利用System.Net.Mail类发送EMAIL
  8. java(安全方便的从控制台读入数据)[对Scanner类进行封装,用正则表达式判断]...
  9. bool类型_Python基本数据类型之Number
  10. 内核并发控制---信号量 (来自网易)
  11. php的完整代码块,超级实用的9个PHP代码片段
  12. 分享大三改进后的python写的【银行管理系统】,超详细 【内附源码】
  13. 英语学习网站超级大全(转载自豆瓣网)
  14. 路由器硬改内存笔记1-理论
  15. SharePoint服务器端对象模型 之 使用CAML进展数据查询
  16. SpringBoot+zxing批量生成二维码_南国
  17. 表格结构标签 thead tbody
  18. windows 查看电脑开关机时间
  19. 我的团长我的团可能的故事原现
  20. 多传感器融合方式分析

热门文章

  1. Nat Methods | 王艇/李道丰实验室扩展WashU Epigenome Browser的3D基因组可视化功能
  2. 消失的网秦:创始人遭绑架 414 天,睡觉都戴手铐
  3. vue中实现 楼层效果
  4. matlab截视频人脸,一种视频图像中人脸图像截取方法与流程
  5. C语言迷宫如何实现多个关卡,c语言实现迷宫问题#仅供借鉴
  6. android模拟器比较好,安卓模拟器哪个好用,好用的安卓模拟器有哪些
  7. 《工程伦理与学术道德》第一章习题
  8. mysql优化 个人笔记 (mysql锁机制 ) 非礼勿扰 -m10
  9. PCA (主成分分析)详解 (写给初学者)
  10. vs写c语言快捷键,vs快捷键