Supervisor 无法停止及启动进程

记一次supervisor无法控制所管理进程的处理方法

今天由于代码变更，需要重启服务，服务进程使用supervisor管理，

执行指令：supervisorctl restart group-xxx: 一直没返回；
查看所重启服务组的进程：supervisorctl status group-xxx: 发现有一个处于 STOPPING状态，其他都是STOPED；
查询进程状态：ps -ef|grep xxx, 发现进程还活着；
cat /proc/'进程pid' status, 发现进程状态是D，也就是等待磁盘资源（Disk），因为等待磁盘资源是处于内核态，所以supervisor发送的指令进程都无法响应，导致一直处于STOPPING状态；
查了一下，网上都说需要重启机器，不至于吧，想想等待磁盘的话，我把磁盘资源给他不就可以了吗，可是到底是在等待什么磁盘呢？
查看一下进程的服务日志，停留在了：begin delete GFS image: /data/image/testimg/，也就是服务要删除机器挂载的磁盘上面的图片，但是一直在这里等着，没有返回，此时基本可以断定是挂载的磁盘有问题；
查看磁盘状态，是正常挂载，而且也可以查看到图片。。。
在查看磁盘文件夹状态：ls -al，发现只有读权限，而代码要执行删除，没有权限，所以一直等待；
修改目录权限，赋予所有权限，进程成功停止。

通过此次事故，知道了一下两个重点知识：
1、服务处理内核态时，是无法响应父进程所发的SIGTERM/SIGINT等指令，但是supervisor作为父进程，已经发出了控制信号量，所以在supervisor中看到的是一直处于stopping状态；
2、如果进程需要磁盘资源，只需要解决资源问题就可以继续往下执行，而不至于重启机器；
3、服务日志一定要记录逻辑的进入和结束点，本次排查过程，日志也起到了关键作用。

Supervisor 无法停止及启动进程相关推荐

workermen进程停止后启动报start in DAEMON mode
项目在linux使用workermen运行脚本,改动代码时,需要停止之前运行的进程,将进程stop掉,然后就启动不了了. 进程停止后启动报启动为DEBUGt调试模式.状态报在运行,有在运行的脚本了. ...
java：使用supervisor优雅的管理SpringBoot进程
目录 1.创建 SpringBoot 项目 2.手工部署项目 3.部署优化 4.通过 shell 脚本自动部署项目 4.1.在 Linux 安装 Git 4.2.在 Linux 安装 Maven 4. ...
Supervisor安装、管理守护进程
Supervisor(http://supervisord.org/)是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,不支持Windows系统 ...
Supervisor 为服务创建守护进程
今天需要再服务上部署一个.net 方面的项目:当时开启服务的命令只能在前台执行:使用nohub CMD &等放在后台开启服务都会宕机:所以搜寻了Supervisor 这个解决办法,为服务创建守 ...
一个批量停止和启动服务的工具
写了一个工具,目的是批量停止和启动,服务以及进程:没做完:全部代码和可执行文件在此处:有人有兴趣可下载了接着实现:做好后发一份给我: http://pan.baidu.com/s/1i37qQUh 从 ...
linux 后端的进程,linux后台启动进程
1.tips进程与终端父子进程在linux系统里面,子进程由父进程fork而来,而所有的进程都是由init进程或其子进程fork而来,即init进程是所有进程的祖先. 父子进程的运行是相对独立的, ...
Android如何配置init.rc中的开机启动进程(service)【转】
本文转载自:http://blog.csdn.net/qq_28899635/article/details/56289063 开篇:为什么写这篇文章先说下我自己的情况,我是个普通的大四学生,之前在 ...
ubuntu下nginx停止、启动、重启
转载自:https://www.cnblogs.com/xiaoL/p/6964217.html nginx -s reload :修改配置后重新加载生效 nginx -s reopen :重新打 ...
Java执行cmd命令启动进程
Java执行cmd命令启动进程 1.代码 //execute command through java applicationpublic static void exeCmd(){Runtime r ...

Supervisor 无法停止及启动进程

记一次supervisor无法控制所管理进程的处理方法

Supervisor 无法停止及启动进程相关推荐

最新文章

热门文章