参考文献：
docker run hangs问题排查记录
https://www.cnblogs.com/edenlong/p/10972876.html
阿里巴巴 Kubernetes 集群问题排查思路和方法
https://www.infoq.cn/article/t_ZQeWjJLGWGT8BmmiU4

1.首先确认docker version一致

2.查看/var/log/message日志报错如下

The maximum number of pending replies per connection has been reached

3.排查过程

网上搜了下，说是系统为了防止程序占用过多系统资源导致拒绝服务而做的限制。看看/etc/dbus-1/session.conf文件属于哪个包，包含哪些文件
rpm -qf /etc/dbus-1/session.conf
rpm -ql dbus-1.10.24-12.el7.x86_64

/usr/share/dbus-1/session.conf文件末尾有个max_replies_per_connection参数和报错类似，默认是50000

我这通过重启dbus解决问题
systemctl restart dbus

最终并没有查到具体哪个参数导致的，不过确实有关联，下次复现这个问题再继续跟踪下

附：使用strace追踪进程调用链（可能用到）

strace docker run --rm image:tag

正常情况
clone(child_stack=0x7fa86cddffb0, flags=CLONE_VM|CLONE_FS|CLONE_FILES|CLONE_SIGHAND|CLONE_THREAD|CLONE_SYSVSEM|CLONE_SETTLS|CLONE_PARENT_SETTID|CLONE_CHILD_CLEARTID, parent_tidptr=0x7fa86cde09d0, tls=0x7fa86cde0700, child_tidptr=0x7fa86cde09d0) = 15449
rt_sigprocmask(SIG_S) = 40
) = 4
write(2, “\33[K”, 3) = 3
) = 1
write(2, "8c5a7da1afbc: “, 148c5a7da1afbc: ) = 14
ioctl(1, TIOCGWINSZ, {ws_row=32, ws_col=138, ws_xpixel=0, ws_ypixel=0}) = 0
) = 18Pulling fs layer \r”, 18Pulling fs layer
write(2, “\33[1B”, 4) = 4
…
…
+++ exited with 0 +++

busctl tree
可以输出所有 bus 上对外暴露的接口

生产docker run 卡住没反应故障排查思路相关推荐

资源丨MySQL故障排查思路方法PPT视频24问答
昨晚,墨天轮邀请到MySQL技术顾问崔虎龙做了题为<一小时掌握MySQL故障排查思路方法>的直播分享,引起了大家的广泛关注,直播后很多小伙伴来找小编询问PPT.思维导图.视频等,在这里小编 ...
K8S集群中Pod与Pod之间网络故障排查思路
K8S集群中Pod与Pod之间网络故障排查思路文章目录 K8S集群中Pod与Pod之间网络故障排查思路 1.Pod与Pod之间通信故障 2.Pod与Pod之间网络通信故障排查思路 1.Pod与Pod ...
K8S集群中Node节点资源不足导致Pod无法运行的故障排查思路
K8S集群中Node节点资源不足导致Pod无法运行的故障排查思路文章目录 K8S集群中Node节点资源不足导致Pod无法运行的故障排查思路 1.Node节点资源不足可能会产生的故障 2.Node节点 ...
51CTO学习笔记--Linux运维故障排查思路与系统调优技巧视频课程（高俊峰）
51CTO学习笔记--Linux运维故障排查思路与系统调优技巧视频课程第一课 Linux运维经验分享与思路 1.一般把主机名,写到hosts下 127.0.0.1 hostname,因为 ...
IT故障排查思路和方法交流
1.故障处理原则首要原则: 生产环境优先恢复业务(比如重启服务.修改负载均衡指向.恢复原有程序包等):保留现场以备查找故障原因 a.遇到问题不要慌:理清思路: b.首先要自行排查,不要遇到问题就甩到 ...
电脑连不上网故障排查思路
面试经常被问到的一个问题,然后百度搜索整理出了三种回答思路: 网络故障排查 1.检查硬件,网线两端有没有插好,路由器是否有问题: 试一下ping路由器的IP地址: 使用拨号上网:将宽带网线从路由器中拔 ...
mysql故障排查思路_Mysql高负载排查思路
发现问题 top命令查看服务器负载,发现 mysql竟然百分之两百的cpu,引起Mysql 负载这么高的原因,估计是索引问题和某些变态SQL语句. 排查思路 1. 确定高负载的类型,top命令看负载 ...
直播平台搭建后，直播网站打开慢的故障排查思路
当直播网站打开速度慢时,用户体验将会受到不良影响,如果直播平台搭建者访问自家网站时发现,访问速度确实很慢,就需要排查网站慢的原因,排查思路大体如下: 1.检查搭建直播平台的服务器是否异常检查服务器的 ...
flink写入clickhouse遇到210错误故障排查思路
java写的flink代码出现210报错,具体报错如下: Exception in thread "main" java.util.concurrent.ExecutionExce ...

生产docker run 卡住没反应故障排查思路

1.首先确认docker version一致

2.查看/var/log/message日志报错如下

3.排查过程

附：使用strace追踪进程调用链（可能用到）

生产docker run 卡住没反应故障排查思路相关推荐

最新文章

热门文章