在容器里设置GOMAXPROCS的正确姿势

GOMAXPROCS 是 Go 提供的非常重要的一个环境变量。通过设定 GOMAXPROCS，用户可以调整调度器中 Processor（简称P）的数量。由于每个系统线程必须要绑定 P ，P 才能把 G 交给 M 执行。如下图所示

所以 P 的数量会很大程度上影响 Go Runtime 的并发表现。GOMAXPROCS 在 Go 1.5 版本后的默认值是机器的 CPU 核数（runtime.NumCPU）。通过下面的代码片段可以获取当前机器的核心数和给 GOMAXPROCS 设置的值。

package mainimport ("fmt""runtime"
)func getGOMAXPROCS() int {_ :=  runtime.NumCPU() // 获取机器的CPU核心数return runtime.GOMAXPROCS(0) // 参数为零时用于获取给GOMAXPROCS设置的值
}func main() {fmt.Printf("GOMAXPROCS: %d\n", getGOMAXPROCS())
}

而以 Docker 为代表的容器虚拟化技术，会通过 cgroup 等技术对 CPU 资源进行隔离。以 Kubernetes 为代表的基于容器虚拟化实现的资源管理系统，也支持这样的特性，比如下面这个 PodTemplate 的容器的定义里 limits.cpu = 1000m 就代表给这个容器分配1个核心的使用时间。

这类技术对 CPU 的隔离限制，导致 runtime.NumCPU() 无法正确获取到容器被分配的 CPU 资源数。runtime.NumCPU()获取的是宿主机的核心数。

设置 GOMAXPROCS 高于真正可使用的核心数后会导致Go调度器不停地进行OS线程切换，从而给调度器增加很多不必要的工作。

目前 Go 官方并无好的方式来规避在容器里获取不到真正可使用的核心数这一问题，而 Uber 提出了一种 Workaround 方法，利用 uber-go/automaxprocs 这一个包，可以在运行时根据 cgroup 为容器分配的CPU资源限制数来修改 GOMAXPROCS。

import _ "go.uber.org/automaxprocs"func main() {// Your application logic here.
}

参考资料：

https://gaocegege.com/Blog/maxprocs-cpu

https://stackoverflow.com/questions/36492356/parallel-programming-in-go-using-gomaxprocs/36492517#36492517

GMP调度器

在容器里设置GOMAXPROCS的正确姿势相关推荐

Loki告警的正确姿势
小白之前有通过Grafana设置Loki数据源的骚操作来做日志告警,虽然能直接在Grafana面板上配置告警,当它们还是没办法集中维护和管理.小白前面介绍了那么多关于Loki的文章,那么它有没有像Pr ...
若依 vue前端动态设置路由path不同参数在页面容器里打开新页面（新路由），面包屑和标签页标题根据参数动态改变，面包屑多级标题，侧边栏对应菜单亮起
前言因为是在vue源码的基础上进行修改,所以,就没有复制代码在文章上,采取的是截图对比源码和我修改的代码片段.要麻烦你们自己手敲了. 先来看看效果: 场景:在费用配置列表中,点击每一项的配置,都会在 ...
老司机实战Windows Server Docker：2 docker化现有iis应用的正确姿势
前言上一篇老司机实战Windows Server Docker:1 初体验之各种填坑介绍了安装docker服务过程中的一些小坑.这一篇,我们来填一些稍大一些的坑:如何docker化一个现有的iis应 ...
再见虚拟机！聊聊 PC 端运行 Docker 的正确姿势！
点击上方"AirPython",选择"加为星标" 第一时间关注 Python 原创干货! 1. 前言大家好,我是安果! 在相当长的一段时间里,PC 端要使用 ...
如何自学python数据分析-良心整理！学习Python数据分析的正确姿势
学习 Python 数据分析的正确姿势如果你是通过学习给程序员设计的 Python 课程来学习 Python 数据分析,那就大错特错了.很多数据分析师在开始学习 Python 数据分析之前就被引导学 ...
开发函数计算的正确姿势——轻松解决大依赖部署
前言首先介绍下在本文出现的几个比较重要的概念: 函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传.函数计算 ...
使用代码片段的正确姿势，打造高效的vscode开发环境
全文3928字,阅读时间 10分钟,未来节约时间 15分钟/每天代码片段(code snippet) 相信大家都或多或少有接触过. 在完成一个项目以后,往往都会写出许多有价值的代码,或是绞尽脑汁解决 ...
word图片嵌入式为何只能看到一部分_Word排版的正确姿势！（Word论文排版教学）...
Hello,最近正值着手写毕业论文的初期,趁着这个时间点,我做了一个简易的,简单的,0基础的Word论文排版教学,帮助你在撰写论文的时候不再花费大量的时间浪费在调整格式里. 初次做视频,难免有错误,欢 ...
这样才是代码管理和 Commit 的正确姿势 | 研发效能提升36计
简介:效能提升从小习惯开始,这样才是代码管理和 Commit 的正确姿势! 专栏策划|雅纯志愿编辑|张晟软件交付是以代码为中心的交付过程,其中代码的作用有几点:第一,最终的制品要交付成什么样,需要 ...

在容器里设置GOMAXPROCS的正确姿势

在容器里设置GOMAXPROCS的正确姿势相关推荐

最新文章

热门文章