Linux下cpu和绑核
基本概念
cpu个数 是指物理上cpu的个数。
cpu核心数是指物理上,也就是硬件上存在着几个核心。比如,双核就是包括2个相对独立的CPU核心单元组,四核就包含4个相对独立的CPU核心单元组。
cpu线程数 是一种逻辑上的概念,简单地说,就是模拟出的CPU核心数。比如,可以通过一个物理的CPU核心模拟出2线程的CPU。一个物理的CPU核心最少对应一个线程,但通过超线程技术,一个核心可以对应两个线程,也就是说它可以同时运行两个线程。 CPU的线程数概念仅仅只针对Intel的CPU才有用,因为它是通过Intel超线程技术来实现的,最早应用在Pentium4上。如果没有超线程技术,一个CPU核心对应一个线程。对于AMD处理器而言,没有超线程的概念,线程数和核心数相同,所以在AMD的CPU参数上是没有写出线程数的。
综上,这个公式成立:
物理cpu个数 * 每个物理cpu中core的个数 * 超线程数 = 总线程数(也即逻辑CPU的个数)
举例说明
如下的例子,是在一台Linux服务器上查询的结果: 2 * 16 *2 = 64
# 查看物理CPU个数$ grep 'physical id' /proc/cpuinfo | sort -uphysical id : 0physical id : 1# 查看每1个物理CPU中core的个数(即核心数)$ grep 'core id' /proc/cpuinfo | sort -u | wc -l16# 查看总线程数(也即逻辑CPU的个数)grep "processor" /proc/cpuinfo | wc -l64
top命令显示
top命令显示出来的cpu数量和利用率,其实是逻辑cpu的个数和使用情况。
代码相关
- 在代码里面使用while(true)循环,并且在循环里面不sleep的话,就是所谓的busy wait,会使cpu占用达到100%。
- 在代码里面使用while(true)+sleep的方式, sleep的时候其他线程可以抢占cpu,从而降低cpu占用率。 使用Sleep要考虑用哪种sleep: c标准库的sleep、c++标准库的std::this_thread::sleep_for、boost库的boost::this_thread::sleep_for、POSIX标准的sleep、linux系统调用的sleep等, 还要考虑interruption point的问题
- 但是使用while(true)+sleep的方式, 相较于其他方式,会有什么优缺点? 这个还要后续分析。其他的方式比如:callback,event,async/await,观察者模式,订阅消费模式等等。
超线程
查看是否开启超线程
Threads per core为1,说明没有开启超线程, Threads per core为2,说明开启了超线程。
如何开启超线程
转自 https://my.oschina.net/u/1030865/blog/3070636
以下是github上找到的动态打开、关闭超线程技术的脚本。其原理是根据/sys/devices/system/cpu/cpuX/topology/thread_siblings_list文件找到逻辑核的关系,然后编辑/sys/devices/system/cpu/cpuX/online文件实现动态开启和关闭超线程技术。
#!/bin/bashHYPERTHREADING=1function toggleHyperThreading() {for CPU in /sys/devices/system/cpu/cpu[0-9]*; doCPUID=`basename $CPU | cut -b4-`echo -en "CPU: $CPUID\t"[ -e $CPU/online ] && echo "1" > $CPU/onlineTHREAD1=`cat $CPU/topology/thread_siblings_list | cut -f1 -d,`if [ $CPUID = $THREAD1 ]; thenecho "-> enable"[ -e $CPU/online ] && echo "1" > $CPU/onlineelseif [ "$HYPERTHREADING" -eq "0" ]; then echo "-> disabled"; else echo "-> enabled"; fiecho "$HYPERTHREADING" > $CPU/onlinefidone
}function enabled() {echo -en "Enabling HyperThreading\n"HYPERTHREADING=1toggleHyperThreading
}function disabled() {echo -en "Disabling HyperThreading\n"HYPERTHREADING=0toggleHyperThreading
}#
ONLINE=$(cat /sys/devices/system/cpu/online)
OFFLINE=$(cat /sys/devices/system/cpu/offline)
echo "---------------------------------------------------"
echo -en "CPU's online: $ONLINE\t CPU's offline: $OFFLINE\n"
echo "---------------------------------------------------"
while true; doread -p "Type in e to enable or d disable hyperThreading or q to quit [e/d/q] ?" edcase $ed in[Ee]* ) enabled; break;;[Dd]* ) disabled;exit;;[Qq]* ) exit;;* ) echo "Please answer e for enable or d for disable hyperThreading.";;esac
done
备注:脚本需root权限执行;
CPU核隔离
查看系统cpu隔离情况
- 方法一
可以查看 /proc/cmdline里是不是有isolcpu参数,有的话说明本次重启确实带了这个参数
- 方法二
查看进程1的cpu affinity,如果没有cpu隔离的话,这里affinity 应该是所有的核心(比如有18个逻辑cpu核心,则显示是3ffff)
比如下图,18个cpu核心,pid1 的affinity只显示0~8, 说明9·17核心被隔离了。
- 方法三
cat /sys/devices/system/cpu/isolated, 这个文件里面显示了所有被隔离的核心。
查看进程和线程占用的cpu
- 查看所有进程、线程的cpu分配情况(可以用htop查看,也可以用ps -eo pid,cmd,psr查看所有进程cpu分配情况,用ps -To ‘pid,lwp,psr,cmd’ -p [PID]查看进程的所有线程的cpu分配情况)
- 查看一个进程所有线程的cpu实时占用情况
首先运行top -Hp [PID]命令, 显示如下:
然后按下“F”键,再用向下键走到P,按“空格键”选中,选中后行前面会带*号,然后按“ESC”键退出选择,
可以看到最后一列显示了每个线程当前运行所在的CPU核心:
设置CPU绑定
taskset 命令
语法格式:taskset [options] -p [mask] pid
参数选项:
-a, --all-tasks 操作所有的任务线程
-p, --pid 操作已存在的pid
-c, --cpu-list 通过列表显示方式设置CPU(逗号相隔)。 (注意: 带-c参数时使用列表方式, 不带-c参数时使用掩码方式)使用taskset绑定进程或者线程到1个cpu
taskset命令可以把一个进程或者线程绑定到某个cpu上去,如下命令把线程65189绑定到了核心6上去。
执行后效果 如下图可以看到, 线程65189被绑定到核心6上去了。
使用taskset绑定进程或者线程到多个cpu
taskset -cp 2,5-11 9865 意思就是将进程或线程9865绑定到 2,5~11核心上运行。
这里,如果核心2,5-11做了核心隔离的话,你会发现进程的所有线程都绑定到了2上面,这不是预期的结果。https://serverfault.com/questions/573025/taskset-not-working-over-a-range-of-cores-in-isolcpus这里描述了这个问题,并给出了使用“sudo chrt -r 1 taskset -cp 2,5-11 9865”的解决方案。
This behavior seems to be an artifact of the default kernel scheduler algorithm (SCHED_OTHER for this distro/kernel). Changing the process to a different algorithm eliminates the problem, isolcpus are adequately utilized across the processes/threads.
I ended up using SCHED_RR, but I also tested SCHED_FIFO and SCHED_IDLE both of which seem to work. The process can be launched with the alternative algorithm by use of the chrt utility:
$ sudo chrt -r 1 [command]
(If you want to run as non-root you can use the setcap utility to enable CAP_SYS_NICE on the binary file related to the command)
使用taskset查询一个进程的亲和情况:
注意:如果一个进程在代码里面,用pthread_setaffinity_np给进程的某些线程设置了绑核,使用tastset -cp [PID] 是看不出来的。 比如上面的进程在代码里面把5个线程绑定到了10/11/12/13/14 五个核,使用taskset查看结果如下:
参考资料
【1】https://blog.csdn.net/tang05505622334/article/details/96477552
【2】https://serverfault.com/questions/573025/taskset-not-working-over-a-range-of-cores-in-isolcpus
Linux下cpu和绑核相关推荐
- 用Prime95来做linux下CPU压力测试
Prime95是用来做linux下CPU压力测试的,由GIMPS (Great Internet Mersenne Prime Search)所提供,主要是透过运算找出梅森质数,质数(Prime nu ...
- linux下cpu查看命令
1.Linux查看当前操作系统版本信息 cat /proc/version 2.Linux查看版本当前操作系统内核信息 uname -a 3.linux查看版本当前操作系统发行信息 cat /etc/ ...
- LINUX下CPU Load Average的一点研究
背景: 公司的某个系统工作在基于Linux的Cent OS下,一个host下同时连接了许多client, 最近某台Host总是显示CPU Load Average过高,我们单纯的以为是CPU的占用过高 ...
- linux下cpu参数的参看和说明
物理CPU 实际Server中插槽上的CPU个数 物理cpu数量,可以数不重复的 physical id 有几个 命令: cat /proc/cpuinfo | grep "physica ...
- 浅谈Linux下CPU利用率和CPU负载及其代码实现原理
编者注: 本来想写个简单的程序测试CPU利用率,后来代码实现后与top(ps)命令测试的结果做对比,疑惑了,疑惑后有了此文-- 第一节 祸起 本来就是想通过写个小程序测试CPU利用率从而可以检验其 ...
- FT2000+下LPC中断绑核使用说明
目前FT2000+ 64核下多采用LPC中断,为了确保中断不丢以及中断响应延迟在一定范围内,可以对中断进行绑核处理,以下为银河麒麟下操作的示例. 1.修改系统启动参数,设置核隔离 (至少需要设置两个核 ...
- linux下监测cpu温度,linux下CPU温度监测
1.安装相关软件 sudo apt-get install lm-sensors sensors-applet [root@localhost ~]# sensors No sensors found ...
- linux下CPU占用率查看方法
关键词:top.perf.sar.ksar.mpstat.uptime.vmstat.pidstat.time.cpustat.munin.htop.glances.atop.nmon.pcp-gui ...
- 值得收藏的 14 个 Linux 下 CPU 监控工具
点击上方蓝色"程序猿DD",选择"设为星标" 回复"资源"获取独家整理的学习资料! 来源 | 8rr.co/wgqK 01. top top ...
最新文章
- 智源重大研究方向:机器学习学术报告会(暨学者候选人发布)
- basler相机 ip linux,Basler 相机启动运行程序, Basler IP相机软件 - 其他软件 | Basler
- 初学Python——面向对象编程
- 将MATLAB的变量数据导入到C/C++程序中的方法
- vsCode 开发微信小程序插件
- UIApplication,UIWindow,UIViewController,UIView(layer)
- Golang 垃圾回收剖析
- Python 多进程 multiprocessing 使用示例
- 轻量级RTSP服务存在的意义
- Vue的常用指令有哪些,分别是什么作用?
- BadBoy+JMeter应用过程中遇到的问题汇总
- Linux 学习作业:认识bash shell
- CMU 15-213 Introduction to Computer Systems学习笔记(12) Linking
- 基于微信小程序的疫情防控平台设计与实现-计算机毕业设计源码+LW文档
- 黑盒测试 白盒测试 灰盒测试
- 安卓电子书格式_进阶能力 | 了解常见的电子书格式
- 5类网线,超5类网线,6类网线,超6类网线的区别
- 魔兽7.0服务器维护时间,关于魔兽7.0版本你一定要知道的60条注意事项
- 【Chrome Extensions】实现一个可以下载图片的Chrome插件
- HFDS命令行操作(开发重点)