Lustre参数调整

1. 设置和查看lustre参数

创建文件系统时，使用mkfs.lustre。
当服务器停止运行时，使用use trnefs.lustre。
当文件系统正在运行时，使用lctl设置或者查看参数。

1.1 mkfs.lustre设置参数

当文件系统第一次格式化时，参数可以通过在mkfs.lustre命令中添加--param选项进行设置。

# 设置超时时间为50
mkfs.lustre --mdt --param="sys.timeout=50" /dev/sda

1.2 tunefs.lustre设置参数

当服务器(OSS或MDS)停止运行时，可通过tunefs.lustre命令及--param选项添加参数至现有文件系统。

#tunefs.lustre命令添加的为新的参数，而不会替代参数。
tunefs.lustre --param==failover.node=192.168.0.13@tcp0 /dev/sda#擦除所有的已有参数并添加新的参数
tunefs.lustre --erase-params --param=new_parameters#用户可以设置任何在/proc/fs/lustre文件中可设置的具有OBD设备的参数，可指定为*obdname|fsname*. *obdtype*.*proc_file_name*=*value*
tunefs.lustre --param mdt.identity_upcall=NONE /dev/sda1

1.3 lctl设置参数

当文件系统运行时，lctl可用于设置参数(临时或永久)。
- a. 临时参数在服务器或者客户端未关闭时处于激活状态。
- b. 永久参数在服务器和客户端重启后仍不变。

1.3.1 设置临时参数

#列出所有可设置参数
lctl list_param#lctl set_param设置当前运行节点上的临时参数。这些参数映射至/proc/{fs,sys}/{lnet,lustre}
lctl set_param osc.*.max_dirty_mb=1024

1.3.2 设置永久参数

#使用lctl conf_param设置永久参数。可用于设置/proc/fs/lustre文件中所有可设置的参数。(参数持久化到MGS文件系统配置中)
lctl conf_param testfs-MDT0000.sys.timeout=40#使用lctl set_param -P设置永久参数。(必须在MGS上执行)
lctl set_param -P osc.*.max_dirty_mb=1024#使用lctl set_param删除永久参数。(用-d删除永久参数)
lctl set_param -P -d osc.*.max_dirty_mb

1.4 列出可设置的参数

#列出可设置的参数lctl list_param ost.OSS.ost.*
ost.OSS.ost.high_priority_ratio
ost.OSS.ost.nrs_crrn_quantum

1.5 查看参数值

#查看当前参数值
lctl get_param ost.OSS.ost.threads_max
ost.OSS.ost.threads_max=30

Lustre参数调整相关推荐

TensorFlow实现超参数调整
TensorFlow实现超参数调整正如你目前所看到的,神经网络的性能非常依赖超参数.因此,了解这些参数如何影响网络变得至关重要. 常见的超参数是学习率.正则化器.正则化系数.隐藏层的维数.初始权重值 ...
linux 内核参数调整说明
linux 内核参数调整说明所有的TCP/IP调优参数都位于/proc/sys/net/目录.例如, 下面是最重要的一些调优参数, 后面是它们的含义: 1. /proc/sys/net/core/r ...
降维后的高维特征的参数_高维超参数调整简介
降维后的高维特征的参数 by Thalles Silva 由Thalles Silva 高维超参数调整简介 (An introduction to high-dimensional hyper-par ...
Linux性能挖潜的隐藏招数:内核CPU亲和性参数调整
作者:李彬,赵雪枫,金融科技工程师,架构师社区特邀作者! 应用服务性能调优,是每个系统投产前都需要关注的问题,系统及软件层面的调优方法均有大量文章介绍,但在所有招数使出后,是否就无潜可挖了?如果了解L ...
python使用matplotlib可视化、使用rcParams参数调整可视化图像中线条宽度、线条类型、文本字体、字体大小、字体颜色、字体类型、文本颜色等
python使用matplotlib可视化.使用rcParams参数调整可视化图像中线条宽度.线条类型.文本字体.字体大小.字体颜色.字体类型.文本颜色等目录
在Linux上进行内核参数调整
在Solaris上,使用工具mdb就可以直接修改内核内存里的内容.而在Linux上,则通常使用命令sysctl(8)做类似的事情. 本文以Fedora为例,介绍如何在Linux上进行内核参数调整. 常 ...
AI基础：数据划分、超参数调整、正则化
本文来源于吴恩达老师的深度学习课程[1]笔记部分. 作者:黄海广[2] 导语本文讲解机器学习的策略方面,包括数据划分.超参数调整.正则化等. 我正在编写AI基础系列,目前已经发布: AI 基础:简易 ...
韵乐x5最佳参数手动_4种超参数调整技术及其局限性
每个数据科学家都应该知道的主流的超参数调整技术导读 ML工作流中最困难的部分之一是为模型找到最好的超参数.ML模型的性能与超参数直接相关.超参数调优的越好,得到的模型就越好.调优超参数可能是非常乏味 ...
MySQL高级 - 并发参数调整
Mysql并发参数调整从实现上来说,MySQL Server 是多线程结构,包括后台线程和客户服务线程.多线程可以有效利用服务器资源,提高数据库的并发性能.在Mysql中,控制并发连接和线程的主要参 ...

Lustre参数调整

1. 设置和查看lustre参数

1.1 mkfs.lustre设置参数

1.2 tunefs.lustre设置参数

1.3 lctl设置参数

1.3.1 设置临时参数

1.3.2 设置永久参数

1.4 列出可设置的参数

1.5 查看参数值

Lustre参数调整相关推荐

最新文章

热门文章