Lustre参数调整

作者: lihanglucien | 来源:发表于2019-05-21 11:06 被阅读0次

1. 设置和查看lustre参数

  • 创建文件系统时,使用mkfs.lustre。
  • 当服务器停止运行时,使用use trnefs.lustre。
  • 当文件系统正在运行时,使用lctl设置或者查看参数。

1.1 mkfs.lustre设置参数

  • 当文件系统第一次格式化时,参数可以通过在mkfs.lustre命令中添加--param选项进行设置。
# 设置超时时间为50
mkfs.lustre --mdt --param="sys.timeout=50" /dev/sda

1.2 tunefs.lustre设置参数

  • 当服务器(OSS或MDS)停止运行时,可通过tunefs.lustre命令及--param选项添加参数至现有文件系统。
#tunefs.lustre命令添加的为新的参数,而不会替代参数。
tunefs.lustre --param==failover.node=192.168.0.13@tcp0 /dev/sda

#擦除所有的已有参数并添加新的参数
tunefs.lustre --erase-params --param=new_parameters

#用户可以设置任何在/proc/fs/lustre文件中可设置的具有OBD设备的参数,可指定为*obdname|fsname*. *obdtype*.*proc_file_name*=*value*
tunefs.lustre --param mdt.identity_upcall=NONE /dev/sda1

1.3 lctl设置参数

  • 当文件系统运行时,lctl可用于设置参数(临时或永久)。
    • a. 临时参数在服务器或者客户端未关闭时处于激活状态。
    • b. 永久参数在服务器和客户端重启后仍不变。
1.3.1 设置临时参数
#列出所有可设置参数
lctl list_param

#lctl set_param设置当前运行节点上的临时参数。这些参数映射至/proc/{fs,sys}/{lnet,lustre}
lctl set_param osc.*.max_dirty_mb=1024
1.3.2 设置永久参数
#使用lctl conf_param设置永久参数。可用于设置/proc/fs/lustre文件中所有可设置的参数。(参数持久化到MGS文件系统配置中)
lctl conf_param testfs-MDT0000.sys.timeout=40

#使用lctl set_param -P设置永久参数。(必须在MGS上执行)
lctl set_param -P osc.*.max_dirty_mb=1024

#使用lctl set_param删除永久参数。(用-d删除永久参数)
lctl set_param -P -d osc.*.max_dirty_mb

1.4 列出可设置的参数

#列出可设置的参数

lctl list_param ost.OSS.ost.*
ost.OSS.ost.high_priority_ratio
ost.OSS.ost.nrs_crrn_quantum

1.5 查看参数值

#查看当前参数值
lctl get_param ost.OSS.ost.threads_max
ost.OSS.ost.threads_max=30

相关文章

  • Lustre参数调整

    1. 设置和查看lustre参数 创建文件系统时,使用mkfs.lustre。 当服务器停止运行时,使用use t...

  • 关于lustre-stripe-配置实践

    背景: lustre ost 个数=24以下截图,blocksize不同,count是针对lustre ost数量...

  • Lustre FS简介

    历史 Lustre这个词来自Linux和Cluster两个词的组合 Lustre最早源于Carnegie Mell...

  • lustre 简易部署

    简易部署lustre文件系统,不含lustre软件安装。 MGS/MDT 在块设备上创建一个MGS/MDT组合文件...

  • LSTM神经网络调参需知

    调整超参数 调整参数时,应先确定其他的超参数,调整一个超参数值。不要一起调节,一起调节很难掌握数据的特性。 由于b...

  • 参数的调整

    前言 超级APP功能越来越全,非超级APP的DAU都在下降,当失去增长红利之后,精细化迭代和精细化运营将成为必然选...

  • MySQL参数调整

    开启Profiling 执行计划 查表锁 查行锁 QueryCache 网络链接 my.cnf顺序 /etc/my...

  • 超参数调整

    什么是超参数 模型参数通常是有数据来驱动调整。 超参数不需要数据来驱动,而是在训练前或者训练中人为的进行调整的参数...

  • 算法笔记(23)网格搜索及Python代码实现

    网格搜索,搜索的是参数,即在指定的参数范围内,按步长依次调整参数,利用调整的参数训练学习器,从所有的参数中找到在验...

  • 8541E调整参数-解决黑色条纹问题

    Camera预览、拍照、录像有黑色条纹,通过调整bypass参数解决。问题图片: 工具:IspTool 调整后参数:

网友评论

    本文标题:Lustre参数调整

    本文链接:https://www.haomeiwen.com/subject/vhudzqtx.html