美文网首页
Yarn ACL(fair-scheduler)

Yarn ACL(fair-scheduler)

作者: 专职掏大粪 | 来源:发表于2021-06-17 11:13 被阅读0次

yarn-site.xml 添加如下内容

<property>
   <name>yarn.acl.enable</name>
   <value>true</value>
</property>

<property>
   <name>yarn.admin.acl</name>
   <value>root root</value>
</property>

fair-scheduler.xml 完整的demo

<?xml version="1.0"?>
<allocations>

<queue name="root">
 <aclSubmitApps> </aclSubmitApps>
 <aclAdministerApps> </aclAdministerApps>

<queue name="default">
 <aclSubmitApps></aclSubmitApps>
 <aclAdministerApps> </aclAdministerApps>
 <minResources>1024 mb,1 vcores</minResources>
 <maxResources>983040 mb,720 vcores</maxResources>
 <maxRunningApps>100</maxRunningApps> <!-- 可以同时运行的作业数 -->
 <weight>5.0</weight> <!-- 权值 -->
 <schedulingPolicy>fifo</schedulingPolicy>
</queue>

<queue name="test">
 <minResources>1024 mb,1 vcores</minResources>
 <maxResources>6029312 mb,2944 vcores</maxResources>
 <aclSubmitApps>bibo</aclSubmitApps>
 <maxRunningApps>100</maxRunningApps> <!-- 可以同时运行的作业数 -->
 <weight>4.0</weight> <!-- 权值 -->
 <schedulingPolicy>fifo</schedulingPolicy>
</queue>

</queue>

</allocations>

参考资料

YARN 中公平调度程序的 ACL 不起作用

https://www.alibabacloud.com/help/zh/doc-detail/62958.htm
https://hadoop.apache.org/docs/r2.7.0/hadoop-yarn/hadoop-yarn-site/FairScheduler.html#Queue_Access_Control_Lists

相关文章

  • Yarn ACL(fair-scheduler)

    yarn-site.xml 添加如下内容 fair-scheduler.xml 完整的demo 参考资料YARN ...

  • 华为acl

    acl access control list 访问控制列表 acl 基本acl 2000-29...

  • 思科ACL配置与扩展

    思科ACL配置与扩展 一.实验目的 (1).掌握基本ACL (2).掌握扩展ACL (3).学会如何应用ACL 二...

  • ACL介绍

    ACL:访问控制列表(centos 7默认打开)顺序:owner > acl user > group acl ...

  • kafka Acl认证

    添加Acl 创建用户用于测试Acl授权 添加acl 要添加一个acl “允许用户Bob和Alice从IP 198....

  • 权限管理(1)-ACL权限

    1. ACL概述 ACL 是用于解决用户对文件身份不足的问题的 2. 开启ACL 3. ACL基本命令 #查询文件...

  • 1.ACL访问控制列表

    一、基础知识 1.访问控制列表ACL,分为基本ACL(2000~2999)、高级ACL(3000~3999)、二层...

  • liunx 配置acl setfacl/getfacl

    添加acl权限setfacl : 获取acl权限getfacl : 用法: setfacl [-bkndRLP] ...

  • ACL权限

    ACL权限ZooKeeper的ACL可针对znodes设置相应的权限信息。 一个 ACL 权限设置通常可以分为 3...

  • mqtt动态管理acl之redis

    在工作使用中,很多场景需要进行acl的动态管理,本文使用redis支持acl的动态管理。 发布订阅 ACL 指对 ...

网友评论

      本文标题:Yarn ACL(fair-scheduler)

      本文链接:https://www.haomeiwen.com/subject/ktxcyltx.html