Mesos 配置

配置

可以通过mesos-master --help和mesos-slave --help查看master和slave支持的参数

master配置参数:

|参数名|参数值|默认值|
|------|------||
|--acls|授权控制||
|--advertise_ip|||
|--advertise_port|||
|--allocation_interval|将resource offer发送给framewrok的间隔|1s|
|--allocator|资源调度算法, 可通过modules进行扩展|HierarchicalDRF|
|--[no-]authenticate|是否对框架进行认证|false|
|--[no-]authenticate_slaves|是否对slave进行认证|false|
|--authenticator|framework和slave的认证方式,可通过modules进行扩展|crammd5|
|--authorizers|授权方式指定默认为local, 可以通过modules方式扩展, 此时--acls将不起效, 目前不能同时支持多种授权方式|
|--cluster|集群的名称, 显示在webui上|
|--credentials|用户认证配置|
|--external_log_file|指定日志文件, 用于记录webui和http api的相关日志|
|--firewall_rules|设置http api接口的访问限制|
|--framework_sorter|frame资源分配的策略|drf|
|--[no-]help|显示帮助信息|
|--hooks|配置hook扩展|
|--hostname|设置master或slave对外的主机名|
|--[no-]initialize_driver_logging|是否自动初始化framework执行器的日志|
|--ip|master绑定的IP地址|
|--ip_discovery_command||
|--[no-]log_auto_initialize|是否自动初始化relicated log, 若禁用, 则必须手动初始化|true|
|--log_dir|日志文件路径|
|--logbufsecs|log刷新时间间隔|0s|
|--logging_level|日志级别，可配置为'INFO', 'WARNING', 'ERROR'|INFO|
|--max_slave_ping_timeouts|设置slave响应master ping命令失败的次数,若超过次数则移除slave|5s|
|--modules|加载的模块信息|
|--offer_timeout|master发送offer的回收时间|
|--port|master监听的端口号|5050|
|--[no-]quiet|关闭日志到标准错误输出|false|
|--quorum|决策人数量当记录replicated log的master数量大于quorum是则成功, 配置一般大于master数量的一半, 若master为1却不适用zk则不用配置|
|--rate_limits|配置framework接口调用的限速|
|--recovery_slave_removal_limit|故障恢复时刻移除的slave最大比例|100%|
|--registry|register使用的持久化策略，可以选择replicated_log或in_momory|replicated_log|
|--registry_fetch_timeout|当fetch失败时再次发起fetch的时间|1min|
|--registry_store_timeout|当store失败时再次发起store的时间|5s|
|--[no-]registry_strict|是否拒绝slave重新注册或移除|false|
|--roles|配置集群就角色信息|
|--[no-]root_submissions|是否允许root提交框架|true|
|--slave_ping_timeout|设置slave响应master ping命令的超时时间|15s|
|--slave_removal_rate_limit|slave移除速率|
|--slave_reregister_timeout|master重新选举后, slave重新注册的超时时间|10min|
|--user_sorter|用户资源分配策略|drf|
|--[no-]version|显示版本信息|
|--webui_dir|web ui的文件目录|
|--weights|用来配置角色获取资源的权重信息|
|--whitelist|配置可接受offer的slave, 默认全部接受|
|--work_dir|控件工作的目录和replication log存放的路径|
|--zk|zookeeper地址zk://ip:password/mesos|
|--zk_session_timeout|zookeeper会话超时时间|10s|
|--max_executors_per_slave|设置每个slave上运行制执行器的最大个数|

slave的配置参数:

参数名	参数值	默认值
--appc_store_dir
--attributes	设置slave节点的属性列表, 调度器可以根据属性值作为调度的限制条件
--authenticatee	slave用来向master的认证方式	crammd5
--[no-]cgroups_cpu_enable_pids_and_tids_count
--[no-]cgroups_enable_cfs	开启cfs带宽限制特征对cpu进行硬件限制	false
--cgroups_hierarchy	cgroups的根路径	/sys/fs/cgroup
--[no-]cgroups_limit_swap	开启内测和交换区的限制	false
--cgroups_root	根cgroups的名字	mesos
--container_disk_watch_interval	周期检查容器磁盘配合的时间间隔,posix/disk隔离器使用该配置	15s
--containerizer_path	设置外部容器的可执行文件, 需要和--isolation=external一起作用
--containerizers	设置使用的容器机支持mesos,external,docker, 在启动时会按照顺序进行尝试启动, 若使用docker则需要在启动时设置为docker,mesos	mesos
--credential	master认证的用户信息配置文件
--default_container_image	设置外部容器及使用的默认镜像，需要和--isolation=external一起作用
--default_container_info	在ExecutorInfo中未显示指定ContainerInfo时使用的默认ContainerInfo
--default_role	在--resouces中角色的默认值	*表示所有角色都有访问资源的权限
--disk_watch_interval	周期性检查磁盘使用率的时间间隔	1min
--docker	Docker可执行文件位置	docker
--[no-]docker_kill_orphans
--docker_mesos_image
--docker_remove_delay	在删除Docker容器前的等待时间	6h
--docker_socket
--docker_stop_timeout	docker停止实例的超时时间, 如果实例在时间内未停止则kill掉	0s
--[no-]enforce_container_disk_quota	开启容器磁盘配额功能, posix/disk隔离器使用该配置	false
--executor_environment_variables
--executor_registration_timeout	执行器和slave注册的超时时间	1min
--executor_shutdown_grace_period	执行器关闭时间	5s
--external_log_file
--fetcher_cache_dir
--fetcher_cache_size
--firewall_rules	设置http api接口的访问限制
--frameworks_home	附加在执行器相对URI前的路径
--gc_delay	执行器工作目录的垃圾回收时间,当磁盘使用率低时可能提前回收	1week
--gc_disk_headroom	执行器目录回收时间每隔disk_watch_interval时间目录的课存储时间则更新gc_delay * max(0, 1-gc_disk_headroom - disk_usage)	0.1
--hadoop_home	设置hadoop_home的路径, 用来从hdfs获取执行器
--[no-]help	显示帮助信息
--hooks	设置hook模块
--hostname	设置master的主机信息
--[no-]initialize_driver_logging
--ip	设置绑定的ip地址
--ip_discovery_command
--isolation	设置使用的隔离机制可以选择posix/cpu,posix/mem，若使用cgroup则需要设置为cgroup/cpu,cgroup/mem	posix/cpu,posix/mem
--launcher_dir	mesos二进制文件位置	/usr/local/bin/mesos
--log_dir	设置log目录
--logbufsecs	设置log刷新时间	0s
--logging_level	设置log级别	INFO
--master	设置master的地址或zookeeper的地址
--modules	设置加载的模块
--oversubscribed_resources_interval
--perf_duration	每次性能状态的采集时间, 必须小余perf_interval	10s
--perf_events	pref_event隔离器使用的容器性能采集事件
--perf_interval	性能状态采集的时间间隔	1min
--port	设置监听端口号	5050
--provisioners
--qos_controller
--qos_correction_interval_min
--[no-]quiet	设置是否关闭日志到标准错误输出	false
--recover	设置恢复策略, 可以设置为重新连接和清理, 重连指slave与运行的执行器重新连接, 清理是指关闭所有的执行器并以一个新的slave向master注册	reconnect
--recovery_timeout	等待slave恢复的超时时间，若超过时间则所有的执行器则自杀	15min
--registration_backoff_factor	在slave启动后随机等待[0, registration_backoff_factor]时间后再向master发起注册信息	1s
--resource_estimator
--resource_monitoring_interval	执行器资源使用监控的时间间隔	1s
--resources	设置为每个角色提供的资源信息，格式为resouce(role):value, 多个资源之间用分号分割
--[no-]revocable_cpu_low_priority		false
--sandbox_directory	沙盒目录映射到容器内目录的路径	/mnt/mesos/sandbox
--slave_subsystems	slave运行时的cgroup子系统包括memory,cpuacct等，使用逗号分割
--[no-]strict	检查恢复过程	true
--[no-]switch_user	检查是以提交任务的用户身份还是slave运行的身份执行任务	true
--[no-]version	显示版本信息
--work_dir	设置框架工作目录	/tmp/mesos
--ephemeral_ports_per_container	网络隔离器分配给每个容器临时端口数量，必须为2的幂次	1024
--eth0_name	设置公共网络接口名称
--lo_name	设置环回网络接口名称
--egress_rate_limit_per_container	限制容器的出口网络流量，单位为b/s, 如果未指定或设置为0表示不限制
--[no-]network_enable_socket_statistics_summary		fallse
--[no-]network_enable_socket_statistics_details		false	pei