之前单位的CDH集群部分组件老是会挂掉，每天人为的检查和重启服务，太麻烦，故写个相关服务监控的脚本发送消息和自动重启服务。
一、环境准备
Python3.6，使用的库文件如下：
requests==2.22.0
selenium==3.141.0
内置模块：
time
json
logging
二、各模块介绍
2.1 日志记录
2.2 浏览器对象操作
由于cdh提供的相关API无法获取服务的完整信息，比如impala中角色的id信息以及返回的服务信息不全，例如centos4、5、6中的impala daemon 角色只返回归类后的一个角色。由此，无法通过官方API来实现对impala服务的监控与重启，所以采用requests来自定义需要用到的操作。
构建浏览器对象，用来获取cookies
构建浏览器对象，用来获取cookies操作返回的服务信息：
2.3 微信接口
2.4 主函数入口
三、设置定时
四、小结
1，方便好用
2，可以集成为一个系统
之前单位的CDH集群部分组件老是会挂掉，每天人为的检查和重启服务，太麻烦，故写个相关服务监控的脚本发送消息和自动重...
一.准备工作 1.1 CDH 6.3.1大数据平台搭建 CDH 6.3 大数据平台搭建[https://blog....
如果需要卸载cdh，那么主要需要做的是停止cdh的相关服务，清理cdh相关的组件的路径，卸载cdh相关的程序安装包...
目录 系统平台 （Hadoop、CDH、HDP） 监控管理 （CM、Hue、Ambari、Dr.Elephant、...
一 目录 系统平台（Hadoop、CDH、HDP） 监控管理（CM、Hue、Ambari、Dr.Elephant、...
一、 一、目录 系统平台 （Hadoop、CDH、HDP） 监控管理 （CM、Hue、Ambari、Dr.Elep...
1： 背景 大数据监控平台大数据监控平台的有利保证，本章节讲解一下grafana监控平台 2： Grafana...
从零构建数据中台平台 Overview 数据中台平台从技术角度，需要支持以下维度的功能： IAAS（CDH） 数据...
监控系统介绍 集群监控&平台监控： 开发一个大数据平台不是我们的目的，稳定的对其使用才是 大数据平台的日志和监控是...
CDH是Cloudera的开源平台发行版，通过将Hadoop与其他十几个开源项目集成，为企业大数据业务提供服务。 ...
本文标题：CDH大数据平台相关服务监控
本文链接：https://www.haomeiwen.com/subject/mhhznctx.html
网友评论