表现

近期发现ck某一台节点tcp端口无法被响应
tcp连接数始终不低于70
clickhouse-client无法登录

排查

查看端口发现有大量的CLOSE_WAIT连接

lsof -i:9998

开始怀疑参数设置有误或者是版本的bug,排查一番发现没有异常

解决

后来发现是我们内部的ck管理平台在自动修改配置时将config.xml及user.xml的所属用户组及用户修改为非clickhouse而引发的异常

修改用户组及权限

chown -R clickhouse:clickhouse /etc/clickhouse-server

重启服务

/etc/init.d/clickhouse-server restart