创建云主机
Admin-deploy 部署节点,用于部署
Mon 监控节点
Osd1 osd
Osd2 osd
副本数为2
准备:
每台云主机创建cephd账户,并配置该用户免密码使用sudo权限;
配置admin-deploy 到各个节点免密码ssh登录;
每台节点能访问公网;
注意:
一定要配置主机hostname,保证hostname和/etc/hosts中一致,否则安装过程出错;
安装过程始终使用cephd用户,遇到无法使用ceph.client.keying之类问题,使用chmod +r …key 修改该文件权限;
Admin-deploy节点操作
安装ceph-deploy
添加/etc/yum.repos.d/ceph.repo文件
[Ceph-noarch]
name=Ceph noarch packages
baseurl=[http://download.ceph.com/rpm-luminous/el7/noarch](http://download.ceph.com/rpm-jewel/el7/noarch)
enabled=1
gpgcheck=1
type=rpm-md
gpgkey=[https://download.ceph.com/keys/release.asc](https://download.ceph.com/keys/release.asc)
priority=1
安装ceph-deploy
#yum update & yum install ceph-deploy
在/home/cephd目录下创建ceph-cluster文件夹,进入
创建集群,该集群就一个监控节点,即mon
$ceph-deploy new mon
会在该目录下生成一系列文件,其中在ceph.conf文件中添加
osd pool default size = 2 #即配置副本数为2
[mgr]
mgr modules = dashboard #启用dashboard使用
这里踩坑,可能会遇到如下错误:
Traceback
(most recent call last):
File "/usr/bin/ceph-deploy", line 18, in <module>
from ceph_deploy.cli import main
File "/usr/lib/python2.7/site-packages/ceph_deploy/cli.py", line 1, in
<module>
import pkg_resources
ImportError: No module named pkg_resources
解决方法#yum install python-setuptools
所有节点安装ceph
$ceph-deploy install admin-deploy mon osd0 osd1
这个步骤踩了个坑,发生错误no section:’ceph’…,解决方法:sudo yum remove ceph-release,是包冲突导致的
初始化monitor节点并收集所有密钥
$ceph-deploy mon create-initial (--overwite-conf,如报错加这个)
执行完成后,会在当前目录下生成一系列密钥环,各组件认证信息
测试 $ceph –s 此时状态应该是有1个mon节点,0个osd节点,0个mgr节点
安装osd节点服务
准备:两台osd云主机分别挂载干净的硬盘设备,并且没有被mount到某目录下!
可使用#fdisk –l查看设备
$ceph-deploy osd create --data/dev/vdb osd0
$ceph-deploy osd create –data /dev/vdbosd1
/dev/vdb就是云硬盘设备
如果出现问题说找不到或者创建失败,一般就是因为云硬盘设备没有格式化啥的
此时执行$ceph –s
能看到有1个mon,2个osd,0个mgr,注意此时显示osd可用空间依然为0GB,因为没有安装mgr
安装mgr并启动dashboard
注意:mgr要安装在mon的节点上
$ceph-deploy mgr create mon
验证是否安装成功
#rpm –qa | grep mgr
Mgr服务启停:在mgr节点执行
$systemctl startceph-mgr.target
$systemctl stopceph-mgr.target
注意,此时执行ceph mgr module enable dashboard,
$ceph mgr dump,此时提示dashboard已经在enable序列中,但是services序列此时是空,说明dashboard的7000 web服务还没有启动
配置web监控服务ip地址和端口号
$ceph config-key put mgr/dashboard/server_addr 192.168.56.11 #后面ip地址是mon节点地址
$ceph config-key put mgr/dashboard/server_port 7000 #配置端口号
此时$ceph mgr dump,看到services依然是空,说明还没启动web监控服务
到这里我查了一天资料,各种重启尝试配置,都没有生效,然后添加了自签名证书之后才生效
生成并安装自签名证书,在mon节点执行
$ceph dashboardcreate-self-signed-cert
$mkdir mgr-dashboard
$cd mgr-dashboard
$openssl req –new –nodes –x509–subj “/O=IT/CN=ceph-mgr-dashboard” -days 3650 -keyout dashboard.key -out dashboard.crt -extensions v3_ca
生成密钥,两个文件,dashboard.crtdashboar.key
此时查看$ceph mgr services,可以看到dashboard已经启动了,注意,是https
创建用户名、密码
$ceph dashboardset-login-credentials admin admin
按理说需要重启mgr,我这里没有重启,直接打开页面,输入https://ip:7000,可以看到登录页面,输入用户名密码之后,可以打开dashboard界面。
网友评论