如何将下线的OSD磁盘,重新初始化上线使用

时间:2024-03-06 18:06:31

将前面删除的osd磁盘,重新初始化并重新加入到ceph集群当中。

 

清空已删除磁盘中的内容

          输入命令:

          wipefs -af /dev/sdd

zap该磁盘

ceph-volume lvm zap /dev/sdd

   

[ceph: root@ceph-mon1 /]# ceph-volume lvm zap --help

usage: ceph-volume lvm zap [-h] [--destroy] [--osd-id OSD_ID]

[--osd-fsid OSD_FSID] [--no-systemd]

[DEVICES [DEVICES ...]]

   

测试发现在cephadm安装下的ceph集群并不生效,提示如下:

   

   

查看所有设备

[ceph: root@ceph-mon1 /]# ceph orch device ls

   

[ceph: root@ceph-mon1 /]# ceph osd tree

   

ceph-mon2和ceph-osd4分别少了一块硬盘在线(前面实验delete掉了)

   

定位是哪块盘不在线

[ceph: root@ceph-mon1 /]# ceph osd metadata 2 | grep devices

[ceph: root@ceph-mon1 /]# ceph osd metadata 9 | grep devices

   

   

相比较可以得知是sdc不在线,就是前面实验下线的osd.3

   

zap该磁盘,使其可重新被使用。

[ceph: root@ceph-mon1 /]# ceph orch device --help |grep zap

orch device zap <hostname> <path> [--force] Zap (erase!) a device so it can be re-used

   

[ceph: root@ceph-mon1 /]# ceph orch device zap ceph-mon2 /dev/sdc --force

   

重新查看可用状态

   

重新加入集群,收工。

[ceph: root@ceph-mon1 /]# ceph orch daemon add osd ceph-mon2:/dev/sdc

Created osd(s) 3 on host \'ceph-mon2\'

   

补充:

如果磁盘有旧信息,没有zap将无法重新被加入集群

[ceph: root@ceph-mon2 /]# ceph orch daemon add osd ceph-mon2:/dev/sdc

Created no osd(s) on host ceph-mon2; already created?

   

   

   

   

zap另一块磁盘出错

ceph orch device zap ceph-osd4 /dev/sdd --force 出错

   

   

[root@ceph-osd4 ceph]# wipefs -af /dev/sdd

   

完成wipefs操作后,重启该OSD所在节点的机器

   

重新zap,这次正常了

   

   

   

查看设备,已显示可用。

[ceph: root@ceph-mon1 /]# ceph orch device ls

   

重新加入后,前面实验删除的osd.8已重新加入集群。

[ceph: root@ceph-mon1 /]# ceph orch daemon add osd ceph-osd4:/dev/sdd

   

   

   

   

至此,12块盘全部可用。