CentOS 安装 ceph 单机版

简介

Ceph是一个分布式存储软件。

它支持用3种方式存储数据，分别是：对象存储、块设备存储、分布式文件系统存储。

Ceph这个软件，分为3层，最底层是Rados对象存储系统、中间是一个librados，也就是一个接口层，对外提供访问Rados对象存储系统的接口API，最上层又提供了三种不同的存储方式：对象存储、块设备存储、文件系统存储。

环境准备

1、修改主机名

 hostnamectl  set-hostname nceph

2、配置hosts文件

cat <<"EOF">/etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
10.17.12.98 nceph
EOF

3、安装NTP时间同步

此处不细说

4、添加ceph源

cat <<END >/etc/yum.repos.d/ceph.repo
[ceph]
name=ceph
baseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/x86_64/
gpgcheck=0
[ceph-noarch]
name=cephnoarch
baseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/noarch/
gpgcheck=0
[ceph-source]
name=ceph-source
baseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/SRPMS/
gpgcheck=0
END

5、关闭selinux和firewall

setenforce 0
sed -i  "s/SELINUX=enforcing/SELINUX=permissive/g" /etc/selinux/config
systemctl disable firewalld.service
systemctl stop firewalld.service

安装配置CEPH

1、安装ceph-deploy包

yum -y install ceph-deploy-1.5.39
ceph-deploy --version

2、创建配置文件目录

mkdir /etc/ceph
cd  /etc/ceph

3、创建集群 并写入文件

ceph-deploy new  nceph

因为我们是在单节点上工作，因此需要修改一下配置文件

echo "osd crush chooseleaf type = 0" >> ceph.conf
echo "osd pool default size = 1" >> ceph.conf
echo "osd journal size = 100" >> ceph.conf

4、安装 ceph 基本库

ceph-deploy install  nceph

5、创建一个集群监视器

ceph-deploy mon create  nceph

6、创建  启动OSD
清空磁盘

ceph-deploy disk zap  nceph:sdb

如果出现如下报错：

执行

 ceph-deploy gatherkeys nceph

创建osd

ceph-deploy osd create nceph01:sdb

验证

ceph osd tree

ceph -s

lsblk

提供块存储服务

1、创建一个存储池，并查看

ceph osd pool create test 128
ceph osd lspools

2、创建一个10G的块

rbd create --size 10G disk01 --pool test

3、查看rbd

rbd ls test -l

4、将10G的块映射到本地

rbd map disk01

查看创建的image存不存在：

rbd info test/disk01

将10G的块映射到本地时报错了，需要去掉一些feature

rbd feature disable test/disk01 exclusive-lock object-map fast-diff deep-flatten

再次映射就可以了

查看集群状态
ceph -s

5、查看映射

 rbd showmapped

6、格式化为xfs格式

 mkfs.xfs /dev/rbd0

7、挂载rbd0到本地的目录中
创建用于挂载的目录，并挂载

# mkdir /cephStore
# mount /dev/rbd0 /cephStore
# df -h

icfs-deploy osd create node01:sd

Normal
0

7.8 磅
0
2

false
false
false

EN-US
ZH-CN
X-NONE

/* Style Definitions */
table.MsoNormalTable
{mso-style-name:普通表格;
mso-tstyle-rowband-size:0;
mso-tstyle-colband-size:0;
mso-style-noshow:yes;
mso-style-priority:99;
mso-style-parent:"";
mso-padding-alt:0cm 5.4pt 0cm 5.4pt;
mso-para-margin:0cm;
mso-para-margin-bottom:.0001pt;
mso-pagination:widow-orphan;
font-size:10.0pt;
font-family:"Times New Roman",serif;}