|
前言k8s集群使用什么样的存储比较好那，我调研了一下分布式存储ceph，在这里分享给大家。
一、基础环境
1、服务分布情况Node1： admin，osd，mon
Node2： osd，mds， client
2、 网络配置 (所有节点)修改主机名, 切记主机名不能出现下划线修改主机名(/etc/hostname):hostnamectl set-hostname node1hostnamectl set-hostname node2修改 /etc/hosts 加入vim /etc/hosts192.168.84.131 node1192.168.84.132 node2
3、SSH免密访问 (所有节点)ssh-keygen ssh-copy-id -i id_rsa.pub root@192.168.84.131
二、安装
1、将新挂载的硬盘格式化，作为osd的存储（有osd节点的都要做）mkfs.xfs /dev/sdbblkid /dev/sdbmkdir -p /data/osdvim /etc/fstab UUID="57493ebb-6744-4355-a7f6-ec7538b4b65e" /data/osd xfs defaults 0 0mount -a
2、在管理节点node1安装ceph-deploy管理工具（1）配置yum源 vim /etc/yum.repos.d/ceph.repo[ceph]name=cephbaseurl=http://mirrors.aliyun.com/ceph/rpm-jewel/el7/x86_64/gpgcheck=0priority=1 [ceph-noarch]name=cephnoarchbaseurl=http://mirrors.aliyun.com/ceph/rpm-jewel/el7/noarch/gpgcheck=0priority=1 [ceph-source]name=Ceph source packagesbaseurl=http://mirrors.aliyun.com/ceph/rpm-jewel/el7/SRPMSgpgcheck=0priority=1#清楚yum缓存，重新加载yum clean allyum makecache （2）安装ceph-deploy管理工具 yum -y install ceph-deploy （3）创建Monitor服务 mkdir /data/cephcd /data/ceph/ceph-deploy new node1 
ceph.conf ceph的配置文件ceph-deploy-ceph.log ceph日志ceph.mon.keyring ceph monitor密钥环文件#如果想要修改守护进程数，也就是副本数，可以在ceph.conf配置文件中添加如下行osd_pool_default_size = 1 ##副本数
3、在所有主机上安装cephceph-deploy install node1 node2#上面这个命令是去官方服务器下载安装，相当慢一般不会这样用。之前管理节点node1配置过ceph的阿里云的源，可以直接yum安装。不过另外主机node2需要先配置yum源，再安装。yum -y install epel-releaseyum -y install ceph-releaseyum -y install ceph ceph-radosgw
4、在管理节点上安装Monitor（监控）cd /data/ceph/ceph-deploy mon create node1ceph-deploy gatherkeys node1 
5、创建osd#前面已经创建过osd目录并挂载，这里只需要创建osd节点即可。ceph-deploy osd prepare node1:/data/osd node2:/data/osd 在不同的主机上可以看到，对应的节点会生成文件  
6、激活osd#在管理节点node1上激活各节点的osdceph-deploy osd activate node1:/data/osd node2:/data/osd 
#上图可以明显看出是权限不足的原因，直接授权777chmod 777 -R /data/osd/#重新执行激活ceph-deploy osd activate node1:/data/osd node2:/data/osd 激活完成后可以使用命令查看osd ceph-deploy osd list node1 #也可以查看多个节点，中间用空格隔开 
#使用命令将配置文件和admin密钥同步到各个节点，以便各个节点使用ceph命令时无需指定Monitor地址和ceph.client.admin.keyring密钥。注意：还需要修改各个节点ceph.client.admin.keyring密钥的权限ceph-deploy admin node1 node2node1:cd /data/cephchmod +r ceph.client.admin.keyringnode2:cd /etc/cephchmod +r ceph.client.admin.keyring最后查看osd状态:ceph health 
7、部署mdsceph-deploy mds create node2ceph mds stat查看集群状态：ceph -s 结语 集群状态当时忘记截图了，执行ceph -s 命令，大家只要看到包含“HEALTH_OK”的字样，集群就部署成功了。
下载地址:
Ubuntu安装Matlab2020b详细教程和资源
Centos7下yum安装Ceph分布式存储教程 |
