proxmoxve结合ceph，组建高可用虚拟化平台，故障自动迁移

Proxmox创立集群组ceph必要至少三个节点，本次试验为三台服务器，每台服务器体系为proxmox6.4，数据盘为各三块2.4t机器盘。

一、调换体系源

为每台服务器安装好体系后，起首都必要更新update和upgrade，自带的更新源速率很慢，以是必要改成中文源。

1.调换阿里源

Shell敕令行下输入nano /etc/apt/sources.list

进入编纂界面

源地址如下：

deb https://mirrors.aliyun.com/debian buster main contrib non-free

deb https://mirrors.aliyun.com/debian buster-updates main contrib non-free

deb https://mirrors.aliyun.com/debian-security buster/updates main contrib non-free

deb https://mirrors.ustc.edu.cn/proxmox/debian/pve buster pve-no-subscription

deb https://mirrors.ustc.edu.cn/proxmox/debian/ceph-octopus/ buster main

然后按ctrl+o保留改动：

然后如上图所示，点击回车键。然后按ctrl+x退出编纂界面。

2.去除企业源，办法同理：

输入nano /etc/apt/sources.list.d/pve-enterprise.list

注释失落企业源，ctrl+o保留，然后回车，末了ctrl+x退出。

3. 删除该目次下所有文件。

输入rm -rf /etc/apt/sources.list.d/* （注意目次别删除了）

4.更新update和upgrade

输入apt update && apt upgrade，更新源和包

如下提醒输入y，期待安装完成

二、树立集群

1.树立集群

安装胜利之后，起首必要树立集群，起首用节点1创立集群：

提醒创立胜利。

然后查看参加信息

2.参加集群

将节点2和3分离参加节点1创立的集群。

胜利参加集群。

三、安装置置ceph

1.为每个节点安装ceph

每个节点进入敕令行，然后执行pveceph install 就可以了。

末了提醒胜利即可

2.为每个节点添加osd磁盘

敕令行输入 fdisk -l，查看所有盘符，

pveceph osd create /dev/sd[X]------X对应的盘符

例如pveceph osd create /dev/sdb为将sdb挂载成osd盘。

将各个节点osd盘创立好。

假如提醒报错，阐明磁盘在使用，

必要输入如下敕令

ceph-volume lvm zap /dev/sd[X]-----X对应的盘符

假如照样报错，必要

先vgdisplay ，查看所有vg卷组，把非体系卷组全体移除，

敕令如下

用vgremove移除对应的卷组

同理移除全体必要移除的vg后，必要pvdisplay查看所有被占用的物理卷

同样pvremove移除对应的物理卷

移除之后，reboot重启节点。

3.分离把对应监控节点和治理节点添加进节点1，2，3。

4.将cephfs组元参加各个节点

执行以上步调后，末了如下图为设置装备摆设胜利

5.创立ceph pool池

依据官方的文档，of_PGs这个数值比拟症结，假如不适宜的话，Ceph会告警，官方建议:

若少于5个OSD， 设置pg_num为128。

5~10个OSD，设置pg_num为512。

10~50个OSD，设置pg_num为4096。

创立好后每个节点都邑呈现创立的pool池。

四、迁徙测试

末了可以进行迁徙测试了，在随意率性节点上安装个虚拟体系，本次试验为节点1安装编号为129的体系为proxmox的虚拟机。

如图节点1安装一个proxmox体系

如图必要先将虚拟机的iso删除，不然不会迁徙。会提醒报错

将适才创立的虚拟机添加进HA中。

此时节点3为master状况，节点1，2，3都是激活状况

封闭节点1，hengcan01 期待半晌

此时节点1是断开状况，节点2，3为运动状况。至此，试验胜利。