使用 kolla-ansible 安装 ceph 进行多合一设置

Question

我正在尝试使用启用 ceph 的 kolla-ansible 部署一体化配置

enable_ceph: "yes"
#enable_ceph_mds: "no"
enable_ceph_rgw: "yes"
#enable_ceph_nfs: "no"
enable_ceph_dashboard: "{{ enable_ceph | bool }}"
#enable_chrony: "yes"
enable_cinder: "yes"
enable_cinder_backup: "yes"
glance_backend_ceph: "yes"
gnocchi_backend_storage: "{{ 'ceph' if enable_ceph|bool else 'file' }}"
cinder_backend_ceph: "{{ enable_ceph }}"
cinder_backup_driver: "ceph"
nova_backend_ceph: "{{ enable_ceph }}"

而且，我的设置包括一个带有 Ubuntu 18.04.4 桌面版的 Virtual Box VM，具有 2 个 CPU 内核、30 GB 磁盘（单磁盘）、2GB RAM，分区类型为 msdos。

ansible版本==2.9.7

kolla-ansible 版本==9.1.0

为了使用 kolla-ansible 安装 ceph OSD，我读到一个分区的名称应该是 KOLLA_CEPH_OSD_BOOTSTRAP_BS。

因此，我创建了 20 GB 的根分区，即 /dev/sda1，然后为 rest 20GB 创建了扩展分区 /dev/sda2，然后是两个逻辑分区（/dev/sda5 和 /dev/sda6），每个 10GB 用于 OSD。 但是在 msdos 类型的分区中，没有为分区分配名称的功能。

所以我的问题是：

1. 我如何 go 关于在 msdos 类型分区的情况下标记分区，以便 kolla-ansible 识别 /dev/sda5 和 /dev/sda6 是为 Ceph-OSD 指定的？
2. 是否必须拥有一个单独的存储驱动器而不是包含 Ceph OSD 操作系统的存储驱动器（我知道不建议将所有驱动器都放在单个磁盘中）？
3. 为了使用 kolla-ansible 安装 Ceph-OSD，我必须如何配置我的单驱动器 HD 空间？

PS：我还尝试使用 kolla-ansible 使用 OpenStack VM 安装 ceph（4 个 CPU 内核，80GB 磁盘空间 - 单个驱动器，因为我没有在我的 OpenStack 基础设施中安装 Cinder。）和 Ubuntu 18.04.4 云映像，其中有GPT分区类型，支持命名分区，分区如下：

/dev/vda1 用于根分区

/dev/vda2 用于 ceph OSD

/dev/vda3 用于 ceph OSD

但缺点是，kolla-ansible 清空了整个磁盘，导致安装失败。

非常感谢任何帮助。 提前非常感谢。

Answer 1

我还安装了一个以 Ceph 作为存储后端的 Kolla-Ansible 单节点一体机，所以我遇到了同样的问题。

是的，ceph 的 bluestore 安装不适用于单个分区。 我也尝试过不同的标记方式，但对我来说，它只适用于整个磁盘，而不是分区。 因此，为您的虚拟设置创建一个全新的磁盘，例如/dev/vdb 。

对于标签，我使用以下作为 bash 脚本：

#!/bin/bash
DEV="/dev/vdb"
(
echo g # create GPT partition table
echo n # new partiton
echo   # partition number (automatic)
echo   # start sector (automatic)
echo +10G # end sector (use 10G size)
echo w # write changes
) | fdisk $DEV
parted $DEV -- name 1 KOLLA_CEPH_OSD_BOOTSTRAP_BS

请注意，开始时的DEV已为您的设置正确设置。 这将在新磁盘上创建一个新的分区表和一个 10GB 大小的分区。 kolla-ansible deploy-run 注册label 并擦除整个磁盘，所以size-value没什么好说的，只针对磁盘上的临时分区。

对于 kolla-ansible 中的 Ceph-OSD，一张光盘就足够了。 您不需要第二个 OSD。 为此，当您使用默认的 kolla 安装路径： /etc/kolla/config/ceph.conf时，在此路径中的 kolla-ansible 设置中添加以下配置文件：

[global]
osd pool default size = 1
osd pool default min size = 1

这是为了确保 kolla-ansible 只请求一个 OSD。 如果带有globals.yml的 kolla 目录不在/etc/kolla/下，则还必须更改配置文件的路径。

使用具有多个分区的单个磁盘进行设置的解决方案是将 kolla-ansible 设置中的 ceph-storage 的存储类型从 bluestore 切换为较旧的文件存储 OSD 类型。 这也需要不同的分区标签，如下所示： https://docs.openstack.org/kolla-ansible/rocky/reference/ceph-guide.html#using-an-external-journal-drive 。 使用文件存储，您需要一个带有 label KOLLA_CEPH_OSD_BOOTSTRAP_FOO KOLLA_CEPH_OSD_BOOTSTRAP_FOO_J小日志分区（名称中的FOO确实是必需的......） 为了能够将您的 kolla 安装切换到文件存储 OSD 类型，请通过在主机旁边添加ceph_osd_store_type=filestore来编辑一体机文件的[storage]部分，如下所示，以覆盖默认的 bluestore。

[storage]
localhost       ansible_connection=local ceph_osd_store_type=filestore

上述方法已经在 ansible ansible==2.9.7和kolla-ansible==9.1.0以及OpenStack Train release和之前的版本中进行了测试。