Перейти к содержанию

CSI CephFS

Описание

Модуль обеспечивает работу с файловой системой Ceph внутри кластера Kubernetes

По окончанию установки. Вы получите дополнительный StorageClass.

Используйте объект PersistentVolumeClaim с указанием StorageClass

Подготовка Ceph

Подготовка CephFS

Заметка

Если у вас уже настроен CephFS пропустите эту главу

Создайте два пула под данные и метаданные: 

ceph osd pool create cephfs_metadata
ceph osd pool create cephfs_data

Запуск CephFS: 

ceph fs new vmik_share cephfs_metadata cephfs_data

Пометить пул с данными как bulk: 

ceph osd pool set cephfs_data bulk true

Запустить службу mds: 

ceph orch apply mds vmik_share --placement="3"

Создание пользователя

Создать пользователя и выдать права в пул: 

ceph auth get-or-create client.CEPH_USER_ID mon 'allow r' mgr 'allow rw' mds 'allow rws' osd 'allow rw pool=cephfs_data, allow rw pool=cephfs_metadata'

Получить ключ для авторизации CEPH_USER_KEY: 

ceph auth get-key client.CEPH_USER_ID

Данные для подключения

Получить кластер ID CEPH_CLUSTER_ID: 

ceph status | grep id
ceph mon stat Получить параметры подключения CEPH_MONITOR": 
ceph mon stat

Подключение модуля

Описание Yaml

apiVersion: configuration.bootsman.tech/v1alpha1
kind: CephCsiCephfs
metadata:
  name: default
spec:
  disabled: false
  storageClass:
    name: "CEPH_STORAGECLASS_NAME" (1)
    clusterID: "CEPH_CLUSTER_ID" (2)
    fsName: "CEPH_FILESYSTEM_NAME" (3)
    pool: "CEPH_POOL" (4)
    mounter: "CEPH_MOUNT_CLIENT" (5)
  csiConfig:
    clusterID: "CEPH_CLUSTER_ID" (6)
    monitors:
      - "CEPH_MONITOR" (7)
  secret:
    create: true (8)
    name: "CEPH_SECRET_NAME" (9)
    adminID: "CEPH_ADMIN_ID" (10)
    adminKey: "CEPH_ADMIN_KEY" (11)
  1. Имя нового StorageClass
  2. ID кластера Ceph.
  3. Имя файловой системы CephFS.
  4. Опционально. Пул Ceph, котором будут размещаться данные.
  5. Опционально. На выбор два клиента "fuse" и "kernel".
  6. ID кластера Ceph.
  7. Список эндпоинтов Ceph-кластера. Пример: 
      monitors:
  - "v2:172.31.197.69:3300/0,v1:172.31.197.69:6789/0"
  - "v2:172.31.138.209:3300/0,v1:172.31.138.209:6789/0"
  - "v2:172.31.137.176:3300/0,v1:172.31.137.176:6789/0"
  8. Используйте значение false при доступе без авторизации.
  9. Имя секрета авторизации Ceph.
  10. ID пользователя авторизации.
  11. Пароль пользователя авторизации.

Настройка в UI

Image Image