Перейти к основному содержимому

Подключить файловое хранилище к кластеру в другом пуле

Если вы планируете использовать файловое хранилище для хранения бэкапов, для повышения отказоустойчивости мы рекомендуем создавать хранилище и кластер Managed Kubernetes в пулах из разных зон доступности или регионов. Если файловое хранилище и кластер Managed Kubernetes находятся в разных пулах, то для подключения хранилища нужно настроить приватную сетевую связность на уровне L3 через глобальный роутер.

  1. Создайте глобальный роутер.

  2. Подключите к глобальному роутеру сеть и подсеть для кластера Managed Kubernetes.

  3. Подключите к глобальному роутеру сеть и подсеть для файлового хранилища.

  4. Назначьте IP-адрес на ноде кластера Managed Kubernetes.

  5. Пропишите маршруты на ноде кластера Managed Kubernetes. Добавить маршруты можно только через техническую поддержку.

  6. Создайте файловое хранилище.

  7. Примонтируйте файловое хранилище к кластеру Managed Kubernetes.

Посмотрите пример подключения файлового хранилища к кластеру Managed Kubernetes в другом пуле.

Если с помощью файлового хранилища нужно увеличить дисковое пространство, мы рекомендуем создавать хранилище в одном пуле с кластером Managed Kubernetes. Подробнее в инструкции Подключить файловое хранилище к кластеру Managed Kubernetes в одном пуле.

Пример подключения файлового хранилища к кластеру Managed Kubernetes

Например, нужно подключить файловое хранилище в пуле ru-2 к кластеру Managed Kubernetes в пуле ru-8.

  1. Создайте глобальный роутер.

  2. Подключите к глобальному роутеру две приватные сети — 192.168.0.0/29 с шлюзом 192.168.0.1 для пула ru-8 и 172.16.0.0/29 с шлюзом 172.16.0.1 для пула ru-2.

  3. Назначьте адрес из подсети 192.168.0.0/29 на ноду кластера Managed Kubernetes, например 192.168.0.2.

  4. Пропишите маршрут на ноде кластера Managed Kubernetes в пуле ru-8 — в подсеть 172.16.0.0/29 через шлюз 192.168.0.1.

  5. Создайте файловое хранилище в подсети 172.16.0.0/29.

  6. Примонтируйте файловое хранилище к кластеру Managed Kubernetes.

1. Создать глобальный роутер

  1. В панели управления в верхнем меню нажмите Продукты и выберите Глобальный роутер.
  2. Нажмите Создать роутер. Для каждого аккаунта установлен лимит в пять глобальных роутеров.
  3. Введите имя роутера.
  4. Нажмите Создать.
  5. Если роутер создался со статусом ERROR или завис в одном из статусов, создайте тикет.

2. Подключить к роутеру сеть и подсеть для кластера Managed Kubernetes

Нужно создать сеть и подсеть глобального роутера до того проекта и пула облачной платформы, в которых создан кластер Managed Kubernetes.

Вы можете подключить к роутеру новую сеть или существующую сеть, если она еще не подключена к любому из глобальных роутеров аккаунта.

  1. В панели управления в верхнем меню нажмите Продукты и выберите Глобальный роутер.

  2. Откройте страницу роутера → вкладка Сети.

  3. Нажмите Создать сеть.

  4. Введите имя сети. Оно будет использоваться только в панели управления.

  5. Выберите услугу Облачная платформа.

  6. Выберите пул, в котором создан кластер Managed Kubernetes.

  7. Выберите проект, в котором создан кластер Managed Kubernetes.

  8. Введите имя подсети. Оно будет использоваться только в панели управления.

  9. Введите CIDR — IP-адрес и маску подсети. Подсеть должна соответствовать условиям:

    • принадлежать диапазону приватных адресов по RFC 1918: 10.0.0.0/8, 172.16.0.0/12 или 192.168.0.0/16;
    • иметь размер не меньше /29, так как три адреса будут заняты сетевым оборудованием Servercore;
    • не пересекаться с другими подсетями, добавленными на этот роутер: IP-адреса каждой подсети на роутере не должны совпадать с IP-адресами других подсетей на нем;
    • если в сеть глобального роутера будет включен кластер Managed Kubernetes на облачных серверах, подсеть не должна пересекаться с диапазонами 10.10.0.0/16, 10.96.0.0/12, 10.250.0.0/16 и 10.251.0.0/24. Если в сеть будет включен кластер на выделенных серверах — с диапазонами 10.10.0.0/16, 10.222.0.0/16, 10.250.0.0/16, 10.251.0.0/24 и 172.250.0.0/14. Эти подсети участвуют во внутренней адресации Managed Kubernetes, их использование может привести к конфликтам в сети глобального роутера.

  10. Введите IP шлюза или оставьте первый адрес из подсети, который назначается по умолчанию. Не назначайте этот адрес на свои устройства, чтобы не нарушить работу сети.

  11. Введите служебные IP или оставьте последние адреса из подсети, которые назначаются по умолчанию. Не назначайте эти адреса на свои устройства, чтобы не нарушить работу сети.

  12. Нажмите Создать сеть.

  13. Опционально: проверьте топологию сети на глобальном роутере. В панели управления в верхнем меню нажмите Продукты и выберите Глобальный роутер. Откройте страницу нужного роутера и нажмите Карта сети.

3. Подключить к роутеру сеть и подсеть для файлового хранилища

Нужно создать сеть и подсеть глобального роутера до того проекта и пула облачной платформы, в котором в дальнейшем будет создано файловое хранилище.

Вы можете подключить к роутеру новую сеть или существующую сеть, если она еще не подключена к любому из глобальных роутеров аккаунта.

  1. В панели управления в верхнем меню нажмите Продукты и выберите Глобальный роутер.

  2. Откройте страницу роутера → вкладка Сети.

  3. Нажмите Создать сеть.

  4. Введите имя сети. Оно будет использоваться только в панели управления.

  5. Выберите услугу Облачная платформа.

  6. Выберите пул, в котором будет создано файловое хранилище.

  7. Выберите проект, в котором будет создано файловое хранилище.

  8. Введите имя подсети. Оно будет использоваться только в панели управления.

  9. Введите CIDR — IP-адрес и маску подсети. Подсеть должна соответствовать условиям:

    • принадлежать диапазону приватных адресов по RFC 1918: 10.0.0.0/8, 172.16.0.0/12 или 192.168.0.0/16;
    • иметь размер не меньше /29, так как три адреса будут заняты сетевым оборудованием Servercore;
    • не пересекаться с другими подсетями, добавленными на этот роутер: IP-адреса каждой подсети на роутере не должны совпадать с IP-адресами других подсетей на нем;
    • если в сеть глобального роутера будет включен кластер Managed Kubernetes на облачных серверах, подсеть не должна пересекаться с диапазонами 10.10.0.0/16, 10.96.0.0/12, 10.250.0.0/16 и 10.251.0.0/24. Если в сеть будет включен кластер на выделенных серверах — с диапазонами 10.10.0.0/16, 10.222.0.0/16, 10.250.0.0/16, 10.251.0.0/24 и 172.250.0.0/14. Эти подсети участвуют во внутренней адресации Managed Kubernetes, их использование может привести к конфликтам в сети глобального роутера.

  10. Введите IP шлюза или оставьте первый адрес из подсети, который назначается по умолчанию. Не назначайте этот адрес на свои устройства, чтобы не нарушить работу сети.

  11. Введите служебные IP или оставьте последние адреса из подсети, которые назначаются по умолчанию. Не назначайте эти адреса на свои устройства, чтобы не нарушить работу сети.

  12. Нажмите Создать сеть.

  13. Опционально: проверьте топологию сети на глобальном роутере. В панели управления в верхнем меню нажмите Продукты и выберите Глобальный роутер. Откройте страницу роутера и нажмите Карта сети.

4. Назначить IP-адрес на ноде кластера Managed Kubernetes

Настройте локальный порт на ноде кластера Managed Kubernetes, которая включается в сеть глобального роутера. На порт назначьте IP-адрес из подсети, которую вы подключили к глобальному роутеру для кластера Managed Kubernetes.

  1. Добавьте ноду кластера Managed Kubernetes в созданную подсеть глобального роутера. Если у вас еще нет кластера Managed Kubernetes, создайте его. При создании в качестве подсети выберите подсеть глобального роутера.

  2. Примените изменения в зависимости от параметра Применять изменения в блоке Настройка портов. Значение параметра можно посмотреть в панели управления: в верхнем меню Продукты → Облачные серверы → страница облачного сервера → вкладка Порты:

    • При перезагрузке сервера — программно перезагрузите ноду или вручную внесите изменения в файле конфигурации сети на ноде;
    • Вручную в файле конфигурации сети на сервере — вручную внесите изменения в файле конфигурации сети на ноде.

5. Прописать маршруты на ноде кластера Managed Kubernetes

На каждой ноде кластера необходимо прописать статические маршруты до всех подсетей, подключенных к глобальному роутеру, с которыми нужна связность. Для этого настройте статические маршруты в приватной подсети, в которой находится кластер. В подсети необходимо настроить маршруты до всех остальных подсетей глобального роутера, с которыми будет идти обмен трафиком.

6. Создать файловое хранилище

  1. В панели управления в верхнем меню нажмите Продукты и выберите Файловое хранилище.

  2. Нажмите Создать хранилище.

  3. Введите имя хранилища или оставьте имя, которое создано автоматически.

  4. Выберите регион и сегмент пула, в котором будет создано хранилище.

    Если с помощью файлового хранилища нужно увеличить дисковое пространство, выберите сегмент пула из пула, в котором расположен облачный сервер или кластер Managed Kubernetes.

    Если вы планируете использовать хранилище для хранения бэкапов, мы рекомендуем выбрать сегмент пула из другой зоны доступности или региона для повышения отказоустойчивости.

  5. Заполните блоки:

  6. Проверьте цену файлового хранилища.

  7. Нажмите Создать.

Подсеть

  1. Выберите приватную подсеть, в которой будет находиться хранилище. Тип подсети зависит от того, к чему нужно подключить хранилище:

    • облачная приватная подсеть — хранилище будет доступно для облачных серверов и кластеров Managed Kubernetes только в том пуле, который вы выбрали при создании хранилища. Для подключения хранилища нужно будет только примонтировать его;
    • подсеть глобального роутера — хранилище будет доступно для выделенных серверов, а также облачных серверов и кластеров Managed Kubernetes, которые находятся в других пулах. Для подключения хранилища нужно настроить сетевую связность между сервером или кластером и хранилищем через глобальный роутер. Посмотрите примеры настройки сетевой связности в инструкциях раздела Подключить файловое хранилище.

    После создания хранилища подсеть нельзя будет изменить.

  2. Введите приватный IP-адрес хранилища или оставьте первый доступный адрес из подсети, который назначается по умолчанию. После создания хранилища IP-адрес нельзя будет изменить.

Настройки

  1. Выберите тип файлового хранилища:

    • HDD Базовое,
    • SSD Универсальное,
    • SSD Быстрое.

    После создания тип хранилища нельзя изменить.

  2. Укажите размер хранилища: от 50 ГБ до 50 ТБ. После создания можно увеличить файловое хранилище, но нельзя уменьшить.

  3. Выберите протокол:

    • NFSv4 — для подключения хранилища к серверам с ОС на базе Linux и другими Unix-системами;
    • CIFS SMBv3 — для подключения хранилища к серверам с ОС Windows.

    После создания хранилища протокол нельзя изменить.

Правила доступа

  1. Настройте правила доступа к файловому хранилищу:

    • доступно всем — хранилище будет доступно для любого IP-адреса приватной подсети, в которой оно создается;
    • доступ ограничен — хранилище будет доступно только для определенных IP-адресов или приватных подсетей. Если создать файловое хранилище без правил, доступ будет ограничен для всех IP-адресов.

  2. Если вы выбрали опцию Доступ ограничен, нажмите Добавить правило.

  3. Введите IP-адрес или CIDR приватной подсети, выберите уровень доступа.

    После создания хранилища вы можете настроить новые правила доступа.

7. Примонтировать файловое хранилище к кластеру Managed Kubernetes

Процесс монтирования зависит от протокола файлового хранилища: NFSv4 или CIFS SMBv3.

  1. Создайте PersistentVolume.

  2. Создайте PersistentVolumeClaim.

  3. Добавьте файловое хранилище в контейнер.

1. Создать PersistentVolume

  1. Подключитесь к кластеру Managed Kubernetes.

  2. Создайте yaml-файл с манифестом для объекта PersistentVolume:

    apiVersion: v1
    kind: PersistentVolume
    metadata:
      name: pv_name
    spec:
      storageClassName: storageclass_name
      capacity:
        storage: <storage_size>
      accessModes:
        - ReadWriteMany
      nfs:
        path: /shares/share-<mountpoint_uuid>
        server: <filestorage_ip_address>

    Укажите:

    • <storage_size> — размер PersistentVolume в ГБ (размер файлового хранилища), например 100 Gi. Ограничение — от 50 ГБ до 50 ТБ;
    • <mountpoint_uuid> — ID точки монтирования. Можно посмотреть в панели управления: в верхнем меню нажмите Продукты → Файловое хранилище → страница хранилища → блок Подключение → вкладка GNU/Linux;
    • <filestorage_ip_address> — IP-адрес файлового хранилища. Можно посмотреть в панели управления: в верхнем меню нажмите Продукты → Файловое хранилище → страница хранилища → вкладка Настройки → поле IP.

  3. Примените манифест:

    kubectl apply -f <persistent_volume.yaml>

    Укажите <persistent_volume.yaml> — имя yaml-файла с манифестом для создания PersistentVolume.

  4. Убедитесь, что создан объект PersistentVolume:

    kubectl get pv

2. Создать PersistentVolumeClaim

  1. Создайте yaml-файл с манифестом для объекта PersistentVolumeClaim:

    apiVersion: v1
    kind: PersistentVolumeClaim
    metadata:
      name: pvc_name
    spec:
      storageClassName: storageclass_name
      accessModes:
        - ReadWriteMany
      resources:
        requests:
          storage: <storage_size>

    Укажите <storage_size> — размер PersistentVolume (файлового хранилища) в ГБ, например 100 Gi. Ограничение — от 50 ГБ до 50 ТБ.

  2. Примените манифест:

    kubectl apply -f <persistent_volume_claim.yaml>

    Укажите <persistent_volume_claim.yaml> — имя yaml-файла с манифестом для создания PersistentVolumeClaim.

  3. Убедитесь, что создан объект PersistentVolumeClaim:

    kubectl get pvc

3. Добавить хранилище в контейнер

  1. Создайте yaml-файл с манифестом для объекта Deployment:

    apiVersion: apps/v1
    kind: Deployment
    metadata:
      name: filestorage_deployment_name
      labels:
        project: filestorage_deployment_name
    spec:
      replicas: 2
      selector:
        matchLabels:
          project: filestorage_project_name
      template:
        metadata:
          labels:
            project: filestorage_project_name
        spec:
          volumes:
            - name: volume_name
              persistentVolumeClaim:
                claimName: pvc_name
          containers:
            - name: container-nginx
              image: nginx:stable-alpine
              ports:
                - containerPort: 80
                  name: "http-server"
              volumeMounts:
                - name: volume_name
                  mountPath: <mount_path>

    Укажите <mount_path> — путь до папки внутри контейнера, в которую будет примонтировано файловое хранилище.

  2. Примените манифест:

    kubectl apply -f <deployment.yaml>

    Укажите <deployment.yaml> — имя yaml-файла с манифестом для создания Deployment.