VK Cloud logo

Настройка шлюза S3 для сервиса Кибер Бэкап Облачный

Шлюз S3 для сервиса Кибер Бэкап Облачный позволяет использовать публичный облачный сервис VK Object Storage для хранения резервных копий.

В качестве примера настройки будет создан шлюз S3 для сервиса Кибер Бэкап Облачный в конфигурации высокой доступности с кластером хранения из трех узлов.

Подготовительные шаги

  1. Обратитесь в техническую поддержку, чтобы создать учетную запись и тенант организации для шлюза S3, а также получить возможность подключать партнерские хранилища к тенанту.
  2. Перейдите в личный кабинет VK Cloud.
  3. Убедитесь, что в проекте достаточно необходимых квот для создания кластера хранения из трех ВМ и трех дисков по 1 ТБ каждый, а лимиты позволяют это сделать.
  4. Убедитесь, что клиент OpenStack установлен, и пройдите аутентификацию в проекте.
  5. Создайте ключевую пару для подключения к ВМ по SSH. Например, с названием vk-ssh.

1. Подготовьте бакет VK Object Storage

  1. Создайте бакет и запишите его URL.
  2. Создайте и запишите ключи доступа к бакету.

2. Создайте сети и подсети

  1. Создайте сеть без доступа в интернет и без маршрутизатора. В этом примере: private-storage-network.
  2. Отредактируйте созданную для этой сети подсеть, указав необходимые параметры. В этом примере:
    • имя подсети: private-storage-subnet;
    • адрес подсети: 192.168.0.0/24.
  3. Создайте сеть с доступом в интернет и маршрутизатором. В этом примере: public-storage-network.
  4. Отредактируйте созданную для этой сети подсеть, указав необходимые параметры. В этом примере:
    • имя подсети: public-storage-subnet;
    • адрес подсети: 10.0.0.0/24;
    • пул DHCP IP-адресов: 10.0.0.10–10.0.0.250.

3. Создайте группы и правила безопасности

  1. Создайте группу безопасности с легко опознаваемым именем. В этом примере: cyber.

  2. Добавьте в нее правила для входящего трафика:

    1. Первое правило:
    • Тип: SSH,
    • Протокол: TCP,
    • Порты: 22,
    • Удаленный адрес: Все IP-адреса.
    1. Второе правило:
    • Тип: ALL TCP,
    • Протокол: TCP,
    • Порты: 8888,
    • Удаленный адрес: Все IP-адреса.
  3. Добавьте в эту же группу безопасности правило для исходящего трафика:

    • Тип: Все протоколы и порты,
    • Удаленный адрес: Все IP-адреса.

4. Создайте и настройте ВМ для управляющего узла

  1. Скачайте образ Кибер Хранилища — ПО, которое позволяет организовать шлюз S3 и сохранять резервные копии из решений Кибер Бэкап в общедоступных облаках.

  2. Импортируйте образ с помощью Openstack CLI:

    openstack image create --progress \  --file cyber-storage.qcow2 \  --disk-format qcow2 \  --container-format bare \  Cyber-storage
  3. Создайте виртуальную машину со следующими параметрами:

    • Операционная система: импортированный ранее образ Cyber-storage;
    • Имя: любое удобное имя, в этом примере — cb-01;
    • Тип виртуальной машины: STD3-4-8;
    • Зона доступности: любая подходящая зона доступности;
    • Размер диска: 250 ГБ;
    • Тип диска: SSD;
    • Сеть: public-storage-network;
    • Ключ виртуальной машины: vk-ssh;
    • Настройки Firewall: Default, cyber;
    • Назначить внешний IP: опция включена.

    Дождитесь, пока созданная ВМ загрузится и появится приглашение на вход.

  4. Подключите к ВМ сеть private-storage-network. При подключении укажите:

    • конкретный IP-адрес из доступного диапазона адресов подсети private-storage-subnet;
    • группу безопасности Все разрешено (all).
  5. В выбранной для ВМ зоне доступности создайте диск для хранения с нужным объемом и подключите его к ВМ. Запишите имя диска.

5. Создайте и настройте ВМ для подчиненных узлов

  1. Создайте две виртуальные машины со следующими параметрами:

    • Операционная система: импортированный ранее образ Cyber-storage;
    • Имя: любые удобные имена, в этом примере — cb-02 и cb-03;
    • Тип виртуальной машины: STD3-4-8;
    • Зона доступности: любая подходящая зона доступности;
    • Размер диска: 250 ГБ;
    • Тип диска: SSD;
    • Сеть: public-storage-network;
    • Ключ виртуальной машины: vk-ssh;
    • Настройки Firewall: Default, cyber — обе группы безопасности для каждой ВМ;
    • Назначить внешний IP: опция отключена.

    Дождитесь, пока каждая из созданных ВМ загрузится и появится приглашение на вход.

  2. Подключите к созданным ВМ сеть private-storage-network. При подключении для каждой ВМ укажите:

    • конкретный IP-адрес из доступного диапазона адресов подсети;
    • группу безопасности Все разрешено (all).
  3. В выбранной зоне доступности создайте для каждой ВМ диски того же объема, что и для управляющего узла, и подключите диски к соответствующим ВМ. Запишите имена дисков.

6. Настройте Кибер Хранилище

  1. Подключитесь к виртуальной машине cb-01, используя имя пользователя cloud-user и приватный ключ из созданной ранее ключевой пары.

  2. Получите и сохраните пароль для панели управления Кибер Хранилища:

    cat /.initial-admin-password

    Сохраните этот пароль.

  3. Перейдите в панель управления Кибер Хранилища:

    1. Откройте в браузере адрес <ВНЕШНИЙ_IP-АДРЕС_ВМ>:8888.
    2. Введите логин admin и пароль, полученный ранее.
  4. Перейдите в раздел Инфраструктура → Сети и переименуйте сеть Private в Public.

  5. Нажмите кнопку Создать Сеть и создайте сеть Private.

  6. Создайте кластер хранения:

    1. Перейдите в раздел Инфраструктура → Серверы.
    2. Нажмите Создать кластер хранилища.
    3. Укажите имя кластера. Например, backupcloud.
    4. (Опционально) Выберите тип шифрования.
    5. Нажмите кнопку Создать.
  7. Подключите дополнительные узлы:

    1. Перейдите в раздел Серверы и нажмите кнопку Подключить Сервер.

    2. Запишите IP-адрес и токен для подключения узлов.

    3. Последовательно подключитесь к ВМ cb-02 и cb-03 по SSH и на каждой из них выполните команду:

      sudo -i   /usr/libexec/init-ifaces   /usr/libexec/vstorage-ui-agent/bin/register-storage-node.sh -m <IP-АДРЕС> -t <ТОКЕН>
    4. Вернитесь в панель управления Кибер Хранилища и перейдите в раздел Инфраструктура → Серверы. Убедитесь в том, что в списке серверов содержатся три узла: cb-01, cb-02, cb-03.

  8. Настройте сетевые интерфейсы:

    1. Нажмите на имя узла и перейдите на вкладку Сетевые интерфейсы.

    2. Измените настройки интерфейсов:

      1. Нажмите more-icon для интерфейса и выберите Изменить.
      2. Назначьте интерфейсу сеть Public.
      3. Сохраните изменения.
    3. Повторите действия для каждого из узлов.

  9. Присоедините дополнительные узлы к кластеру хранения:

    1. Перейдите в раздел Инфраструктура → Серверы.
    2. Для узлов cb-02 и cb-03 последовательно нажмите more-icon и выберите Присоединить к кластеру → Применить.
    3. Дождитесь, пока все узлы будут в статусе «Исправен».
  10. Назначьте сетям разные типы трафика:

    1. Перейдите в раздел Инфраструктура → Серверы.

    2. С помощью кнопок Назначить Сети и Назначить сетям назначьте для сетей следующие типы трафика.

      • Хранилище;
      • Управление системными сервисами;
      • OSTOR внутр.;
      • Резервные копии (ABGW) внутр.;
  11. Инициализируйте диски и назначьте им роли:

    1. Перейдите в раздел Инфраструктура → Серверы.
    2. Нажмите на название узла cb-01, откроется вкладка Диски.
    3. Назначьте дискам роли:
      • для vda — роль «Метаданные»;
      • для vdb — роль «Хранилище».
    4. Подтвердите операцию и дождитесь завершения добавления узла в кластер.
    5. Повторите те же действия для узлов cb-02 и cb-03.

7. Настройте высокую доступность и балансировку нагрузки для кластера

  1. Получите список портов подсети public-storage-subnet. Выпишите ID портов ВМ cb-01, cb-02 и cb-03 в этой подсети.

  2. Создайте порт в сети public-storage-network и подсети public-storage-subnet, указав конкретный IP-адрес из пула адресов подсети и имя порта. В этом примере — 10.0.0.252.

    openstack port create -network <ID_СЕТИ> -fixed-ip subnet=<ID_ПОДСЕТИ>,ip-address=10.0.0.252 <ИМЯ_ПОРТА>
  3. Добавьте этот IP-адрес в список разрешенных адресов для портов ВМ, которые направлены в подсеть public-storage-subnet:

    openstack port set --allowed-address ip-address=10.0.0.252 <ID_ПОРТА_ВМ_CB-01>openstack port set --allowed-address ip-address=10.0.0.252 <ID_ПОРТА_ВМ_CB-02>openstack port set --allowed-address ip-address=10.0.0.252 <ID_ПОРТА_ВМ_CB-03>
  4. Создайте балансировщик нагрузки со следующими параметрами:

    • Название балансировщика: cb-balancer;
    • Сеть: public-storage-network;
    • Назначить внешний IP: опция включена.
  5. Дождитесь создания балансировщика и запишите его внешний IP-адрес.

  6. Добавьте правило для этого балансировщика:

    1. Создайте прослушиватель:

      openstack loadbalancer listener create --name <ИМЯ_ПРОСЛУШИВАТЕЛЯ> \ --protocol TCP --protocol-port 8888 <ID_БАЛАНСИРОВЩИКА>
    2. Создайте пул балансировки:

      openstack loadbalancer pool create --name <ИМЯ_ПУЛА> \ --protocol TCP --lb-algorithm ROUND_ROBIN --listener <ИМЯ_ПРОСЛУШИВАТЕЛЯ>
    3. Добавьте участников пула:

      openstack loadbalancer member create --address 10.0.0.252 \ --subnet-id <ID_ПОДСЕТИ_PUBLIC-STORAGE-SUBNET> --protocol-port 8888 <ИМЯ_ПУЛА>
    4. Создайте проверку доступности:

      openstack loadbalancer healthmonitor create --type TCP \ --delay 5 --timeout 3 --max-retries 3 <ИМЯ_ПУЛА>
  7. Перейдите в панель управления Кибер Хранилища и откройте раздел Настройки → Сервер Управления → Высокая Доступность.

  8. Выберите три созданных узла и нажмите кнопку Создать конфигурацию высокой доступности, затем нажмите Продолжить.

  9. Для подсети public-storage-subnet укажите виртуальный IP-адрес 10.0.0.252.

  10. Подтвердите создание конфигурации.

  11. Проверьте доступность сервера управления по внешнему IP-адресу балансировщика, набрав в адресной строке браузера https://<ВНЕШНИЙ_IP_АДЕС_БАЛАНСИРОВЩИКА>:8888.

  12. (Опционально) Удалите публичный IP-адрес, привязанный к ВМ cb-01. Теперь вы можете переходить в панель управления Кибер Хранилища по внешнему IP-адресу балансировщика нагрузки.

  13. Добавьте к ранее созданному балансировщику нагрузки правило со следующими параметрами:

    • Протокол балансировки: TCP;
    • Порт: 44445;
    • Применить для следующих инстансов: cb-01, cb-02, cb-03.
  14. Присвойте внешнему IP-адресу балансировщика внешнее доменное имя.

8. Зарегистрируйте шлюз

  1. Перейдите в панель управления Кибер Хранилища.

  2. Перейдите в раздел Сервисы → Резервные копии и нажмите кнопку Создать резервное хранилище.

  3. На шаге Место назначения резервных копий выберите Облачный сервис и нажмите кнопку Далее.

  4. На шаге Серверы выберите все узлы для хранения и нажмите кнопку Далее.

  5. На шаге Облачный сервис:

    1. Выберите тип объектного хранилища: AuthV2-совместимый(S3).
    2. Введите URL эндпоинта VK Object Storage:
      • https://hb.vkcloud-storage.ru или https://hb.ru-msk.vkcloud-storage.ru — для региона Москва;
      • https://hb.kz-ast.vkcloud-storage.ru — для региона Казахстан.
    3. Введите название бакета и ключи доступа к нему.
    4. Включите опцию Разрешить использование самоподписанного сертификата до оконечной точки.
    5. Нажмите кнопку Далее.
  6. На шаге Политики хранения:

    1. Выберите область отказа Узел.
    2. Выберите режим избыточности, соответствующий политикам вашей организации.
    3. Нажмите кнопку Далее.
  7. На шаге DNS:

    1. Укажите внешнее доменное имя, присвоенное балансировщику нагрузки.
    2. Убедитесь в том, что конфигурация вашего DNS-сервера соответствует приведенному в интерфейсе примеру. При необходимости измените ее.
    3. Нажмите кнопку Далее.
  8. На шаге Учетная запись Киберпротект:

    1. Укажите URL облачной консоли: https://ru01-cloud.cyberprotect.ru.

    2. Введите логин и пароль для доступа к тенанту организации, полученные от технической поддержки.

    3. Нажмите кнопку Далее.

  9. На шаге Сводка просмотрите конфигурацию, нажмите кнопку Создать и дождитесь создания шлюза.

9. Добавьте пользователей

  1. Авторизуйтесь на https://ru01-cloud.cyberprotect.ru.
  2. Создайте пользователей и администраторов.
  3. Делегируйте подключенный шлюз для резервных копий в настройках пользователя при его создании или редактировании.
  4. Перейдите в раздел Клиенты.
  5. Создайте в тенанте организации клиентские тенанты, укажите для них новое S3-хранилище резервных копий.

10. Проверьте работоспособность

  1. Создайте резервную копию в сервисе Кибер Бэкап Облачный.
  2. Убедитесь, что резервная копия сохранена в бакете VK Object Storage.

Удалите неиспользуемые ресурсы

Работающая инфраструктура сервиса потребляет вычислительные ресурсы. Если шлюз S3 и кластер хранения вам больше не нужны, удалите их:

  1. Удалите виртуальные машины.
  2. Убедитесь, что вместе с ВМ были удалены все диски, если это не так, удалите их.
  3. Удалите маршрутизатор.
  4. Удалите балансировщик нагрузки.
  5. Удалите публичные IP-адреса.
Была ли статья полезна?