Перейти к основному содержимому

Автоматизированная установка Copywala

Предусловия​

Перед началом установки убедитесь, что выполнены следующие условия:

  1. Подготовлено окружение.
  2. Дистрибутив CopyWala распакован в соответствии с инструкцией, приведенной в разделе Установка, шаг Распаковка дистрибутива CopyWala.

Последовательность действий​

Выполните шаги в следующем порядке:

  1. Подготовка среды Ansible.
  2. Установка Ansible-коллекций.
  3. Генерация TLS-сертификатов.
  4. Подготовка inventory-файла и переменных ролей.
  5. Запуск установки.

Подготовка среды Ansible​

Рекомендуется запускать установку модуля Copywala в виртуальной среде Python.

к сведению

Данный шаг выполняется на управляющем узле Ansible (control node) — машине, с которой запускаются Ansible-плейбуки.

Создание виртуальной среды позволяет избежать конфликтов с уже предустановленными пакетами и не затрагивать существующую среду на текущей машине. Для подготовки виртуального окружения выполните следующие шаги:

  1. Создайте виртуальное окружение. Рекомендуется использовать Python 3.9:

    python3 -m venv .pbr

  2. Активируйте виртуальное окружение:

    source .pbr/bin/activate

  3. Установите необходимые пакеты:

    python3.9 -m pip install 'ansible==8.7.0'

  4. Проверьте, что установка Ansible прошла успешно: ansible --version. В результате вывод не должен содержать ошибок. Команда pip list должна вывести зависимости:

        ansible             8.7.0
        ansible-core        2.15.13
к сведению

После завершения установки компонентов виртуальную среду можно отключить. Выполните консольную команду: deactivate.

Установка Ansible-коллекций​

к сведению

Данный шаг выполняется на управляющем узле Ansible (control node) — машине, с которой запускаются Ansible-плейбуки.

Установите или обновите Ansible-коллекции с помощью ansible-galaxy. Необходимые зависимости:

Название Ansible-коллекции

Версия

Установка

sbt-pbr (поставляется в составе дистрибутива продукта CopyWala)

1.0.0

Перейдите в директорию с распакованным дистрибутивом любого компонента CopyWala и запустите команду:

ansible-galaxy collection install package/scripts/Ansible/collections/sbt-pbr-1.0.0.tar.gz

Community.Postgresql (устанавливается из внешнего репозитория Ansible Galaxy)

3.9.1

ansible-galaxy collection install community.postgresql:3.9.1

Community.Library_Inventory_Filtering_V1 (устанавливается из внешнего репозитория Ansible Galaxy)

1.0.2

ansible-galaxy collection install community.library_inventory_filtering_v1:1.0.2

Генерация TLS-сертификатов​

Сгенерируйте TLS-сертификаты, необходимые для работы модуля Copywala с шифрованием.

Для генерации используйте Ansible-роль certs. Работа с ролью описана в дополнительной документации для автоматизированного варианта установки (с помощью Ansible) в разделе Генерация сертификатов с помощью Ansible-роли certs.

Подготовка inventory-файла и переменных ролей​

  1. Перейдите в директорию со скриптами установки. Например, если дистрибутив был распакован в /path_to_dir/distrib/:

    cd /path_to_dir/distrib/pbr/owned/pbra/package/scripts/Ansible

  2. Создайте inventory-файл на основе inventory_example.yml и в секции pbra.hosts укажите IP-адреса узлов, на которые необходимо установить модуль Copywala.

    Пример inventory-файла

    pbra:
      hosts:
        pbra-host:
          ansible_host: "<copywala_ip_address>"

    Подсказка

    Если Copywala необходимо установить на несколько хостов, добавьте дополнительные секции в inventory-файл по примеру ниже:

    Пример inventory-файла

    pbra:
      hosts:
        pbra-host1:
          ansible_host: "<copywala_ip_address_1>"

        pbra-host2:
          ansible_host: "<copywala_ip_address_2>"
        
        # КОД ПРОПУЩЕН: секции с IP-адресами остальных хостов

  3. Задайте переменные роли copywala.

    к сведению

    Роль copywala выполняет установку и настройку модуля Copywala. Она использует RPM-пакет, путь к которому задается в переменной copywala_package_path. Пакет копируется на целевой узел, после чего выполняется его установка.

    Путь к RPM-пакету можно задать вручную с помощью переменной copywala_package_path или определить автоматически с помощью роли common.

    Задайте переменные, у которых в таблице ниже в столбце «Обязательность заполнения» – Да, а также при необходимости задайте другие (не обязательные) переменные.

    примечание

    • Если переменная не задана явно в плейбуке, для нее используется значение по умолчанию, определенное в файле defaults/main.yml роли.

    • Из необязательных переменных рекомендуется заполнять секцию *_tls, где * — это префикс с именем модуля. Например, для Storage Manager секция будет выглядеть так:

      storage_manager_tls:
        rootca:
          local_path: /path/to/certs/certificates/rootCA.crt
        cert:
          local_path: /path/to/certs/certificates/storage-manager.crt
        key:
          local_path: /path/to/certs/certificates/storage-manager.key
Переменные Ansible-роли copywala

Название переменной

Описание

Значение по умолчанию

Обязательность заполнения

copywala_package_path

Путь к RPM-файлу установщика компонента CopyWala. Используется, когда требуется установка из отдельного файла, не идущего в архиве с продуктом, например для тестирования

''

Да или использовать роль common. При использовании роли common задавать эту переменную не требуется

copywala_target_db

Словарь, описывающий параметры целевой БД. На основе этих параметров будет создан пользователь (владелец БД) и сама БД. Содержит следующие ключи:<br />host – адрес кластера базы данных;<br />port– порт кластера базы данных;<br />user – пользователь служебной базы данных;<br />password – пароль служебной базы данных;<br />database – название служебной базы данных;<br />query_params – схема базы данных

{}

Да

copywala_log

Словарь, описывающий параметры логирования copywala. Содержит следующие ключи:<br />path – путь к файлу, в который будут записывать логи;<br />max_size – максимальный размер логов в мегабайтах;<br />max_age – длительность хранения логов в дня;<br />max_backups – максимальное число файлов с логами;<br />use_local_time – использование местного времени;<br />compress_backups – сжатие файлов с логами с помощью gzip

{}

Да

copywala_admin_db_user

Администратор баз данных для создания служебной базы данных

Не задано

Да

copywala_admin_db_password

Пароль администратора баз данных для создания служебной базы данных

Не задано

Да

copywala_backup_destination_uri

Хранилище резервных копий, например, local-fs:///home/postgres/backups/

Не задано

Да

copywala_config_dir

Директория с конфигурационным файлом компонента CopyWala

/etc/pbr

Нет

copywala_config_file

Имя конфигурационного файла компонента CopyWala

copywala.yaml

Нет

copywala_agent_config_file

Имя конфигурационного файла компонента PBR Agent

pbr-agent.yaml

Нет

copywala_config_params

Словарь, описывающий параметры конфигурации целевой базы данных. Содержит следующие ключи:<br />backup_destination_uri – путь, по которому будет доступна резервная копия;<br />wal_destination_uri – путь, по которому будут доступны WAL-записи;<br />restore_data_path – путь к PGDATA

{}

Нет

copywala_user

Пользователь Copywala

postgres

Нет

copywala_pbra_db

Словарь, описывающий параметры служебной БД. На основе этих параметров будет создан пользователь (владелец БД) и сама БД. Содержит следующие ключи:<br />host – адрес кластера базы данных;<br />port – порт кластера базы данных;<br />user – пользователь служебной базы данных;<br />password – пароль служебной базы данных;<br />database – название служебной базы данных;<br />query_params – схема базы данных

{}

Нет

copywala_tls

Словарь, описывающий глобальные параметры TLS. Содержит следующие ключи:<br />rootca – путь к сертификату удостоверяющего центра;<br />cert – путь к сертификату copywala;<br />key – путь к ключу copywala

{}

Нет

copywala_archive_settings

Словарь, описывающий параметры архива. Содержит следующие ключи:<br />archive_type – тип архива;<br />upload_params – структура архива

{}

Нет

copywala_backup_policy

Словарь, описывающий параметры политику резервного копирования. Содержит следующие ключи:<br />strategy – формат создания резервной копии;<br />fast_checkpoint – создание чек поинтов;<br />workers_no – количество потоков для создания РК;<br />progress_latency – шаг в долях от размера резервной копии, на котором сообщается прогресс

{}

Нет

copywala_agent_api_gateway

Словарь, описывающий настройку веб-сервера API API-gateway. Содержит следующие ключи:<br />http_address – адрес и порт, по которому доступен API API-gateway;<br />ws_address – адрес и порт, по которому доступен WebSocket API-gateway

{}

Нет

copywala_agent_heartbeat_delay

Интервал между запросами heartbeat

10s

Нет

copywala_agent

Словарь, описывающий параметры агента Copywala

{}

Нет

copywala_agent_tls

Словарь, описывающий параметры TLS для агента Copywala

{}

Нет

copywala_agent_log

Словарь, описывающий параметры логирования агента Copywala

{}

Нет

Переменные роли можно задать одним из следующих способов:

Пример заполнения

pbra:
  hosts:
    pbra-host:
      ansible_host: "<copywala_ip_address>"
      copywala_target_db:
        host: 127.0.0.1
        port: 5433
        user: "<postgres>"
        password: "<some_password>"
        database: postgres
        query_params: search_path=pbr
      copywala_log:
        path: /var/log/pbr/copywala.log

      # КОД ПРОПУЩЕН: другие переменные роли copywala

Подсказка

Пример плейбука также приведен в файле pbr/owned/pbra/package/scripts/Ansible/playbook_example.yml.

Запуск установки​

примечание

Перед запуском убедитесь, что виртуальное окружение .pbr активировано.

  1. Перед запуском установки copywala, в install.yml закомментируйте или удалите роли компонентов, которые не требуется устанавливать.

    Пример

    - name: Get rpm # укажите эту роль, если путь к RPM-пакету не задан в переменной pbr_agent_package_path
      hosts: all
      roles:
        - common
      vars:
        common_rpm_dir_path: /Users/tishkovskiy.a.s/distrib/pbr/owned/pbra/rpms/

    - name: Install Copywala
      hosts: pbra
      roles:
        - copywala
    #   - pbr_agent

  2. Для запуска установки выполните команды:

    cd pbr/owned/pbra/package/scripts/Ansible
    ansible-playbook -i inventory.yml install.yml
    примечание

    Если на шаге подготовка inventory-файла и переменных ролей переменные были заданы в отдельном файле, укажите его с помощью флага -e, например:

    cd pbr/owned/pbra/package/scripts/Ansible
    ansible-playbook -i inventory.yml install.yml -e @copywala-vars.yml

Проверка результата​

Для проверки установки и работоспособности модуля copywala обратитесь к разделу Чек-лист проверки корректности работы.

к сведению

После завершения установки данного модуля:

  1. При необходимости выполните установку других модулей Platform V CopyWala.
  2. Перейдите к следующему шагу — Настройка интеграции Platform V CopyWala с внешними сервисами.