Перейти к содержанию

Изменение версий приложений и схемы данных

Данный раздел содержит информацию для разработчиков и системных администраторов, которые смогут лучше разобраться во внутреннем устройстве нашего программного продукта, в частности, запускать и обновлять приложения, работающие на сервере приложений Picodata. Для этого пригодится описание версионирования приложений и схемы данных, а также особенностей останова и запуска приложений.

Версионирование

Ниже описаны особенности изменения версий схем данных и приложений, выполняющихся на сервере Picodata.

Версия схемы и версия приложения изменяются раздельно друг от друга. Для версионирования схемы используется набор семантических правил SemVer. Правила изменения версий приложения могут быть произвольными и задаваться по желанию пользователя, но при этом должно быть выполнено условие: у любых двух версий приложения с разной логикой должны быть разные пары имя приложения - версия приложения.

Приложение может работать только когда в кластере на всех активных инстансах во всех репликасетах загружена одна и та же версия приложения. Проверка версий запущенных приложений делается через журнал Raft. Каждое приложение при запуске ждет коммита своей версии в Raft log.

Версия схемы в кластере меняется только в большую сторону. Любые изменения схемы сопровождаются увеличением версии. Откатить версию нельзя (кроме восстановления из резервной копии).

Зависимость приложения от версии схемы задается явно двумя способами:

  1. (Обязательно).В коде приложения. Если в приложении задана зависимость от схемы v3.2.1, то это приложение не должно запускаться, если не выполняется условие: 3.2.1 <= версия схемы в кластере < 4.0.0, за исключением случаев, описанных в следующем пункте. В случае обнаружения несовместимой версии схемы Picodata должна останавливать приложение и ждать, пока схема станет совместимой. При этом должно выводиться соответствующее сообщение в журнал действий.
  2. (Опционально). Глобально в кластере в реплицируемом через Raft хранилище конфигурации может быть задано множество вариантов совместимости любой версии схемы с любой версией приложения. Этот признак совместимости имеет приоритет над первым. Т.е. когда Picodata запускает приложение, сначала проверяется признак совместимости согласно глобальной кластерной конфигурации: если совместимо, то Picodata запускает приложение НЕЗАВИСИМО ОТ ПРАВИЛ SEMVER. Предполагается, что администратору может понадобиться задать совместимость таким образом при решении проблем, см. пример ниже.

Проверка совместимости версий включена по умолчанию, но ее можно отключить.

Явное задание совместимости версий приложения и схемы

Приведем пример, когда нужно воспользоваться явным способом задания совместимости между приложением и схемой данных. Это и есть опциональный способ, указанный выше.

Выпущена новая версия приложения и новая обратно несовместимая версия схемы:

               APP  APP_DEPENDS_ON_SCHEMA  SCHEMA
    было:       v5                 v1.2.3  v1.2.3
    стало:      v6                 v2.0.0  v2.0.0

После этого обнаружилось, что в приложении v6 имеется критичная ошибка. Принято решение откатить приложение на v5. Но эта версия не запустится на схеме v2.0.0 даже если отключить проверку совместимости версий. Для решения проблемы через административный API схему меняют так, чтобы приложение v5 могло запуститься. Этим изменениям схемы присваивают версию v3.0.0. Глобально в конфигурации кластера задается совместимость app v5 и schema v3.0.0. После этого приложение v5 можно запустить в кластере с версией схемы v3.0.0, хотя приложение v5 было разработано и собрано в прошлом, когда про схему v3.0.0 еще не было известно.

Алгоритм запуска инстанса.

  1. Подключиться к кластеру и получить актуальную глобальную конфигурацию кластера.
  2. Отправить в глобальную конфигурацию версию запускаемого приложения через журнал Raft.
  3. Запустить Tarantool, даже если версия приложения несовместима со схемой.
  4. Применить все изменения схемы из глобальной конфигурации кластера.
  5. Если запускаемое приложение совместимо с версией схемы в кластере и содержит обновления схемы, то применить эти обновления глобально в кластере.
  6. Если версии совместимы, запустить приложение, иначе сделать запись в журнале и ждать пока версии станут совместимы.

Обновления и время простоя

Под временем простоя (downtime) подразумевается длительный промежуток времени, когда клиенты приложения не могут в полной мере пользоваться его функциями. Switchover, failover происходят относительно быстро и не считаются простоем. Перезапуск репликасета Tarantool со снапшотами по 10 GB считается долгим, т.к. может занять более 10 минут, поэтому считается простоем.

Простой вариант. Обновления будут проходить с простоем на время, пока все инстансы будут обновлены, перезапущены, и пока в них запустится Tarantool, который загрузит последнее сохраненное состояние БД из файла .snap и применит изменения из журнала операций (.xlog). Для выполнения такого обновления нужно обновить файлы приложения и перезапустить все инстансы в любом порядке: по одному или все сразу.

Сложный вариант состоит в обновлении приложения без простоя.

  1. Потребуется в каждом репликасете остановить все инстансы, кроме одного. Рекомендуется останавливать резервные реплики и оставлять работать активные реплики.
  2. Обновить файлы приложения на остановленных инстансах.
  3. Запустить ранее остановленные инстансы.
  4. Дождаться, пока Tarantool считает данные и запустится.
  5. Остановить инстансы, на которых приложение еще не обновлено. При этом произойдет переключение switchover, запустятся новые версии приложения, обновится схема данных.
  6. Обновить файлы приложения на оставшихся инстансах и запустить их.