Ssylka

Автоматизированная проверка эволюции схем состояния в Apache Flink с Jackson

Для управления эволюцией схем состояния в Apache Flink, используется кастомный сериализатор JacksonStateSerializer, поддерживающий Jackson-аннотации. Для автоматизации проверки корректности изменений схемы, введена аннотация @JacksonEvolvingState с полем version, определяющим версию схемы. При изменении схемы, разработчик должен увеличивать версию в аннотации, сохранять текущую версию класса (без package) в файл <Имя_класса>/<версия>.txt в директории src/test/resources/state/ и запускать тесты.
Автоматизированная проверка эволюции схем состояния в Apache Flink с Jackson
Изображение носит иллюстративный характер

Тесты проверяют, что все схемы, помеченные @JacksonEvolvingState, корректно эволюционируют из одной версии в другую. Тест сканирует все классы с данной аннотацией, получая версии из аннотации и выдавая комбинации для проверки. Для каждой комбинации версий выполняется создание savepoint для предыдущей версии схемы, затем восстановление состояния из savepoint с использованием новой версии схемы.

Для обеспечения корректной компиляции тестовых классов с использованием Lombok, зависимость Lombok была изменена с testCompileOnly на testImplementation, чтобы Lombok был виден в classpath теста во время компиляции. Проверка инкремента версии схемы при её изменении осуществляется путем сравнения содержимого текущей схемы в src с последней версией в test/resources/. Если содержимое отличается, тест выдает ошибку, требуя обновить версию схемы в ресурсах.

Использование аннотации @JacksonEvolvingState и автоматизированных тестов позволяет контролировать изменения схем состояния, гарантируя их обратную совместимость и предотвращая ошибки, связанные с некорректной эволюцией схем.


Новое на сайте

7575Асфальтовая жизнь: второе рождение дорожного покрытия 7574Как превратить старую футболку в новый биопластик и одежду? 7573Может ли эпидемия Эболы в мегаполисе перерасти в катастрофу? 7572Небесный танец: Венера и суперсерп луны озаряют Колорадо 7571Скрытый Свет энергии: новое окно в мир Тёмных экситонов 7570Парадоксы зуда: почему расчёсывание лишь усугубляет аллергический дерматит 7569Могут ли грибы превращать пауков в зомби, обрекая их на мучительную смерть? 7568Марсианские пауки: загадка полярных гейзеров Красной планеты 7567Станет ли Глазго привлекательнее с введением туристического налога? 7566ИИ-голос: ElevenLabs наращивает инвестиции и расширяет функционал 7565Эволюция веб-дизайна: фокус на интерактивность и аутентичность 7564Смогут ли электрохимические ячейки стать холодильниками будущего? 7563Может ли квантовая магия обуздать хаос турбулентности? 7562Тёмная материя: квантовый взгляд на космос 7561Почему так приятно чесать и так вредно одновременно?