Репликация Materialized Views в ClickHouse: уроки аварийного восстановления

В ClickHouse, материализованные представления (MV) с движком ReplicatedMergeTree реплицируются отдельно от основных таблиц, на которых они построены. Это необходимо, поскольку MV выступают как триггеры на INSERT. При репликации основных таблиц, INSERT в MV не происходит, следовательно, репликация MV необходима для актуальности данных.
Репликация Materialized Views в ClickHouse: уроки аварийного восстановления
Изображение носит иллюстративный характер

В случае повреждения ZooKeeper и последующего восстановления, MV могут перейти в readonly режим из-за отсутствия метаданных в ZooKeeper. Простой SYSTEM RESTORE REPLICA не всегда решает эту проблему.

Эффективным способом восстановления MV является команда SYSTEM RESTORE REPLICA непосредственно для таблиц, являющихся хранилищем данных MV. Эти таблицы имеют имена вида .inner_id.UUID. Определение readonly таблиц можно сделать запросом к system.replicas.

Для избежания простоев рекомендуется использовать явное указание целевой таблицы при создании MV, что упрощает понимание и управление. В противном случае, ClickHouse создает таблицы хранилища сам, с именами вида .inner_id.UUID, что может затруднить восстановление после сбоев.


Новое на сайте

19521Банковский троян VENON на Rust атакует Бразилию с помощью девяти техник обхода защиты 19520Бонобо агрессивны не меньше шимпанзе, но всё решают самки 19519Почему 600-килограммовый зонд NASA падает на Землю из-за солнечной активности? 19518«Липовый календарь»: как расписание превращает работников в расходный материал 19517Вредоносные Rust-пакеты и ИИ-бот крадут секреты разработчиков через CI/CD-пайплайны 19516Как хакеры за 72 часа превратили npm-пакет в ключ от целого облака AWS 19515Как WebDAV-диск и поддельная капча помогают обойти антивирус? 19514Могут ли простые числа скрываться внутри чёрных дыр? 19513Метеорит пробил крышу дома в Германии — откуда взялся огненный шар над Европой? 19512Уязвимости LeakyLooker в Google Looker Studio открывали доступ к чужим базам данных 19511Почему тысячи серверов оказываются открытой дверью для хакеров, хотя могли бы ею не быть? 19510Как исследователи за четыре минуты заставили ИИ-браузер Perplexity Comet попасться на... 19509Может ли женщина без влагалища и шейки матки зачать ребёнка естественным путём? 19508Зачем учёные из Вены создали QR-код, который невозможно увидеть без электронного... 19507Девять уязвимостей CrackArmor позволяют получить root-доступ через модуль безопасности...
Ссылка