Ssylka

Репликация Materialized Views в ClickHouse: уроки аварийного восстановления

В ClickHouse, материализованные представления (MV) с движком ReplicatedMergeTree реплицируются отдельно от основных таблиц, на которых они построены. Это необходимо, поскольку MV выступают как триггеры на INSERT. При репликации основных таблиц, INSERT в MV не происходит, следовательно, репликация MV необходима для актуальности данных.
Репликация Materialized Views в ClickHouse: уроки аварийного восстановления
Изображение носит иллюстративный характер

В случае повреждения ZooKeeper и последующего восстановления, MV могут перейти в readonly режим из-за отсутствия метаданных в ZooKeeper. Простой SYSTEM RESTORE REPLICA не всегда решает эту проблему.

Эффективным способом восстановления MV является команда SYSTEM RESTORE REPLICA непосредственно для таблиц, являющихся хранилищем данных MV. Эти таблицы имеют имена вида .inner_id.UUID. Определение readonly таблиц можно сделать запросом к system.replicas.

Для избежания простоев рекомендуется использовать явное указание целевой таблицы при создании MV, что упрощает понимание и управление. В противном случае, ClickHouse создает таблицы хранилища сам, с именами вида .inner_id.UUID, что может затруднить восстановление после сбоев.


Новое на сайте

18587Как одна ошибка в коде открыла для хакеров 54 000 файрволов WatchGuard? 18586Криптовалютный червь: как десятки тысяч фейковых пакетов наводнили npm 18585Портативный звук JBL по рекордно низкой цене 18584Воин-крокодил триаса: находка в Бразилии связала континенты 18583Опиум как повседневность древнего Египта 18582Двойной удар по лекарственно-устойчивой малярии 18581Почему взрыв массивной звезды асимметричен в первые мгновения? 18580Почему самые удобные для поиска жизни звезды оказались наиболее враждебными? 18579Смертоносные вспышки красных карликов угрожают обитаемым мирам 18578Почему самый активный подводный вулкан тихого океана заставил ученых пересмотреть дату... 18577Вспышка на солнце сорвала запуск ракеты New Glenn к Марсу 18576Как фишинг-платформа Lighthouse заработала миллиард долларов и почему Google подала на... 18575Почему космический мусор стал реальной угрозой для пилотируемых миссий? 18574Зеленый свидетель: как мох помогает раскрывать преступления 18573Инфраструктурная гонка ИИ: Anthropic инвестирует $50 миллиардов для Claude