Как развернуть петабайтный ClickHouse кластер за 5 минут. DevOps и эксплуатация
Окончил МГУ ВМК в 1999 г. Занимается распределенными системами с 2003 г. Разрабатывал крупные проекты на MySQL, Oracle и Vertica. Один из пионеров использования ClickHouse. Сооснователь и CTO компании Altinity.
В докладе детально рассмотрим, как развернуть "боевой" ClickHouse кластер произвольного размера, с шардированием и репликацией, на Amazon или Google Cloud, какие задачи конфигурации при этом возникают, и как они становятся тривиальными, при использовании ClickHouse оператора в сочетании с облачным Kubernetes-сервисом.
Далее обсудим, как с ростом кластера усложняется управление системой, и как оператор помогает в:
- развертывании новых узлов;
- обновлении конфигурации и апгрейдах;
- мониторинге и поддержании работоспособности;
- cпецифичных для ClickHouse-кластеров задачах DBA.
Доклад строится на основе разработки и опыта эксплуатации ClickHouse оператора для Kubernetes