Учим Kibana работать с Clickhouse Базы данных и системы хранения

Доклад принят в программу конференции
Ярослав Саган
EcommPay IT

Руководитель группы разработчиков в EcommPay IT. Основной профиль - R&D.

Telegram: @ysagan
Skype: yaroslav.sagan
email: sagan.yaroslav@gmail.com
Николай Нестеренко
EcommPay IT

C\C++, Golang-программист. Последние несколько лет занимается R&D вначале в авиационной отрасли, и затем в FinTech.

Telegram: @NickNesterenko
Skype: nickolay_nesterenko
email: n.nesterenko@it.ecommpay.com
Тезисы

Любая сложная система требует анализа и мониторинга, особенно если она отвечает за проведение финансовых расчетов. С ростом числа операций данных накапливается все больше, а объем информации, которую надо иметь под рукой, достигает десятков терабайт.

Стандартным решением для такого является ELK-стек. Но сейчас все большее распространение получает ClickHouse. Его обычно не рассматривают, т.к. из коробки в нём отсутствует полнотекстовый поиск. Но является ли это препятствием?

В своем докладе мы расскажем, как разрабатывалась инфраструктура для компактного хранения логов в ClickHouse и как по ним можно организовать удобный поиск и мониторинг, используя Kibana - популярный инструмент для просмотра и визуализации данных. А также про особенности такой системы.

Базы данных / другое
,
GO

Другие доклады секции Базы данных и системы хранения