CDC В Leroy Merlin: Сбор данных из MSSQL/PostgreSQL/MongoDB-источников через Debezium Базы данных и системы хранения

Доклад принят в программу конференции
Юрий Щербаков
Леруа Мерлен Восток

Более 8 лет занимается администрированием баз данных. Около 5 лет занимался исключительно продуктами компании Oracle, но потом открыл для себя мир open source и возвращаться у Юрия нет никакого желания. С недавних пор (около 2 лет) активно занимается kafka.

почта - Yury.Scherbakov@leroymerlin.ru
телеграм - @saberman61
Тезисы

Более 300 реляционных источников (MSSQL, PostgreSQL). Геораспределённость от Владивостока до Калининграда. Мы планируем рассказать о том, как мы собирали данные из наших разнообразных источников, чтобы создать единую Платформу Данных, на основе debezium'а и CDC-подхода.

Хотим поделиться проблемами, с которыми столкнулись в ходе двух лет эксплуатации с версии 0.9 до 1.6.1, как мы мониторим систему и на что обращаем внимание.

Другие доклады секции Базы данных и системы хранения