Рейтинг@Mail.ru

Как Tinkoff.ru использует GreenplumБазы данных и системы хранения

Доклад принят в программу конференции
Дмитрий Немчин
Tinkoff.ru

Тимлид администраторов Backend-систем DWH Tinkoff.ru.
До этого занимался разработкой под Oracle, управлением проектов и инженерной работой на производстве электронной компонентной базы.

@chetvegr
d.nemchin@tinkoff.ru
dmitriy@nemchin.com
Тезисы

Мы - одни из первых в России пользователей Greenplum и:
- написали свою систему репликации данных из Oracle и Postgres;
- каждый день 4к ETL-джобов обрабатывают больше 20 ТБ данных, а храним мы больше 70 ТБ данных;
- около 1000 пользователей ежедневно используют наш кластер, приходя из SAS, Zeppelin и напрямую в БД клиентами;
- свой DR с проверкой бэкапов и задержкой в 2 часа до попадания на бэкапную СХД;
- тонны сломанных копий (тех, которые оружие) и боли администраторов.

PostgreSQL
,
Базы данных / другое
,
Распределенные системы
,
Hadoop
,
ETL

Другие доклады секции Базы данных и системы хранения

Rambler's Top100