Архитектура системы хранения данных для реализации "закона Яровой" 374-ФЗБазы данных и системы хранения
Руководитель группы разработки систем хранения для реализаций требований к СОРМ для крупнейших операторов связи России и аналогов для стран СНГ.
Реализовал систему хранения данных на сотни петабайт для закона Яровой.
Рассказ про архитектуру системы хранения для реализации "Закона Яровой".
* Самый «хайповый» закон в сфере связи предыдущих 2 лет.
* Как мы реализовывали по-настоящему BIG data.
* Как сохранить весь интернет одного из операторов Большой тройки в городе участнике ЧМ-2018 на 1 месяц?
* Как мы "снимаем" трафик. Как обработать 320 Гигабит в секунду? Как передать его в СХД?
* 320 Гигабит/с и 1 месяц хранения это: 100 Петабайт, 10 миллионов новых потоков каждую секунду, 500 миллионов текущих потоков,
* Как строится СХД объемом в сотни Петабайт. Откуда начали и к чему в итоге пришли.
* Расскажу про стек используемых opensource-решений. Как мы использовали PostgreSQL, чем не устраивает elasticsearch.
* Опишу собственные разработки. В чем их преимущества и где недостатки.
* Расскажу про СОРМ на сетях передачи данных. Особенности требований предъявляемых к таким СХД, и где лежат компромиссы. Какие самые сложные проблемы приходится решать.
