Хранение и быстрая отдача миллионов уникальных объектов (на примере подбора объявлений на партнерских сайтах Бегуна)

Александр Панков

Тезисы

Особенности подбора объявлений Автоконтекста Бегуна, необходимость хранить уникальную информацию для миллионов разных страниц.

Простейшие варианты решения этой задачи: хранение в стандартной СУБД, хранение в самописных демонах в памяти, в т. ч., на Мемкэшах. Недостатки и минусы таких подходов. Основные требования, выдвинутые при проектировании новой системы хранения и быстрой отдачи информации по страницам: скорость отдачи, динамическое обновление, устойчивость к сбоям и перегрузкам. Ошибки проектирования первых версий и с методы их устранения.

В докладе основное внимание будет уделяться сложностям, с которыми, рано или поздно, сталкивается любая высоконагруженная система, заточенная на хранение всех данных в памяти, при переходе к хранению большей части информации на диске. Будут затронуты как особенности работы с диском, так и особенности работы планировщика задач ОС семейств Linux и BSD.

О докладчике

Александр Панков

Контакты: pianozoid@rambler.ru