Многоуровневый мониторинг веб-систем класса mission critical Основная секция
Доклад принят в Программу конференции
Яндекс — одна из крупнейших технологических компаний России с собственными разработками в области искусственного интеллекта. Подразделение автономного транспорта развивает технологии беспилотного вождения: собственный стек автономного управления, парк беспилотных автомобилей и роботов-доставщиков, работающих в реальных городских условиях, и инфраструктуру сбора и анализа данных проездов, на которых обучаются и проверяются алгоритмы.
Тезисы
Постановка задачи. Когда возникает необходимость в многоуровневом мониторинге?
- Круглосуточные продажи на глобальном рынке;
- Сложность ИТ-инфраструктуры и веб-приложения, поэтому проблемы не всегда видны «невооруженным» взглядом и не всегда сразу;
- Если предотвращение потерь покрывает затраты на мониторинг.
Опыт компании ITONLINE GROUP
- Описание системы заказчика:
- Шесть связанных веб-приложений, организованных в единую бизнес-модель;
- Несколько территориально удаленных площадок, несколько реплицируемых БД;
- 100 000 посетителей в день, 1 000 000 просмотров страниц;
- Стоимость часа простоя измеряется в тысячах долларов потерянной выручки и в десятках тысяч долларов потерянной лояльности клиентов.
- Проактивный подход к обеспечению отказоустойчивости:
- Реактивный подход: «Что будем делать, если какой-то сервер сломается?»
- Проактивный подход: «Как будет работать система, когда вот этот сервер сломается?»
- После обнаружения первого сбоя в какой-либо точке сразу должен быть настроен ее мониторинг. Повторный сбой халатность.
- Три уровня мониторинга:
- Состояние технической платформы: серверов и коммуникаций;
- Состояние приложений;
- Динамика бизнес-показателей.
- Параметры мониторинга:
- Доступность и нагрузоустойчивость;
- Профилактический, оперативный и экстренный уровень проблем.
- Отказоустойчивость мониторинга:
- Дублирование систем мониторинга и систем оповещений;
- Мониторинг мониторинга.
Инструменты мониторинга:
- Системные средства операционной системы (счетчики Performance);
- Встроенные утилиты, поставляемые вендором оборудования (например, Dell);
- Специализированный софт (например, Servers Alive);
- Специализированные SaaS-приложения, обеспечивающие дополнительные возможности (например, WebSitePulse.com несколько locations, takeover actions, публикация данных о доступности и прочие возможности);
- Встроенные в само приложение, которое мониторится (продажи можно отслеживать только так).
Человеческий фактор:
- «Волки, волки!..» оповещения должны присылаться только в случае реального сбоя;
- Ответственность: регламентированная, финансовая, персональная;
- Регламенты не должны подавлять творческий подход при решении нетривиальных проблем.
Подведение итогов. Каким должен быть мониторинг:
- Проактивным;
- Многоуровневым (бизнес-уровень для контроля фактических показателей, технический уровень для предотвращения потенциальных проблем);
- Не ориентированным на инструменты, они вторичны;
- Ориентированным на бизнес;
- Ориентированным на человека.
Другие доклады секции Основная секция
Бигтех-компания, предоставляющая облачные, AI-сервисы и платформенные решения под разные задачи бизнеса: от работы с данными до разработки продуктов и оптимизации процессов.
BI.ZONE — компания по управлению цифровыми рисками. Мы создаем IT-продукты для обеспечения кибербезопасности: от мобильных приложений до сложных платформ, в основе которых лежат методы машинного обучения.
Ви.Tech — технологичная компания, которая развивает IT-инфраструктуру крупнейшего в России DIY-интернет-магазина «ВсеИнструменты.ру». Создет и поддерживает высоконагруженные системы, обрабатывающие миллионы пользователей и сотни тысяч заказов ежедневно.
МФТИ / Физтех — ведущий российский исследовательский университет. Насчитывает 10 Нобелевских лауреатов. В топ‑100 глобального рейтинга Times Higher Education. Десятки научных школ, международные лаборатории, одни из сильнейших программ.
SberDevices — это компания полного цикла. Мы создаём идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаём инструменты для аппаратного тестирования.
Стартап-победитель в Сбер 500, МТС и тд. Получили грант Бортника, проводили выступления в Яндексе, Сколково. Сейчас проводим пилотное тестирование в ГазПромНефти
Яндекс Плюс AdTech - это рекламное направление от Яндекса, которое позволяет бизнесу продвигать товары и услуги, обращаясь к многомиллионной аудитории подписчиков Яндекс Плюса. Проще говоря, это набор инструментов, который даёт рекламодателям возможность запускать единую кампанию сразу в нескольких сервисах экосистемы Яндекса: Кинопоиск, Яндекс Музыка, Яндекс Пэй, Яндекс Книги, Яндекс Афиша и сам сервис «Плюс»
Яндекс — международная IT-компания, которая более 25 лет создает технологичные продукты на основе машинного обучения и нейросетей. В их экосистеме более 90 сервисов. Среди них есть внутренние, которые обеспечивают процессы внутри компании и работу сотрудников: Yandex Infrastructure, YTeasaurus, YDB и Ecom-сценарии. А еще опенсорс-проекты Яндекс Реклама, Поиск с Нейро, Алиса, Автономный транспорт, Yandex GPT и Yandex Cloud.
Сбер — это современный стек технологий, драйвовые проекты и команда единомышленников. У них около 3 000 продуктовых команд и огромное профессиональное IT-сообщество. Работают над созданием удобных онлайн-сервисов в самых разных сферах.
В ecom.tech делают ИТ для ретейла реального времени. Чтобы товары и продукты могли попадать домой к людям мгновенно, насколько это возможно. На технологиях ecom.tech работают Самокат, Мегамаркет, своя логистика. Компания хочет изменить саму модель потребления, чтобы люди иначе относились к покупкам и своему времени.
VK это крупная российская технологическая корпорация и цифровая экосистема. Компания активно вкладывается в развитие изучение современных подходов в области ML.
МТС Диджитал является частью Группы компаний МТС. Мы занимаемся разработкой ПО для нужд МТС. Сейчас работаю с проудктов Среда ЭДО.
TeamStorm - российский разработчик одноименной системы управления совместной работой.
Яндекс — технологическая компания. В основе их сервисов лежат сложные, уникальные, трудно воспроизводимые технологии. Именно они позволяют делать то, что еще некоторое время назад люди приняли бы за волшебство.
Практические методики нагрузочного тестирования, опыт тестирования производительности веб-приложений
В «Магните» отвечает за формирование стратегии архитектурного штаба, управление портфелем IT-проектов, продуктовую трансформацию IT-вертикали, развитие подходов к бюджетированию и контролю эффективности производственного цикла.
Билайн — один из ведущих поставщиков телекоммуникационных услуг в России.
SberDevices — это компания полного цикла. Мы создаём идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаём инструменты для аппаратного тестирования.
Т-Банк — финансовая онлайн-экосистема, объединяющая полный спектр финансовых услуг для частных лиц и бизнеса. Особое внимание Т-Банк уделяет развитию лайфстайл-банкинга: экосистема дает клиентам возможность анализировать и планировать личные траты, инвестировать сбережения, получать бонусы в рамках программ лояльности, бронировать путешествия, покупать билеты в кино, бронировать столики в ресторанах и делать многое другое.
Сбер — это современный стек технологий, драйвовые проекты и команда единомышленников. У них около 3 000 продуктовых команд и огромное профессиональное IT-сообщество. Работают над созданием удобных онлайн-сервисов в самых разных сферах.
МФТИ / Физтех — ведущий российский исследовательский университет. Насчитывает 10 Нобелевских лауреатов. В топ‑100 глобального рейтинга Times Higher Education. Десятки научных школ, международные лаборатории, одни из сильнейших программ.
МФТИ / Физтех — ведущий российский исследовательский университет. Насчитывает 10 Нобелевских лауреатов. В топ‑100 глобального рейтинга Times Higher Education. Десятки научных школ, международные лаборатории, одни из сильнейших программ.
BI.ZONE — компания по управлению цифровыми рисками. Мы создаем IT-продукты для обеспечения кибербезопасности: от мобильных приложений до сложных платформ, в основе которых лежат методы машинного обучения.
Вебпрактик разрабатывает сервисы и продукты для крупнейших корпораций в стране, много лет входит в топы разработчиков в премиум-ценовом сегменте.
Ви.Tech — технологичная компания, которая развивает IT-инфраструктуру крупнейшего в России DIY-интернет-магазина «ВсеИнструменты.ру». Создет и поддерживает высоконагруженные системы, обрабатывающие миллионы пользователей и сотни тысяч заказов ежедневно.
Яндекс — международная IT-компания, которая более 25 лет создает технологичные продукты на основе машинного обучения и нейросетей. В их экосистеме более 90 сервисов. Среди них есть внутренние, которые обеспечивают процессы внутри компании и работу сотрудников: Yandex Infrastructure, YTeasaurus, YDB и Ecom-сценарии. А еще опенсорс-проекты Яндекс Реклама, Поиск с Нейро, Алиса, Автономный транспорт, Yandex GPT и Yandex Cloud.
АльфаБанк adengi. ru (микрофинансовая организация в контуре Альфы). АДЕНЬГИ сейчас: * оборот 44 млрд рублей в год; * ИТ-штат — 130 сотрудников, вся компания — 500; * финтех со стоимостью простоя около 1,5 млн час
Стартап-победитель в Сбер 500, МТС и тд. Получили грант Бортника, проводили выступления в Яндексе, Сколково. Сейчас проводим пилотное тестирование в ГазПромНефти
OpenYard — российский вендор и производитель серверного оборудования с собственным R&D-центром и производственной площадкой в Рязани, которая обеспечивает полный цикл выпуска серверов. В портфеле компании — корпоративные серверы (19" стоечные решения) и OCP-подобные платформы. Продукция OpenYard ориентирована на создание эффективной и надежной ИТ-инфраструктуры и входит в реестр промышленной продукции Минпромторга РФ.
Венчурный фонд ФРИИ. 450+ инвестиций с 2013 года. Самый большой по количеству инвестиций фонд в России. Среди инвестиций: Vision Labs, Flowwow, Pravo.tech, Unim Histology, Promobot… Акселератор ФРИИ. В различных рейтингах акселераторов топ-10/топ-20 в мире. 2000+ IТ-компаний, прошедших программы акселерации. Naumen.ru. 1000+ сотрудников, лидер в сегментах рынка программных продуктов Service Desk и Call-центров.
Яндекс — международная IT-компания, которая более 25 лет создает технологичные продукты на основе машинного обучения и нейросетей. В их экосистеме более 90 сервисов. Среди них есть внутренние, которые обеспечивают процессы внутри компании и работу сотрудников: Yandex Infrastructure, YTeasaurus, YDB и Ecom-сценарии. А еще опенсорс-проекты Яндекс Реклама, Поиск с Нейро, Алиса, Автономный транспорт, Yandex GPT и Yandex Cloud.
Cbonds - информационное агентство, специализирующееся в сфере финансовых рынков. Компания осуществляет деятельность по следующим направлениям бизнеса: разработка информационных сайтов (Cbonds.ru, Investfunds.ru), развитие каналов предоставления данных: API, мобильное приложение, надстройки ADD-IN, а также издательская деятельность (журнал Cbonds Review). Среди клиентов региональные банки, управляющие активами, брокерские компании, семейные офисы и частные инвесторы со всего мира.
Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
X5 Tech — IT-компания и основной цифровой партнер X5 Group. Мы разрабатываем онлайн и офлайн-решения, которые помогают более 392 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей — быстро и удобно покупать свежие продукты.
Wildberries & Russ — крупнейший маркетплейс России.
SberDevices — это компания полного цикла. Мы создаём идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаём инструменты для аппаратного тестирования.
МФТИ / Физтех — ведущий российский исследовательский университет. Насчитывает 10 Нобелевских лауреатов. В топ‑100 глобального рейтинга Times Higher Education. Десятки научных школ, международные лаборатории, одни из сильнейших программ.
