7 петабайт логов в Elastic. Как мы это сделали? / Роман Николаев (Тинькофф)

Приглашаем на конференцию HighLoad++ 2025, которая пройдет 6 и 7 ноября в Москве! Программа, подробности и билеты по ссылке: https://highload.ru/moscow/2025 ________ Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad++ 2023 Генеральный партнер конференции Garage Eight. Презентация и тезисы: https://highload.ru/spb/2023/abstracts/10228 В Тинькофф тысячи сервисов, и все эти сервисы пишут логи. За сбор логов и метрик отвечает Sage — платформа мониторинга собственной разработки с Elasticsearch под капотом. Объемы логов постоянно росли и сейчас это 7 ПБ, а суммарное количество нод на 15 кластерах в двух ДЦ достигло 370 штук. ... Нашли ошибку в видео? Пишите нам на support@ontico.ru