Логотип HighLoad
HighLoad++2026
Расписание(PDF)
Доклады
Купить

Потоковая обработка данных: разбираем архитектуры и предлагаем реализации

Низкая сложность
Доклад принят в программу конференции

Целевая аудитория

--

Тезисы

Все презентации конференции

Наши команды создают инфру для потоковой обработки данных и с помощью этих систем решают продуктовые задачи в Яндексе. Поток, с которым они работают — гигабайты в секунду, размер стейта — петабайты данных.

Наши эксперты расскажут: * почему стриминг-подготовка данных — ключевое направление развития процессинга в ближайшие годы; * чем может помочь стриминг-парадигма; * как перейти в парадигму стриминга из MapReduce; * как спроектировать архитектуру стриминга.

Спикеры

Егор Хайруллин
Егор Хайруллин

Яндекс

Руководитель отдела инфраструктуры рекомендательных систем. Занимается потоковой обработкой данных и построением удобной ML-инфраструктуры для ресечеров. Закончил МФТИ. В Яндексе с 2013 года. Выпускник и преподаватель ШАД-а, семинарист на курсе «Алгоритмы и структуры данных».

Другие доклады секции

DevOps и эксплуатация / Системное администрирование
Константин Еремин
Константин Еремин

Selectel

Артем Мингулов
Артем Мингулов

Selectel

Автоматизация со скоростью Звука или как запустить автотесты на всех платформах за 3 месяца
Александр Петров
Александр Петров

Звук

Дмитрий Лапенко
Дмитрий Лапенко

Звук

Александра Качина
Александра Качина

Звук

Автоматизируем enterprise-разработку: общие библиотеки, особенности core-разработки
Антон Ущаповский
Антон Ущаповский

Почтатех

Александр Яковлев
Александр Яковлев

Почтатех

Сергей Климов
Сергей Климов

Почтатех

Максим Замэ
Максим Замэ

Почтатех

Архитектура облачных решений
Алексей Волков
Алексей Волков

VK Cloud

Александр Белоцерковский
Александр Белоцерковский

СберТех

Виталий Ранн
Виталий Ранн

VK Cloud

Николай Карлов
Николай Карлов

VK Cloud

Алексей Кузнецов
Алексей Кузнецов

VK Cloud

Алексей Бестужев
Алексей Бестужев

VK Cloud

Артемий Капитула
Артемий Капитула

VK Cloud

Безопасность приложений: Позитивные практики
Максим Залысин
Максим Залысин

Positive Technologies

Алексей Астахов
Алексей Астахов

Positive Technologies

Дмитрий Секретов
Дмитрий Секретов

Positive Technologies

Алексей Андреев
Алексей Андреев

Positive Technologies

Владимир Кочетков
Владимир Кочетков

Positive Technologies

Битва за качество в условиях разработки высоконагруженных систем.
Любовь Вайнштейн
Любовь Вайнштейн

РТЛабс

Анастасия Пятько
Анастасия Пятько

РТК-СОФТ

Иван Данякин
Иван Данякин

РТЛабс

Сергей Кондитеров
Сергей Кондитеров

РТЛабс

Высоконагруженные микросервисы на фреймворке userver
Александр Малков
Александр Малков

Яндекс Go

Антон Полухин
Антон Полухин

Яндекс Go

Импортозамещение аналитических платформ данных
Татьяна Кириленко
Татьяна Кириленко

Axenix

Алексей Мамонтов
Алексей Мамонтов

Axenix

Андрей Дудкин
Андрей Дудкин

Axenix

Михаил Королёв
Михаил Королёв

Axenix

Инженерная инфраструктура ЦОД и серверных. Построение бесперебойной инфраструктуры ЦОД/серверных
Виталий Николаев
Виталий Николаев

Миран

Игорь Ситников
Игорь Ситников

Миран

Как построить IT-бренд не IT-компаниям: комплексный подход
Виктория Кабакова
Виктория Кабакова

Хабр

Любовь Соболева
Любовь Соболева

Хабр

Машинное обучение для высоконагруженных задач
Алёна Дробышевская
Алёна Дробышевская

Cloud

Данил Сивцов
Данил Сивцов

Cloud

Владислав Синеглазов
Владислав Синеглазов

Cloud

Алексей Климов
Алексей Климов

Cloud

Обеспечение безопасности высоконагруженных сервисов банка
Александр Маркелов
Александр Маркелов

Райффайзен Банк

Алексей Гуськов
Алексей Гуськов

Райффайзен Банк

Евгений Хренов
Евгений Хренов

Райффайзен Банк

Григорий Кученченко
Григорий Кученченко

Райффайзен Банк

Платформа In-Memory-вычислений: ускоряем легаси, строим отказоустойчивые сервисы
Роман Проскин
Роман Проскин

Tarantool, VK

Георгий Моисеев
Георгий Моисеев

Tarantool, VK

Сергей Харламов
Сергей Харламов

Tarantool, VK

Максим Титов
Максим Титов

Tarantool, VK

Построение ML-инфраструктуры (MLOps)
Алексей Морозов
Алексей Морозов

Яндекс

Никита Путинцев
Никита Путинцев

Яндекс

Юлия Черткова
Юлия Черткова

Яндекс

Константин Гудков
Константин Гудков

Яндекс

Евгений Петров
Евгений Петров

Яндекс

Екатерина Ермишкина
Екатерина Ермишкина

Яндекс

Михаил Шушарин
Михаил Шушарин

Яндекс

Анастасия Новичкова
Анастасия Новичкова

Яндекс

Петр Ермаков
Петр Ермаков

Яндекс

Никита Дмитриев
Никита Дмитриев

Яндекс

Распределенные высоконагруженные системы хранения и обработки данных. YDB
Олег Бондарь
Олег Бондарь

Яндекс

Алексей Мясников
Алексей Мясников

Яндекс

Максим Зиналь
Максим Зиналь

Yandex Cloud

Сергей Иерусалимов
Сергей Иерусалимов

Яндекс

Алексей Дмитриев
Алексей Дмитриев

Яндекс

Строим высоконагруженную платформу из любви к «тонкому» клиенту
Петр Белкин
Петр Белкин

Сбер

Алексей Кардашов
Алексей Кардашов

Сбер

Владислав Хачатуров
Владислав Хачатуров

Сбер

Data platform: databases, storage and pipelines
Владимир Бородин
Владимир Бородин

Yandex Cloud

Всеволод Грабельников
Всеволод Грабельников

Yandex Cloud

Максим Хлупнов
Максим Хлупнов

Yandex Cloud

DevOps и эксплуатация / Архитектуры, масштабируемость
Андрей Радыгин
Андрей Радыгин

Fevlake

Андрей Половов
Андрей Половов

Флант

Владимир Гурьянов
Владимир Гурьянов

Флант

Devops: предиктивный мониторинг, отказоустойчивый мониторинг
Дмитрий Крапивин
Дмитрий Крапивин

СберМаркет

Илья Кочнев
Илья Кочнев

СберМаркет

Сергей Реусин
Сергей Реусин

СберМаркет

Андрей Иванов
Андрей Иванов

СберМаркет

Sec и Ops под нагрузкой. Делаем, чтобы работало
Юрий Семенюков
Юрий Семенюков

Инфосистемы Джет

Иван Колесников
Иван Колесников

Инфосистемы Джет

Антон Гаврилов
Антон Гаврилов

Инфосистемы Джет

Павел Яньков
Павел Яньков

Инфосистемы Джет

Евгений Анненков
Евгений Анненков

Инфосистемы Джет

Singularity: one framework to rule them all
Екатерина Старокожева
Екатерина Старокожева

Pixonic

Станислав Яблонский
Станислав Яблонский

Pixonic