Сегодня рассказываем о следующих докладах, принятых в программу. На этот раз из секции «Базы данных и системы хранения».
Три доклада, которые будут особенно интересны: архитекторам платформ для сбора логов и архитекторам распределенных систем; разработчикам, пользователям и администраторам СУБД, аналитикам; разработчикам сервисов и распределенных систем.
1) Федерация брокеров сообщений и как с ней экономить половину места. Андрей Серебрянский (YDB)
Во всех организациях огромный объем передаваемых данных — это логи и метрики бегущих микросервисов. В Яндексе через YDB Topics каждую секунду пишется около 80 Гб логов. В своем докладе Андрей, разработчик YDB Topics, расскажет: как в Яндексе устроен процесс обработки такого огромного объема логов, что такое erasure кодирование и почему оно экономит половину места по сравнению с Kafka. И многое другое, подробнее по ссылке в названии доклада.
2) Почему следует время от времени переписывать все компоненты СУБД с нуля. Павел Велихов (Yandex Cloud)
В мире СУБД постоянно происходят изменения: железо стремительно меняется, диски замещаются NVMe SSD, ядер в процессоре становится больше сотни, появляются новые способы работы с сетью, такие как RDMA. Появляются новые подходы, идеи, алгоритмы. Но еще важнее — все время меняются требования пользователей. В таком динамическом мире требуется или создавать с нуля современные СУБД каждые лет 10, или переписывать с нуля основные ее компоненты. В этом докладе сфокусируемся на двух конкретных компонентах СУБД: движке выполнения запросов и оптимизаторе запросов.
3) Неожиданные различия PostgreSQL и YDB: опыт перевоза процессинга Яндекс Такси. Игорь Березняк (Техплатформа Городских сервисов Яндекса)
В своем докладе Игорь поделится опытом миграции микросервиса с шардированного PostgreSQL на YDB: несмотря на похожесть двух СУБД, YDB далек от состояния «drop-in replacement» для PostgreSQL. Также спикер коснется вопросов отличия гарантий, подходов к написанию запросов и эксплуатационных характеристик. Эти особенности стоит учесть заранее, чтобы не столкнуться с ними посреди процесса миграции.
🖐️ Присоединяйтесь к нам 6 и 7 ноября в Москве на HighLoad++ 2025.
✅ Посмотреть, какие доклады уже приняты в программу конференции, можно на сайте