Яндекс открыл исходный код фреймворка потоковой обработки YTsaurus Flow

Яндекс открыл исходный код YTsaurus Flow — фреймворка для обработки потоков данных в реальном времени с гарантией exactly-once и сохранением состояния между событиями. Проект разработан совместно командами Yandex Infrastructure и Яндекс Рекламы для высоконагруженных рекомендательных систем.

Flow интегрирован с платформой YTsaurus, исходный код которой был выложен на GitHub в марте 2023 года, и использует её хранилище, очереди и механизм транзакций. Фреймворк выпущен под лицензией Apache 2.0.