X5 Tech сократил расчёты A/B-тестов на порядки через бакетирование

X5 Tech опубликовала статью о методе ускорения статистических расчётов в A/B-тестировании через бакетирование пользователей. Вместо обработки миллионов строк данных по отдельным пользователям система разбивает их на 256 бакетов в рамках одного эксперимента, что сокращает вычислительную сложность и объём хранимых данных на порядки — с миллионов строк до 512.

Метод позволяет одновременно запускать десятки экспериментов с миллионами пользователей и ежедневным пересчётом метрик, сохраняя статистическую корректность оценки эффекта на пользователя и поддерживая сложные типы метрик, включая ratio и CUPED.