Selection Bias
Смещение отбора
Простое объяснение
Ошибка, при которой сравниваемые группы изначально отличаются сильнее, чем кажется, и поэтому результат теста искажается.
Зачем это нужно
Selection Bias делает эксперимент внешне аккуратным, но фактически бессмысленным: разница может объясняться не воздействием, а составом групп.
Как это выглядит на практике
Если в test group случайно попали более активные пользователи, а в control менее активные, кампания будет выглядеть сильнее, чем она есть на самом деле.