Любой полезный для компании продукт со временем развивается: появляются новые функции, совершенствуются старые. Необходимо оценить влияние этих изменений на пользователей продукта. Необходимо проверить, нет ли ошибок при реализации нового функционала и выполняет ли он поставленные задачи.
Первое, что вам нужно сделать, — это сравнить производительность продукта до и после внесения изменений. Но в данном случае нельзя сказать, что разница в производительности обусловлена только новыми возможностями, поскольку на состояние продукта в любой момент может повлиять любой внешний фактор. Поэтому обычно используют рандомизированные контролируемые эксперименты, также называемые A/B-тестированием. В том числе рекомендации по продуктам в электронной коммерции.
Узнать больше
Source