Ответ
Сначала проверю корректность данных (нет ли ошибок в сборе метрик, изменений в алгоритме трекинга). Затем сравню изменения за этот период:
-
Технические проблемы
- Проверю лог ошибок (404, JS-ошибки)
- Протестирую ключевые сценарии на разных устройствах
-
Изменения в продукте
- Релизы/AB-тесты (изменение UI, алгоритма сортировки карточек)
SELECT experiment_group, click_rate
FROM experiments
WHERE feature = 'course_cards_design'
-
Внешние факторы
- Сезонность (начало учебного года, праздники)
- Конкуренция (появление аналогичных курсов у конкурентов)
-
Поведенческая аналитика
- Heatmaps (не кликают из-за измененного дизайна?)
- Воронка (падение на конкретном шаге?)
После выдвину гипотезы и предложу решения: откат изменений, точечные доработки или новый тест.