Лабораторна робота №3

Прикладний статистичний аналіз

Опис експерименту

Перед вами таблиця, з результатами експерименту. Вам потрібно оцінити, чи є статистично значущі відмінності між контрольною та тестовою групами.

value experimentVariant
1 10,3804953740268 Control
2 9,54686666784264 Control
3 11,0882146509904 Control
4 10,1472740570122 Control
5 9,78980767524929 Control
... ... ...
996 1000 Treatment
997 1200 Treatment
998 1500 Treatment
999 2000 Treatment
1000 3000 Treatment

1000 rows × 2 columns

Опис змінних:

  • value - значення метрики
  • experimentVariant - Варіант тесту (Control - контроль, Treatment - тест)

Завдання

  1. Порівняйте результат між тестом і контролем за двома кейсами:
    • Застосуйте бутстрап (за середнім) і U-критерій Манна-Уітні , а потім порівняйте p-value
    • Застосуйте бутстрап (за медіаною) і U-критерій Манна-Уітні, а потім порівняйте p-value.
  2. Створіть відповідні візуалізації, напишіть висновки, які можна зробити на основі аналізу застосованих критеріїв
Важливо
  • Дедлайн здачі роботи: 13.02.2024
Порада