Завдання №5

Прикладна аналітика при розробці IT

Опис завдання

Перед вами таблиця, де числова змінна — неперервна.

Завдання — порівняти групи двома способами: бутстрепом і \(U\)-тестом.

Опис змінних:

  • value — значення метрики
  • experimentVariant — Варіант тесту (Control - контроль, Treatment - тест)

Завдання

  1. Порівняйте результат між тестом і контролем за двома кейсами:
  • Застосуйте бутстрап (з np.mean) та \(U\)-критерій Манна-Уітні, а потім порівняйте \(p\)-значення
  • Застосуйте бутстрап (з np.median) та \(U\)-критерій Манна-Уітні, а потім порівняйте \(p\)-значення.
  1. Напишіть висновки, які можна зробити на основі аналізу застосованих критеріїв