Порядок действий
Определите измеряемый результат
Согласуйте критерии и шкалу до начала эксперимента. Для обучения сформулируйте наблюдаемые действия и способы их проверки.
Сравните результаты
Для одних и тех же участников используйте парные измерения, для независимых групп — подходящую методику сравнения. Учитывайте пропуски и одинаковость шкал.
Проверьте качество инструментария
Оцените трудность и различающую способность заданий, внутреннюю согласованность шкалы. Сопоставьте статистики с содержательными результатами.
Пример
Исходный средний балл 40, итоговый 70, максимум 100. Прирост 30 баллов, нормированный прирост 0,5; сам по себе он не доказывает причинный эффект обучения.
Частые вопросы
Выводит ли калькулятор значимость различий?
Статистические калькуляторы рассчитывают статистики и, где применимо, степени свободы; p-значения и выводы требуют отдельного анализа.