Одним реченням
Просте правило оцінювання — бали за кожен день, коли ви виконуєте набір практики, а не за кожне питання — підштовхувало студентів розподіляти роботу й підвищило бали іспиту у внутрішньокурсовому РКД, найсильніше «розблокувавши» тих, у кого нижчий попередній середній бал.
Що зробили дослідники
ЄккехЗааре і Реснік перевірили стимул оцінювання під назвою Counting Days у двох рандомізованих контрольованих дослідженнях. У контролі «підрахунок питань» студенти отримували бали за кожне відповідене практичне питання. У втручанні «підрахунок днів» бали йшли за кожен день, у який студент відповів на набір питань — винагороджуючи рознесення в часі, а не залповий обсяг.
Одне РКД рандомізувало 143 студентів усередині одного курсу. Інше рандомізувало 71 викладача (дизайн між викладачами). Внутрішньокурсовий експеримент міг порівнювати навчання за іспитом; експеримент із викладачами порівнював поведінку практики (дні й питання) за різних стимулів.
Що вони зʼясували
- У внутрішньокласовому експерименті група «підрахунку днів» набрала вищі бали іспиту, а посередником виступило розподілення практики на більшу кількість днів.
- Інтервали особливо допомогли студентам із нижчим попереднім середнім балом: кореляція між балами іспиту курсу та середнім балом попередніх курсів була статистично значуще нижчою за підрахунку днів — тобто попередній середній бал слабше передбачав новий іспит.
- В експерименті між викладачами результати навчання між курсами порівняти було неможливо, але і число днів практики, і число відповідених питань були статистично значуще вищими за підрахунку днів.
Що це означає для тих, хто навчається, і для викладачів
- Якщо платформа чи курс нараховують кредит за сиру кількість питань, ви можете випадково винагороджувати щільне «зубріння» напам’ять; зміна одиниці кредиту на активні дні — низькотехнологічний поштовх до інтервалів і активного пригадування.
- Студенти, яким історично важче (нижчий середній бал), можуть виграти найбільше, коли стимул відкриває розподілену практику, а не лише швидкість.
- Викладачі з цим правилом бачили більше днів і більше питань — обсяг не зобов’язаний падати, коли ви перестаєте платити за кожен пункт.
- Поєднуйте стимул із чітким визначенням «набору», щоб «ігрофікація» (крихітні щоденні заходи) лишалася узгодженою з реальною практикою.
Обмеження й те, чого ми ще не знаємо
РКД на рівні викладачів не могло порівняти результати навчання між класами — лише метрики практики. Контекст курсу, предмет і точні ваги балів важливі й можуть не переноситися без змін. Посередництво через дні практики переконливе всередині одного курсу, але все ще сидить у системі оцінок, де мотивація сплетена з балами. Довготривале утримання за межами іспиту курсу в анотації не описано. Вірність впровадження в 71 викладача буде різною.