Radionica tehnika učenja i prosjek ocjena
Školska psihologinja u gimnaziji želi provjeriti poboljšava li šestotjedna radionica tehnika učenja prosjek ocjena. Dva treća razreda: 3.A s 28 učenika pohađa radionicu, a 3.B s 27 učenika nastavlja po uobičajenom programu. Na početnom mjerenju prosjek ocjena iz psihologije je 3,2 u 3.A i 3,4 u 3.B; na završnom testu znanja odmah nakon radionice 3.A ima 3,9, a 3.B 3,5. U 3.A je pet učenika odustalo od radionice, a njihove ocjene nisu uključene. Razrednica 3.A ujedno je voditeljica radionice i često ističe njezinu važnost. Završni test sastavila je sama psihologinja, a ocjene na polugodištu bit će poznate tek za dva mjeseca. Roditelji su zadovoljni, ali neki učenici iz 3.B dobrovoljno su počeli koristiti iste tehnike. Ravnatelj zaključuje da je radionica dokazano učinkovita i predlaže obveznu primjenu u svim razredima.
1. Koji je nacrt istraživanja primijenjen i koje su glavne prijetnje unutarnjoj valjanosti? Obrazloži na temelju podataka iz scenarija.
Read the worked answer
Riječ je o kvazieksperimentalnom nacrtu s dvije nestandardizirane skupine i mjerenjem prije i poslije, bez slučajnog raspoređivanja. Zato rezultat 3,9 prema 3,5 ne dopušta kauzalni zaključak. Prijetnje su: selekcija - razredi se već razlikuju (3,2 prema 3,4), a razredna dinamika i nastavnik nisu izjednačeni; confound voditeljice - ista učiteljica je razrednica i zagovornica radionice, pa njezin entuzijazam može objasniti razliku; diferencijalni attrition - pet učenika iz 3.A isključeno je iz analize, što može umjetno povisiti prosjek; instrumentacija - završni test sastavila je psihologinja, a ocjene nisu slijepo ocijenjene; kratkoročno mjerenje odmah nakon radionice ne pokazuje trajnost. Zaključak ravnatelja stoga je prejak: podaci su poticajni, ali ne dokazuju učinkovitost.
2. Predloži poboljšani nacrt koji bi omogućio kauzalni zaključak uz približno iste resurse.
Read the worked answer
Uz iste resurse moguć je randomizirani kontrolirani nacrt s liste čekanja. Učenike obiju klasa treba pojedinačno slučajno rasporediti u dvije skupine: radionica odmah i radionica nakon tri mjeseca. Time se uklanja selekcija po razredima, a svi na kraju dobiju intervenciju. Ishodi moraju biti unaprijed definirani i neovisni: standardizirani test znanja i ocjene koje ocjenjuje nastavnik koji ne zna grupu. Radionicu treba voditi ista osoba prema pisanom priručniku, a prisutnost i vjernost provedbi bilježiti. Mjerenja: početno, neposredno poslije i nakon tri mjeseca. Analiza treba uključiti sve učenike prema načelu namjere liječenja, uključujući one koji odustanu. Ako je moguće, kontrolna skupina treba dobiti aktivnost jednake duljine, primjerice opće vještine učenja, kako bi se isključio učinak same pažnje.
3. Ravnatelj želi odmah obveznu primjenu. Kako bi psihologinja trebala odgovoriti i koje argumente o dokazima i etici navesti?
Read the worked answer
Psihologinja bi trebala reći da su rezultati preliminarni i da ne opravdavaju obveznu primjenu. Treba jasno odvojiti tvrdnju da je radionica obećavajuća od tvrdnje da je dokazano učinkovita. Etika: obvezna primjena bez dokaza troši vrijeme i može štetiti ako zamjenjuje druge aktivnosti; učenici i roditelji trebaju znati da je riječ o pilotu. Predlaže se postupno uvođenje: prvo randomizirani pilot u nekoliko razreda, praćenje ishoda i nuspojava, a tek potom odluka. Ako ravnatelj inzistira, može se dogovoriti da svi razredi dobiju radionicu, ali da se istovremeno provede evaluacija s odgođenim početkom za jednu skupinu. Važno je i da se ne obećava poboljšanje ocjena dok se ne pokaže trajni učinak.