Grade AI

Ktoré otázky trieda nezvládla? Ako čítať výsledky testu otázku po otázke

Ako čítať test s výberom odpovedí otázku po otázke: úspešnosť, ktoré nesprávne odpovede žiaci volili, chybné otázky a čo zajtra vysvetliť znova.

· 8 min čítania · English · Čeština · Deutsch · Polski

V skratke: Pri každej otázke sa pozri, koľko percent žiakov odpovedalo správne a ktorú nesprávnu odpoveď zvolili ostatní. Jedna obľúbená nesprávna odpoveď zvyčajne znamená jednu myšlienku, ktorú treba zajtra vysvetliť znova. Keď rovnakú nesprávnu odpoveď zvolili aj najlepší žiaci, skontroluj najprv otázku a kľúč. Grade AI to všetko spočíta, len čo hárky naskenuješ a uložíš.

Čo znamená čítať test otázku po otázke?

Znamená to pozerať sa na každú otázku naprieč celou triedou, nie na každého žiaka naprieč celým testom. Odborne sa tomu hovorí analýza položiek: pri každej otázke zistíš, koľko žiakov ju malo správne a ako sa rozložili nesprávne odpovede. Ručne môže také počítanie trvať dlhšie ako samotná oprava písomky.

Grade AI (grade-ai.app) je appka pre učiteľov do telefónu aj do prehliadača, ktorá vytlačí test s výberom odpovedí na papier, každému žiakovi vlastný hárok, prečíta vyplnené hárky fotoaparátom telefónu a toto počítanie urobí sama. Čísla sa počítajú z naskenovaných odpovedí, nepíše ich AI.

Aká ťažká bola ktorá otázka?

Najjednoduchšia miera obťažnosti je úspešnosť: koľko percent žiakov zvolilo správnu odpoveď. Ako hrubé vodidlo platí, že nad zhruba 80 % látku vie väčšina triedy, medzi 40 a 80 % ju trieda vie len čiastočne a pod zhruba 40 % niečo nefungovalo: výklad, otázka alebo kľúč. Nie sú to pevné hranice. Karta „Zajtra vysvetliť znova" v Grade AI sa ukáže iba pri otázke s úspešnosťou pod 60 %.

Príklad na vymyslenej triede

Tabuľka obsahuje vymyslené ukážkové údaje, nie skutočnú triedu: 24 žiakov, krátky test zo zlomkov, každý odpovedal na všetky otázky. Čísla udávajú, koľko žiakov zvolilo ktorú odpoveď.

Otázka (ukážka)ABCDKľúčÚspešnosť
1. Ktorý zlomok sa rovná 2/4?21921B79 %
2. Ktorý zlomok je väčší: 1/3, alebo 1/4? (A je 1/3, B je 1/4)91311A38 %
3. Ktorý zlomok je v základnom tvare?5676C29 %
4. Koľko je 1/2 + 1/4? (C je 3/4, D je 2/4)31182D8 %
5. Koľko štvrtín tvorí celok?23010A96 %

Čo prezradia nesprávne odpovede?

Často viac ako samotná úspešnosť. Jedna prevládajúca nesprávna odpoveď znamená spoločnú mylnú predstavu: pomenuj ju a vysvetli znova. Rovnomerne rozložené chyby znamenajú tipovanie. Nesprávnu možnosť, ktorú nikto nezvolil, nabudúce nahraď typickou chybou žiakov, ako odporúčajú zásady na písanie testových otázok, ktoré zhrnuli Haladyna, Downing a Rodriguez (2002). Viac v článku Ako písať dobré testové otázky s výberom odpovede.

V Grade AI otvor test a prepni na záložku Otázky. Pri každej otázke vidíš, koľko žiakov zvolilo A, B, C a D, počtom aj v percentách, a správna odpoveď je vyznačená. Prepínačom „Úspešnosť" zoradíš otázky od najťažšej. Tlačidlo Rozbor otázok po jednej otvorí obrazovku Všetky otázky s úspešnosťou každej otázky; po ťuknutí na otázku uvidíš jej „Rozdelenie odpovedí".

Ako spoznať chybnú otázku?

Podozrievaj otázku, nie triedu, keď rovnakú nesprávnu odpoveď zvolila väčšina najlepších žiakov, keď jedna nesprávna odpoveď dostala oveľa viac hlasov ako tá „správna" (otázka 4 vyššie) alebo keď by mohli platiť dve odpovede a žiaci, ktorí látku vedia, sa medzi ne rozdelili.

Overíš to v záložke Prehľad pri teste. Výsledky sú zoradené od najlepšieho po najslabší (pri viac ako 11 výsledkoch päť najlepších a päť najslabších) a ťuknutie na meno ukáže odpovede toho žiaka vedľa kľúča. Keď majú najlepší žiaci pri jednej otázke rovnaké „nesprávne" písmeno, prečítaj si otázku aj kľúč znova.

Keď pri najhoršej otázke zvolilo rovnakú nesprávnu odpoveď aspoň 40 % žiakov, ktorí test písali (a zároveň aspoň traja), zhrnutie v Prehľade túto odpoveď pomenuje a dodá: „Buď je otázka zavádzajúca, alebo si to trieda zapamätala zle." V príklade by to bola otázka 4.

Ak otázku navrhla AI: automatické kontroly Grade AI zachytia dve rovnaké odpovede, nie dve rôzne odpovede, ktoré sú obe správne.

Čo ak bol zlý kľúč?

Uložené výsledky sa podľa zmeneného kľúča znova neopravujú: každý si drží kľúč, podľa ktorého bol opravený, a úprava použitého testu hlási „Zmeny sa prejavia iba pri nových skenoch. Existujúce výsledky zostanú nezmenené." Oprav teda kľúč v teste, dotknuté hárky naskenuj znova a ulož; nový sken toho istého žiaka nahradí jeho skorší výsledok.

Keď skener zle prečítal jedno koliesko, otvor kartu žiaka a pri teste ťukni na Upraviť. Na obrazovke Upraviť odpovede ťukni na správne koliesko; percentá aj známka sa prepočítajú. Každá otázka má jeden bod, váhy nie sú.

Čo zajtra vysvetliť znova?

Otázku, pri ktorej sa veľa žiakov zhodlo na jednej nesprávnej odpovedi. Je to jedna mylná predstava a často stačí pár minút: začni od nesprávnej odpovede („Veľa z vás zvolilo 1/4. Prečo vyzerá väčšia?"), ukáž ju na obrázku a na konci hodiny daj jednu podobnú otázku.

V Grade AI nájdeš v záložke Štatistiky kartu „Zajtra vysvetliť znova". Ukáže otázku s najnižšou úspešnosťou v triedach a období, ktoré máš vo filtri, ale iba keď je pod 60 %, a k nej test, koľko žiakov sa pomýlilo, najčastejšiu nesprávnu odpoveď („Najčastejšie volili") a správnu odpoveď („Správna odpoveď"). Ťuknutím otvoríš test. Pod ňou „Ďalšie ťažké otázky" ukážu až päť ďalších.

Karta vyberá podľa úspešnosti, nie podľa zmyslu. V príklade vyššie by ukázala otázku 4 so zlým kľúčom, lebo 8 % je najmenej. Pred prípravou hodiny si preto prečítaj „Najčastejšie volili": keď je tá odpoveď v skutočnosti správna, oprav namiesto výkladu kľúč.

Kto test ešte nepísal?

Prehľad každého testu ukazuje „Písali" s počtom, napríklad 22 / 24, a pod výsledkami „Nepísali" s menami žiakov zo zoznamu triedy, ktorí výsledok nemajú. V Štatistikách je karta „Chýbajúce testy" a každá karta žiaka má vlastný zoznam „Nepísané testy".

Keď neprítomný žiak napíše test neskôr, naskenuješ jeho hárok rovnako ako ostatné; keď sa hárok stratil, vytlačíš ho znova z jeho karty.

Ako férovo porovnať verzie A a B?

Porovnávaj otázku po otázke. Otázka 3 vo verzii A zvyčajne nie je otázka 3 vo verzii B, preto Grade AI počíta každú verziu zvlášť: v záložke Otázky aj na obrazovke Všetky otázky prepínaš medzi „Verzia A" a „Verzia B" a obrazovka Všetky otázky hore ukazuje priemernú úspešnosť zvolenej verzie („Priemerná úspešnosť"). Graf, ktorý by A a B porovnával, v appke nie je.

Sleduj, kto písal ktorú verziu: určuješ to pri triede, a keď áčko písali hlavne najlepší žiaci, bude vyzerať ľahšie. Porovnávaj zodpovedajúce otázky: keď otázka 5 v B dopadla o 30 bodov horšie ako otázka 5 v A z tej istej látky, chyba bude skôr v otázke. A mysli na malé skupiny: pri 12 žiakoch na verziu posunie jeden žiak úspešnosť otázky zhruba o 8 bodov. S AI píše Grade AI pre verziu B samostatné otázky, takže obťažnosť sa môže líšiť; viac v článku Dve verzie testu proti odpisovaniu.

Priemery, vývoj a rebríček

Rozbor otázok ti povie, čo učiť; zvyšok Štatistík, komu pomôcť: priemer triedy v čase, „Priemer podľa testov", „Rozloženie známok", „Najlepší žiaci", „Potrebujú pomoc" a „Neobvyklý prepad". Karta žiaka ukáže jeho priemer a vývoj a obrazovka Domov rebríček piatich najlepších a piatich najslabších žiakov, len čo má výsledky aspoň 6 žiakov. Výsledky fungujú v telefóne aj na webe; skenovať sa dá iba v appke Grade AI v telefóne (iPhone a Android), pozri Ako opraviť test s výberom odpovedí telefónom.

Časté otázky

Aká úspešnosť testovej otázky je dobrá?

Jedno správne číslo neexistuje. Ako hrubé vodidlo: pri školskom teste povedia najviac otázky, ktoré zvládne zhruba 40 až 90 % žiakov. Grade AI ukáže kartu „Zajtra vysvetliť znova" iba pri otázke pod 60 %.

Ukáže Grade AI, ktorú nesprávnu odpoveď žiaci volili?

Áno. Pri každej otázke spočíta, koľko žiakov zvolilo A, B, C a D, pri každej verzii zvlášť, a karta „Zajtra vysvetliť znova" uvedie najčastejšiu nesprávnu odpoveď.

Dá sa po naskenovaní opraviť kľúč?

Test upraviť môžeš, ale uložené výsledky si držia kľúč, podľa ktorého boli opravené. Oprav kľúč, hárky naskenuj znova a ulož: nový sken toho istého žiaka nahradí jeho skorší výsledok.

Počíta sa nevyplnená otázka ako chyba?

Áno, pre body aj známku. Prázdna otázka, dve vyfarbené kolieska alebo značka, pri ktorej sa nedá rozhodnúť, sa počítajú ako chyba. Nejasné značky appka označí a zle prečítané opravíš v Upraviť odpovede. Obrazovka Všetky otázky prázdne odpovede do počtov nezahŕňa.

Vyhodnocuje výsledky AI?

Nie. Grade AI používa AI iba na návrh testových otázok. Známky vznikajú pevným výpočtom a všetky štatistiky sa počítajú z naskenovaných odpovedí.

Skús to na ďalšom teste.

Založ triedu, vytlač hárky, zmeraj si to. Skenuje sa v telefóne. Tvorba a tlač fungujú aj v prehliadači.

Stiahnuť appku

Ďalšie články