Grade AI

Které otázky třída nezvládla? Jak číst výsledky testu otázku po otázce

Jak číst test s výběrem odpovědí otázku po otázce: úspěšnost, které špatné odpovědi žáci volili, vadné otázky a co zítra vysvětlit znovu.

· 8 min čtení · English · Deutsch · Polski · Slovenčina

Ve zkratce: U každé otázky se podívej, kolik procent žáků odpovědělo správně a kterou špatnou odpověď volili ostatní. Jedna oblíbená špatná odpověď obvykle znamená jednu myšlenku, kterou je potřeba zítra vysvětlit znovu. Když stejnou špatnou odpověď zvolili i nejlepší žáci, zkontroluj nejdřív otázku a klíč. Grade AI to všechno spočítá, jakmile archy naskenuješ a uložíš.

Co znamená číst test otázku po otázce?

Znamená to dívat se na každou otázku napříč celou třídou, ne na každého žáka napříč celým testem. Odborně se tomu říká analýza položek: u každé otázky zjistíš, kolik žáků ji mělo správně a jak se rozložily špatné odpovědi. Ručně může takové počítání trvat déle než samotná oprava písemky.

Grade AI (grade-ai.app) je appka pro učitele do telefonu i do prohlížeče, která vytiskne test s výběrem odpovědí na papír, každému žákovi vlastní arch, přečte vyplněné archy fotoaparátem telefonu a tohle počítání udělá sama. Čísla se počítají z naskenovaných odpovědí, nepíše je AI.

Jak těžká byla která otázka?

Nejjednodušší míra obtížnosti je úspěšnost: kolik procent žáků zvolilo správnou odpověď. Jako hrubé vodítko platí, že nad zhruba 80 % látku umí většina třídy, mezi 40 a 80 % ji třída umí jen zčásti a pod zhruba 40 % něco nefungovalo: výklad, otázka nebo klíč. Nejsou to pevné hranice. Karta „Zítra vysvětlit znovu" v Grade AI se ukáže jen u otázky s úspěšností pod 60 %.

Příklad na vymyšlené třídě

Tabulka obsahuje vymyšlená ukázková data, ne skutečnou třídu: 24 žáků, krátký test ze zlomků, každý odpověděl na všechny otázky. Čísla udávají, kolik žáků zvolilo kterou odpověď.

Otázka (ukázka)ABCDKlíčÚspěšnost
1. Který zlomek se rovná 2/4?21921B79 %
2. Který zlomek je větší: 1/3, nebo 1/4? (A je 1/3, B je 1/4)91311A38 %
3. Který zlomek je v základním tvaru?5676C29 %
4. Kolik je 1/2 + 1/4? (C je 3/4, D je 2/4)31182D8 %
5. Kolik čtvrtin tvoří celek?23010A96 %

Co prozradí špatné odpovědi?

Často víc než samotná úspěšnost. Jedna převládající špatná odpověď znamená společnou mylnou představu: pojmenuj ji a vysvětli znovu. Rovnoměrně rozložené chyby znamenají tipování. Špatnou možnost, kterou nikdo nezvolil, příště nahraď typickou chybou žáků, jak doporučují zásady pro psaní testových otázek, které shrnuli Haladyna, Downing a Rodriguez (2002). Víc v článku Jak psát testové otázky s výběrem odpovědí.

V Grade AI otevři test a přepni na záložku Otázky. U každé otázky vidíš, kolik žáků zvolilo A, B, C a D, počtem i v procentech, a správná odpověď je vyznačená. Přepínačem „Úspěšnost" seřadíš otázky od nejtěžší. Tlačítko Rozbor otázek po jedné otevře obrazovku Všechny otázky s úspěšností každé otázky; po ťuknutí na otázku uvidíš její „Rozdělení odpovědí".

Jak poznat vadnou otázku?

Podezírej otázku, ne třídu, když stejnou špatnou odpověď zvolila většina nejlepších žáků, když jedna špatná odpověď dostala mnohem víc hlasů než ta „správná" (otázka 4 výš) nebo když by mohly platit dvě odpovědi a žáci, kteří látku umí, se mezi ně rozdělili.

Ověříš to v záložce Přehled u testu. Výsledky jsou seřazené od nejlepšího po nejslabší (při víc než 11 výsledcích pět nejlepších a pět nejslabších) a ťuknutí na jméno ukáže odpovědi toho žáka vedle klíče. Když mají nejlepší žáci u jedné otázky stejné „špatné" písmeno, přečti si otázku i klíč znovu.

Když u nejhorší otázky zvolilo stejnou špatnou odpověď aspoň 40 % žáků, kteří test psali (a zároveň aspoň tři), shrnutí v Přehledu tu odpověď pojmenuje a dodá: „Buď je otázka zavádějící, nebo si to třída zapamatovala špatně." V příkladu by to byla otázka 4.

Pokud otázku navrhla AI: automatické kontroly Grade AI zachytí dvě stejné odpovědi, ne dvě různé odpovědi, které jsou obě správně.

Co když byl špatně klíč?

Uložené výsledky se podle změněného klíče znovu neopravují: každý si drží klíč, podle kterého byl opravený, a úprava použitého testu hlásí „Změny se projeví pouze u nových skenů. Existující výsledky zůstanou nezměněny." Oprav tedy klíč v testu, dotčené archy naskenuj znovu a ulož; nový sken téhož žáka nahradí jeho dřívější výsledek.

Když skener špatně přečetl jedno kolečko, otevři kartu žáka a u testu ťukni na Upravit. Na obrazovce Upravit odpovědi ťukni na správné kolečko; procenta i známka se přepočítají. Každá otázka má jeden bod, váhy nejsou.

Co zítra vysvětlit znovu?

Otázku, u které se hodně žáků shodlo na jedné špatné odpovědi. Je to jedna mylná představa a často stačí pár minut: začni od špatné odpovědi („Hodně z vás zvolilo 1/4. Proč vypadá větší?"), ukaž ji na obrázku a na konci hodiny dej jednu podobnou otázku.

V Grade AI najdeš v záložce Statistiky kartu „Zítra vysvětlit znovu". Ukáže otázku s nejnižší úspěšností ve třídách a období, které máš ve filtru, ale jen když je pod 60 %, a k ní test, kolik žáků chybovalo, nejčastější špatnou odpověď („Nejčastěji volili") a správnou odpověď („Správná odpověď"). Ťuknutím otevřeš test. Pod ní „Další těžké otázky" ukážou až pět dalších.

Karta vybírá podle úspěšnosti, ne podle smyslu. V příkladu výš by ukázala otázku 4 se špatným klíčem, protože 8 % je nejméně. Před přípravou hodiny si proto přečti „Nejčastěji volili": když je ta odpověď ve skutečnosti správná, oprav místo výkladu klíč.

Kdo test ještě nepsal?

Přehled každého testu ukazuje „Napsali" s počtem, třeba 22 / 24, a pod výsledky „Nepsali" se jmény žáků ze soupisky třídy, kteří výsledek nemají. Ve Statistikách je karta „Chybějící testy" a každá karta žáka má vlastní seznam „Nepsané testy".

Když nepřítomný žák test napíše později, naskenuješ jeho arch stejně jako ostatní; když se arch ztratil, vytiskneš ho znovu z jeho karty.

Jak férově porovnat verze A a B?

Porovnávej otázku po otázce. Otázka 3 ve verzi A obvykle není otázka 3 ve verzi B, proto Grade AI počítá každou verzi zvlášť: v záložce Otázky i na obrazovce Všechny otázky přepínáš mezi „Verze A" a „Verze B" a obrazovka Všechny otázky nahoře ukazuje průměrnou úspěšnost zvolené verze („Průměrná úspěšnost"). Graf, který by A a B porovnával, v appce není.

Hlídej, kdo psal kterou verzi: určuješ to u třídy, a když áčko psali hlavně nejlepší žáci, bude vypadat snazší. Porovnávej odpovídající otázky: když otázka 5 v B dopadla o 30 bodů hůř než otázka 5 v A ze stejné látky, chyba bude spíš v otázce. A mysli na malé skupiny: při 12 žácích na verzi posune jeden žák úspěšnost otázky zhruba o 8 bodů. S AI píše Grade AI pro verzi B samostatné otázky, takže obtížnost se může lišit; víc v článku Dvě verze testu proti opisování.

Průměry, vývoj a žebříček

Rozbor otázek ti řekne, co učit; zbytek Statistik, komu pomoct: průměr třídy v čase, „Průměr podle testů", „Rozložení známek", „Nejlepší žáci", „Potřebují pomoc" a „Neobvyklý propad". Karta žáka ukáže jeho průměr a vývoj a obrazovka Domů žebříček pěti nejlepších a pěti nejslabších žáků, jakmile má výsledky aspoň 6 žáků. Výsledky fungují v telefonu i na webu; skenovat se dá jen v appce Grade AI v telefonu (iPhone a Android), viz Jak opravit test s výběrem odpovědí telefonem.

Časté otázky

Jaká úspěšnost testové otázky je dobrá?

Jedno správné číslo neexistuje. Jako hrubé vodítko: u školního testu řeknou nejvíc otázky, které zvládne zhruba 40 až 90 % žáků. Grade AI ukáže kartu „Zítra vysvětlit znovu" jen u otázky pod 60 %.

Ukáže Grade AI, kterou špatnou odpověď žáci volili?

Ano. U každé otázky spočítá, kolik žáků zvolilo A, B, C a D, u každé verze zvlášť, a karta „Zítra vysvětlit znovu" uvede nejčastější špatnou odpověď.

Jde po naskenování opravit klíč?

Test upravit můžeš, ale uložené výsledky si drží klíč, podle kterého byly opravené. Oprav klíč, archy naskenuj znovu a ulož: nový sken téhož žáka nahradí jeho dřívější výsledek.

Počítá se nevyplněná otázka jako chyba?

Ano, pro body i známku. Prázdná otázka, dvě vybarvená kolečka nebo značka, u které nejde rozhodnout, se počítají jako chyba. Nejasné značky appka označí a špatně přečtené opravíš v Upravit odpovědi. Obrazovka Všechny otázky prázdné odpovědi do počtů nezahrnuje.

Vyhodnocuje výsledky AI?

Ne. Grade AI používá AI jen k návrhu testových otázek. Známky vznikají pevným výpočtem a všechny statistiky se počítají z naskenovaných odpovědí.

Zkus to na příštím testu.

Založ třídu, vytiskni archy, změř si to. Skenuje se v telefonu. Tvorba a tisk fungují i v prohlížeči.

Stáhnout appku

Další články