Analýzy znalostních testů:
Od klasické testové teorie po IRT modely a další témata

Prezentace

Prezentace ke stažení PDF , PDF (4 na stránku)

Praktické části

Část I: Projekt EduTest

Od výzkumu k praxi

1. Aplikace ShinyItemAnalysis , (záložní odkaz)
   • Maturita z matematiky, jaro 2019 (náhodný vzorek 2 000 žáků):
     položková data , skupina (1 = gymnázia; 0 = ostatní), vzorový report , zadání testu
2. Modul „CERMAT tools“ v aplikaci ShinyItemAnalysisCermat
   • Maturita z matematiky, jaro 2022 (náhodný vzorek 2 000 žáků):
     data , metadata , zadání testu
3. Aplikace EduTest Maturita s přednahranými ukázkovými daty fiktivní školy (didaktické testy maturitní zkoušky z matematiky, angličtiny a českého jazyka a literatury, jaro 2022); vzorový report pro český jazyk a literaturu
4. Aplikace EduTest JPZ pro analýzu tzv. školní zprávy ( ukázková školní zpráva fiktivní školy, rok 2020)

Část II: Od tradičních metod k modelování odpovědi na položky

CTT, IRT a DIF

1. Aplikace ShinyItemAnalysis , (záložní odkaz)
1. V záložce „Data“ vyberte dataset „CZmaturaS“ (maturita z matematiky, jaro 2019, vzorek 2 000 žáků, viz výše)
2. Vyzkoušejte si dostupné analýzy (záložky Item Analysis, Regression, IRT, DIF/Fairness)
2. Modul „CERMAT tools“ v aplikaci ShinyItemAnalysisCermat (záložka „Modules“)
   • Maturita z matematiky, jaro 2022 (náhodný vzorek 2 000 žáků):
     data , metadata , zadání testu

Část III: Další témata

Vyvažování verzí testu, odhadování obtížnosti z analýzy textu, počítačové adaptivní testování

1. Modul „Text Analysis“ v aplikaci ShinyItemAnalysisCermat (záložka „Modules“)
   • Využijte ukázkové zadání nebo zadání položek z webu CZVV
     
2. Modul „Computerized adaptive tests“ v aplikaci ShinyItemAnalysis (záložka „Modules“)
3. Aplikace s interaktivní adaptivní administrací
   • Maturitní zkouška z matematiky, jaro 2019, nebo jaro 2022
   • Přihlašovací údaje:
     login: test@1, heslo: test@1;
     login: test@2, heslo: test@2
     atd.

ShinyItemAnalysis na vlastním PC Novinka

Nainstalujte si aplikaci na vlastní počítač a získejte možnost analýzy větších datasetů a výhody stabilního chodu bez potřeby připojení k internetu. Aplikace je napsaná v jazyce R, takže nejprve budete potřebovat nainstalovat jeho interpreter:

1. Stáhněte a nainstalujte R
2. Spusťte
3. Do konzole napište install.packages("ShinyItemAnalysis", dependencies = TRUE) a stiskněte Enter
4. Po instalaci balíku ShinyItemAnalysis spusťte aplikaci pomocí příkazu ShinyItemAnalysis::run_app()

Moduly CERMAT tools a Text analysis nejsou při lokální instalaci zatím dostupné.