Využívání počítačů k testování

Abstract

Disertační práce, která se zabývá problematikou využívání počítačů při testování, se skládá ze dvou částí: teoretické a výzkumné. Je zaměřená na řešení dvou problémů: charakterizování současného stavu využívání počítačů při testování (1) a odlišnostmi i shodami metody založené na klasické teorie testu (KTT) a metody vycházející z teorie odpovědi na položku (IRT) při tvorbě testu a analýze jeho výsledků (2). Druhý problém je řešen jak z teoretického hlediska, tak při aplikaci obou metod při analýze výsledků testu Obecné studijní předpoklady použitém v přijímacím řízení na Pedagogickou fakultu UK v roce 2006. V práci je popsáno také adaptivní testování a uvádí se zde využití speciálních software pro provádění klasické analýzy testových výsledků (ITEMAN a LERTAP 5) a pro jedno-, dvou- a tří-parametrovou IRT analýzu (BILOG-MG). Klíčová slova Využití informačních a komunikačních technologií při testování, klasická teorie testu (KTT), teorie odpovědi na položku (IRT), IRT parametry, charakteristická funkce položky/ testu, informační funkce položky/ testu, IRT modely, analýza testu, réhabilita, položková analýza, obtížnost položky, citlivost položky, analýza distraktorů, adaptivní testování.

The thesis provided deals with the question of computer based testing. The study contains two main parts: theoretical and empirical. It addresses two problems: what is the state of the art of computers implementation in testing (1), and what is the difference between applying two theories - classical test theory (CTT), and item response theory (IRT) in test construction, and analysis of test scores (2). The second problem has been solved both theoretical and empirical. No doubt, that computer implementation in test administration, construction, score analysis, test forms creating, and adaptive testing is very useful activity. It seems, as well, implementation of IRT in test construction and its score analysis has some advantages in comparison with CTT. On the other hand, mastering IRT is a quite difficult task, and there are strict demands to be fulfilled before IRT could be applied, too. There are principles of adaptive testing described in the study. This topic has not been described in any educational journal till today. Special software for realizing classical item analysis (ITEMAN, LERTAP 5) and for realizing IRT analysis (BILOG-MG) are presented here. To my knowledge comparison of item analysis carried out by methods based on CTT and IRT has not been presented in the Czech Republic. An analysis...