11. nädal – arvutipõhine testimine

Pärast multimeediumi nädalaid võtan ma jälle Priidu käest teatepulga üle. Järgmisel neljal nädalal tuleb iga nädal iseseisva töö ülesanne. Selle nädala teemaks on arvutipõhine testimine.

Arvutipõhine testimine on samamoodi standardite ja spetsifikatsioonidega reguleeritud, nagu teisedki digitaalsete õpiobjektidega seotud valdkonnad. Küsimuste ja testide juures tuleb standardite olulisus eriti hästi esile. Kui konspekti tüüpi õppematerjalide puhul saab materjali sageli ka kopeerimise teel ühest keskkonnast või autorvahendist teise tõsta, siis küsimuste puhul on kopeerimine sageli liiga töömahukas.

Pikemat aega koolis töötanud õpetajad mäletavad ilmselt veel APSTest nimelist tarkvara, mis kümmekond aastat tagasi suhteliselt populaarne oli. Selle jaoks tegid õpetajad hulga küsimusi ja teste, kuid hiljem puudus võimalus neid importida ning tänapäevasemates veebipõhistest testimiskeskkondades kasutada.

Arvutipõhise testimise juures on kõigepealt oluline eristada küsimusi ja teste. Standardeid järgivate vahendite puhul hoitakse küsimusi testidest eraldi. See võimaldab küsimusi taaskasutada – õpetaja saab valida küsimuste baasist sobivad küsimused ning panna neist kokku testi. Lihtsamate vahendite puhul, mis standardeid ei järgi, on küsimused testiga seotud (näiteks LeMill keskkonnas).

Küsimuste ja testide koostamist reguleerib IMS Question and Test Interoperability spetsifikatsioon (lühidalt IMS QTI). Selle viimases versiooni 2.1 dokumendis IMS Question and Test Interoperability Implementation Guide on eristatud 16 küsimuse tüüpi, mille näited leiate allpool toodud esitlusest.

IMS QTI spetsifikatsioonis ei ole küsimuste tüüpidel “inimkeelseid” nimetusi. Ühes oma projektidest (TATS) oleme tõlkinud küsimuste tüübid järgnevalt (6 IMS QTI küsimuse tüüpi on siit eestikeelsest tõlkest puudu):

• Multiple Choice (choiceInteraction) – mitmikvalik
• Multiple Response (choiceInteraction) – mitmikvastus
• Order (orderInteraction) – järjestamine
• Associate (associateInteraction) – ühendamine
• Match (matchInteraction) – seostamine
• Gap Match (gapMatchInteraction) – lünktekst
• Inline Choice (inlineChoice) – valik tekstis
• Text Entry (textEntryInteraction) – lünktekst
• Extended Text (extendedTextInteraction) – esseevastusega
• Hottext (hottextInteraction) – mitmikvalik tekstis
• Slider (sliderInteraction) – skaala

Nagu siit näha, ei ole me gapMatchInteraction küsimusetüübi jaoks eraldi eestikeelset nimetust leidnud ning nimetame seda samamoodi nagu textEntryInteraction küsimust lünktekstiks.

Lisaks sellele on küsimuste tüübid määratud ka SCORM ja Common Cartridge sisupakettide puhul. SCORM küsimuste tüübid (PDF) ei kattu IMS QTI spetsifikatsiooniga (True-False, Multiple Choice, Fill-In, Long Fill-In, Numeric, Likert, Matching, Sequence, Performance, Other). IMS Common Cartridge sisupakettide küsimused põhinevad IMS QTI spetsifikatsioonil.

Arvutipõhiste testide koostamiseks on terve rida erinevaid vahendeid. Osa neist võimaldab koostada enesekontrolliks mõeldud teste, kus õppijale antakse testi järel automaatne tagasiside, mida kusagile ei salvestata (näiteks Hot Potatoes). Teine osa testimissüsteeme sisaldab lisaks testide koostamise vahenditele ka keskkonda testide sooritamiseks. Sel juhul salvestatakse õppija vastused keskkonda ning õpetajal on võimalik saada kõigi õppijate vastustest ülevaade. Mõnel juhul on need vahendid ühes süsteemis koos (näiteks õpihaldussüsteemis), teisel juhul on tegemist eraldi vahenditega (näiteks TATS testide koostamiseks ja PETS testide sooritamiseks).

Järgnevalt loetelu mõnedest testide koostamise vahenditest:

• Hot Potatoes – tasuta tarkvara enesetestide koostamiseks, mis võimaldab eksportida teste veebilehena ja SCORM formaadis
• eXe – tasuta tarkvara sisupakettide koostamiseks, võimaldab eksportida veebipõhiseid eneseteste ja SCORM teste
• LeMill – veebipõhine keskkond õppematerjalide koostamiseks, võimaldab lihtsate testide koostamist (valikvastused, lünktekstid, esseevastusega küsimused)
• TATS – veebipõhine keskkond testide koostamiseks, põhineb IMS QTI spetsifikatsioonil ja toetab 10 küsimuse tüüpi. Testide sooritamine ja õppijate tulemuste haldus toimub PETS keskkonnas. Lihtsamal juhul on võimalik sooritada ka automaatselt kontrollitavaid eneseteste TATS keskkonnas. Funktsionaalselt on TATS+PETS väga võimalusterohke testimisvahend, kuid kasutamisloogika on kohati mitte päris intuitiivne.
• xatquiz – Windows tarkvara, mis võimaldab veebipõhiseid teste luua
• Õpihaldussüsteemides olevad testide koostamise vahendid (Moodle, IVA, …)
• Veeb 2.0 vahendid testide koostamiseks

Küsimuste ja testide teemal on meie instituudis valminud kaks lõputööd:

• Madisson, A. (2008). Teenusorienteeritud arhitektuuriga veebipõhised teadmiste testimise vahendid. (PDF)
• Tomberg, V. (2005). О реализации спецификаций IMS Question & Test Interoperability на примере тестовой системы IVA. (PDF)

Selle nädala ülesanne koosneb kahest osast. Praktilise osana palun teil koostada mingis testimisvahendis 5 küsimusest koosnev test, milles on kasutatud võimalikult erinevaid küsimusetüüpe. Valmis test laadiga üles veebi. Tegevõpetajad võivad loomulikult viidata ka mõnele varem tehtud testile.

Teise osana ootan ajaveebipostitust, milles viitate oma testile ning analüüsite, kuidas kasutatud testide koostamise vahend vastas IMS QTI küsimusetüüpidele. Lisaks sellele võiksite te käsitleda arvutipõhise testimise teemat natuke laiemalt. Milliseid vahendeid te ise testide koostamiseks kasutate? Milliseid küsimusetüüpe enamasti kasutate? Milliseid uusi vahendeid see nädal katsetasite? Jne.

Kodutöö tähtaeg on pühapäev 17.04. Edukat katsetamist!