Kurs i testutveckling

Flera har frågat om utbildning inom området testkonstruktion, och vi har därför bestämt oss för att försöka genomföra några utbildningar under våren 2012. Är du också intresserad? Kontakta oss då och berätta vad just du skulle vilja lära dig mer om - projektledning av testutveckling, frågekonstruktion, utvärdering av tester osv. 

Vad vill du veta?

Svara på vår extremt korta enkät och berätta vad du vill ha mer av här på Learnguide. Det tar max 2 minuter att besvara de tre frågorna, men sparar timmar för oss som då slipper gissa vad ni läsare vill veta mer om.

Klicka här för att komma till enkäten

Skriv ut

En liten checklista

Skriven av Peter Strate. Posted in Tester

För att förenkla för dig själv är det viktigt att om projektet följer en plan. En väg är att använda en enkel checklista för att inte glömma något steg på vägen, och för att planera genomförandet av testutvecklingen. Nedan följer en checklista som kan användas som en grund i ditt arbete:

SAMMANFATTNING AV TESTUTVECKLINGSPROCESSEN

  1. Domänspecifikation/ skapande av kriterier för kunskapsdomänen, kognitiva och psykomotoriska.
    1. Övergripande ämnesavgränsning
    2. Mål för varje område och delområde
    3. Detaljerade specifikationer för varje kunskap
  1. Frågekonstruktion
    1. Multiple-choise
    2. Sant- Falskt
    3. Matchning
    4. Fill in the blank
    5. Hot spot
    6. Essäer
    7. Case
  1. Utformning och val av testadministration
    1. Individuellt test eller grupptest
    2. Skrivet eller verbalt
    3. Storlek (diagnos eller examination)
  1. Item analys och validering
    1. Testgruppen bör ha mellan 70-100% korrekta svar EFTER genomgången utbildning
    2. Testgruppen bör ha mellan 0-50% korrekta svar INNAN genomgången utbildning
    3. Testet skall diskriminera tydligt, dvs. de som svarar rätt på en fråga skall ha ett klart högre totalt medelresultat än de som svarar fel
    4. Använd alltid 0-1 rättning, dvs. 1 poäng för rätt och 0 för fel. Vid psykomotoriska test kan vägd rättning användas, dvs en fråga kan ge fler än ett rätt.
    5. Utnyttja klassisk testteori för itemanalysen, dvs. ta fram p-värden, r-bis och medelpoäng på totaltest för varje enskilt svarsalternativ.
  1. Fastställ kravgräns för godkänt
    1. Använd jämförelse grupper med känd kunskap för att bestämma gräns, eller annan modell.
  1. Reliabilitet
    1. Använd koefficient alpha, KR-20 eller KR-21 för att fastställa internal consistency.
  1. Validitet
    1. Innehållsvaliditet
    2. Prognosvaliditet
    3. Constructvaliditet
    4. Utnyttja fokusgrupper/ expertgrupper för att bestämma validitet
  1. Användning och tolkning av resultat
    1. Utnyttja råpoäng i jämförelse med kravgräns och storlek på kunskapsområdet
    2. Utnyttja för beslut om
        1. Individuella rekryteringar
        2. Individuell studieplanering
        3. Gruppeffekt av studieprogram
        4. Jämförelser mellan effekt av olika studieprogram/ utbildare

 

Följ den här checklistan så ska du se att dina tester blir mycket bättre.