Online toetsing

Alles wat je altijd al wilde weten over digitale toetsing

Posts Tagged ‘beoordelen

Beoordelen (met een tablet?)

with 2 comments

Stel je voor dat je een proeve van bekwaamheid moet beoordelen. Je deelnemers laten in een echte werksituatie zien dat ze in staat zijn de taken uit te voeren waar ze voor opgeleid zijn. Denk hierbij aan een schilder die een deur moet schilderen, een loodgieter die een wastafel plaatst en een rij-examinator die een rijexamen afneemt. Vrijwel altijd is een simulatie of echte omgeving nodig waarin de kandidaat kan laten zien wat hij kan. Wanneer je een dergelijke situatie visualiseert zie je iemand met een schrijfblok, veel papieren (scoringformulieren voor de verschillende kandidaten) en een pen in de weer. Het resultaat kan dan zoiets zijn als op het formulier hiernaast. Je moet er niet aan denken dat je tegelijkertijd zo tien kandidaten of in dit geval tien honden moet beoordelen. Dat levert heel veel geblader op.

Stel je voor dat je dit op je iPad kunt doen. Met een veeg ga je naar de volgende kandidaat (horizontaal beoordelen). Door een beoordelingsexamen te maken met open en gesloten vragen geef je de beoordelaar de kans om snel en efficiënt een aantal beoordelingsexamens in te vullen.

Hieronder een voorbeeld van een gesloten vraag uit TeleToets op een iPad. TeleToets kent multiplechoice, multiple select (meer-uit-meer) en open vragen met de mogelijkheid tot het uploaden van documenten of media in het beoordelingsexamen. Door gebruik te maken van een tablet met Internetverbinding kan de beoordelaar zonder iets te downloaden real time het examen beoordelen. Het invullen van open vragen of uploaden van documenten kan ook eventueel nog later op een rustig moment gedaan worden. In die situatie kan het examen desgewenst verder beoordeeld worden op een computer. Op naar een papierloos examen!

Wanneer iOS 6 op je iPad geïnstalleerd is kun je natuurlijk ook via de iPad gebruik maken van de uploadvraag!

Written by Manon Bonefaas

18 september 2012 at 14:05

Competentiemeting voor Netwerkschool

leave a comment »

Beter onderwijs tegen dezelfde of lagere kosten. Dat is het uitgangspunt van de Netwerkschool: een experiment waarbij vijf scholen, onder wetenschappelijke begeleiding, vijf jaar lang hun, op het Netwerkschoolmodel gebaseerde, plannen uitvoeren.

De Netwerkschool heeft een andere insteek dan de traditionele school. Dit ‘anders’ vertaalt zicht in zes pijlers:

  • Tijd: de Netwerkschool is het hele jaar open; leerlingen en medewerkers nemen, net als elders in de maatschappij, in overleg vakantiedagen op.
  • Aandacht: er is altijd persoonlijke aandacht voor de studenten (studiebegeleider, leerlingvolgsysteem)
  • Maatwerk: studenten volgen modules in hun eigen tempo (zittenblijven kan niet)
  • Netwerk: de school werkt nauw samen met het bedrijfsleven, de buurt en oud-studenten
  • Cultuur: de Netwerkschool heeft een expliciete organisatiecultuur (flexibel en servicegericht)
  • Maatschappelijk rendement: studentenbedrijven leveren diensten aan de omgeving van de school

In totaal zijn vijf netwerkscholen in 2010 begonnen. SintLucas is een van de netwerkscholen. In schooljaar 2011-2012 zijn ze begonnen met het afnemen van CanDo statements via TeleToets. Studenten vulden een vragenlijst in nadat ze een project, module of skills module afgerond hebben. De CanDo statements geven aan hoe de student over zichzelf denkt in relatie tot het betreffende onderwerp. Bijvoorbeeld:

1 1.4 K Kun je onderzoeken met behulp van een mindmap?
2 1.4 K Kun je kleur, typografie en beeldkeuzes in beeld brengen?
3 1.4 K Kun je je keuzes beargumenteren, m.b.v. geschreven tekst?
4 1.4 K Kun je een beeld en stijlboek maken?

 

De codering voor de CanDo statements verwijst naar de competenties en werkprocessen, deze worden in kenmerken of metatags meegegeven aan de CanDo statements voor de rapportage achteraf. De ingevulde CanDo statements worden ingelezen in de competentiemeting die vervolgens door de docent wordt beoordeeld. Om het werk van de docent te beperken hoeft de docent alleen de afwijkingen maar aan te geven, dit bespaart tijd bij het invullen. Voor de studieloopbaanbegeleider levert dit in een oogopslag op: de zelfbeoordeling van de student en de afwijkende beoordeling van de docent. Overschat of onderschat de student zich? Dit geeft stof tot praten.

De beoordelaar kan naast zijn oordeel over de student desgewenst nog een toelichting geven en een score (van 0  tot 10). Deze score is meestal geen cijfer maar een verwijzing naar het niveau waarop de docent inschat dat de student zich bevindt.

Door het invullen van de CanDo statements, de beoordeling van de docenten en het gebruik van kenmerken bij de CanDo statements is een competentieprofiel vast te stellen. Met behulp van de kenmerken of metatags wordt een rapportage gemaakt waarbij competenties en werkprocessen in één overzicht worden weergegeven. De rapportages leiden tot inzicht in dat wat de student wel en niet beheerst. Studie-advies wordt op basis van de gemaakt competentieprofielen gegeven. Hiermee krijgt de studenten een maatwerk opleiding conform de wensen van henzelf en de netwerkschool. In totaal werden tot nu toe 8 skillsmodules afgenomen met behulp van de CanDo statements en 4 projecten. Hierdoor werd het mogelijk studenten een effectiever en sneller traject te laten volgen.

App voor praktijkbeoordel…

with one comment

AfbeeldingDeze week kwam ik een blog tegen met een enthousiast verhaal over de eerste app voor assessments:

Volgens de auteur (en ontwikkelaar van de app …):

An easy to use app designed for assessment purposes – allows photos and videos and provides feedback to an email or dropbox account. Great for outdoor practical and observational assessments.

De blog leverde direct reacties op die met name het gebruiksgemak bevestigen. Mooie feature is het toevoegen van foto’s en video’s. Hiermee kun je direct vastleggen wat een student doet tijdens een praktijkexamen en je kunt aantekeningen toevoegen. Op deze manier heb je altijd onderbouwing bij het resultaat dat een student gehaald heeft.
De resultaten van de beoordelingen zijn eenvoudig te exporteren naar een spreadsheet waarna je de keuze hebt om de resultaten te versturen naar je e-mailadres of je dropbox account.

Een paar kanttekeningen bij de app:
* nog niet geschikt voor Android
* leerlingen moeten 1 voor 1 toegevoegd worden, een importfunctie zou handig zijn
* je krijgt als docent geen antwoordmodel te zien wat toch essentieel is om tot een objectieve beoordeling te kunnen komen
* je hebt als docent een behoorlijke vrijheid in het toekennen van punten, er zijn 2 varianten: een schaal van 1-5 en een schaal van 6-10
* het is een losse app, integratie in een examen- of toetsproces is nodig voor de borging.

Inzet van apps in het onderwijs komt steeds vaker voor. Vandaag las ik een dossier via Kennisnet over de inzet van iPads in het groene onderwijs door docent Jan Priem. De docent vertelt de lesstof veel sneller bereikbaar is voor de leerlingen, er zijn géén tijdrovende inlogprocedures nodig op schoolcomputers.

Wat mij in dit artikel triggerde was de volgende zin:

Tijdens de praktijklessen kunnen de iPad’s worden opgeborgen in een kluis.

Een iPad tijdens de praktijklessen is voor studenten niet handig, dat begrijp ik. Voor een docent is een iPad tijdens de praktijklessen juist heel goed inzetbaar. Neem die iPad mee naar buiten en leg de vorderingen van de studenten vast, bijv. via de hierboven besproken app, door het maken van video’s of foto’s. Voeg feedback toe voor de studenten en zorg dat je dit in een volgende les met hen bespreekt of nog mooier: stuur de resultaten van je beoordeling naar het e-mailadres van de student zodat hij het via zijn eigen iPad kan bekijken (en ook aan zijn ouders kan laten zien!).

Written by JannekeHelsloot

10 maart 2012 at 18:24

Corrigeren is beoordelen: moeilijk of niet?

with one comment

Corrigeren blijkt voor veel mensen enorm lastig. Beoordelen als activiteit wordt ook als zeer moeilijk ervaren, ik zie beide activiteiten in elkaars verlengde. In de discussie over EVC komt bij assessoren vaak naar voren dat ze graag meer bewijs wilden hebben voor het aantonen van een bepaalde competentie. Wanneer je tijdens de intervisie met deze docenten in gesprek gaat blijkt vaak dat ze zelf onzeker zijn over hun beoordeling.

Wie ben ik dat ik dat zeggen mag / vinden mag over deze persoon.’,

hoorde ik vaak verzuchten tijdens dergelijke intervisiebijeenkomsten. In werkelijkheid doe je in het onderwijs niets anders dan constant (be)oordelen.

Soms heeft zo’n beoordeling een summatief karakter zoals bijvoorbeeld tijdens een EVC procedure. In andere gevallen kan het om een eenvoudiger oordeel gaan, bijvoorbeeld over het gedrag van een leerling in de klas. Docenten hebben daar over het algemeen veel minder moeite mee en zijn dan wel in staat te oordelen, ook als ze niet alle informatie hebben. Concluderend: oordelen is moeilijk maar we kunnen het wel en we doen het ook, vaak onbewust.

De onbewuste beoordeling wordt ook gebruikt bij de correctie van toetsing. Vanuit de online toetsing weet ik dat de automatische correctie van vragen soms lastig te accepteren is voor een docent.

Ik weet wat een leerling bedoelt en dat wordt door toetssoftware niet altijd goed gerekend“, wordt soms verzucht door docenten. Wanneer handmatig nagekeken wordt sluipt subjectieve beoordeling in het nakijken van de toets. Soms is dit geheel onbewust.

Bij online toetsing waarbij de software, die slechts in nullen en enen geprogrammeerd is, besluit tot goed of fout, is de beoordeling veel objectiever. (Overigens zijn die nullen en enen wel steeds door mensen, gebruikers van de software ingesteld.) Om tegemoet te komen aan die meer subjectieve beoordeling is het bijvoorbeeld mogelijk om bij invulvragen meerdere correcte antwoorden aan te geven. Itemconstructeurs moeten dan wel nadenken over de verschillende spellingsvormen die de leerlingen kunnen gebruiken.

De meeste winst is echter te behalen bij het gebruiken van andere scoringsregels, bij vragen met een subjectief beoordelingselement. Meestal geven itemconstructeurs vooraf aan dat ze iets goed of fout willen keuren, dat is dichotoom scoren. Soms echter willen ze achteraf liever delen van de vraag wel goedkeuren, dan is de polytome scoring beter. Bij polytoom scoren wordt per vraagonderdeel aangegeven wat het waard is in punten of percentage en wordt op grond daarvan de beoordeling van de vraag uitgevoerd. Over het algemeen voelen docenten en leerlingen zich rechtvaardiger behandeld door deze manier van scoring. Dit is geen oplossing voor de moeilijkheid van corrigeren, wel helpt het in de objectivering.

Written by Manon Bonefaas

5 september 2011 at 21:05

%d bloggers liken dit: