Online toetsing

Alles wat je altijd al wilde weten over digitale toetsing

Posts Tagged ‘online toetsing

5 tips voor toetsafname bij BYOD

with 4 comments

Veel scholen en bedrijven staan Bring Your Own Device (BYOD) toe. Het gevolg is dat iedere werknemer of leerling met andere devices werkt. Op school kunnen dat verschillende laptops, tablets of smartphones zijn.  Voor toetssoftware is het handig wanneer voor de beoordelingsexamens en de formatieve toetsen de software zich op elk device goed presenteert.

Een paar tips voor het uitleveren van toetssoftware aan kleinere devices:

1. Denk klein: hou rekening met de grootte van het (potentiele) afname scherm bij het stellen van je vragen. Dus korte teksten en korte antwoorden, weinig plaatjes (plaatjes laden duurt langer) en beperk je in het gebruik van  verschillende vraagsoorten. Een sleepvraag  op een heel klein scherm kan onhandig zijn en veel vaardigheid van de gebruiker vergen.

2. Toegankelijkheid: zorg dat de toets makkelijk toegankelijk is. Een manier om te voorkomen dat een kandidaat een lange url in moet typen is om gebruik te maken van QR codes. In een QR code kan je makkelijk een url stoppen, via deze link kun kun je je eigen QR code maken.

3. Wees voorzichtig met Flash: op veel mobiele devices wordt geen Flash ondersteuning gegeven, wellicht is het beter Flash te vermijden bij toetsafnames.

4. Alternatieve hulpbronnen: Beslis van te voren of het belangrijk is dat je kandidaten gebruik kunnen maken van alternatieve hulpbronnen. Mogen je kandidaten gebruik maken van andere bronnen of sites via hetzelfde device, check dan of ze de toets opnieuw kunnen openen.

5. Test: test je toets op verschillende devices zodat je weet hoe je toets eruit ziet op deze devices.

Voor deze blog heb ik dankbaar gebruik gemaakt van het heldere blog van Brian McNamara over BYOD en toetsing.

Advertenties

Written by Manon Bonefaas

29 oktober 2012 at 14:05

Leveranciersdag Digitaal Toetsen SURF 9 oktober 2012

with 3 comments

Afgelopen dinsdag vond de leveranciersdag Digitaal Toetsen van SURF plaats. De bijeenkomst was strak en met zorg georganiseerd. Uitleg werd gegeven over het programma Toetsing en Toetsgestuurd leren. Het belang van SURFconext werd duidelijk gemaakt. Door SURFconext is het mogelijk single-sign-on te realiseren voor verschillende SAAS applicaties. Daarnaast is het mogelijk om zo samen te werken over de grenzen van universiteiten en hogescholen heen. Dat laatste is erg belangrijk voor SURF en wordt door hen ook verwacht in het project Toetsing en Toetsgestuurd leren. Het ideaal plaatje dat aan het eind van de middag naar voren kwam was een itembank, gemaakt in één systeem. In dat systeem moeten review functies zitten en de examencommissie moet kunnen beoordelen of het examen klaar is. Waarna de afname in een ander systeem kan plaatsvinden. Tegelijkertijd moeten de systemen wel de veiligheid waarborgen. Het gaat immers om examens in het hoger onderwijs. Na de afname moeten de resultaten teruggekoppeld worden naar de itembank om de statisische gegevens van de vraag bij de vraag zelf te houden. Naast deze wens wil SURF ook graag met behulp van SURFconext experimenteren in de cloud. Door software te leveren aan de SURFmarket krijg je toegang tot SURFconext.

Het experiment met toetsbanken van de ene leverancier en afname (players) van de andere leverancier volg ik nauwgezet. Risico’s biedt het ook, de omgeving voor itemconstructie en itembank is immers aangepast aan de afspeelomgeving. De eisen die aan een afspeelomgeving gesteld worden zijn hoog, je wilt bijvoorbeeld dat alles opgeslagen wordt, zowel antwoorden als de tijd die een examenkandidaat over bepaalde vragen doet. Deze informatie heb je nodig bij de analyse achteraf. Daarnaast wil je dat niets van de toets achterblijft op de pc. Een volgende kandidaat mag beslist geen antwoorden van de vorige kandidaat zien.

De ideeën zijn erg ambitieus. Jammer was het, dat weinig kritische vragen gesteld werden door de leveranciers. Mogelijk kwam dat doordat niemand het achterste eindje van zijn tong wil laten zien, echter de taal kan ook een barrière geweest zijn. Voertaal was Engels op verzoek van twee leveranciers.  Overduidelijk was dat het hier alleen gaat om de Nederlandse markt en wetgeving. Wordt vervolgd!

Zoekterm: toetsmatrijs! Vijf tips

leave a comment »

Regelmatig check ik de zoekwoorden op deze blog. Op die manier heb ik het idee dat ik in kan spelen op vragen van bezoekers. Reacties op blogs komen jammer genoeg niet vaak voor. Bij deze ik nodig iedere lezer uit te reageren op dit blog. Op die manier kunnen we van elkaar leren! Maar dat terzijde.

Een op dit moment veel gekozen zoekterm is: toetsmatrijs. Eerder schreef ik daar al een blog over in het kader van PDCA met een verwijzing naar het blog van Sander Schenk. Maar nu naar aanleiding van de zoekvraag toch nog maar even in het kort een blog over de toetsmatrijs met vijf tips!

Een toetsmatrijs is een blauwdruk, een schema voor de toetsconstructie. Door gebruik te maken van de vooraf vastgelegde toetsmatrijs ben je in staat vergelijkbare toetsen qua niveau en inhoud te maken (mits een en ander goed is vastgelegd in de toetsmatrijs, het schema).

Vijf tips voor het gebruik van een toetsmatrijs:

  1. maak de toetsmatrijs vooraf, bij de start van je cursus of module. De toetsmatrijs is de basis van je toets. De toets is representatief voor de leerstof door gebruik van de toetsmatrijs.
  2. door de toetsmatrijs ontstaat afwisseling in de toets in opdrachten en inhoud. Zo kunnen kennis en inzichtvragen in een evenwichtige toets naast elkaar gesteld worden. Ook toetsvormen kunnen afgewisseld worden. Dit wordt vastgelegd in de toetsmatrijs.
  3. de toetsmatrijs is de verantwoording, naar collega’s, inspectie of accrediterende instantie, zorg dat de toetsmatrijs voor hen duidelijk is.
  4. door een toetsmatrijs kunnen toets en herkansing meer gelijkwaardig gemaakt worden.
  5. in de toetsmatrijs kunnen ook randvoorwaarden vastgelegd worden zoals: tijdsduur, gebruik van hulpmiddelen en dergelijke.

Veel succes bij het maken van een toetsmatrijs! Vragen over (digitaal)examineren? Stel ze hier!

Written by Manon Bonefaas

4 september 2012 at 09:17

Geplaatst in itembank, kwaliteit, toetsbeleid

Tagged with ,

CVE ziet (voorlopig) af van digitale examens

with one comment

In de vakantie verscheen dit bericht in de media: Voorlopig geen digitale eindexamens meer. Zowel op twitter als op diverse blogs werd hierop gereageerd. Opvallend was de reactie van de Rode Planeet: leverancier van Wintoets en Quayn. Het devies van de Rode Planeet:

 Ga nooit digitaal examineren. Het is vragen om problemen, die je niet als CvE in de hand kunt hebben.

Jammer dat de Rode Planeet dit devies niet meer toelicht en meteen in gaat op oplossingen. Jammer ook dat de kans gemist wordt om ervaring op te doen met digitale toetsing. Het CvE laat op dit moment toetssoftware bouwen om digitaal te kunnen gaan toetsen. Ongetwijfeld zijn ze zich bewust van de haken en ogen die de Rode Planeet opnoemt:

  • stroom- en internetstoringen
  • uitrol van updates
  • hackpogingen

Zonder nu deze haken en ogen te bagatelliseren zou ik wel het volgende op willen merken. Leerlingen van nu en ouders van nu verlangen steeds meer en steeds vaker dat gebruik gemaakt kan worden van digitale hulpmiddelen. In de lessituatie zie je dit ook terug. Veel lesmateriaal wordt digitaal aangeboden, sommige scholen werken al met laptops en tablets. Het gevolg is dat leerlingen steeds meer gewend zijn aan het gebruik van ICT. Ze kunnen niet eens meer lange stukken schrijven, zie ook de blogpost van Sander Schenk: schriftelijke toetsen zijn een marteling.  Vanuit dat perspectief zou het wenselijk zijn nog eens kritisch naar de digitale afname van examens te kijken. Ook als de software van het CvE klaar is zal er eerst een pilot fase gestart moeten worden. Over het algemeen begin je niet in het groot met de uitrol van een dergelijk product.

Door ‘proven technology’ weet je dat je veilig je examenafnames kan regelen. Natuurlijk kan er iets fout gaan zoals de Rode Planeet suggereert maar ook in de papieren oplossingen die door hen gesuggereerd worden gaan dingen fout, denk aan zoekgeraakte examens of bekend geraakte (gestolen)examens. De kans op fraude bestaat, zowel bij digitale als bij papieren afname en moet niet onderschat worden. Maar het gaat te ver om digitale afname als onveiliger te betitelen. Juist digitaal en online is veel te regelen rondom veiligheid. De gesuggereerde oplossing van het lokaal opslaan draagt zeker ook risico’s in zich.

Gelukkig zijn er andere partijen in Nederland die wel degelijk op een goede en betrouwbare manier digitale online examens afnemen, deze ‘proven technology’ zou CvE kunnen helpen bij de afname van de eindexamens. Vooralsnog is het jammer genoeg nog een paar jaar wachten op een pilot met de software die CvE heeft laten bouwen. Ik wens leerlingen en docenten sterkte voor de komende jaren met de papieren toetsen.

Written by Manon Bonefaas

14 augustus 2012 at 16:01

Leerlingen zoeken toetsen

with one comment

Scholen gehackt door leerlingen die toetsen zoeken

Bewerkt door: Redactie − 28/06/12, 04:59  − bron: hln.be
© Thinkstock.

Zeker 30 scholen in België zijn het afgelopen jaar slachtoffer geworden van hackers. Vaak ging het om eigen leerlingen die het schoolsysteem kraakten om zo examenvragen te bemachtigen of puntenlijsten te stelen.

Luc Beirens van de Computer Crime Unit van de federale politie in België vermoedt dat het op nog veel meer scholen gebeurt. Hij sluit zelfs niet uit dat sommige leerlingen ook proberen hun examenresultaten te manipuleren.

Vaak proberen scholen het probleem intern op te lossen. Omdat de omvang van de cybercriminaliteit beperkt is, is het niet altijd nodig om naar de politie te stappen, zo schrijven de Coreliokranten in België.

Dit artikel stond 28 juni in Trouw. Twee jaar gelden verscheen dit artikel in de kranten:

Leerlingen kraken e-mail leraren

ToetsenbordToetsenbord Foto: Filmvanalledag / Flickr – Creative Commons by-nc-sa
Toegevoegd: dinsdag 16 mrt 2010, 10:10

Twee leerlingen van een gymnasium in Heeswijk-Dinther zijn van school gestuurd omdat ze de e-mailboxen van docenten hebben gekraakt. Daarmee hebben ze de vertrouwensrelatie met de leraren geschonden, zegt de school.

De twee jongens, uit de vierde en vijfde klas, hebben sinds november 2008 meerdere keren ingebroken in de e-mail van negentien leraren. De gymnasiasten gebruikten een keylogger, waarmee de toetsaanslagen van de docenten werden geregistreerd. Zo werden de wachtwoorden achterhaald.

Ze haalden er onder meer proefwerken en schoolexamens uit de mail, die ze deelden met hun vrienden. De leerlingen die gebruikmaakten van de gestolen examens hebben een 1 gekregen en moeten die nu overdoen.

De ouders en leerlingen zijn afgelopen weekend geïnformeerd over de inbraak in het computersysteem. De school doet aangifte gedaan van computervredebreuk.

Conclusie: leerlingen zijn geïnteresseerd in toetsen zelfs zo geïnteresseerd dat ze computer hackers worden. Het hoeft niet altijd zo ingewikkeld of geavanceerd, net als bij papieren toetsen is het mogelijk de (digitale)toets van de docent te stelen. Een USB stickje met de toetsen erop is voor een docent een kostbaar bezit, voor een leerling of student geldt dat natuurlijk ook. Verloren of gestolen USB sticks komen niet of nauwelijks in de publiciteit tenzij ze staatsgeheimen bevatten. De oplossing voor dit probleem is een veilig toetssysteem, met een aantal voorwaarden o.a.:

  • de gebruiker heeft beperkte rechten, bijvoorbeeld alleen voor het maken van conceptvragen
  • de gebruiker moet regelmatig van wachtwoord wisselen en dit wordt gecheckt op sterkte
  • zorg voor een voldoende grote itembank zodat je afwisselende random examens kunt maken (de examens worden pas bij het starten samengesteld, dat zorgt ervoor dat een leerling nooit van tevoren iets kan)
  • de toetssoftware moet een volledig SAAS model zijn (USB stickjes zijn overbodig)
  • ook aan de afname kant van de toets zul je veiligheidsmaatregelen moeten nemen (zie hiervoor o.a Silvester Draaijers blog, toetscentra.nl en Exin anywhere)
  • automatisch corrigeren en snel verspreiden van de uitslag voorkomt manipulatie achteraf.

Met beveiliging is het altijd een wapenwedloop, uiteindelijk is alles te hacken. Waar je voor moet zorgen is dat de hackers zoveel tijd nodig hebben om informatie te ontsluiten of te manipuleren, dat ze er uiteindelijk niets meer mee kunnen.

En vanuit het perspectief van softwareontwikkeling: Dichttimmeren is een illusie, het hacken waardeloos maken de kunst.

Inleiding toetsvraagconstructie

leave a comment »

Met regelmaat organiseren we trainingen toetsvraagconstructie. Onze klanten worden vaak verrast wanneer ze een rapportage over de kwaliteit van hun toetsen krijgen. Met veel toetssoftware is het eenvoudig om een dergelijke rapportage te regelen. Wanneer je de beschikking hebt over digitale toetssoftware en de managementrapportage, kun je je op een eenvoudige manier bezig houden met het verbeteren van toetsvragen. eerder schreef ik al over het gebruik van p-,a- en Rit- waarden en over het gebruik van de PDCA cyclus rondom vraagconstructie. Op het moment dat je een nieuwe toets moet maken heb je natuurlijk niets aan deze rapportages. Waar begin je dan? Dat is precies waar wij onze training ‘Inleiding Toetsvraagconstructie’ beginnen, met de vraag: Wat is van belang wanneer je een toetsvraag moet construeren? Met de deelnemers maken we een mindmap van alle zaken waar je rekening mee moet houden wanneer je een toets(vraag) gaat maken. Verschillende trainingsgroepen hebben nu al een dergelijke mindmap gemaakt. Na afloop van de training sturen we de deelnemers de mindmap toe met de input van eerdere groepen. Het resultaat tot nu toe:

Graag reactie of de deelnemers nog essentiële dingen vergeten zijn!

Written by Manon Bonefaas

10 juni 2012 at 19:03

Trendsverwachting: examinering

with 2 comments

Trendwatchers duo Lieke en Richard Lamb geven hun mening over examinering in de breedste zin. Vooral screen-agers zouden gebruik maken van digitale hulpmiddelen, docenten uit deze generatie zijn met computers opgegroeid. Toch geven ook zij aan dat de overgang naar het digitale tijdperk voor sommige docenten een enorme overgang is. Vergelijk wordt gemaakt met de overstap van vulpen naar balpen (zucht zullen we het ook nog over de ganzenveer hebben). Bij docenten en social media maken de twee zich meer zorgen over het gebrek aan privacy dan de mogelijkheden die social media hebben rondom onderwijs en examinering. In dat kader zie ook deze blogpost over Jelmer Evers als voorbeeld.

Uiteindelijk gaat het toch weer over examinering en hulp bij examens zoals leuke lessen met examentraining op Luzac en WRTS mobile. Jammer dat de trendwatchers alleen dit voorbeeld noemen er zijn er natuurlijk meer. Helaas, nauwelijks informatie laat staan een trendverwachting over examinering, meer een blik op onderwijs in de toekomst. Het duo schetst een beeld van blended learning met veel gebruik van multimedia.

Het beeld van onderwijs als productie leverend instituut: zoveel geslaagden per jaar blijft bestaan. Het toekomstbeeld waarbij leerlingen zich tijd en plaats onafhankelijk ontwikkelen tot zelfstandige burgers en just-in-time examen kunnen doen, komt niet bij hen op. Juist door digitalisering van examens is het mogelijk veel meer maatwerk te leveren aan de verschillende behoeften van examenkandidaten.

%d bloggers liken dit: