際際滷

際際滷Share a Scribd company logo
Summatief toetsenvan grote groepenDrs. Nynke BosDrs. Roel SijstermansOnderwijs & Studentenzaken  ICT & OnderwijsAcademisch Medisch Centrum  Universiteit van Amsterdam
OpbouwMeerwaarde digitaal toetsenSituatie in het AMC- Organisatie- VoorbeeldenDigitaal toetsen vs. papieren toetsenConclusies
Waarom digitaal toetsen?Waarom niet digitaal toetsen?Ik ga digitaal toetsen omdat ik niet achter wil blijvenSnel klaar met nakijkenGeen papierIk hoef alleen maar vragen te maken,  de rest wordt voor me geregeldIk hoef geen handschriften meer te ontcijferenIk wil studenten de toetsresultaten kunnen mailenVerbetering logistiekKwaliteit toetsing staat centraal
Hoe wil je toetsen?SUMMATIEF:Gericht op de som van het geleerdeSelecterenCertificeren Beveiligde omgevingBeperkt aantal kansenFORMATIEF:Gericht op de ontwikkeling van het lerenZelfstudiePlaats & tijdonafhankelijkDirecte feedbackInzicht in niveauIngangstoetsenEindtoetsBonuspuntentoetsZelftoets(E-learning)
Wat levert digitaal toetsen op?Flexibele toetsing (plaats, tijd & vorm)Gebruik van multimediaGebruik van verschillende vraagtypen(Directe) feedbackGestructureerde vragenbankAutomatische analyse & verwerking
Randvoorwaarden digitale toetsingToetssysteemDocenten opleidenOndersteuning (logistiek & techniek) !Studenten voorbereiden
Keuze toetssysteem in 2005/2006Vergelijking toetssystemen, CITO-groep 2004
Trainen secretariaatVragenmakenAdviseringdocentenVragen invoerenInroosterentoetsToetsanalyseSamenstellentoetsToets afnameICTO ondersteuningFeedbackstudentEinduitslagdocentsecretariaatOrganisatie digitale toetsing AMC
Organisatie rondom digitale toetsing2 ICT & Onderwijs adviseurs (medewerker digitale toetsing):Adviseren docent over gebruik vraagtypen & opbouw toetsTrainen secretariaten voor vraaginvoerSamenstellen toetsRoosteren toets & beschikbaar stellen via ELOStandby tijdens toets voor vragen/problemenAnalyse toetsresultaten & einduitslag1 systeembeheerder:Standby tijdens toets voor technische problemenDocent:Vragen bedenkenAanwezig tijdens afname voor inhoudelijke vragenBesluitvorming cesuur op basis van toetsanalyse & uitslagSecretariaat docent:Vragen invoeren
Summatieve toetsen @ AMC10 eindtoetsen (max n=200)30 bonuspuntentoetsen (n=350)50 toetsen in co-schappen (n=12)1 communicatietoets (n=350)25 ingangtoetsen (n=350)
Half cohort - eindtoetsBlok 3D Mens200 studenten in 1 zaalMultimediaalOok essay vragenItem- en toetsanalyseUitslag binnen 3 weken
Summatief digitaal toetsen van grote groepen studenten
Shifts - bonuspuntentoets2x per blok0,5 punt extra350 studenten in 6 shifts15 MC vragen in 15 minutenGevalideerde vragenbankUitslag binnen 24 uurFeedback op onderwerpNabespreking tijdens WC
Summatief digitaal toetsen van grote groepen studenten
Score per onderwerpCollegekaartnummer: 		9705538Diabetes  Type 1			100%Glycolyse 				100%Regulatie enzymen 		0%CZS				50%Aminozuurmetabolisme 		100%Einduitslag 			80%
IngangstoetsenMinimale score van 80% Zo vaak maken als nodigStudent bepaalt waar en wanneerGeen feedback, alleen eindscoreDocent heeft live inzicht in scores studentenStudenten beter voorbereid op practica met blended learning
Maar... schools systeem, gevaar voor toetsmoeheid
Summatief digitaal toetsen van grote groepen studenten
Summatief digitaal toetsen van grote groepen studenten
Toetsen van grote groepenTOETSAFNAME: Voldoende servercapaciteit (testen!)Toets starten in groepen (piekbelasting)5% meer PCs dan deelnemers5% papieren tentamens als reserveDuidelijke afspraken bij problemenPas op met multimedia
Meerwaarde in het AMCMultimediale toetsingKorte nakijk termijnBetere feedback naar studenten en docent-> Grote zaal niet per se noodzakelijk!(maar wel heel makkelijk)
Problemen digitaal toetsen AMCGebrek centrale toetsruimteToetsen in shifts is tijdrovend Verplicht gebruik van open vragenOERGeen beleidDyslexie/RSI?Computervaardigheden student?
Problemen digitaal toetsen AMCGebrek centrale toetsruimteToetsen in shifts is tijdrovend Verplicht gebruik van open vragenOERGeen beleidDyslexie/RSI?Computervaardigheden student?
Toetsen met stemkastjes?Formatief zeker!ResponsiecollegeVoor- en nametingGrootschalig adaptief toetsenSummatief is gevaarlijkWie bedient welk kastje?Ik ben mijn stemkastje kwijt/vergeten!Ik heb echt gedrukt!Handhaven van orde in de zaalLekker gluren bij de buren
Proeve: KlETsEffect toetsing computerScoren studenten beter/ slechter?Gebruiken studenten meer/ minder woorden?Zijn er andere effecten meetbaar?
KlETs  de uitvoeringHelft digitaal  helft op papier (n=360)Digitale toets: deel A papier, deel B digitaal en v.v.Conclusies:Meer woorden bij een digitale toets (36.2賊15.5 vs 22.3賊4.9)Geen significante verschillen m.b.t. moeilijkheidsgraadStudenten willen vaker digitale toetsenGetik is irritant
Meer onderzoekIn 2004: behoorlijke verschillen (Bennett, 2004)Maar in 2002: onderzoek bij 13 jarigen: geen verschil (NAEP, 2004)Presentatie lijkt leeftijdsgebonden en variaties in schrijfvaardigheden zullen verdwijnenFrequent computergebruik heeft positieve invloed op toetsprestatieOnline scoring heeft geen invloed op de beoordeling (zhang, powers, wright & morgan, 2003)
ConclusiesMeerwaarde vaststellen Beleid over inzet digitaal toetsenGrote groepen heeft impact op afnameOpschaling: ruimteToetsen in shifts bewerkelijkGoede ICTO ondersteuning
Nabije toekomstStructurele feedback na tentamenScore per vraagScore per onderwerpTotale score t.o.v. groepResultaten per email Dienstverlening aan studenten

More Related Content

Similar to Summatief digitaal toetsen van grote groepen studenten (20)

Digitaal toetsen als leermoment
Digitaal toetsen als leermomentDigitaal toetsen als leermoment
Digitaal toetsen als leermoment
ingolfvd
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Like to Share
In balans: digitaal toetsen
In balans: digitaal toetsenIn balans: digitaal toetsen
In balans: digitaal toetsen
Kennisnet
Toetsvragen Maken En Digitaal Toetsen Ubvu
Toetsvragen Maken En Digitaal Toetsen UbvuToetsvragen Maken En Digitaal Toetsen Ubvu
Toetsvragen Maken En Digitaal Toetsen Ubvu
Wilma Van Den Brink
110203 toetsanalyse surf workshop summatief toetsen
110203 toetsanalyse surf workshop summatief toetsen110203 toetsanalyse surf workshop summatief toetsen
110203 toetsanalyse surf workshop summatief toetsen
Marcel Penners
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Like to Share
Intakeassessment - Margo Pluijter
Intakeassessment - Margo PluijterIntakeassessment - Margo Pluijter
Intakeassessment - Margo Pluijter
Hogeschool INHolland
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
SURFfoundation
Stemkastjes Filius Ritzen Onderwijsdgn 2008
Stemkastjes Filius Ritzen Onderwijsdgn 2008Stemkastjes Filius Ritzen Onderwijsdgn 2008
Stemkastjes Filius Ritzen Onderwijsdgn 2008
Ren辿e Filius
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Like to Share
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
SURF Events
Robert - Formatief handelen met OLT - Bijeenkomst 1
Robert - Formatief handelen met OLT - Bijeenkomst 1Robert - Formatief handelen met OLT - Bijeenkomst 1
Robert - Formatief handelen met OLT - Bijeenkomst 1
Hogeschool Rotterdam
Webinar: Update normen
Webinar: Update normenWebinar: Update normen
Webinar: Update normen
Cito
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
SURF Events
Education Day Def Loc
Education Day Def LocEducation Day Def Loc
Education Day Def Loc
NHTVBreda
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
SURF Events
Workshop vakschool schoonhoven blended learning introductie
Workshop vakschool schoonhoven blended learning introductieWorkshop vakschool schoonhoven blended learning introductie
Workshop vakschool schoonhoven blended learning introductie
WilfredRubens.com
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Studiekeuzeconferentie
Visie op onderwijs is visie op toetsing
Visie op onderwijs is visie op toetsingVisie op onderwijs is visie op toetsing
Visie op onderwijs is visie op toetsing
Ronald F. Nobel
Digitaal toetsen als leermoment
Digitaal toetsen als leermomentDigitaal toetsen als leermoment
Digitaal toetsen als leermoment
ingolfvd
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Presentatie Toets Digitaal: Digitaal Toetsen in Balans PO (Kennisnet)
Like to Share
In balans: digitaal toetsen
In balans: digitaal toetsenIn balans: digitaal toetsen
In balans: digitaal toetsen
Kennisnet
Toetsvragen Maken En Digitaal Toetsen Ubvu
Toetsvragen Maken En Digitaal Toetsen UbvuToetsvragen Maken En Digitaal Toetsen Ubvu
Toetsvragen Maken En Digitaal Toetsen Ubvu
Wilma Van Den Brink
110203 toetsanalyse surf workshop summatief toetsen
110203 toetsanalyse surf workshop summatief toetsen110203 toetsanalyse surf workshop summatief toetsen
110203 toetsanalyse surf workshop summatief toetsen
Marcel Penners
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Presentatie Toets Digitaal: Voor- en nadelen van digitaal toetsen in het PO (...
Like to Share
Intakeassessment - Margo Pluijter
Intakeassessment - Margo PluijterIntakeassessment - Margo Pluijter
Intakeassessment - Margo Pluijter
Hogeschool INHolland
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
212 De Meerwaarde Van Ict En Studiekeuzegesprekken, Ad Scheepers
SURFfoundation
Stemkastjes Filius Ritzen Onderwijsdgn 2008
Stemkastjes Filius Ritzen Onderwijsdgn 2008Stemkastjes Filius Ritzen Onderwijsdgn 2008
Stemkastjes Filius Ritzen Onderwijsdgn 2008
Ren辿e Filius
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Toets Digitaal: Visie, eigenaarschap en gedeelde praktijken om digitaal toets...
Like to Share
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
Aspecten van learning analytics bij een digitale leeromgeving - Andr辿 Heck - ...
SURF Events
Robert - Formatief handelen met OLT - Bijeenkomst 1
Robert - Formatief handelen met OLT - Bijeenkomst 1Robert - Formatief handelen met OLT - Bijeenkomst 1
Robert - Formatief handelen met OLT - Bijeenkomst 1
Hogeschool Rotterdam
Webinar: Update normen
Webinar: Update normenWebinar: Update normen
Webinar: Update normen
Cito
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
OWD2012 - 3 - Learning analytics en formatieve toetsing - Wiskunde leren in d...
SURF Events
Education Day Def Loc
Education Day Def LocEducation Day Def Loc
Education Day Def Loc
NHTVBreda
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
Hoe te toetsen op afstand - Marjoleine Dobbelaer en Sharon Klinkenberg (Versn...
SURF Events
Workshop vakschool schoonhoven blended learning introductie
Workshop vakschool schoonhoven blended learning introductieWorkshop vakschool schoonhoven blended learning introductie
Workshop vakschool schoonhoven blended learning introductie
WilfredRubens.com
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Wat levert de studiekeuzecheck op? - Rutger Kappe - SKConf2014
Studiekeuzeconferentie
Visie op onderwijs is visie op toetsing
Visie op onderwijs is visie op toetsingVisie op onderwijs is visie op toetsing
Visie op onderwijs is visie op toetsing
Ronald F. Nobel

More from Nynke Bos (13)

Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultatenHet gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Nynke Bos
Learning Analytics for Educational Design and Student Predictions: Beyond the...
Learning Analytics for Educational Design and Student Predictions: Beyond the...Learning Analytics for Educational Design and Student Predictions: Beyond the...
Learning Analytics for Educational Design and Student Predictions: Beyond the...
Nynke Bos
Dragen webcolleges bij aan beter studierendement?
Dragen webcolleges bij aan beter studierendement?Dragen webcolleges bij aan beter studierendement?
Dragen webcolleges bij aan beter studierendement?
Nynke Bos
Nynke bos13032013sig weblectures
Nynke bos13032013sig weblecturesNynke bos13032013sig weblectures
Nynke bos13032013sig weblectures
Nynke Bos
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Nynke Bos
Improving clinical reasoning skills by means of electronic voting
Improving clinical reasoning skills by means of electronic votingImproving clinical reasoning skills by means of electronic voting
Improving clinical reasoning skills by means of electronic voting
Nynke Bos
Draadloos stemmen tijdens college: hoe en waarom?
Draadloos stemmen tijdens college: hoe en waarom?Draadloos stemmen tijdens college: hoe en waarom?
Draadloos stemmen tijdens college: hoe en waarom?
Nynke Bos
Didactic issues on using Audience Reponse Systems in eduation.
Didactic issues on using Audience Reponse Systems in eduation.Didactic issues on using Audience Reponse Systems in eduation.
Didactic issues on using Audience Reponse Systems in eduation.
Nynke Bos
Leipe Shit Ouwe! Onderwijs of student centraal
Leipe Shit Ouwe! Onderwijs of student centraalLeipe Shit Ouwe! Onderwijs of student centraal
Leipe Shit Ouwe! Onderwijs of student centraal
Nynke Bos
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Nynke Bos
Improving clinical reasoning skills by electronic voting
Improving clinical reasoning skills by electronic votingImproving clinical reasoning skills by electronic voting
Improving clinical reasoning skills by electronic voting
Nynke Bos
Didactic issues on using Audience Response Systems in education
Didactic issues on using Audience Response Systems in educationDidactic issues on using Audience Response Systems in education
Didactic issues on using Audience Response Systems in education
Nynke Bos
Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultatenHet gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Het gebruik van webcolleges en de invloed op collegebezoek en tentamenresultaten
Nynke Bos
Learning Analytics for Educational Design and Student Predictions: Beyond the...
Learning Analytics for Educational Design and Student Predictions: Beyond the...Learning Analytics for Educational Design and Student Predictions: Beyond the...
Learning Analytics for Educational Design and Student Predictions: Beyond the...
Nynke Bos
Dragen webcolleges bij aan beter studierendement?
Dragen webcolleges bij aan beter studierendement?Dragen webcolleges bij aan beter studierendement?
Dragen webcolleges bij aan beter studierendement?
Nynke Bos
Nynke bos13032013sig weblectures
Nynke bos13032013sig weblecturesNynke bos13032013sig weblectures
Nynke bos13032013sig weblectures
Nynke Bos
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Webcolleges Geneeskunde AMC/UvA: blijft de collegezaal leeg?
Nynke Bos
Improving clinical reasoning skills by means of electronic voting
Improving clinical reasoning skills by means of electronic votingImproving clinical reasoning skills by means of electronic voting
Improving clinical reasoning skills by means of electronic voting
Nynke Bos
Draadloos stemmen tijdens college: hoe en waarom?
Draadloos stemmen tijdens college: hoe en waarom?Draadloos stemmen tijdens college: hoe en waarom?
Draadloos stemmen tijdens college: hoe en waarom?
Nynke Bos
Didactic issues on using Audience Reponse Systems in eduation.
Didactic issues on using Audience Reponse Systems in eduation.Didactic issues on using Audience Reponse Systems in eduation.
Didactic issues on using Audience Reponse Systems in eduation.
Nynke Bos
Leipe Shit Ouwe! Onderwijs of student centraal
Leipe Shit Ouwe! Onderwijs of student centraalLeipe Shit Ouwe! Onderwijs of student centraal
Leipe Shit Ouwe! Onderwijs of student centraal
Nynke Bos
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Lunchbijeenkomst Onderwijs & Studentenzaken: wat doet ICT&O?
Nynke Bos
Improving clinical reasoning skills by electronic voting
Improving clinical reasoning skills by electronic votingImproving clinical reasoning skills by electronic voting
Improving clinical reasoning skills by electronic voting
Nynke Bos
Didactic issues on using Audience Response Systems in education
Didactic issues on using Audience Response Systems in educationDidactic issues on using Audience Response Systems in education
Didactic issues on using Audience Response Systems in education
Nynke Bos

Recently uploaded (16)

Meander | Biodiversiteit | Breng de natuur in de stad
Meander | Biodiversiteit | Breng de natuur in de stadMeander | Biodiversiteit | Breng de natuur in de stad
Meander | Biodiversiteit | Breng de natuur in de stad
Tanja Nolten
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
shidqipurwin
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
graidijonuz
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Tanja Nolten
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Tanja Nolten
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
WilfredRubens.com
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
hebcaylie35
Test Bank for Fundamentals of Management 11th Edition by Robbins
Test Bank for Fundamentals of Management 11th Edition by RobbinsTest Bank for Fundamentals of Management 11th Edition by Robbins
Test Bank for Fundamentals of Management 11th Edition by Robbins
discusmhmmad
Services Marketing: Integrating Customer Focus Across the Firm Third European...
Services Marketing: Integrating Customer Focus Across the Firm Third European...Services Marketing: Integrating Customer Focus Across the Firm Third European...
Services Marketing: Integrating Customer Focus Across the Firm Third European...
zaipahphu82
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
gulmegitu
de heksen van Aspelare en Nederhasselt .
de heksen van Aspelare en Nederhasselt .de heksen van Aspelare en Nederhasselt .
de heksen van Aspelare en Nederhasselt .
JaimeLavid
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
camdoobiang
Design of Fluid Thermal Systems 4th Edition Janna Solutions Manual
Design of Fluid Thermal Systems 4th Edition Janna Solutions ManualDesign of Fluid Thermal Systems 4th Edition Janna Solutions Manual
Design of Fluid Thermal Systems 4th Edition Janna Solutions Manual
thabsyberber
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
mucsdzeka
Test Bank for Government in America: People, Politics, and Policy, 17th Edition
Test Bank for Government in America: People, Politics, and Policy, 17th EditionTest Bank for Government in America: People, Politics, and Policy, 17th Edition
Test Bank for Government in America: People, Politics, and Policy, 17th Edition
birteaaguena
Introduction to Psychology Version 3 0 3rd Stangor Solution Manual
Introduction to Psychology Version 3 0 3rd Stangor Solution ManualIntroduction to Psychology Version 3 0 3rd Stangor Solution Manual
Introduction to Psychology Version 3 0 3rd Stangor Solution Manual
godlykanani
Meander | Biodiversiteit | Breng de natuur in de stad
Meander | Biodiversiteit | Breng de natuur in de stadMeander | Biodiversiteit | Breng de natuur in de stad
Meander | Biodiversiteit | Breng de natuur in de stad
Tanja Nolten
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
Advances in Food and Nutrition Research Vol 59 1st Edition Steve L. Taylor (Ed.)
shidqipurwin
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
(eBook PDF) Starting Out with C++: From Control Structures through Objects 8t...
graidijonuz
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Presentatie Breman 'Optimale toekomstgerichte energiesystemen & circulaire in...
Tanja Nolten
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Presentatie Climate CleanupWorkshop | Hoe groen is jouw project?
Tanja Nolten
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
250221 (WR) v1 Lunchsessie Noordhoff trends digitale technologie en leren.pdf
WilfredRubens.com
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
Philosophers Way Thinking Critically About Profound Ideas 5th Edition Chaffee...
hebcaylie35
Test Bank for Fundamentals of Management 11th Edition by Robbins
Test Bank for Fundamentals of Management 11th Edition by RobbinsTest Bank for Fundamentals of Management 11th Edition by Robbins
Test Bank for Fundamentals of Management 11th Edition by Robbins
discusmhmmad
Services Marketing: Integrating Customer Focus Across the Firm Third European...
Services Marketing: Integrating Customer Focus Across the Firm Third European...Services Marketing: Integrating Customer Focus Across the Firm Third European...
Services Marketing: Integrating Customer Focus Across the Firm Third European...
zaipahphu82
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
The Lecturer s Toolkit A practical guide to assessment learning and teaching ...
gulmegitu
de heksen van Aspelare en Nederhasselt .
de heksen van Aspelare en Nederhasselt .de heksen van Aspelare en Nederhasselt .
de heksen van Aspelare en Nederhasselt .
JaimeLavid
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
Peridynamic Modeling, Numerical Techniques, and Applications 1st edition - eB...
camdoobiang
Design of Fluid Thermal Systems 4th Edition Janna Solutions Manual
Design of Fluid Thermal Systems 4th Edition Janna Solutions ManualDesign of Fluid Thermal Systems 4th Edition Janna Solutions Manual
Design of Fluid Thermal Systems 4th Edition Janna Solutions Manual
thabsyberber
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
(eBook PDF) Health Promotion Programs: From Theory to Practice 2nd Edition
mucsdzeka
Test Bank for Government in America: People, Politics, and Policy, 17th Edition
Test Bank for Government in America: People, Politics, and Policy, 17th EditionTest Bank for Government in America: People, Politics, and Policy, 17th Edition
Test Bank for Government in America: People, Politics, and Policy, 17th Edition
birteaaguena
Introduction to Psychology Version 3 0 3rd Stangor Solution Manual
Introduction to Psychology Version 3 0 3rd Stangor Solution ManualIntroduction to Psychology Version 3 0 3rd Stangor Solution Manual
Introduction to Psychology Version 3 0 3rd Stangor Solution Manual
godlykanani

Summatief digitaal toetsen van grote groepen studenten

  • 1. Summatief toetsenvan grote groepenDrs. Nynke BosDrs. Roel SijstermansOnderwijs & Studentenzaken ICT & OnderwijsAcademisch Medisch Centrum Universiteit van Amsterdam
  • 2. OpbouwMeerwaarde digitaal toetsenSituatie in het AMC- Organisatie- VoorbeeldenDigitaal toetsen vs. papieren toetsenConclusies
  • 3. Waarom digitaal toetsen?Waarom niet digitaal toetsen?Ik ga digitaal toetsen omdat ik niet achter wil blijvenSnel klaar met nakijkenGeen papierIk hoef alleen maar vragen te maken, de rest wordt voor me geregeldIk hoef geen handschriften meer te ontcijferenIk wil studenten de toetsresultaten kunnen mailenVerbetering logistiekKwaliteit toetsing staat centraal
  • 4. Hoe wil je toetsen?SUMMATIEF:Gericht op de som van het geleerdeSelecterenCertificeren Beveiligde omgevingBeperkt aantal kansenFORMATIEF:Gericht op de ontwikkeling van het lerenZelfstudiePlaats & tijdonafhankelijkDirecte feedbackInzicht in niveauIngangstoetsenEindtoetsBonuspuntentoetsZelftoets(E-learning)
  • 5. Wat levert digitaal toetsen op?Flexibele toetsing (plaats, tijd & vorm)Gebruik van multimediaGebruik van verschillende vraagtypen(Directe) feedbackGestructureerde vragenbankAutomatische analyse & verwerking
  • 6. Randvoorwaarden digitale toetsingToetssysteemDocenten opleidenOndersteuning (logistiek & techniek) !Studenten voorbereiden
  • 7. Keuze toetssysteem in 2005/2006Vergelijking toetssystemen, CITO-groep 2004
  • 8. Trainen secretariaatVragenmakenAdviseringdocentenVragen invoerenInroosterentoetsToetsanalyseSamenstellentoetsToets afnameICTO ondersteuningFeedbackstudentEinduitslagdocentsecretariaatOrganisatie digitale toetsing AMC
  • 9. Organisatie rondom digitale toetsing2 ICT & Onderwijs adviseurs (medewerker digitale toetsing):Adviseren docent over gebruik vraagtypen & opbouw toetsTrainen secretariaten voor vraaginvoerSamenstellen toetsRoosteren toets & beschikbaar stellen via ELOStandby tijdens toets voor vragen/problemenAnalyse toetsresultaten & einduitslag1 systeembeheerder:Standby tijdens toets voor technische problemenDocent:Vragen bedenkenAanwezig tijdens afname voor inhoudelijke vragenBesluitvorming cesuur op basis van toetsanalyse & uitslagSecretariaat docent:Vragen invoeren
  • 10. Summatieve toetsen @ AMC10 eindtoetsen (max n=200)30 bonuspuntentoetsen (n=350)50 toetsen in co-schappen (n=12)1 communicatietoets (n=350)25 ingangtoetsen (n=350)
  • 11. Half cohort - eindtoetsBlok 3D Mens200 studenten in 1 zaalMultimediaalOok essay vragenItem- en toetsanalyseUitslag binnen 3 weken
  • 13. Shifts - bonuspuntentoets2x per blok0,5 punt extra350 studenten in 6 shifts15 MC vragen in 15 minutenGevalideerde vragenbankUitslag binnen 24 uurFeedback op onderwerpNabespreking tijdens WC
  • 15. Score per onderwerpCollegekaartnummer: 9705538Diabetes Type 1 100%Glycolyse 100%Regulatie enzymen 0%CZS 50%Aminozuurmetabolisme 100%Einduitslag 80%
  • 16. IngangstoetsenMinimale score van 80% Zo vaak maken als nodigStudent bepaalt waar en wanneerGeen feedback, alleen eindscoreDocent heeft live inzicht in scores studentenStudenten beter voorbereid op practica met blended learning
  • 17. Maar... schools systeem, gevaar voor toetsmoeheid
  • 20. Toetsen van grote groepenTOETSAFNAME: Voldoende servercapaciteit (testen!)Toets starten in groepen (piekbelasting)5% meer PCs dan deelnemers5% papieren tentamens als reserveDuidelijke afspraken bij problemenPas op met multimedia
  • 21. Meerwaarde in het AMCMultimediale toetsingKorte nakijk termijnBetere feedback naar studenten en docent-> Grote zaal niet per se noodzakelijk!(maar wel heel makkelijk)
  • 22. Problemen digitaal toetsen AMCGebrek centrale toetsruimteToetsen in shifts is tijdrovend Verplicht gebruik van open vragenOERGeen beleidDyslexie/RSI?Computervaardigheden student?
  • 23. Problemen digitaal toetsen AMCGebrek centrale toetsruimteToetsen in shifts is tijdrovend Verplicht gebruik van open vragenOERGeen beleidDyslexie/RSI?Computervaardigheden student?
  • 24. Toetsen met stemkastjes?Formatief zeker!ResponsiecollegeVoor- en nametingGrootschalig adaptief toetsenSummatief is gevaarlijkWie bedient welk kastje?Ik ben mijn stemkastje kwijt/vergeten!Ik heb echt gedrukt!Handhaven van orde in de zaalLekker gluren bij de buren
  • 25. Proeve: KlETsEffect toetsing computerScoren studenten beter/ slechter?Gebruiken studenten meer/ minder woorden?Zijn er andere effecten meetbaar?
  • 26. KlETs de uitvoeringHelft digitaal helft op papier (n=360)Digitale toets: deel A papier, deel B digitaal en v.v.Conclusies:Meer woorden bij een digitale toets (36.2賊15.5 vs 22.3賊4.9)Geen significante verschillen m.b.t. moeilijkheidsgraadStudenten willen vaker digitale toetsenGetik is irritant
  • 27. Meer onderzoekIn 2004: behoorlijke verschillen (Bennett, 2004)Maar in 2002: onderzoek bij 13 jarigen: geen verschil (NAEP, 2004)Presentatie lijkt leeftijdsgebonden en variaties in schrijfvaardigheden zullen verdwijnenFrequent computergebruik heeft positieve invloed op toetsprestatieOnline scoring heeft geen invloed op de beoordeling (zhang, powers, wright & morgan, 2003)
  • 28. ConclusiesMeerwaarde vaststellen Beleid over inzet digitaal toetsenGrote groepen heeft impact op afnameOpschaling: ruimteToetsen in shifts bewerkelijkGoede ICTO ondersteuning
  • 29. Nabije toekomstStructurele feedback na tentamenScore per vraagScore per onderwerpTotale score t.o.v. groepResultaten per email Dienstverlening aan studenten
  • 30. Docenten ontlasten met inzageVragen?Meer informatie: icto@amc.uva.nl