HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael...
-
Upload
truongthien -
Category
Documents
-
view
216 -
download
0
Transcript of HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael...
![Page 1: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/1.jpg)
HIS Workshop “Elektronische Prüfungen”
5./6. November 2008
Neue Wege in der PrüfungskulturCornelia Ruedel
E-Learning Center, Universität Zürichhttp://www.elc.uzh.ch
![Page 2: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/2.jpg)
03.11.2008 / 2
Agenda:
• Aktuelle Prüfungsalltag
• Probleme mit den konventionellen Prüfungen
• Anforderungen an das neue Prüfungssystem
• E-Assessment Kreislauf
• Überblick über Innovationsfelder mit Beispiele
• Fragen
![Page 3: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/3.jpg)
03.11.2008 / 3
Alltag an der Universität
Aktuelle Prüfungssituation
an der Universität Zürich
• vermehrtes Prüfungs-aufkommen durchdie Bologna Reform
• Prüfungsdurchführungund -auswertung ist einegrosse Personalbelastung
Universitärer Dreikampf: Prüfung, Hausarbeit, Referat
![Page 4: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/4.jpg)
03.11.2008 / 4
Probleme mit
konventionellen Prüfungen
Schriftlich:
fragliche Validität und Reliabilität,
zeitaufwendige Korrektur,
Problem: Handschrift
Mündlich:
fragliche Validität,Reliabilitätund Fairness,jeder Prüfling hat andere BedingungenZeitaufwendige Durchführung
![Page 5: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/5.jpg)
03.11.2008 / 5
Universitäres Assessment:Gegensätzliche Vorstellungenvon Studium und Lehre
Perspektive der
Dozierenden
Perspektive der
Studierenden
Welche Lehrinhalte sollen
vermittelt werden?
Was und wie sollen die
Studierenden lernen?
Was sind die Lerninhalte?
Folie (verändert) von Gabi Reinmann: Blended Assessment, Vortrag bei e-teaching.org am 10. Dez. 2008
Leistungsnachweis als
Ausgangspunkt und
wichtiges «Herzstück»
Welche Lehr-Lernkonzeption
sind geeignet?
Wie kann das Lernziele bewertet
werden?
Leistungsnachweis als
Endpunkt und
lästiges «Anhängsel»!
Was sind die Prüfungskriterien?
Was muss ich wissen?
Wie kann ich am Ziele am
effektives erreichen?
Minimal- oder Maximalprinzip
Unterschiedliche
Erwartungen
![Page 6: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/6.jpg)
03.11.2008 / 6
The Higher Education AcademyMaclellan (2002): Perceptions of
Assessment
![Page 7: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/7.jpg)
Anforderungen an ein neues
Prüfungssystem
+ mehr Vielfalt in der Prüfungsform
+ mehr Feedback für die Studierenden
+ weniger Zeitaufwand für Dozierende
= ist das möglich?
Quelle: http://edorigami.edublogs.org/2008/07/17/21st-century-assessment-2/
E-Assessment als Chance
![Page 8: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/8.jpg)
03.11.2008 / 8
Trends in E-Assessment
1991 - Verminderung der Prüfungskorrekturen (summativ)
1996 - Verbessertes Feedback an die Studierenden (formativ)
2001 - Einbau von Lösungshinweisen im Feedback (formativ und summativ)
2006 - Verminderung des Aufwand bei der Fragenerstellung (formativ und summativ)
Folie (verändert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, Aug. 2008, ENAC Potsdam
![Page 9: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/9.jpg)
03.11.2008 / 9
Zukunftsfelder
«E-Assessment»
![Page 10: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/10.jpg)
03.11.2008 / 10
E-Assessment Kreislauf
![Page 11: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/11.jpg)
03.11.2008 / 11
Vorbereitung Durchführung Auswertung Ergebnisse
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Zukunftsfelder
E-Assessment
![Page 12: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/12.jpg)
03.11.2008 / 12
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 13: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/13.jpg)
03.11.2008 / 13
Vorbereitung: Kompetenz
Was wird geprüft?
• Sachkompetenz
• Methodenkompetenz
• Sozialkompetenz
• Selbstkompetenz
Projekte:
• Bewertung der Reflektion mittels Diskussionsforum ander University of Leicester
• Online-Mikroskope der University of Derby
• Open Comment der Open University
![Page 14: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/14.jpg)
03.11.2008 / 14
Vorbereitung: Kompetenz:
University of Derby: Mikroskope
für Cambridge University
Screenshots von Bioscope entwickelt von der University of Derby mit TRIADS für Cambridge Assessment
![Page 15: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/15.jpg)
03.11.2008 / 15
Vorbereitung: Kompetenz:
University of Derby: Mikroskope
für Cambridge University
Screenshots von Bioscope entwickelt von der University of Derby mit TRIADS für Cambridge Assessment
![Page 16: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/16.jpg)
03.11.2008 / 16
Vorbereitung: Kompetenz:
University of Derby: Mikroskope
für Cambridge University
Screenshots von Bioscope entwickelt von der University of Derby mit TRIADS für Cambridge Assessment
![Page 17: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/17.jpg)
03.11.2008 / 17
Vorbereitung: Kompetenz:
Open University: Open Comment
![Page 18: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/18.jpg)
03.11.2008 / 18
Vorbereitung: Kompetenz:
Open University: Open Comment
![Page 19: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/19.jpg)
03.11.2008 / 19
Vorbereitung: Kompetenz:
Open University: Open Comment
![Page 20: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/20.jpg)
03.11.2008 / 20
Vorbereitung: Kompetenz:
Open University: Open Comment
![Page 21: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/21.jpg)
03.11.2008 / 21
Literaturhinweis
Diskussionsforum
Lee, R (2005) Using asynchronous discussion to support initial teacher education aboutEnglish as anadditional language in NALDIC Quarterly, 3.2(http://www.naldic.org.uk/ITTSEAL2/ite/Asynchronousdiscussion.cfm)
Salmon, G. (2000) E-moderating - the key to teaching and learning online. Kogan Page London
Open Comment
Project from the Open University led by Dr. Denise Whitelock (mehr Informationen:http://kn.open.ac.uk/public/workspace.cfm?wpid=8194)
Online Microscope
Maughan, S. and Mackenzie, D.M. (2004) Bioscope: The Assessment of Process andOutcomes using the TRIAD System. IN: Proceedings of the 8th CAA Conference,Loughborough: Loughborough University, UK(http://www.caaconference.com/pastConferences/2004/proceedings/Maughan_Mackenzie.pdf)
Mackenzie, D.M., OユHare,D., Paul,C., Boyle,A., Edwards, D., Williams,D. & Wilkins, H. (2004)Assessment for Learning: the TRIADS Assessment of Learning Outcomes Project and thedevelopment of a pedagogically friendly computer based assessment system, p.22. In OユHare,D & Mackenzie, D.M. (Eds) Advances in Computer Aided Assessment, SEDA Paper 116pp11-24. Staff and Educational Development Association Ltd., Birmingham.
![Page 22: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/22.jpg)
03.11.2008 / 22
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 23: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/23.jpg)
03.11.2008 / 23
Vorbereitung: Funktion
Wie wird geprüft?
• Beispiel:• Adaptive testing: PTO Online (http://www.pto.uzh.ch/)
E-Assessment
Steuerung
SelektionLeistungs-
bewertung
Lernlenkung
form
ativ
summativ
diagnostisch
adaptiv
![Page 24: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/24.jpg)
03.11.2008 / 24
Vorbereitung: Funktion
Universität Zürich: PTO
Psychopathology Taught Online
http://www.pto.uzh.ch/
![Page 25: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/25.jpg)
03.11.2008 / 25
Vorbereitung: Funktion
Universität Zürich: PTO
Psychopathology Taught Online
http://www.pto.uzh.ch/
![Page 26: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/26.jpg)
03.11.2008 / 26
Vorbereitung: Funktion
Universität Zürich: PTO
Psychopathology Taught Online
http://www.pto.uzh.ch/
![Page 27: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/27.jpg)
03.11.2008 / 27
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 28: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/28.jpg)
03.11.2008 / 28
Vorbereitung: Format
Welche Prüfungsform wird verwendet?
• Klassische Formen (Offene Fragen)• E-Assessment (geschlossene + halboffene Fragen)• Neue Formen
• E-Portfolio• Neue Web 2.0 Formen (Wiki, Blog, Podcast)• Rollenspiele, Simulationen
Beispiele für Digital Storytelling on YouTube• Did you know: http://www.youtube.com/watch?v=K04o2ic4g-A• Pay attention:
http://www.youtube.com/watch?v=gT2E2F0DmyE&feature=related
![Page 29: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/29.jpg)
03.11.2008 / 29
Literaturhinweis
Digital Storytelling
• Alexander, B. and Levine, A (2008) Web 2.0 Storytelling:Emergence of a New Genre(http://connect.educause.edu/Library/EDUCAUSE+Review/Web20StorytellingEmergenc/47444)
• 7 Things you hould know about ... Digital Storytelling,Educause Learning Initiative(http://www.educause.edu/ir/library/pdf/ELI7021.pdf)
![Page 30: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/30.jpg)
03.11.2008 / 30
Vorbereitung: Format
Universität Zürich:
Rechtswissenschaften
Interaktives Rollenspiel
![Page 31: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/31.jpg)
03.11.2008 / 31
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 32: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/32.jpg)
03.11.2008 / 32
Vorbereitung: PrüferIn -
Authorithy
Wer bewertet?
• Self Assessment• Peer Assessment• Group Assessment• Teacher Assessment
Beispiele Peer Assessment:
• WEBPA (Loughborough University)http://www.webpaproject.com/
• University of Dundeehttp://www.dundee.ac.uk/learning/centre/ilt/selfpeer.htm
• University of Glamorgan(http://www.comp.glam.ac.uk/staff/pdavies/CAA%202008/phil_davies_2008.doc )
![Page 33: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/33.jpg)
03.11.2008 / 33
Vorbereitung: PrüferIn
Loughborough University:
Peer Assessment: WebPA
![Page 34: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/34.jpg)
03.11.2008 / 34
Vorbereitung: PrüferIn
Loughborough University:
Peer Assessment: WebPA
![Page 35: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/35.jpg)
03.11.2008 / 35
Vorbereitung: PrüferIn
University of Glamorgan:
First Stage => Self Assess own Work
Second Stage (button on server) => Peer Assess 6 Essays
Comments – BothPositive and Negative
in the variouscategories. Provides aSubjective Framework
for Commenting &Marking
![Page 36: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/36.jpg)
03.11.2008 / 36
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 37: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/37.jpg)
03.11.2008 / 37
Durchführung: Prüfungsort
Wo wird «assessed»?
• On-campus vs. off-campus
• Supervised vs. unsupervisored
• Static vs. mobile
Beispiele:
• Classroom-based Mobile Voting Systems
• Mobile Assessment mit PDA/Mobiles
![Page 38: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/38.jpg)
03.11.2008 / 38
Durchführung: Prüfungsort
West Suffolk College
• Innovativer Einsatz von E-Portfolios in der Aus- und Weiterbildung von Köchen
• Mobile Sammeln von Arbeitsproben
• Software von Paperfree Systems Ltd
![Page 39: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/39.jpg)
03.11.2008 / 39
Durchführung: Prüfungsort
Mobile Assessment
M-learning:Tribal CTAD
M-Learning bietet Software andie für PDAs, Mobile Phones,Pocket PC‘s und das Internetgenutzt werden können
Anwender sind u.a.:•Healty for Life (Birmingham Core SkillsPartnership and Birmingham TeenagePregnancy Project)
•Maths4Life (finanziert von UK-Government Department for Children,Schools and Families)
• Link:http://www.m-learning.org/
![Page 40: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/40.jpg)
03.11.2008 / 40
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 41: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/41.jpg)
03.11.2008 / 41
Durchführung: Prüfungszeitraum
Wo wird «assessed»?
•Continuous vs einmal
Beispiel:
• Mikrobiologie Universität Zürich Vortrag von Dr. Kurt Hanselmann am 6. Mai 2008 zum Thema: „E-Assessment in den Naturwissenschaften“(http://www.elc.uzh.ch/veranstaltungen/elforum.html)
![Page 42: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/42.jpg)
03.11.2008 / 42
Prüfungsvielfalt:
• Self-Testing (20%) 10 Frageblöcke a 10 Fragen
+ Self-Study: Key Word Search (10%)
+ Self-Study: Case Study (20%)
+ E-Prüfung (20%)
+ E-Prüfung (20%)
+ Extra Credits (bis 5%) für Einreichen zukünftiger Prüfungsfragen
Durchführung: Prüfungszeitraum
Universität Zürich:
Microbiology Dr. Kurt Hanselmann
OpenBook
![Page 43: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/43.jpg)
03.11.2008 / 43
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 44: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/44.jpg)
03.11.2008 / 44
Auswertung: Bewertung
Wie wird bewertet?
• Manuell vs. automatisch• Traditionell vs. innovative• Confidence-based marking
Beispiele:
• Certainty-Based Marking @ University College LondonTony Gardner-Medwin
• Confidence-Based Marking @ University of GlamorganPhil Davies
• Confidence-Based Marking @ TU Graz
![Page 45: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/45.jpg)
03.11.2008 / 45
Literaturhinweis
• Certainty-Based Marking @ University College LondonTony Gardner-Medwin (http://www.ucl.ac.uk/~ucgbarg/pubteach.htm)Gardner-Medwin AR (2006) Confidence-Based Marking - towardsdeeper learning and better exams In : Innovative Assessment inHigher Education. Ed.: Bryan C and Clegg K. Routledge, Taylor andFrancis Group, London (http://www.ucl.ac.uk/lapt/innovass6.doc)
• Confidence-Based Marking @ University of GlamorganPhil Davies (http://www.comp.glam.ac.uk/staff/pdavies/caa.htm)Davies, P (2005) The Continual Assessment of Confidence orKnowledge with Hidden MCQ?, IN: Proceedings of the 9thInternational CAA Conference.(http://www.caaconference.com/pastConferences/2005/proceedings/DaviesP1.pdf)
• Verwendung von Bewertungsrastern (Rubrics)House of E-Learning - Prüfungsraum Linkliste:(http://www.elc.uzh.ch/elgrundlagen/kursentwicklung/pruefungsraum/rubrics.html)
![Page 46: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/46.jpg)
03.11.2008 / 46
Auswertung: Bewertung
Confidence / Certainity Based
Marking
• Anwendung an University College London (Medizin) und University of Glamorgan (IT) und neu bei der TU Graz (IT)• Ansatzpunkt: Kritik an MC-Fragen - Ratefaktor• Studierende müssen anzeigen wie «confident» sie bei der Beantwortung sind
Confidence-Based Marking
01Low(c=1)
-22Mid(c=2)
-63High(c=3)
wrongRightcertainty
01not
-12fairly
-24very
wrongRightconfidence
University College London
Bewertungsskala
Glamorgan
![Page 47: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/47.jpg)
03.11.2008 / 47
Auswertung: Bewertung
University College London:
Tony Gardner-Medwin (Medizin)
![Page 48: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/48.jpg)
03.11.2008 / 48
Auswertung: Bewertung
University of Glamorgan:
Phil Davies (IT)
![Page 49: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/49.jpg)
03.11.2008 / 49
Auswertung: Bewertung
University of Glamorgan
Rubrics für Peer Assessment
![Page 50: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/50.jpg)
03.11.2008 / 50
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 51: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/51.jpg)
03.11.2008 / 51
Ergebnisse: Feedback
Welches Feedback bekommen die Studierenden?
• Mündlich vs. schriftlich
• Prüfung vs. Frage
Schriftliche Feedback-Variationen
Bestanden/Nicht-Bestanden
+ Gesamtnote
++ Note/Prozent nach Themenschwerpunkt
+++ Aufgeschlüsselt nach Fragen
++++ Ausführliche Kommentar
+++++ mit Lernhinweisen
![Page 52: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/52.jpg)
03.11.2008 / 52
Literaturhinweise
• REAP - (http://www.reap.ac.uk/)Nicol, D.J. & Macfarlane-Dick, D. (2006). Formative assessment andself-regulated learning: A model and seven principles of goodfeedback practice. Studies in Higher Education, 31(2), 199-218(http://www.reap.ac.uk/public/Papers/DN_SHE_Final.pdf)
• FAST- (http://www.open.ac.uk/fast/)Gibbs, G. & Simpson, C. (2004-5) Conditions under which assessmentsupports students' learning. Learning and Teaching in HigherEducation, 1 (1), 3-31.(http://www.open.ac.uk/fast/pdfs/Gibbs%20and%20Simpson%202004-05.pdf)
• OpenMark - E-Assessment System using von der Open University inMoodle (http://www.open.ac.uk/openmarkexamples/) und(http://labspace.open.ac.uk/course/view.php?id=3484)
![Page 53: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/53.jpg)
03.11.2008 / 53
Ergebnisse: Feedback
Open University: OpenMark
![Page 54: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/54.jpg)
03.11.2008 / 54
Ergebnisse: Feedback
Open University: OpenMark
![Page 55: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/55.jpg)
03.11.2008 / 55
Ergebnisse: Feedback
Open University: OpenMark
![Page 56: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/56.jpg)
03.11.2008 / 56
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 57: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/57.jpg)
03.11.2008 / 57
Staff Development
Wie werden die Dozierenden
unterstützt?
• Kurse
• Tools
Beispiele
• OpenMentor (Open University)
• Online Kurse(University of Dundee & Leeds Metropolitan University)
![Page 58: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/58.jpg)
03.11.2008 / 58
Staff Development
Widgets: Open Mentor
![Page 59: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/59.jpg)
03.11.2008 / 59
Weiterbildung Kurs
Napier University &
Leeds Metroplitan University
Surf‘s UpStudent Assessment using Rich
Feedback
University of Dundee
Assessment Online - 6-wöchiger Kurs zum Thema E-Assessment mit Questionmark Perception
![Page 60: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/60.jpg)
03.11.2008 / 60
Format
Zeitpunkt
/-raum
BewertungFunktion Feedback
PrüferIn
Prüfungsort
Kompetenz
E-Assessment Repositories
Staff Development
Vorbereitung Durchführung Auswertung Ergebnisse
Zukunftsfelder
E-Assessment
![Page 61: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/61.jpg)
03.11.2008 / 61
E-Assessment Repositories
Wie werden Fragen weiter-verwendet werden?
• Fragenpools• Reusable assessment objects
Beispiele
• COLA Project• SOLAR Project• University of Portsmith (Dr. Michael McCabe)
![Page 62: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/62.jpg)
03.11.2008 / 62
E-Assessment Repositories:
COLA Projekt
(COLEG On-Line Project)
• Projekt der Vereinigung - Scottish Colleges OpenLearning Exchange Group
• Projekt zur Förderung der Benutzung vor virtuellenLernumgebung
• LMS:• 2005: Blackboard, Granada Learnwise, Teknical's Virtual
Campus and WebCT• 2008: Moodle
• Fragenpool:• 2005: über formative 250 E-Assessments mit bis zu 20
Fragen• 2008: über 450 Assessments
![Page 63: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/63.jpg)
03.11.2008 / 63
E-Assessment Repositories:
COLA Projekt
(COLEG On-Line Project)
![Page 64: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/64.jpg)
03.11.2008 / 64
E-Assessment Repositories:
COLA Projekt
(COLEG On-Line Project)
![Page 65: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/65.jpg)
03.11.2008 / 65
E-Assessment Repositories:
SOLAR Project
Das Solar Project ist eine Initiative der SQA (Scottish QualificationAuthority) um „automatically marked summative assessment“Schottischen Berufsschulen (Further Education Colleges)bereitzustellen. Es ist ein „Repostitory“ für Prüfungen, die dieColleges für andere Benutzer zur Verfügung stellen.Das SOLAR Project ist ein erster gelungener Versuch mit einemRepository und wird von 30 Colleges mehr und weniger genutztwird.
Link: http://www.sqasolar.org.uk/mini/27322.html
![Page 66: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/66.jpg)
03.11.2008 / 66
E-Assessment Repositories:
University of Portsmith
Reusable Assessment Objects
Probleme mit Fragenpools:
• Grosse Anzahl von Fragen notwendig
• Unterschiedliche Anforderungen für summative undfromativen Einsatz (z.B. Sicherheitsansprüche,Feedback)
Reusable Learning
Objects (repositories)Assessment Questions
(banks)
Reusable Assessment
Objects
(e.g. Maple TA)
![Page 67: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/67.jpg)
03.11.2008 / 67
E-Assessment Repositories:
University of Portsmith
Reusable Assessment Objects
Multi-Questions
A multi-question is a computer generated questions with randomparameters (data) and algorithms (rules)
• What can be randomised? Not just numbers ....• Characters, symbols, words, text, lists, sets, tables, ...• Graphs, diagrams, pictures, videos, animations, sounds, ...• Algebraic formulae, equations ...
• Where can randoms appear? Not just questions ....• Questions: stem, keys, distractors, choices, answers• Feedback, solutions, hints, help
Folie (verändert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, Aug. 2008, ENAC Potsdam
![Page 68: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/68.jpg)
03.11.2008 / 68
E-Assessment Repositories:
University of Portsmith
Reusable Assessment Objects
![Page 69: HIS Workshop ÒElektronische Pr fungenÓ 5./6. November … · Folie (ver ndert) von Michael McCabe: Remarkable Pedagogical Benefits of Reusable Assessment Objects, ... (Wiki, Blog,](https://reader031.fdocuments.in/reader031/viewer/2022022518/5b14bb287f8b9a4e2c8b65f5/html5/thumbnails/69.jpg)
03.11.2008 / 69
Future of E-Assessment