Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

27
Elektronisches Prüfen an der TiHo Hannover: diagnostisch, formativ und summativ Jan P. Ehlers

description

Ringvorlesung vom 17.05.2010 mit Dr. Jan Ehlers (TiHo Hannover)

Transcript of Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Page 1: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Elektronisches Prüfen an der TiHo Hannover:

diagnostisch, formativ und summativ

Jan P. Ehlers

Page 2: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Lehre in der Tiermedizin

Page 3: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Ergänzung durch eLearning

CASUS

StudIS/ DozISLCMS

CBTs/ WBTs

Online-Lectures

Foren4Vet

Virtual Classroom

Feedback-Systeme

eAssessment

Page 4: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Prüfen in der Tiermedizin

Page 5: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

MILLERsche Wissenspyramide und Prüfungsformen

Knows

Knows how

Shows

Does

Deskriptives/ elaboratives Wissen:MC-Fragen, mündliche Prüfungen

Prozedurales Wissen:Key-Feature, mündliche Prüfungen

Leistung „in vitro“:OSCE (stand. Patienten)

Leistung „in vivo“:MiniCEX (undercov. stand. Patienten)

Page 6: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Elektronisch Prüfen

RÜDEL 2007

Page 7: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Prüfungsarten

Diagnostisch

Formativ

Summativ

Page 8: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Auswahlverfahren der Hochschule

• seit 2006/07 psych. Motivationstest

• 592 Studienanfänger aus 4550 Bewerbern

• 180 Fragen/30 min

• Likertwerte 1-6

Page 9: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Formatives Prüfen

Page 10: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

CASUS

Fallbasiertes eLearning

Konstruktivistischer Ansatz (anchored instruction) mit “scaffolding” und instruktiven Ergänzungen

Self-assessment

Page 11: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.
Page 12: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Frageformen

• Multiple Choice (TypA, PickN)

• Freitext

• Unterstreichung

• Sortierung/Zuordnung

• Unbewerteter Freitext

• Laborwert

• Long Menu

• Lückentext

• Netzwerk

Page 13: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Freiwillige CASUS-Nutzung

Anteil der Studierenden, die CASUS nutzen

%

Page 14: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Mitarbeit in Vorlesungen

Fragen Sie in Vorlesungen oder Kursen, wenn Sie etwas nicht verstanden haben? (n = 451, Mittelwert: 3,9)

1 2 3 4 5 6

1 2 3 4 5 6

(6-stufige Likertwerte, Schulnoten)

Nehmen Sie an Diskussionen in Vorlesungen oder Kursen teil? (n = 428, Mittelwert: 3,3)

Page 15: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Anonymes Feedbacksystem

Page 16: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Akzeptanz PowerVoteHat Ihnen der Einsatz des Feedbacksystems gefallen? (n = 472, Mittelwert: 1,5)

1 2 3 6

1 2 3

Ist das System einfach zu benutzen? (n = 452, Mittelwert: 1,3)

(6-stufige Likertwerte, Schulnoten)

Page 17: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Subjektiver Lernerfolg PowerVoteWie gut lernen Sie in normalen Vorlesungen? (n = 453, Mittelwert: 3,1)

1 2 3 4 5 6

1 2 3 4 5 6

(6-stufige Likertwerte, Schulnoten)

Wie gut lernen Sie in Vorlesungen mit Feedbacksystem? (n = 426, Mittelwert: 2,4)

Page 18: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Summatives Prüfen Q [kju:]

Page 19: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Summatives Prüfen Q [kju:]

• Seit 2008• 50 Prüfungen• 7041 Einzelprüfungen

Page 20: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Itemformate

In Planung:Fallbasiert – Long Menu – Video/Audio

Page 21: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Akzeptanz ePrüfungen

1 2 3

War Q-Exam einfach zu benutzen? (n = 5328, Mittelwert: 1,8)

1 2 3 4 5 6

Wie bewerten Sie die komplette Prüfung und deren Ablauf? (n = 5155, Mittelwert: 3,0)

(6-stufige Likertwerte, Schulnoten)

Page 22: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Akzeptanz Technik

1 2 3 4 5 6

Haben Sie Vertrauen in die eingesetzte Technik? (n = 5268, Mittelwert: 3,0)

1 2 3

Finden Sie die Benutzung eines elektronischen Systems für die schriftliche Prüfung sinnvoll? (n = 5249, Mittelwert: 3,1)

4 5 6

(6-stufige Likertwerte, Schulnoten)

Page 23: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Akzeptanz schriftliche Prüfungen

1 2 3 4 5 6

Empfinden Sie schriftliche Prüfungen fairer als mündliche? (n = 5217, Mittelwert: 3,1)

(6-stufige Likertwerte, Schulnoten)

1 2 3 4 5 6

Halten Sie MC-Fragen prinzipiell sinnvoll für Prüfungen? (n = 5283, Mittelwert: 3,7)

1 2 3 4 5 6

Sollte es mehr schriftliche als mündliche Prüfungen geben? (n = 5228, Mittelwert: 3,8)

Page 24: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Akzeptanz Itemformen

1 2 3 4 5 6

Sollten weitere Frageformate (z.B. fallorientierte Fragen) eingesetzt werden? (n = 5106, Mittelwert: 3,2)

(6-stufige Likertwerte, Schulnoten)

1 2 3 4 5 6

Empfinden Sie das Ergänzen von Multiple-Choice-Fragen durch Bilder als sinnvoll? (n = 5217, Mittelwert: 2,4)

1 2 3 4 5 6

Sollten auch Bildanalyse-Fragen eingesetzt werden? (n = 5237, Mittelwert: 3,3)

Page 25: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Schlussfolgerungen

Viele Prüfungsformen können auch elektronisch durchgeführt werden

Potential der Prüfungsform muss beachtet werden

Parallelisierung der Systeme ist erstrebenswert

Faculty development ist wichtig

Möglichkeiten elektronischer Prüfungen weiterentwickeln

Page 26: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

In eigener Sache…

GMA Workshop Tiermedizin 25.09.2010

Thema „Prüfungen“

Page 27: Elektronische Prüfungen an der TiHo Hannover - diagnostisch, formativ und summativ.

Herzlichen Dank für Ihre Aufmerksamkeit

KontaktDr. Jan P. Ehlers, M.A.eLearning-BeraterStiftung Tierärztliche Hochschule HannoverTiHo-TowerBünteweg 2D-30559 Hannover

[email protected]://www.tiho-hannover.de/service/elearning/