Maßnahme Bühne
Zum Projekt

Hybridprüfung im MINT-Bereich

Die Maßnahme begegnet der Herausforderung, Berechnungsaufgaben einer Klausur im MINT-Bereich effizient auszuwerten, indem papierbasierte Lösungen mit einer digitalen Ergebniseingabe kombiniert wer-den. Die Auswertung erfolgt automatisiert und wird bei Bedarf manuell nachkorrigiert. Das hybride Format ermöglicht eine Reduktion des Korrekturaufwands und eine didaktische Weiterentwicklung der Prüfungen.

Kategorien

Bitte nennen Sie bis zu fünf Stichwörter, die den Inhalt Ihrer Maßnahme aussagekräftig beschreiben.
E-Assessment
MINT-Prüfungen
Ingenieurdidaktik
Zielgruppe(n)
Wissenschaftliche Mitarbeiter:innen/LfBA
Tutor:innen/stud. Mentor:innen
Professor:innen
Mitarbeiter:innen aus Service, Verwaltung & Wissenschaftsmanagement
Lehrbeauftragte
(Fach-)Öffentlichkeit
Handlungsfeld & Aktivität(en)
Technisch-räumliche Infrastruktur
Lernassistenz-/Monitoringsysteme entwickeln
Lehr-/Lernumgebungen entwickeln
Lehr-/Studienangebote
Prüfungsformen/(Self-)Assessments entwickeln
Lehrkonzepte/-formate entwickeln
Lehr-/Lernmaterialien entwickeln

Beschreibung

Herausforderung

Die Maßnahme adressiert die Herausforderung, komplexe, Berechnungsaufgaben im MINT-Bereich effizient und kompetenzorientiert zu prüfen. Bisherige E-Assessment-Lösungen scheitern oft an technischen, organi-satorischen sowie an der adäquaten Abbildung komplexer Aufgaben. Die mit der Digitalisierung verbunde-nen Chancen (z.B. Zeitersparnis bei der Prüfungskorrektur, spezifische interaktive Aufgabentypen zur Kom-petenzüberprüfung) konnten bislang nur bedingt im MINT-Bereich genutzt werden.

Herangehensweise

Das hybride Prüfungsformat verbindet die Vorteile papierbasierter Lösungen mit digitaler, teilautomatisier-ter Auswertung, um den Korrekturaufwand zu reduzieren und die Prüfungsqualität zu steigern. Die Herausforderung wurde durch die Entwicklung eines Ansatzes gelöst, das papierbasierte Bearbeitung komplexer Berechnungsaufgaben mit einer digitalen, kompetenzorientierten Ergebniseingabe kombiniert. Die Studierenden lösen die Aufgaben zunächst auf Papier und übertragen die Teilergebnisse anschließend in ein E-Assessment-System, das eine automatisierte Auswertung ermöglicht. Bei Bedarf erfolgt eine manu-elle Nachkorrektur der papierbasierten Lösungen, um Folgefehler zu berücksichtigen und die Prüfungsqua-lität sowie Rechtssicherheit zu gewährleisten. Die technische Umsetzung basiert auf dem Lernmanage-mentsystem OPAL und der ONYX-Testsuite, die verschiedene Aufgabentypen und eine kompetenzorientierte Gestaltung der Prüfungen erlaubt.

Zusammenhang

Die Maßnahme wurde im Rahmen von schriftlichen Prüfungen im Grundlagenfach Technische Thermody-namik an der Hochschule Zittau/Görlitz erprobt. Dabei handelt es sich um ein Pflichtmodul im Grundstudi-um aller Ingenieurdisziplinen. Das hybride Prüfungsformat wurde in mehreren Semestern mit Studierenden verschiedener technischer Studiengänge praktisch angewendet und evaluiert.

Voraussetzung

Für die Durchführung der Maßnahme bedarf es einer leistungsfähigen digitalen Infrastruktur. Hierfür wur-de das Lernmanagementsystem OPAL in Verbindung mit der ONYX-Testsuite genutzt, um eine datenschutz-konforme und stabile Prüfungsumgebung zu gewährleisten. Die Studierenden mussten im Vorfeld durch gezielte Übungen mit dem hybriden Prüfungsformat, dem kompetenzorientierten Abfrageschema und den spezifischen Aufgabentypen vertraut gemacht werden, um eine reibungslose Ergebniseingabe während der Prüfung zu ermöglichen. Didaktisch war es notwendig, die Prüfungsaufgaben so zu konzipieren, dass sie sich für eine teilautomatisierte, kompetenzorientierte Auswertung eignen, ohne den Charakter komplexer methodisch-mathematischer Aufgaben zu verändern. Relevant sind zudem rechtliche und organisatorische Vorgaben, insbesondere im Hinblick auf Prüfungsordnung sowie eine angemessene zeitliche Anpassung der Prüfungsdauer, um den zusätzlichen Aufwand für die digitale Ergebniseingabe zu kompensieren.

Eignung

Nachnutzende können die Eignung der Maßnahme anhand mehrerer Evaluationskriterien erkennen: In der Pilotphase an der Hochschule Zittau/Görlitz wurde das hybride Prüfungsformat praktisch erprobt und sys-tematisch ausgewertet. Die Ergebnisse zeigen eine Reduktion des Korrekturaufwands um ca. 70 %, eine erhöhte Prüfungsqualität durch kompetenzorientierte elektronische Aufgabentypen sowie eine hohe Akzep-tanz bei Studierenden und Lehrenden. Die Nutzerfreundlichkeit und die didaktische Weiterentwicklung wurden durch Befragungen und praktische Anwendung bestätigt. Die Übertragbarkeit auf andere MINT-Fächer ist durch die modulare Aufgabenstruktur gegeben (vgl. Freudenreich, R.; Herrmann, S.: E-Klausur auf dem Campus – smarte Prüfungsdurchführung mit dem eigenen mobilen Endgerät. In: Kersten, S.; Kammasch, G. (Hrsg.): Herausforderungen zeitgemäßer Technikbildung im akademischen und berufsbil-denden Sektor. Referate der 17. Ingenieurpädagogischen Regionaltagung 2023. S. 427−430 (2024)).

Vorgehen/Schritte

0. Rechtliche und organisatorische Vorgaben beachten

1. Technische Infrastruktur sicherstellen: stabiles LMS mit datenschutzkonformer E-Assesment-Funktion.

2. Didaktische Aufarbeitung der Aufgaben: Zerlegung in kompetenzorientierte Teilschritte, Nutzung unter-schiedlicher Aufgabentypen (z.B Auswahl-, Zuordnungs-, Markier- und numerische Aufgaben), um unter-schiedliche Kompetenzen gezielt zu prüfen.

3. Umfassende Implementierung des hybriden Vorgehens: Studierende lernen LMS und Aufgaben (Aufbau und den Eingabeschemata) bereits vor der Klausur kennen und haben die Möglichkeit zu üben.

4. Prüfungsablauf strukturieren und Kommunizieren:

1. Schritt: papierbasierte Bearbeitung

2. Schritt: digitale Ergebniseingabe (20 % zusätzlicher Zeitbedarf für die digitale Eingabe einplanen).

5. Kombination von automatisierter und manueller Auswertung: gezielte manuelle Nachkorrektur der Pa-pierlösungen, um Folgefehler oder Besonderheiten zu berücksichtigen die bei der automatisierten Auswer-tung nicht erfasst werden

6. Dokumentation der Erfahrungen: Nach jeder Prüfung Erfahrungen mit einzelnen Aufgaben festhalten, um Aufgabenpool effizient weiterzuentwickeln

Hinweise

Effekte

Erwartete Effekte der Maßnahme waren eine deutliche Reduktion des Korrekturaufwands (um ca. 70 %), eine Steigerung der Prüfungsqualität durch kompetenzorientierte Aufgabentypen sowie eine höhere Nutzer-freundlichkeit für Lehrende und Studierende.

Unerwartete Effekte zeigten sich in der Notwendigkeit, für die digitale Ergebniseingabe ca. 20 % mehr Prü-fungszeit einzuplanen, sowie im erhöhten initialen Aufwand für die Erstellung und didaktische Aufbereitung der Aufgaben. Positiv überrascht hat die Wiederverwendbarkeit und einfache Anpassbarkeit des Aufga-benpools für künftige Prüfungen.

Wechselwirkungen ergaben sich durch die didaktische Weiterentwicklung der Prüfungen und eine verbes-serte Betreuung der Lernenden, da Lehrende durch die Zeitersparnis mehr Ressourcen für die individuelle Förderung hatten.

Learnings

Zu den Learnings zählen:

- Die Kombination aus papierbasierter Bearbeitung und digitaler Ergebniseingabe ermöglicht eine effiziente Prüfung, ohne den didaktischen Anspruch zu reduzieren

- Die automatisierte Auswertung reduziert den Korrekturaufwand erheblich,

- Der Prozess setzt aber voraus, dass Studierende frühzeitig mit dem hybriden Format vertraut ge-macht werden

- Für die digitale Ergebniseingabe muss etwa 20 % zusätzliche Prüfungszeit eingeplant werden

- Die Entwicklung und didaktische Aufbereitung der Aufgaben ist zunächst aufwendig, zahlt sich aber durch die Wiederverwendbarkeit aus

- Die Kombination aus automatisierter Auswertung und manueller Nachkorrektur ermöglicht eine Bewertung bei Folgefehlern oder individuellen Lösungswegen

- Das Format ist grundsätzlich auf andere MINT-Fächer übertragbar, sofern eine geeignete techni-sche Infrastruktur und didaktische Anpassung der Ausgaben (Zerlegung in automatisieret aus-wertbare Teilaufgaben) gegeben sind

Empfehlung

Es erscheint nicht zielführend, Nachnutzenden ein alternatives Prüfungsformat zu empfehlen, sofern die intendierten Lernziele ähnliche Kompetenzfassetten adressieren und die institutionellen Rahmenbedin-gungen (technische Infrastruktur, rechtliche Vorgaben) ähnlich sind. Das Vorgehen hat sich bewährt. Die Ergebnisse der Pilotierung an der Hochschule Zittau/Görlitz belegen eine signifikante Reduktion des Kor-rekturaufwands, eine Steigerung der Prüfungsqualität durch kompetenzorientierte Aufgabenformate sowie eine hohe Akzeptanz bei Lehrenden.

Alternativ könnte ein vollständig digitales E-Assessment in Erwägung gezogen werden, sofern Aufgaben-struktur und Rechtssicherheit dies zulassen. Die bisherige Praxis zeigt jedoch, dass rein digitale Formate bei der Abbildung komplexer Rechenwege, der Nachvollziehbarkeit individueller Lösungsstrategien sowie hinsichtlich technischer und rechtlicher Anforderungen häufig limitiert sind. Das hybride Format bietet daher einen tragfähigen Kompromiss.

Tipps

Bei der Adaption gilt es folgendes zu beachten:

- Studierende vorbereiten: Prüfungsformat frühzeitig einführen und die Ergebniseingabe üben, um Unsicherheiten während der Prüfung zu vermeiden.

- Zusätzliche Zeit: ca. 20 % mehr Prüfungszeit für die Eingabe im Tool einplanen.

- Aufgabentypen gezielt wählen: digitale Aufgabentypen (z.B. Auswahl-, numerische Aufgaben) sys-tematisch auf die zu prüfenden Kompetenzen ausrichten

- Manuelle Nachkorrektur einplanen: die automatisierte Auswertung durch eine gezielte Nachkon-trolle ergänzen, um Folgefehler und individuelle Lösungswege zu berücksichtigen.

- Technische Infrastruktur prüfen: sicherstellen das das E-Assessment-System stabil betrieben wird.

- Aufgabenpool pflegen: initiales Investment in die Aufgabenentwicklung erleichtert die Wiederver-we

Sonstiges

Die Nachnutzung von Aufgaben des bestehenden Aufgabenpools an Kollegen kann Anregungen für eige-nen Formate geben, sollte jedoch mit Blick auf die eigene Didaktik stets angepasst werden.

Methoden

Empfohlen

Methoden
Zerlegung komplexer Aufgaben in prüfbare Teilschritte, um Lernziele gezielt zu prüfen. - Kompetenzorientierte Fragestellungen unter Einsatz von elektronischen Aufga-bentypen. -Kombination automatisierter u manueller Auswertung zur Berücksichtigung von Folgefehlern u individuellen Lösungsstrategien
Formate
Hybrides Prüfungsformat: Papierbasierte Bearbeitung komplexer Aufgaben, ge-folgt von digitaler Eingabe der Teilergebnisse in ein E-Assessment-System. - Teilaufgabenstruktur: Strukturierung der Prüfungsaufgaben in einzelne, digital prüfbare Teilschritte (Zuordnung, Berechnungen, Formelauswahl).
Technische Tools
Lernmanagementsystem OPAL: Zentrale Plattform zur Organisation und Durch-führung der Prüfungen. - ONYX-Testsuite: E-Assessment-System zur Erstellung, Durchführung und automa-tisierten Auswertung der digitalen Aufgaben.

Nicht empfohlen

Methoden
Formelvergleich als Eingabetyp: Die direkte Eingabe von Formeln im E-Assessment-System wird nicht empfohlen, da dies eine spezielle Syntax erfordert, die nicht Gegenstand der Ausbildung ist und zu unnötigen Fehlerquellen führt.
Formate
Vollständig digitale Prüfungsformate für komplexe Rechenaufgaben: Reine E-Assessments ohne papierbasierte Bearbeitung sind für komplexe, methodisch-mathematische Aufgaben im MINT-Bereich nicht geeignet, da sie die Nachvollziehbarkeit individueller Lösungswege und die faire Bewertung erschweren.
Technische Tools
Eingabetools mit komplexer oder fehleranfälliger Syntax: Tools, die eine spezielle oder komplizierte Eingabesyntax (z.B. für mathematische Ausdrü-cke) verlangen, führen zu erhöhtem Support- und Korrekturaufwand.

Kontakt

Bearbeiter:innen und Beteiligte
Keine Kontaktdaten vorhanden

Das könnte Sie auch interessieren

Projekt 101520
Projekt

(Hochschul-)Bildung inklusiv

Die HAW Hamburg besitzt eine mittlerweile 50-jährige Expertise in der Qualifizierung von Fachkräften. Als (ehemalige) Fachhochschule sind wir von Beginn an mit einer diversen Studierendenschaft vertraut und haben (Studien-)Programme für Erhöhung von Bildungschancen aufgebaut. Bereits jetzt sind wir eine offene, vielfältige und kreative Hochschule, die das Ziel einer möglichst inklusiven Hochschulkultur verfolgt. Als Hindernis zu einer inklusiven Hochschule ist das Selbst- und Fremdverständnis zu nennen, dass höhere kognitive Leistungen aller Akteure voraussetzt. Unser Projekt gibt Menschen eine Chance auf Beschäftigung und Einfluss auf Lehre und Forschung, die bislang davon systematisch ausgeschlossen sind. Wir pilotieren die Zusammenarbeit von Studierenden, Lehrenden und sogenannten Bildungsfachkräften, um die Diversity- und Inklusionskompetenz der beteiligten Hochschulangehörigen zu erweitern. Dabei unterstützen wir das Konzept, den Bildungsfachkräften eine berufliche Perspektive jenseits der Beschäftigung in einer Werkstatt für Menschen mit Behinderungen zu ermöglichen. Die Bildungsfachkräfte werden extern qualifiziert und können ihre Praxiserfahrungen in unserer Hochschule machen. Der Einsatz von sogenannten Bildungsfachkräften ermöglicht einerseits die bessere Qualifizierung der Studierenden (Bildungsperspektive) und andererseits die Verbesserung von Lebenswelten für Menschen mit Beeinträchtigungen (Empowerment Perspektive). Die avisierten Outcomes werden evaluiert.

Projekt anzeigen
Maßnahme 100116
Maßnahme

Virtuelle Realitäten zur Kompetenzentwicklung

Das Projekt greift die zunehmende Anwendung von Virtual Reality im Hochschulkontext auf und verfolgt die nachhaltige Implementation und Weiterentwicklung der Technologie. Den Studierenden wurde es mittels VR ermöglicht, in einem geschützten Rahmen in kontrollierte, interaktive Umwelten einzutauchen. Hier konnten sie ihr deklaratives Wissen um Elemente prozeduralen Wissens realitätsnah erweitern und theoriegeleitet praktische Kompetenzen erwerben. Als interdisziplinäres Projekt wurden hinsichtlich der Anwendung von VR zwei thematische Zugänge verfolgt. Studierende sollten in ihren angewandten Kompetenzen und Fertigkeiten als beratende Personen im Schulkontext und ihren Verhandlungsfähigkeiten als Bewerber:innen in Bewerbungssituationen trainiert werden. Durch die Immersion in der VR-Umgebung und dem damit einhergehenden erhöhten Realismus der erlebten Situation konnten die Studierenden eigene Erfahrungen in praxisnahen Anwendungsfällen sammeln und werden somit besser auf reale Zukunfts

Maßnahme anzeigen
Publikation 100370

Fostering Knowledge Facets of the TPACK Framework

To prepare pre-service teachers for the multiple requirements of their future math teaching within the digital age, they need to develop all facets of knowledge mentioned in the Technological Pedagogical Content Knowledge (TPACK) framework to enhance their digital competences. Research has shown that teachers learn to use technology by designing educational technologies for authentic use while activating and extending their knowledge regarding the interplay of technology, pedagogy, and content. In this study, 58 pre-service primary and secondary teachers from three German universities created and evaluated their own digital mathematical escape games (DIMEG) within a seminar. Since it has scarcely been researched how the design process of DIMEG addresses pre-service teachers’ technological, pedagogical and content knowledge, this study aims to investigate their subjectively reported learnings and challenges. For this, an online-based questionnaire with four open-ended items on their learnings and five open-ended items on the encountered challenges during the design process allowed them to reflect on their knowledge and skill development. All 471 answers were categorized by applying qualitative content analysis. Results indicate most learnings in the pre-service teachers’ pedagogical content knowledge (PCK), technological knowledge (TK), and technological pedagogical content knowledge (TPCK).

Publikation anzeigen