Evaluation des Wikis
Nach Abschluss des Wikis (vor der Klausur) wurde eine Umfrage durchgeführt. Die Rücklaufrate liegt bei 84% (107 von 128). Ergänzt werden diese Daten mit semi-strukturierten Interviews (n = 16) um tiefere qualitative Daten zu gewinnen. Ziel der Evaluation ist die Analyse der Auswirkung des Wikis auf die studentische Leistung in der Klausur. Zusätzlich wollen wir die Kurswahrnehmung hinschlich des Wikis evaluieren. [Anm. StIL: Diese Maßnahme wurde in einer Vorgängerversion der Abfrage dokumentiert. Bei der Übertragung auf das aktuelle Format kann es vorkommen, dass die Antworten nicht hundertprozentig zur Frage passen.]
Kategorien
Beschreibung
Herausforderung
Bildungsintervention wird durchgeführt ohne Identifikation von datenbasierten Optimierungspotentialen (durch z.B. quantitative und qualitative Evaluation)
Ressourcen; Aufwand
Voraussetzung
Erschwert wird die Umsetzung der Evaluation durch Nicht-Teilnahme an Wiki, Fragebogen und Interviews. Keine weiteren Nachteile aufgetreten
Für (1) - Bewertung der Wiki-Beiträge – war es wichtig ein einheitliches Bewertungsschema aufzusetzen. Wir haben in Excel die einzelnen wissenschaftlichen Bewertungskriterien der Anleitung aufgeführt, gewichtet und so bei der Durchsicht der Beiträge bewertbar gemacht. Sow wurde jedes einzelnes Kriterium auf Qualität und Vollständigkeit überprüft.
Für (2) – Fragebogen – war es wichtig, dass Bestandteile des Wikis in Ellemente unterteilt werden, die wiederum in Fragen überführt wurden. So stellen wir sich, dass sämtliche Bestandteile des Wikis hinreichend evaluiert werden.
Für (3) - Interviews - war es wichtig gezielt Elemente aus (2) zu identifizieren, die durch die Interviews mit qualitativen Daten ergänzt werden sollten. So wurde in den Interviews der Schwerpunkt auf die „Unterschiede zwischen individuellen und kollektiven Schreibaktivitäten“ oder „Ec
Eignung
summativ (zum Abschluss)
Am Ende des Wiki-Projekts (vor der Klausur) haben wir eine digitale Umfrage durchgeführt, um quantitative und qualitative Daten zu erhalten (107 von 128 haben teilgenommen).
Wir haben quantitative und qualitative Daten dazu erhoben, inwieweit die Schreibaktivitäten das Lernerlebnis der Studierenden positiv beeinflusst haben.
Die Umfragedaten wurden durch 16 halbstrukturierte Interviews ergänzt.
Vorgehen/Schritte
Erstellung des Fragebogens (1 Woche)
Durchführung des Fragebogen (2 Tage)
Analyse des Fragebogens (quantitative und qualitative Daten) (2 Wochen)
Erstellung des Interview Guides (3 Tage)
Durchführung der Interviews (2 Wochen)
Analyse der Interviews (qualitative Daten) (2 Wochen)
Verknüpfung von Fragebogenelementen und Interviewsektionen (2 Tage)
Hypothesenbasierte Analyse von Wirkung des Wikis auf Klausurleistung und Kurswahrnehmung (1 Monat)
Verknüpfung der Ergebnisse mit Bildungstheorien (1 Woche)
Verfassung von Paper (6 Monate)
(ein Semester bis zu einem Jahr)
Hinweise
Effekte
Wir haben das Wiki auf unterschiedliche Art und Weise evaluiert:
(1) Bewertung der Wiki-Beiträge hinsichtlich Inhalt und Format (wissenschaftliche Bewertungskriterien werden vom Lehrpersonal bewertet)
(2) (2) Mit Hilfe eines Fragebogens werden quantitative und qualitative Daten über die Kurserfahrung gesammelt (einschließlich der Erfahrungen mit der Entwicklung, dem Lernen, der Strukturierung, der Verwaltung und der (technischen) Nutzung).
(3) (3) Zusätzlich wurden in 16 halbstrukturierten Interviews detaillierte qualitative Daten zu den in Schritt (2) identifizierten Fragestellungen erhoben.
Mit (1) - Bewertung der Wiki-Beiträge - konnten wir Optimierungspotentiale identifizieren, die Einfluss auf die Planungs- und Durchführungsphase unserer Maßnahmen haben. Beispielsweise stellte sich heraus, dass die Studierenden (trotz Anleitung) Schwierigkeiten hatten, korrekt zu zitieren bzw. akademische von nicht-akademischen Quellen zu unterscheiden. Dadurch haben die Beiträge im Durchschnitt an Wi
Learnings
Die Ergebnisse sind besonders relevant:
- inwieweit die Anleitungen und Beispielbeiträge des Lehrpersonals für die Verfasser hilfreich waren
- inwieweit es Unterschiede zwischen Einzel- und Gruppenbeiträgen gab
- ob kollaborativ gearbeitet wurde oder nur Aufgaben verteilt wurden
- inwieweit die Lernerfahrung der Studierenden beeinflusst wurde
- ob das Wiki leicht zu nutzen war
- ob es technische Probleme gab
…
Empfehlung
Für die Umsetzung an anderen Hochschulen empfehlen wir ggf. eine Pre-Post-Studie. Wir haben nur eine summative Analyse nach Abschluss des Projekts durchgeführt. Eine Pre-Post-Umfrage könnte sowohl die Anpassung der Planung unterstützen als auch eine detaillierte Analyse des Einflusses des Wikis ermöglichen.
Tipps
Wir empfehlen (1) die Analyse der Beiträge, (2) die Durchführung eines digitalen Fragebogens und (3) die Interviews
Methoden
Empfohlen
Kontakt
Das könnte Sie auch interessieren
Virtuelle kieferorthopädische Patienten
Nahezu jede/r zweite Jugendliche unterzieht sich in Deutschland einer kieferorthopädischen Therapie. Die für eine erfolgreiche Therapie ärztlicherseits erforderlichen Grundkompetenzen werden im Rahmen des Zahnmedizinstudiums vermittelt und ggf. später in einer fachzahnärztlichen Weiterbildung vertieft. Die Kompetenzvermittlung ist ortsgebunden an die Universität, wobei bisher im Curriculum nur zeitlich eng begrenzte Slots zur Verfügung stehen. Unser Projekt hat zum Ziel, die für die kieferorthopädische Therapieplanung erforderlichen Kenntnisse zusätzlich digital und somit präsenz- und zeitunabhängig in das Zahnmedizinstudium zu integrieren. Die Erstellung eines eLearningsystems mit virtuellen Patienten ist eine interdisziplinäre Herausforderung, welche durch ein interdisziplinäres Projektteam angegangen wird: Das Team der Klinik für Kieferorthopädie des Universitätsklinikums Ulm (Ärztlicher Direktor: Prof. Dr. Dr. Lapatki) bringt umfangreiche Erfahrungen im Bereich der digitalen Therapieplanung sowie in der theoretischen und praktischen Ausbildung von Studierenden im Fach Kieferorthopädie mit; das GECKO-Institut (Direktor: Prof. Dr. Haag) hat langjährige umfassende Expertise bei der Entwicklung von innovativen Softwaresystemen für die Ausbildung und Prüfung in der Medizin und den Gesundheitsberufen; die Instruct gGmbH (Geschäftsführer: Martin Adler) ist als gemeinnützige Firma seit vielen Jahren Entwicklerin und Betreiberin einer Softwareplattform für Virtuelle Patienten.
Projekt anzeigen
Das Digital-Humanities-Zertifikat der UA Ruhr
Im Verbund der Universität Duisburg Essen, der Ruhr-Universität Bochum und der Technischen Universität Dortmund wurde ein hochschulübergreifendes Digital-Humanities-Zertifikat implementiert, das Studierenden aller drei Standorte eine formale Zusatzqualifikation ermöglicht. Das dreistufige Modell aus Einführung, Vertiefung und Kolloquium mit Posterpräsentation setzt bewusst auf die Öffnung bereits bestehender Lehrveranstaltungen und schafft so Sichtbarkeit für DH-bezogene Lehre in der Universitätsallianz Ruhr (UAR). Wer ein ähnliches Zertifikat einführen möchte, sollte wissen: Die größten Herausforderungen liegen in der Information von Lehrenden und der Akquise von anrechenbaren Lehrveranstaltungen sowie in der Abstimmung im Verbund. Unterschiedliche Anrechnungsregelungen und Zuständigkeiten erforderten viel Koordinationsaufwand in der Pilotphase. Hilfreich ist es, Prozesse fortlaufend nachzusteuern sowie Lehrende frühzeitig aktiv mit einzubinden.
Maßnahme anzeigen
KI-unterstützte Programmierung mittels ergebniszentrierter Fehlerklassifikation. Potenziale zur Schaffung neuer Lernräume
Programmierkenntnisse gewinnen in technischen Studiengängen zunehmend an Bedeutung. Jedoch stehen in Programmierübungen häufig zu wenige Tutor:innen zur Verfügung, die die Studierenden beim Lösen der Programmieraufgaben unterstützen. Deshalb wird ein KI-System entwickelt, das die Studierenden jederzeit und individuell beim Lösen der Programmierübungen unterstützt. Im Gegensatz zu klassischen Ansätzen analysiert das KI-System nicht den programmierten Code, sondern fokussiert sich auf die Zwischen- und Endergebnisse (z. B. erzeugte Daten, Plots). Anhand dieser gibt das KI-System Hinweise und Erklärungen, um das selbstständige Arbeiten und kritische Denken ohne Musterlösung zu fördern. Ein erster Prototyp wurde im Rahmen einer Programmierübung eingesetzt und mit positiver Resonanz evaluiert.
Publikation anzeigen