Evaluation des Wikis
Nach Abschluss des Wikis (vor der Klausur) wurde eine Umfrage durchgeführt. Die Rücklaufrate liegt bei 84% (107 von 128). Ergänzt werden diese Daten mit semi-strukturierten Interviews (n = 16) um tiefere qualitative Daten zu gewinnen. Ziel der Evaluation ist die Analyse der Auswirkung des Wikis auf die studentische Leistung in der Klausur. Zusätzlich wollen wir die Kurswahrnehmung hinschlich des Wikis evaluieren. [Anm. StIL: Diese Maßnahme wurde in einer Vorgängerversion der Abfrage dokumentiert. Bei der Übertragung auf das aktuelle Format kann es vorkommen, dass die Antworten nicht hundertprozentig zur Frage passen.]
Kategorien
Beschreibung
Herausforderung
Bildungsintervention wird durchgeführt ohne Identifikation von datenbasierten Optimierungspotentialen (durch z.B. quantitative und qualitative Evaluation)
Ressourcen; Aufwand
Voraussetzung
Erschwert wird die Umsetzung der Evaluation durch Nicht-Teilnahme an Wiki, Fragebogen und Interviews. Keine weiteren Nachteile aufgetreten
Für (1) - Bewertung der Wiki-Beiträge – war es wichtig ein einheitliches Bewertungsschema aufzusetzen. Wir haben in Excel die einzelnen wissenschaftlichen Bewertungskriterien der Anleitung aufgeführt, gewichtet und so bei der Durchsicht der Beiträge bewertbar gemacht. Sow wurde jedes einzelnes Kriterium auf Qualität und Vollständigkeit überprüft.
Für (2) – Fragebogen – war es wichtig, dass Bestandteile des Wikis in Ellemente unterteilt werden, die wiederum in Fragen überführt wurden. So stellen wir sich, dass sämtliche Bestandteile des Wikis hinreichend evaluiert werden.
Für (3) - Interviews - war es wichtig gezielt Elemente aus (2) zu identifizieren, die durch die Interviews mit qualitativen Daten ergänzt werden sollten. So wurde in den Interviews der Schwerpunkt auf die „Unterschiede zwischen individuellen und kollektiven Schreibaktivitäten“ oder „Ec
Eignung
summativ (zum Abschluss)
Am Ende des Wiki-Projekts (vor der Klausur) haben wir eine digitale Umfrage durchgeführt, um quantitative und qualitative Daten zu erhalten (107 von 128 haben teilgenommen).
Wir haben quantitative und qualitative Daten dazu erhoben, inwieweit die Schreibaktivitäten das Lernerlebnis der Studierenden positiv beeinflusst haben.
Die Umfragedaten wurden durch 16 halbstrukturierte Interviews ergänzt.
Vorgehen/Schritte
Erstellung des Fragebogens (1 Woche)
Durchführung des Fragebogen (2 Tage)
Analyse des Fragebogens (quantitative und qualitative Daten) (2 Wochen)
Erstellung des Interview Guides (3 Tage)
Durchführung der Interviews (2 Wochen)
Analyse der Interviews (qualitative Daten) (2 Wochen)
Verknüpfung von Fragebogenelementen und Interviewsektionen (2 Tage)
Hypothesenbasierte Analyse von Wirkung des Wikis auf Klausurleistung und Kurswahrnehmung (1 Monat)
Verknüpfung der Ergebnisse mit Bildungstheorien (1 Woche)
Verfassung von Paper (6 Monate)
(ein Semester bis zu einem Jahr)
Hinweise
Effekte
Wir haben das Wiki auf unterschiedliche Art und Weise evaluiert:
(1) Bewertung der Wiki-Beiträge hinsichtlich Inhalt und Format (wissenschaftliche Bewertungskriterien werden vom Lehrpersonal bewertet)
(2) (2) Mit Hilfe eines Fragebogens werden quantitative und qualitative Daten über die Kurserfahrung gesammelt (einschließlich der Erfahrungen mit der Entwicklung, dem Lernen, der Strukturierung, der Verwaltung und der (technischen) Nutzung).
(3) (3) Zusätzlich wurden in 16 halbstrukturierten Interviews detaillierte qualitative Daten zu den in Schritt (2) identifizierten Fragestellungen erhoben.
Mit (1) - Bewertung der Wiki-Beiträge - konnten wir Optimierungspotentiale identifizieren, die Einfluss auf die Planungs- und Durchführungsphase unserer Maßnahmen haben. Beispielsweise stellte sich heraus, dass die Studierenden (trotz Anleitung) Schwierigkeiten hatten, korrekt zu zitieren bzw. akademische von nicht-akademischen Quellen zu unterscheiden. Dadurch haben die Beiträge im Durchschnitt an Wi
Learnings
Die Ergebnisse sind besonders relevant:
- inwieweit die Anleitungen und Beispielbeiträge des Lehrpersonals für die Verfasser hilfreich waren
- inwieweit es Unterschiede zwischen Einzel- und Gruppenbeiträgen gab
- ob kollaborativ gearbeitet wurde oder nur Aufgaben verteilt wurden
- inwieweit die Lernerfahrung der Studierenden beeinflusst wurde
- ob das Wiki leicht zu nutzen war
- ob es technische Probleme gab
…
Empfehlung
Für die Umsetzung an anderen Hochschulen empfehlen wir ggf. eine Pre-Post-Studie. Wir haben nur eine summative Analyse nach Abschluss des Projekts durchgeführt. Eine Pre-Post-Umfrage könnte sowohl die Anpassung der Planung unterstützen als auch eine detaillierte Analyse des Einflusses des Wikis ermöglichen.
Tipps
Wir empfehlen (1) die Analyse der Beiträge, (2) die Durchführung eines digitalen Fragebogens und (3) die Interviews
Methoden
Empfohlen
Kontakt
Das könnte Sie auch interessieren
Personalisierte Übungsaufgaben und Lehrvideos zur Unterstützung und automatisierte Evaluierung des Lernerfolgs der Studierenden im Physik(-Lehramts)studium
Die mathematische Grundausbildung ist essenziell im Physikstudium und wird über Übungsaufgaben trainiert. Allerdings bedingt dies meist lange Korrekturzeiten, was als Feedback zum Lernerfolg inadäquat ist und zu den teils hohen Abbruchquoten in der Physik und MINT Fächern beiträgt. Wir adressieren dies mit digitalen Aufgaben im STACK-Format (System for Teaching and Assessment using a Computer algebra Kernel) und Lehrvideosequenzen. Mit STACK können komplexe Aufgaben mit randomisierten Zahlen, Parametern und Variablen erstellt und Zwischenschritte abgefragt werden. Rechenfehler werden automatisch erkannt und Probleme sind für Lehrende direkt einsehbar. Dies ermöglichen eine zeitnahe Adressierung der Lernlücken in den Lehrveranstaltungen und zielgerichteten Aufarbeitungen, wodurch Studierende besser Anschluss halten können. Zudem wird ein reines Abschreiben und die fehlende Auseinandersetzung mit den Lerninhalten unterbunden da Studierende individuelle Aufgabe durch die Randomisierung erhalten. Die Aufgaben werden zudem als Trainingskurse für das Selbststudium zur Verfügung gestellt und Studierende können das gleiche Rechenschema in immer neuen Fassungen üben. Der weitreichende Pool von Aufgaben verringert den Vorbereitungsaufwand für Dozierende und schafft zeitliche Freiräume für die Lehrveranstaltungen. Zusammenfassend führt dies zu einer höheren Stringenz innerhalb der Lehrveranstaltungen und Studierende können zielgerichteter an Aufgaben herangeführt werden.
Projekt anzeigen
Digitale Lehr- & Lerninfrastruktur: Austausch- und Vernetzungsmöglichkeiten für Studierende und Lehrende
Ziel der Maßnahme war die Schaffung von digitalen Austausch- und Vernetzungsmöglichkeiten für Studierende und Lehrende, um die Kommunikation untereinander zu verbessern und relevante Informationen u.a. mobil zur Verfügung zu stellen. Durch innovative Plattformen sollten kollaborative Lernprozesse gefördert, der fachübergreifende Dialog intensiviert und flexible, ortsunabhängige Interaktionsmöglichkeiten geschaffen werden.
Maßnahme anzeigen
How are achievement goals associated with self-, co-, and socially shared regulation in collaborative learning?
[Kurzbeschreibung folgt (Anm. StIL)]
Publikation anzeigen