Evaluation des Wikis
Nach Abschluss des Wikis (vor der Klausur) wurde eine Umfrage durchgeführt. Die Rücklaufrate liegt bei 84% (107 von 128). Ergänzt werden diese Daten mit semi-strukturierten Interviews (n = 16) um tiefere qualitative Daten zu gewinnen. Ziel der Evaluation ist die Analyse der Auswirkung des Wikis auf die studentische Leistung in der Klausur. Zusätzlich wollen wir die Kurswahrnehmung hinschlich des Wikis evaluieren. [Anm. StIL: Diese Maßnahme wurde in einer Vorgängerversion der Abfrage dokumentiert. Bei der Übertragung auf das aktuelle Format kann es vorkommen, dass die Antworten nicht hundertprozentig zur Frage passen.]
Kategorien
Beschreibung
Herausforderung
Bildungsintervention wird durchgeführt ohne Identifikation von datenbasierten Optimierungspotentialen (durch z.B. quantitative und qualitative Evaluation)
Ressourcen; Aufwand
Voraussetzung
Erschwert wird die Umsetzung der Evaluation durch Nicht-Teilnahme an Wiki, Fragebogen und Interviews. Keine weiteren Nachteile aufgetreten
Für (1) - Bewertung der Wiki-Beiträge – war es wichtig ein einheitliches Bewertungsschema aufzusetzen. Wir haben in Excel die einzelnen wissenschaftlichen Bewertungskriterien der Anleitung aufgeführt, gewichtet und so bei der Durchsicht der Beiträge bewertbar gemacht. Sow wurde jedes einzelnes Kriterium auf Qualität und Vollständigkeit überprüft.
Für (2) – Fragebogen – war es wichtig, dass Bestandteile des Wikis in Ellemente unterteilt werden, die wiederum in Fragen überführt wurden. So stellen wir sich, dass sämtliche Bestandteile des Wikis hinreichend evaluiert werden.
Für (3) - Interviews - war es wichtig gezielt Elemente aus (2) zu identifizieren, die durch die Interviews mit qualitativen Daten ergänzt werden sollten. So wurde in den Interviews der Schwerpunkt auf die „Unterschiede zwischen individuellen und kollektiven Schreibaktivitäten“ oder „Ec
Eignung
summativ (zum Abschluss)
Am Ende des Wiki-Projekts (vor der Klausur) haben wir eine digitale Umfrage durchgeführt, um quantitative und qualitative Daten zu erhalten (107 von 128 haben teilgenommen).
Wir haben quantitative und qualitative Daten dazu erhoben, inwieweit die Schreibaktivitäten das Lernerlebnis der Studierenden positiv beeinflusst haben.
Die Umfragedaten wurden durch 16 halbstrukturierte Interviews ergänzt.
Vorgehen/Schritte
Erstellung des Fragebogens (1 Woche)
Durchführung des Fragebogen (2 Tage)
Analyse des Fragebogens (quantitative und qualitative Daten) (2 Wochen)
Erstellung des Interview Guides (3 Tage)
Durchführung der Interviews (2 Wochen)
Analyse der Interviews (qualitative Daten) (2 Wochen)
Verknüpfung von Fragebogenelementen und Interviewsektionen (2 Tage)
Hypothesenbasierte Analyse von Wirkung des Wikis auf Klausurleistung und Kurswahrnehmung (1 Monat)
Verknüpfung der Ergebnisse mit Bildungstheorien (1 Woche)
Verfassung von Paper (6 Monate)
(ein Semester bis zu einem Jahr)
Hinweise
Effekte
Wir haben das Wiki auf unterschiedliche Art und Weise evaluiert:
(1) Bewertung der Wiki-Beiträge hinsichtlich Inhalt und Format (wissenschaftliche Bewertungskriterien werden vom Lehrpersonal bewertet)
(2) (2) Mit Hilfe eines Fragebogens werden quantitative und qualitative Daten über die Kurserfahrung gesammelt (einschließlich der Erfahrungen mit der Entwicklung, dem Lernen, der Strukturierung, der Verwaltung und der (technischen) Nutzung).
(3) (3) Zusätzlich wurden in 16 halbstrukturierten Interviews detaillierte qualitative Daten zu den in Schritt (2) identifizierten Fragestellungen erhoben.
Mit (1) - Bewertung der Wiki-Beiträge - konnten wir Optimierungspotentiale identifizieren, die Einfluss auf die Planungs- und Durchführungsphase unserer Maßnahmen haben. Beispielsweise stellte sich heraus, dass die Studierenden (trotz Anleitung) Schwierigkeiten hatten, korrekt zu zitieren bzw. akademische von nicht-akademischen Quellen zu unterscheiden. Dadurch haben die Beiträge im Durchschnitt an Wi
Learnings
Die Ergebnisse sind besonders relevant:
- inwieweit die Anleitungen und Beispielbeiträge des Lehrpersonals für die Verfasser hilfreich waren
- inwieweit es Unterschiede zwischen Einzel- und Gruppenbeiträgen gab
- ob kollaborativ gearbeitet wurde oder nur Aufgaben verteilt wurden
- inwieweit die Lernerfahrung der Studierenden beeinflusst wurde
- ob das Wiki leicht zu nutzen war
- ob es technische Probleme gab
…
Empfehlung
Für die Umsetzung an anderen Hochschulen empfehlen wir ggf. eine Pre-Post-Studie. Wir haben nur eine summative Analyse nach Abschluss des Projekts durchgeführt. Eine Pre-Post-Umfrage könnte sowohl die Anpassung der Planung unterstützen als auch eine detaillierte Analyse des Einflusses des Wikis ermöglichen.
Tipps
Wir empfehlen (1) die Analyse der Beiträge, (2) die Durchführung eines digitalen Fragebogens und (3) die Interviews
Methoden
Empfohlen
Kontakt
Das könnte Sie auch interessieren
Innovative Konzepte und Angebote für die zeitgemäße digitale Lehre an Musikhochschulen
Auf der Basis der vom Hochschulnetzwerk Digitalisierung der Lehre Baden-Württemberg erarbeiteten Konzepte, den Erfahrungen der Studierenden und Lehrenden mit eartraining-online.de und Digitale Musikkulturen sowie der kurzfristig notwendigen und umgesetzten umfangreichen corona-bedingten methodischen Forschung zur Digitalisierung der Lehre (Blended Learning) plant die Hochschule nun zügig die Weiterentwicklung der vorhandenen Angebote und die Implementierung weiterer Innovationen auf der Basis vorangehender und begleitender Evaluierungen. Durch Blended Learning ist es möglich die individuellen Bedarfe der Studierenden zielgenauer zu adressieren. Auch die Präsenzlehre wird dadurch weiterentwickelt und kann noch stärker auf das Lernen in zwischenmenschlicher Interaktion fokussiert werden. Die ent-worfenen Maßnahmen zielen im Schwerpunkt auf ein umfangreiches digitales Lehrangebot zu Grundlagen der Kunstwissenschaften und Kunsttheorie, zur Medienkompetenz und Entwicklung innovativer multimedialer Kunstformate sowie auf das Üben von Fertigkeiten mit Hilfe von digitalen Tutoraten (Phonetik von Fremdsprachen beim Singen, Gehörbildung, Spiel im virtuellen Orchester etc.).
Projekt anzeigen
Virtuelle Labore für ortsungebundenes Lernen
Virtuelle Laborrundgänge, in Kombination mit Branching Scenarios und virtuellen Experimenten werden genutzt, um Studierenden einen Einblick in eine neue Laborumgebung zu geben. Branching Scenarios beschreiben dabei eine Lernumgebung, in der entlang von Entscheidungspfaden Versuchsabläufe im Dialog und mit Unterstützung von Videos, Fotos und Multiple-Choice-Fragen erprobt werden können. Eingebettet sind die virtuellen Labore in einen digitalen 360° Rundgang der Fakultät für angewandte Naturwissenschaften und Mechatronik an der Hochschule München. Die Studierenden können orts- und zeitungebunden neue Laborlandschaften erkunden und selbständig Prozesse durchführen, die ihnen ansonsten nicht zugänglich wären. Ein vertieftes Verständnis von Anlagen und Prozessen insbesondere im Bereich der Nanotechnik wird so erlangt.
Maßnahme anzeigen
Herausforderung „Tafel“ – Hybride Lehre im Modul Technische Thermodynamik an der Hochschule Zittau/Görlitz.
[Kurzbeschreibung folgt (Anm. StIL)]
Publikation anzeigen