Auf Basis der einschlägigen Literatur, bereits bestehenden Evaluationsinstrumenten an verschiedenen Hochschulen in Hessen, dem Bedarf der Lehrenden und Lehrverantwortlichen sowie den Erfahrungen der Kooperationspartner und Hochschuldidaktik haben wir im Rahmen des Projekts „digital gestütztes Lehren und Lernen in Hessen“ verschiedene Instrumente zur Analyse von digitalen Lehr-Lern-Szenarien entwickelt. Anhand dieser Instrumente lässt sich u.a. die Effektivität des Einsatzes digitaler Elemente in der Lehre (z.B. Produktion und Nutzung von Lernvideos) hinsichtlich des Lernerfolgs der Studierenden überprüfen. Neben der auf diese Weise angestrebten Qualitätsverbesserung des jeweilig untersuchten Lehrangebots werden auch allgemeine Gelingensbedingungen (digitaler) Lehr-Lern-Szenarien erfasst. Zusätzlich können auf Seiten der Lehrenden bisherige Erfahrungen mit digitaler Lehre, Einstellungen zur Digitalisierung und die Einschätzung zur eigenen digitalen Kompetenz erhoben und bei einer anschließenden Ergebnisrückmeldung berücksichtigt werden. Durch die bewusste konzeptionelle Parallelität der Lehrendenversion zu der Studierendenversion besteht bei einem gleichzeitigen Einsatz beider Instrumente die Möglichkeit, einen Abgleich der Lehrenden- und Studierendenperspektive vorzunehmen und einen Einblick in den bestehenden Unterstützungsbedarf zu erhalten. So kann eine langfristige Qualitätssteigerung digital gestützter Lehre an Hochschulen sichergestellt werden.

Die Fragebögen sind modular aufgebaut, sodass die jeweils passenden Modulbausteine abhängig von individuellen Fragestellungen und verwendeten digitalen Elementen ausgewählt, eingesetzt und kombiniert werden können. Die Instrumente können zur Analyse von vollständig analogen, teilweise oder vollständig digitalisierten Lehrveranstaltungen (oder anderen Formen des Lernangebots) eingesetzt werden.

Durch die Modularität können Sie je nach Bedarf und inhaltlichen Fragestellungen die passenden Teile und Bausteine der jeweiligen Version selbstständig auswählen und kombinieren! Zur Sicherung der psychometrischen Qualität der Bögen bietet es sich dabei an, sich für Module als Ganzes zu entscheiden (und nicht einzelne Items (Fragen) aus verschiedenen Modulen auszuwählen und kombinieren).

Modularer Fragebogen zur Evaluation von digitalen Lehr-Lern-Szenarien - Studierendenversion

double_arrow Download des analogen Fragebogens (Studierendenversion) als PDF-Datei double_arrow

Alternativ können Sie gerne alle EvaSys–Dateien und Exportdateien für SoSciSurvey via E-Mail anfordern.

Folgende Module stehen in der Studierendenversion zur Auswahl:

Modularer Fragebogen zur Evaluation von digitalen Lehr-Lern-Szenarien - Lehrendenversion

double_arrow Download des analogen Fragebogens (Lehrendenversion) als PDF-Datei double_arrow

Alternativ können Sie gerne alle EvaSys–Dateien und Exportdateien für SoSciSurvey via E-Mail anfordern.

Folgende Module stehen in der Lehrendenversion zur Auswahl:

Eine erste Validierung des modularen Fragebogens zur Analyse digitaler Lehr-Lernszenarien in der Studierendenversion erfolgte zwischen 09/20 und 11/20. Hierzu wurden erhobene Daten von beteiligten Projektpartnern angefordert und in einen gemeinsamen Datensatz integriert. Es folgten die Datenaufbereitung und die explorative Datenanalyse (analysierte Daten: N = 4 Hochschulen, N = 1604 Studierende, N = 157 Veranstaltungen). Weiterhin umfassten die Analysen eine Prüfung der Dimensionalität und die Itemanalyse sowie die Prüfung von Messinvarianz. Auf inhaltlicher Ebene erfolgte eine Untersuchung des Einflusses digitaler Gelingensbedingungen auf Selbstreguliertes Lernen und Motivation der Studierenden und den subjektiv wahrgenommenen Lernzuwachs mittels Multipler Regression. Die Ergebnisse der Gütebestimmung des Fragebogens werden seit 12/20 für eine wissenschaftliche Publikation aufbereitet.

Bis auf wenige Ausnahmen ergeben sich bei der Betrachtung der Itemkennwerte positive Ergebnisse, die auf „gute“ Items hindeuten. Die bisherige Einteilung in entsprechend angenommene Skalen scheint gut zu funktionieren. Das Instrument erscheint geeignet, die Effektivität des Einsatzes digitaler Elemente in der Lehre hinsichtlich des Lernerfolgs der Studierenden zu überprüfen und allgemeine Gelingensbedingungen digitaler Lehr-Lern-Szenarien abzubilden.

Weiterführende Informationen finden Sie dazu außerdem bald in der veröffentlichten wissenschaftlichen Publikation zu dem Instrument: Kärchner, H., Gehle, M. & Schwinger, M. (in preparation). eduValuation+ - Evaluationsinstrumente für die Hochschule. Konstruktion und erste psychometrische Überprüfung des modulareren Fragebogens zur Evaluation von digitalen Lehr-Lern-Szenarien (Studierendenversion).

Evaluationsdesign und -modell:

• Gollwitzer, M. & Jäger, R. S. (2014). Evaluation kompakt. Weinheim: Beltz.
• Kultusministerkonferenz (2019). Empfehlungen zur Digitalisierung in der Hochschullehre. Zugriff am 20.09.2019
• Wannemacher, K., Jungermann, I., Scholz, J., Tercanli, H. & Villiez, A. (2016). Digitale Lernszenarien im Hochschulbereich. Arbeitspapier Nr. 15. Berlin: Hochschulforum Digitalisierung.

Modularer Fragebogen zur Evaluation von digitalen Lehr-Lern-Szenarien (Studierende) – Teil 1 – allgemein:

• Hense, J., Raser, M. & Treppesch, C. (2015). Modulares Gießener verhaltensbasiertes Lehrveranstaltungsrückmeldungsinstrument Kernfragebogen und E-Learning (MoGLi-KE). Servicestelle Lehrevaluation: Justus-Liebig-Universität Gießen.
• Staufenbiel, T. (o.D.). Fragebogen zur Evaluationen von Seminaren (FESEM). Servicestelle Lehrevaluation: Philipps-Universität Marburg.

Modularer Fragebogen zur Evaluation von digitalen Lehr-Lern-Szenarien (Studierende) – Teil 2 – Modulbaustein Lernvideos:

• Brame, C. J. (2016). Effective educational videos: Principles and guidelines for maximizing student learning from video content. CBE-Life Sciences Education, 15, 1-6. https://doi.org/10.1187/cbe.16-03-0125
• Laurillard, D. (2002). Rethinking university teaching: A conversational framework for the effective use of learning technologies. New York: Taylor & Francis.

Modularer Fragebogen zur Evaluation von digitalen Lehr-Lern-Szenarien (Studierende) – Teil 2 – Modulbaustein Selbstlernmodul:

• Friedrich, H.F. & Mandl, H. (1997). Analyse und Förderung selbstgesteuerten Lernens. In F.E. Weinert & H. Mandl (Hrsg.), Psychologie der Erwachsenenbildung. Enzyklopädie der Psychologie, Themenbereich D, Praxisgebiete, Serie I, Band 4 (S. 237-293). Göttingen: Hogrefe.
• Hauske S., Schwabe G., Bernstein A. (2010). Wiederverwendung multimedialer und online verfügbarer Selbstlernmodule in der Wirtschaftsinformatik: Lessons Learned. In: Breitner M., Lehner F., Staff J., Winand U. (Hrsg.). E-Learning 2010. Heidelberg: Physica.
• Lischka (2019). Fragebogens zur Evaluation von E-Learning-/ ILIAS-Pegasus-App-Anwendungen im im WiSe 19/20. Fakultät Agrarwissenschaften: Universität Hohenheim.
• Simons, P. R. J. (1992). Lernen selbständig zu lernen – ein Rahmenmodell. In H. Mandl & H. F. Friedrich (Hrsg.), Lern- und Denkstrategien. Analyse und Intervention. Göttingen: Hogrefe.