A01

GEN-COR – Generisches kritisches Denken in Online-Lernumgebungen in der Hochschulbildung

Konzeptueller Hintergrund und Studienschwerpunkt

Studierende lernen in sehr diversen Lernumgebungen, wobei vor allem das Internet als Möglichkeit zur Informationsbeschaffung immer mehr an Bedeutung gewinnt. Dort sehen sich Studierende mit einer immer größer werdenden Zahl von Materialien und Medien konfrontiert, aus denen sie frei wählen können. Internetbasiertes Lernen stellt einen der wichtigsten Bestandteile des Studiums dar, was sowohl neue Chancen als auch Herausforderungen mit sich bringt, beispielsweise durch mangelhafte Quellen, widersprüchliche Informationen oder fehlende Transparenz darüber, welche Interessen hinter einer Quelle stehen. Studierende benötigen daher spezielle Fähigkeiten, um hochwertige Online-Informationen im Studium zu erkennen und zu nutzen. Sie müssen Relevanz, Glaubwürdigkeit und Genauigkeit bewerten können, um die Qualität der verwendeten Informationen zu ermitteln, gleichzeitig die Verwendung verzerrender oder irreführender Quellen vermeiden und sich vor Täuschung, Irrtum oder Voreingenommenheit schützen. Dennoch existiert bislang kaum Forschung über den mittel- bis langfristigen Zusammenhang zwischen der individuellen Nutzung von Online-Informationen im Studium und studienbezogenen Lernergebnissen.

 

Konzept und Forschungsziel

Critical Online Reasoning (COR) fasst drei Fähigkeiten, die zum Umgang mit Informationen im Internet nötig sind, in einem Konstrukt zusammen: Online Information Acquisition (OIA), Critical Information Evaluation (CIE) und Reasoning with Evidence, Argumentation and Synthesis (REAS). Die DFG-geförderte Forschungsgruppe CORE untersucht diese Fähigkeiten und ihre Entwicklung in einer Längsschnittstudie in mehreren Studiendomänen. Innerhalb der CORE-Forschungsgruppe, einer Kooperation des DIPF mit der Goethe-Universität Frankfurt, der Johannes Gutenberg-Universität Mainz und der Ludwig-Maximilians-Universität München, befasst sich das GEN-CORE-Projekt mit dem generischen Teil von COR-Kompetenzen, für den kein domänenspezifisches professionelles Wissen benötigt wird. Die aus vier Studiengängen (Medizin, Soziologie, Wirtschaftswissenschaften und Physik) rekrutierten Studierenden nehmen im Verlauf ihres Studiums an drei Messzeitpunkten teil, während derer sie generische und domänenspezifische Informationsprobleme mithilfe des Internets beantworten. Ihr Verhalten während der Recherche wird aufgezeichnet, anschließend formulieren sie eine Stellungnahme – so kann nachverfolgt werden, welche Studierenden welche Webseiten aufrufen, warum sie sich für oder gegen bestimmte Quellen entscheiden und welche Kriterien sie für die Beurteilung der Glaubwürdigkeit einer Webseite heranziehen. CORE ist als Längsschnittstudie angelegt, um das Niveau der Entwicklung von allgemeinen und domänenspezifischen COR-Fähigkeiten im Verlauf des Grundstudiums und ihre Beziehung zu den Lernergebnissen im Hochschulbereich zuverlässig zu messen.

Für die Erfassung von generischen COR-Fähigkeiten hat das Projekt zum Ziel, anhand der erhobenen Logdaten und Freitext-Antworten Indikatoren für COR-Fähigkeiten zu entwickeln und ein Messmodell für diese zu entwerfen. Zudem wird ihr Zusammenhang mit weiteren kognitiven Fähigkeiten untersucht. Das Projekt vergleicht die generischen COR-Kompetenzen von Studierenden der vier erhobenen Studiengänge und begleitet ihre Veränderungen während ihres Grundstudiums, um Einblick in die Entwicklung der COR-Kompetenzen zu erhalten.

 

Ergebnisse

Bisherige Ergebnisse von A01:

  • Erfolgreiche Implementation des Testverfahrens hinsichtlich der Aufgabenentwicklung, der technischen Umsetzung sowie der Erhebung von Antwort- und Prozessdaten, die zur Messung von GEN-COR-Fähigkeiten herangezogen werden können (Hartig et al., 2026; Illmann et al., in review)
  • Validierung von Indikatoren für die OIA-Facette auf der Grundlage von Prozessdaten in Verbindung mit Eye-Tracking-Daten (Ilmann et al., 2026)
  • Einblicke in die Dimensionsstruktur der CIE-Facette sowie in deren Zusammenhang mit allgemeinen kognitiven Fähigkeiten und Lesefähigkeiten (Hahnel et al., submitted)

 

Beitrag innerhalb der Forschungsgruppe CORE

A01 stellt der Forschungsgruppe Daten, Testverfahren sowie psychometrische Expertise zur Verfügung und trägt zu projektübergreifenden Analysen in allen drei CORE-Forschungsbereichen bei:

  • A02/03: Gemeinsame Stichproben und Methoden; gemeinsame GEN-DOM-COR-Analysen
  • B-Projekte: Beiträge zu Informationsumgebungen und Texteigenschaften; Bereitstellung von COR-Leistungsdaten
  • C-Projekte: Erfassung und gemeinsame Analyse von Verhaltensdaten

Publikationen

Goldhammer, F., Engelhardt, & Zehner, F. (im Druck). Performance-Based Assessment of Digital Literacies. In J. Castek, J. Coiro, E. Forzani, M. Schira Hagerman, C. Kiili, & J. Sparks (Hrsg.), International Handbook of Research in Digital Literacies. Routledge.

Hahnel, C., Kiesler, N., Naumann, J., Macedo-Rouet, M., & Rouet, J.-F. (im Druck). Core Skills of Digital Literacies: Constants in an Ever-Changing Literacy Landscape. In J. Castek, J. Coiro, E. Forzani, M. Schira Hagerman, C. Kiili, & J. R. Sparks (Hrsg.), International Handbook of Research in Digital Literacies. Routledge.

Hartig, J., Drake, P., Illmann, J., Köhler, C., Kohmer, A., & Stroganova, A. (2026). Rating procedures to evaluate generic critical online reasoning in an open Internet environment. Zeitschrift für Erziehungswissenschaft, 29(1), 19-44. https://doi.org/10.1007/s11618-025-01365-5

Illmann, J., Baumartz, D., Drake, P., Hahnel, C., Hartig, J., Köhler, C., Schrickel, M., & Goldhammer, F. (in review). Defining log data indicators for the Measurement of Generic Critical Online Reasoning (GEN-COR). JCAL (Journal of Computer Assisted Learning).

Köhler, C., & Hartig, J. (2024). ChatGPT in higher education: Measurement instruments to assess student knowledge, usage, and attitude. Contemporary Educational Technology, 16(4), ep528. https://doi.org/10.30935/cedtech/15144

 

Paper and Poster Präsentationen

Drake, P., Goldhammer, F., Hahnel, C., Hartig, J., Illmann, J., Köhler, C., & Schrickel, M. (2024, März). Erfassung der kritischen Informationsnutzung im Internet durch interaktive computerbasierte Aufgaben [Paper Präsentation]. 11. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), Potsdam, Deutschland.

Drake, P., Goldhammer, F., Hahnel, C., Hartig, J., Illmann, J., Köhler, C., & Schrickel, M. (2024, September). Zur Bedeutung kognitiver Fähigkeiten bei der kritischen Nutzung von Online-Informationen [Symposium]. Kongress der Deutschen Gesellschaft für Psychologie (DGPs), Wien, Österreich.

Drake, P., Hartig, J., Illmann, J., Koehler, C., Nagel, M. T., Kohmer, A., & Stroganova, A. (2025, Januar). Interaktive Testverfahren zur Bewertung der kritischen Informationsnutzung von Hochschulstudierenden im digitalen Zeitalter [Präsentation]. 12. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), Mannheim, Deutschland.

Hahnel, C. (2025, Januar). Wissen oder Annahmen? Beiträge zur Validierung von Interpretationen aus Logdaten [eingeladenes Symposium]. 12. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), Mannheim, Deutschland].

Hahnel, C. & Köhler, C. (2024, September). Kritischer Umgang mit (Fehl-)Informationen: Herausforderungen in Messung und Intervention [Symposium]. Kongress der Deutschen Gesellschaft für Psychologie (DGPs), Wien, Österreich.

Hahnel, C., Philippi, K., Drake, P., Grobshäuser, N., Illmann, J., Goldhammer, F., Hartig, J., & Köhler, C. (submitted). Assessing Critical Online Evaluation Skills Despite Internet-Related Standardization Challenges [Präsentation]. National Council on Measurement in Education (NCME), Toronto, Kanada.

Hahnel, C., Schrickel, M., Drake, P., Illmann, J., Hartig, J., Goldhammer, F., & Köhler, C. (2024, September). How reading skills support students in their journey through the online information landscape [Paper Präsentation]. EARLI SIG 2 Konferenz, Valencia, Spanien.

Hahnel, C., Scherer, T., Schrickel, M., Drake, P., Illmann, J., Hartig, J., Goldhammer, F., & Köhler, C. (2025, Juli). How reading skills support students in their journey through the online information landscape [Präsentation]. 16. European Congress on Psychological Assessment (ECPA), Barcelona, Spanien.

Hartig, J., Fischer, M. R., & Zlatkin-Troitschanskaia, O. (2023, September). Generische und fachspezifische Kompetenzen von Hochschulstudierenden im Umgang mit Online-Informationen – Erfassung und Entwicklung im Studium [Symposium Präsentation]. AEPF, Potsdam, Deutschland.

Hartig, J., Kohmer, A., Drake, P., Illmann, J., Köhler, C., Stroganova, A., & Zottmann, J. (2025, Januar). Bewertungsverfahren zur Beurteilung offener Antworttexte zum kritisch-reflektierten Umgang mit Online-Medien [Präsentation]. 12. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), Mannheim, Deutschland.

Hartig, J., Drake, P., Goldhammer, F., Hahnel, C., Illmann, J., & Schrickel, M. (2026, März). Vergleich von Skalierungsmethoden für Mehrfach-Ratings von Statements zur Erfassung von Critical Online Reasoning [Präsentation]. 13. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), München, Deutschland.

Illmann, J., Drake, P., Goldhammer, F., Hahnel, C., Hartig, J., Köhler, C., & Schrickel, M. (2024, September). Wie können Logdaten für die Messung des kritischen Umgangs mit Online-Informationen genutzt werden? [Symposium]. Kongress der Deutschen Gesellschaft für Psychologie (DGPs), Wien, Österreich.

Illmann, J., Drake, P. Hahnel, C., Hartig, J., Köhler, C., Schrickel, M., & Goldhammer, F. (2024, November). How can log data contribute to measuring skills in the critical use of online information? [Symposium Präsentation]. EARLI SIG 27 Conference, Trondheim, Norwegen.

Illmann, J., Baumartz, D., Drake, P., Hahnel, C., Hartig, J., Köhler, C., Schrickel, M., Stroganova, A., & Goldhammer, F. (2025, Januar). Die Definition und Validierung von Logdaten-Indikatoren für die Messung von Critical Online Reasoning [Symposium]. 12. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), Mannheim, Deutschland.

Illmann, J., Goldhammer, F., Hahnel, C., Hartig, J., Köhler, C., Schrickel, M., & Drake, P. (2025, August). Evaluating critical information usage among university students in the digital age [Präsentation]. EARLI 2025 Conference, Graz, Österreich.

Illmann, J., Dinc, Y., Hahnel, C., Küchemann, S., Ruf, V., & Goldhammer, F. (2026, März). Blickbewegungsdaten zur Validierung von Logdatenindikatoren der Online-Suchkompetenz [Präsentation]. 13. Kongress der Gesellschaft für Empirische Bildungsforschung (GEBF), München, Deutschland.

Illmann, J., Baumartz, D., Drake, P., Hahnel, C., Hartig, J., Köhler, C., Schrickel, M., & Goldhammer, F. (2026, April). Using Browser Log Data to Measure Critical Online Reasoning [Präsentation]. National Council on Measurement in Education (NCME), Los Angeles, USA.

Naumann, J., Hahnel, C., Kiesler, N., Macedo-Rouet, M., & Rouet, J.-F. (2024, April). Core skills of digital literacies: Constants in an ever-changing literacy landscape [Poster]. Annual Meeting of the American Educational Research Association (AERA), Philadelphia, USA. https://doi.org/10.3102/IP.24.2103339