Katja Buntins
Current Organizations / Institutes
The organizations/institutes from the scholar's latest article
Research Subjects
Katja Buntins has a total of 17 co-authors. Here are the top co-authors by number of shared publications:
- Michael Kerres
University of Duisburg-Essen
4 shared publications - Daniel Diekmann
Ruhr University Bochum
2 shared publications - Marc Rittberger
DIPF | Leibniz Institute for Research and Information in Education
2 shared publications - Maria Klar
University of Duisburg-Essen
2 shared publications - Marion Händel
Ansbach University of Applied Sciences
2 shared publications - Melissa Bond
University College London
2 shared publications
Latest Publications
- Open Access
- 13 October 2026
- Published by International Association of Online Engineering (IAOE) in International Journal of Emerging Technologies in Learning (iJET)
- Vol. 21 (04) , 18–40
Toward an Integrative Framework for Valid Research in Educational Technology: Insights from Virtual Reality Learning
This methodological and conceptual contribution develops an integrative framework for research on educational technology that systematically links internal and external validity, different research approaches, and heterogeneous outcome dimensions. Drawing on the recurring disappointment regarding the limited learning benefits of digital technologies— illustrated by the example of virtual reality (VR)—the article argues that technological innovations can only be adequately assessed if their effects can be clearly attributed and transferred to authentic learning contexts. Using central research logics, including media comparison, value-added, and ATI/LTI approaches, it shows how the choice of research approach shapes the type of evidence generated and the associated validity requirements. In addition, the article extends existing outcome models by incorporating a behavioral dimension to reflect the multidimensional nature of teaching and learning processes. The proposed framework illustrates that progress in educational technology research depends on the combination of methodological rigor, context-sensitive evidence, and multidimensional outcome assessment. Finally, practice-oriented recommendations are presented to support cumulative evidence development, transparent reporting standards, and the integration of laboratory and field research.
- 13 October 2026
- Published by International Association of Online Engineering (IAOE) in International Journal of Emerging Technologies in Learning (iJET)
- Vol. 21 (04) , 18–40
Open AccessToward an Integrative Framework for Valid Research in Educational Technology: Insights from Virtual Reality Learning
This methodological and conceptual contribution develops an integrative framework for research on educational technology that systematically links internal and external validity, different research approaches, and heterogeneous outcome dimensions. Drawing on the recurring disappointment regarding the limited learning benefits of digital technologies— illustrated by the example of virtual reality (VR)—the article argues that technological innovations can only be adequately assessed if their effects can be clearly attributed and transferred to authentic learning contexts. Using central research logics, including media comparison, value-added, and ATI/LTI approaches, it shows how the choice of research approach shapes the type of evidence generated and the associated validity requirements. In addition, the article extends existing outcome models by incorporating a behavioral dimension to reflect the multidimensional nature of teaching and learning processes. The proposed framework illustrates that progress in educational technology research depends on the combination of methodological rigor, context-sensitive evidence, and multidimensional outcome assessment. Finally, practice-oriented recommendations are presented to support cumulative evidence development, transparent reporting standards, and the integration of laboratory and field research.
- Open Access
- 16 August 2026
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 71, 233-263
Personalisierung von Prüfungen durch ChatGPT-4o?
Generative Künstliche Intelligenz (genKI) kann Lern- und Prüfungsprozesse individualisieren – je nach Einsatz kann sie dabei erweiternd oder transformierend wirken (Puentedura 2006). Zu überprüfen gilt, inwiefern solche personalisierten Prüfungen valide sind und in welchem Masse diese das Verhältnis von Standardisierung und Personalisierung in prüfungsbezogenen Prozessen verändern. Vor diesem Hintergrund untersucht die empirische Studie die Validität von zwei personalisierten Prüfungen – eine kontextualisierte, textbasierte Prüfung (erweiternd) und die Nutzung eines Prüfungsbots während der Prüfungssituation (transformierend) – anhand einer argumentativen Evidenzkette (St-Onge et al. 2017; Huggins-Manley et al. 2022), strukturiert durch die prüfungsbezogenen Prozesse scoring, administration, evaluation, decision und impact (Sinharay et al. 2025). In einem Kontrollgruppendesign (n = 18) erhielten Expert:innen u. a. aus dem Bereich Angewandte Künstliche Intelligenz entweder die von einer Lehrkraft entwickelte standardisierte Prüfung oder eine davon abgeleitete, von genKI entwickelte kontextualisierte Prüfung, die beide im Kurs «KI-Management» eines Weiterbildungsinstituts eingesetzt werden könnten. Die Ergebnisse zeigen, dass der erweiternde Personalisierungsgrad die Validität nicht signifikant beeinträchtigt oder aufwertet; ein signifikanter authentizitätsfördernder Effekt zeigt sich bei der kontextualisierten Prüfung. Für den Einsatz eines Prüfungsbots gilt: Validität ist dann gefährdet, wenn die Eigenleistung der lernenden Person nicht mehr ersichtlich ist; vorteilig wirkt der Prüfungsbot beim Geben von Feedback während und nach der Prüfung. Somit könnten Lern- und Prüfungsprozesse weiter ausdifferenziert und die Konzepte Standardisierung und Personalisierung als komplementär verstanden werden (Bates et al. 2019).
- 16 August 2026
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 71, 233-263
Open AccessPersonalisierung von Prüfungen durch ChatGPT-4o?
Generative Künstliche Intelligenz (genKI) kann Lern- und Prüfungsprozesse individualisieren – je nach Einsatz kann sie dabei erweiternd oder transformierend wirken (Puentedura 2006). Zu überprüfen gilt, inwiefern solche personalisierten Prüfungen valide sind und in welchem Masse diese das Verhältnis von Standardisierung und Personalisierung in prüfungsbezogenen Prozessen verändern. Vor diesem Hintergrund untersucht die empirische Studie die Validität von zwei personalisierten Prüfungen – eine kontextualisierte, textbasierte Prüfung (erweiternd) und die Nutzung eines Prüfungsbots während der Prüfungssituation (transformierend) – anhand einer argumentativen Evidenzkette (St-Onge et al. 2017; Huggins-Manley et al. 2022), strukturiert durch die prüfungsbezogenen Prozesse scoring, administration, evaluation, decision und impact (Sinharay et al. 2025). In einem Kontrollgruppendesign (n = 18) erhielten Expert:innen u. a. aus dem Bereich Angewandte Künstliche Intelligenz entweder die von einer Lehrkraft entwickelte standardisierte Prüfung oder eine davon abgeleitete, von genKI entwickelte kontextualisierte Prüfung, die beide im Kurs «KI-Management» eines Weiterbildungsinstituts eingesetzt werden könnten. Die Ergebnisse zeigen, dass der erweiternde Personalisierungsgrad die Validität nicht signifikant beeinträchtigt oder aufwertet; ein signifikanter authentizitätsfördernder Effekt zeigt sich bei der kontextualisierten Prüfung. Für den Einsatz eines Prüfungsbots gilt: Validität ist dann gefährdet, wenn die Eigenleistung der lernenden Person nicht mehr ersichtlich ist; vorteilig wirkt der Prüfungsbot beim Geben von Feedback während und nach der Prüfung. Somit könnten Lern- und Prüfungsprozesse weiter ausdifferenziert und die Konzepte Standardisierung und Personalisierung als komplementär verstanden werden (Bates et al. 2019).
- Open Access
- 19 January 2025
- Published by Wiley in Review of Education
- Vol. 13 (1)
Evidence syntheses in educational technology research: What is not published in English is not visible? A tertiary mapping review
Evidence syntheses, such as systematic reviews, aim to summarise the current state of research in a field, often using the publication language of a study as a criterion for inclusion or exclusion. However, this has serious implications for capturing evidence from a wider range of geographical areas, and the potential for linguistic bias. In order to explore this issue, a trilingual tertiary mapping review of 446 evidence syntheses within the field of educational technology (EdTech) and published in English, Spanish and German was undertaken, analysing the frequency of multi‐ and monolingual evidence syntheses, reasons for language choice by research teams, and the composition of research teams in multi‐ and monolingual evidence syntheses. Items were included if they were a form of evidence synthesis with an explicit method section, indexed within ERIC, Scopus, Web of Science, Dialnet, FIS‐Bildung, or Google Scholar, education‐related, and published between 1983 and May 2022. The results showed that only eight languages were considered in published syntheses, only five languages were used to construct search strings, most evidence syntheses included research published in English without explaining why, and multilingual research team composition did not predict multilingual evidence syntheses. The findings suggest the need to address publication languages not only as a formal criterion but as an integral aspect of methodological approach, influencing the content and scope of syntheses in educational research.
- 19 January 2025
- Published by Wiley in Review of Education
- Vol. 13 (1)
Open AccessEvidence syntheses in educational technology research: What is not published in English is not visible? A tertiary mapping review
Evidence syntheses, such as systematic reviews, aim to summarise the current state of research in a field, often using the publication language of a study as a criterion for inclusion or exclusion. However, this has serious implications for capturing evidence from a wider range of geographical areas, and the potential for linguistic bias. In order to explore this issue, a trilingual tertiary mapping review of 446 evidence syntheses within the field of educational technology (EdTech) and published in English, Spanish and German was undertaken, analysing the frequency of multi‐ and monolingual evidence syntheses, reasons for language choice by research teams, and the composition of research teams in multi‐ and monolingual evidence syntheses. Items were included if they were a form of evidence synthesis with an explicit method section, indexed within ERIC, Scopus, Web of Science, Dialnet, FIS‐Bildung, or Google Scholar, education‐related, and published between 1983 and May 2022. The results showed that only eight languages were considered in published syntheses, only five languages were used to construct search strings, most evidence syntheses included research published in English without explaining why, and multilingual research team composition did not predict multilingual evidence syntheses. The findings suggest the need to address publication languages not only as a formal criterion but as an integral aspect of methodological approach, influencing the content and scope of syntheses in educational research.
- Open Access
- 29 August 2024
- Published by International Council for Open and Distance Education in Open Praxis
- Vol. 16 (3) , 347-361
Open Educational Resources in K-12: Common Predictors for Creating and Reusing Fall Short
Open Praxis is a peer-reviewed open access scholarly journal focusing on research and innovation in open, distance, and flexible education. It is published by International Council for Open and Distance Education - ICDE Web of Science (ESCI) Impact Factor for 2023 is 0,9; ranked 457 out of 759 in Education and Educational Sciences in Q3. Scopus Cite Score is 3.5; ranked 453 out of 1543 in Education category in Q2 and 72 out of 2801 in Library and Information Sciences category in Q2. Facts and Figures: 2024 article acceptance rate is 33%, rejection rate is 67% (13% desk rejections - 54% rejections after review). While the number of days for acceptance is 44, the number of days for rejection is 16.
- 29 August 2024
- Published by International Council for Open and Distance Education in Open Praxis
- Vol. 16 (3) , 347-361
Open AccessOpen Educational Resources in K-12: Common Predictors for Creating and Reusing Fall Short
Open Praxis is a peer-reviewed open access scholarly journal focusing on research and innovation in open, distance, and flexible education. It is published by International Council for Open and Distance Education - ICDE Web of Science (ESCI) Impact Factor for 2023 is 0,9; ranked 457 out of 759 in Education and Educational Sciences in Q3. Scopus Cite Score is 3.5; ranked 453 out of 1543 in Education category in Q2 and 72 out of 2801 in Library and Information Sciences category in Q2. Facts and Figures: 2024 article acceptance rate is 33%, rejection rate is 67% (13% desk rejections - 54% rejections after review). While the number of days for acceptance is 44, the number of days for rejection is 16.
- Open Access
- 10 January 2024
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- p. 1-33
Material teilen? Praktiken der Entwicklung und Nutzung digitaler Unterrichtsmaterialien von Lehrpersonen an Schulen in Deutschland
Das Internet bricht etablierte Praktiken der Unterrichtsvorbereitung auf. Neue Akteure werden sichtbar und die Rolle der staatlichen Regulation wird infrage gestellt. Wie finden Lehrpersonen an Schulen Unterrichtsmaterialien und wie gehen sie mit selbst entwickelten Materialien um? Eine large-scale Untersuchung mit 1.960 Lehrpersonen aus Deutschland erfasst ihre Handlungspraktiken mit Blick auf die Informationsquellen und Formate der Kollaboration. Die Ergebnisse bestätigen vorliegende Befunde, wonach Lehrende Materialien aller Art in den Weiten des Internets – vor allem über «Google» – suchen. Sie sammeln, entwickeln diese für sich und tauschen sich kaum mit Kolleg:innen aus. Für die weitere Entwicklung eines informationellen Ökosystems für Bildung, das schulübergreifend einen Rahmen für Lehren und Lernen in Schulen schafft, gilt es, das Zusammenspiel der Akteure neu auszurichten. Neben der Bereitstellung von offenen Materialien durch private und staatliche Anbieter:innen kommt insbesondere der kollaborativen Erarbeitung und (Nach-)Nutzung eine besondere Bedeutung zu.
- 10 January 2024
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- p. 1-33
Open AccessMaterial teilen? Praktiken der Entwicklung und Nutzung digitaler Unterrichtsmaterialien von Lehrpersonen an Schulen in Deutschland
Das Internet bricht etablierte Praktiken der Unterrichtsvorbereitung auf. Neue Akteure werden sichtbar und die Rolle der staatlichen Regulation wird infrage gestellt. Wie finden Lehrpersonen an Schulen Unterrichtsmaterialien und wie gehen sie mit selbst entwickelten Materialien um? Eine large-scale Untersuchung mit 1.960 Lehrpersonen aus Deutschland erfasst ihre Handlungspraktiken mit Blick auf die Informationsquellen und Formate der Kollaboration. Die Ergebnisse bestätigen vorliegende Befunde, wonach Lehrende Materialien aller Art in den Weiten des Internets – vor allem über «Google» – suchen. Sie sammeln, entwickeln diese für sich und tauschen sich kaum mit Kolleg:innen aus. Für die weitere Entwicklung eines informationellen Ökosystems für Bildung, das schulübergreifend einen Rahmen für Lehren und Lernen in Schulen schafft, gilt es, das Zusammenspiel der Akteure neu auszurichten. Neben der Bereitstellung von offenen Materialien durch private und staatliche Anbieter:innen kommt insbesondere der kollaborativen Erarbeitung und (Nach-)Nutzung eine besondere Bedeutung zu.
- Open Access
- 21 December 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54
Editorial: Research Syntheses on Educational Technology and Learning
MedienPädagogik ist ein Open-Access-Journal und richtet sich an Fachpersonen aus Wissenschaft und Praxis, die sich mit Fragen der Vermittlung zwischen Menschen und Medien in pädagogischen Kontexten beschäftigen (Medienpädagogik). Die Zeitschrift bietet ein Forum, um Fragen der medienpädagogischen Theoriebildung zu verhandeln und sich über den Stand des Fachdiskurses zu orientieren. MedienPädagogik berichtet über Beiträge zur empirischen Medienforschung und bildet eine Plattform für die methodologische Diskussion. Die Zeitschrift MedienPädagogik wird von der Sektion Medienpädagogik der Deutschen Gesellschaft für Erziehungswissenschaft (DGfE) getragen und durch die Pädagogische Hochschule Zürich unterstützt.
- 21 December 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54
Open AccessEditorial: Research Syntheses on Educational Technology and Learning
MedienPädagogik ist ein Open-Access-Journal und richtet sich an Fachpersonen aus Wissenschaft und Praxis, die sich mit Fragen der Vermittlung zwischen Menschen und Medien in pädagogischen Kontexten beschäftigen (Medienpädagogik). Die Zeitschrift bietet ein Forum, um Fragen der medienpädagogischen Theoriebildung zu verhandeln und sich über den Stand des Fachdiskurses zu orientieren. MedienPädagogik berichtet über Beiträge zur empirischen Medienforschung und bildet eine Plattform für die methodologische Diskussion. Die Zeitschrift MedienPädagogik wird von der Sektion Medienpädagogik der Deutschen Gesellschaft für Erziehungswissenschaft (DGfE) getragen und durch die Pädagogische Hochschule Zürich unterstützt.
- Open Access
- 20 December 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54, 167-191
Methodische Ansätze zu Evidenzsynthesen in der Bildungstechnologie
Methoden der Evidenzsynthese werden in den Sozialwissenschaften immer beliebter, auch im Bereich der Bildungstechnologie, wo die Menge der durchgeführten Sekundärforschung exponentiell zugenommen hat. Während Übersichten einen wertvollen Einblick in den Stand des Feldes geben können, wurden Fragen zur methodischen Strenge und Transparenz aufgeworfen. In dieser tertiären Übersichtsarbeit wird daher untersucht, wie transparent und reproduzierbar die Berichterstattung über die Methoden der Evidenzsynthese im Bereich der Bildungstechnologie in den verschiedenen Arten von Übersichtsarbeiten ist. Zu diesem Zweck wurde eine kritische Analyse einer Stichprobe von 446 Evidenzsynthesen in drei Sprachen (Englisch, Deutsch und Spanisch) durchgeführt. Systematic Review, Meta-Analyse und Literaturreview als die am häufigsten verwendeten Review-Typen wurden für die weitere Analyse. In der Stichprobe wurden Indikatoren für die Replizierbarkeit in kritischen Phasen der Überprüfung identifiziert und nach Überprüfungstyp (Forschungsfrage, Suchstrategie, Datenextraktion und Synthese) analysiert. Die Ergebnisse zeigen, dass die methodische Transparenz bei der Datenextraktion und -synthese erheblich verbessert werden kann, wobei bestimmte Arten von Übersichten bei den Indikatoren schlechter abschneiden als andere. Es werden Empfehlungen zur Verbesserung der methodischen Transparenz und Strenge der Evidenzsynthese im Bereich der Bildungstechnologie gegeben.
- 20 December 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54, 167-191
Open AccessMethodische Ansätze zu Evidenzsynthesen in der Bildungstechnologie
Methoden der Evidenzsynthese werden in den Sozialwissenschaften immer beliebter, auch im Bereich der Bildungstechnologie, wo die Menge der durchgeführten Sekundärforschung exponentiell zugenommen hat. Während Übersichten einen wertvollen Einblick in den Stand des Feldes geben können, wurden Fragen zur methodischen Strenge und Transparenz aufgeworfen. In dieser tertiären Übersichtsarbeit wird daher untersucht, wie transparent und reproduzierbar die Berichterstattung über die Methoden der Evidenzsynthese im Bereich der Bildungstechnologie in den verschiedenen Arten von Übersichtsarbeiten ist. Zu diesem Zweck wurde eine kritische Analyse einer Stichprobe von 446 Evidenzsynthesen in drei Sprachen (Englisch, Deutsch und Spanisch) durchgeführt. Systematic Review, Meta-Analyse und Literaturreview als die am häufigsten verwendeten Review-Typen wurden für die weitere Analyse. In der Stichprobe wurden Indikatoren für die Replizierbarkeit in kritischen Phasen der Überprüfung identifiziert und nach Überprüfungstyp (Forschungsfrage, Suchstrategie, Datenextraktion und Synthese) analysiert. Die Ergebnisse zeigen, dass die methodische Transparenz bei der Datenextraktion und -synthese erheblich verbessert werden kann, wobei bestimmte Arten von Übersichten bei den Indikatoren schlechter abschneiden als andere. Es werden Empfehlungen zur Verbesserung der methodischen Transparenz und Strenge der Evidenzsynthese im Bereich der Bildungstechnologie gegeben.
- Open Access
- 19 November 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54, 103-124
Kognitive Prozesse in Screening-Prozessen – Suchstrategien in der Bildungstechnologieforschung
MedienPädagogik ist ein Open-Access-Journal und richtet sich an Fachpersonen aus Wissenschaft und Praxis, die sich mit Fragen der Vermittlung zwischen Menschen und Medien in pädagogischen Kontexten beschäftigen (Medienpädagogik). Die Zeitschrift bietet ein Forum, um Fragen der medienpädagogischen Theoriebildung zu verhandeln und sich über den Stand des Fachdiskurses zu orientieren. MedienPädagogik berichtet über Beiträge zur empirischen Medienforschung und bildet eine Plattform für die methodologische Diskussion. Die Zeitschrift MedienPädagogik wird von der Sektion Medienpädagogik der Deutschen Gesellschaft für Erziehungswissenschaft (DGfE) getragen und durch die Pädagogische Hochschule Zürich unterstützt.
- 19 November 2023
- Published by OAPublishing Collective in MedienPädagogik: Zeitschrift für Theorie und Praxis der Medienbildung
- Vol. 54, 103-124
Open AccessKognitive Prozesse in Screening-Prozessen – Suchstrategien in der Bildungstechnologieforschung
MedienPädagogik ist ein Open-Access-Journal und richtet sich an Fachpersonen aus Wissenschaft und Praxis, die sich mit Fragen der Vermittlung zwischen Menschen und Medien in pädagogischen Kontexten beschäftigen (Medienpädagogik). Die Zeitschrift bietet ein Forum, um Fragen der medienpädagogischen Theoriebildung zu verhandeln und sich über den Stand des Fachdiskurses zu orientieren. MedienPädagogik berichtet über Beiträge zur empirischen Medienforschung und bildet eine Plattform für die methodologische Diskussion. Die Zeitschrift MedienPädagogik wird von der Sektion Medienpädagogik der Deutschen Gesellschaft für Erziehungswissenschaft (DGfE) getragen und durch die Pädagogische Hochschule Zürich unterstützt.
- Open Access
- 22 November 2019
- Published by Springer Nature
- p. 111-127
Learning by Doing? Reflections on Conducting a Systematic Review in the Field of Educational Technology
Drawing on an example of a large systematic review that was conducted on the use of educational technology and student engagement in higher education, we provide practical insights into how we proceeded throughout the review phases. Readers and researchers embarking on a systematic review themselves might find the contents of this chapter useful, in order to better prepare themselves for issues that can arise when undertaking such an endeavour.
- 22 November 2019
- Published by Springer Nature
- p. 111-127
Open AccessLearning by Doing? Reflections on Conducting a Systematic Review in the Field of Educational Technology
Drawing on an example of a large systematic review that was conducted on the use of educational technology and student engagement in higher education, we provide practical insights into how we proceeded throughout the review phases. Readers and researchers embarking on a systematic review themselves might find the contents of this chapter useful, in order to better prepare themselves for issues that can arise when undertaking such an endeavour.