Effects and interaction of linguistic and subject-specific requirements in school-related assessment tasks

Project: Research

Project participants

Description

In the school subjects of mathematics and science, assessment tasks are frequently used to diagnose and measure students’ subject-specific competences and to provide them with feedback on their learning progress. Because these tasks are often presented in written form, linguistic competences are necessary pre-requisites in order to demonstrate subject-specific cognitive competences. But even though linguistic competences play a vital role for mental model building and the activation of previous knowledge, it is still largely unclear on empirical grounds in how far the linguistic requirements of assessment tasks influence their level of difficulty and how linguistic and subject-specific cognitive item features interact with each other.The aim of this study is therefore to investigate in an experimental design, how subject-specific cognitive requirements (UV1) and linguistic requirements (UV2) of assessment items in the domains of mathematics and physics influence empirical task difficulty. Besides the main effects (UV1, UV2), effects of interaction (UV1*UV2) are measured. The goal is to investigate if, and if yes, which individual learner variables (e.g. subject-specific and linguistic competences) influence empirical task difficulty. The treatment design of the experimental study is as follows: Students solve assessment tasks differing systematically in their subject-specific cognitive and linguistic requirements. The situational context is kept stable, as is the subject-specific domain in which the tasks are situated. Each assessment task is systematically varied on three subject-specific cognitive and three linguistic requirement levels (low, intermediate, high). This results in a 3x3 variation matrix for every task. 15 tasks are created for both subjects each, which in turn are varied within the 3x3 matrix design. The task variations are presented in rotated order in 9 test booklets. Students are randomly assigned to test booklets. Power analyses have identified an optimal sample size of 1350 students. The target group are 9th graders from three federal states of Germany. Methods of IRT are used for multidimensional scaling of the obtained data. This allows us to determine the task parameters for all test tasks and to analyse the effects of the subject-specific cognitive and the linguistics task requirements. Structural Equation Models and Multilevel Analysis which controls for the nested data structure are used for moderator analysis. This analysis allows to investigate which individual student variables influence the empirical task difficulty and in how far domain specific effects can be identified. The results will serve as the basis for practice-oriented recommendations for suitable task design for objective, reliable and valid diagnostic and achievement tests for subject-specific contexts.
StatusFinished
Period01.02.1931.08.23

Activities

Research outputs

Recently viewed

Activities

  1. Fulbright International Interdisciplinary Conference "Olympism and the Fulbright Spirit: Humanism in Action" 2004
  2. Gesundheitsbezogene Analysen inklusionsspezifischer Unterrichtstätigkeiten - Belastungserleben im inklusiven Unterricht
  3. Bundesministerium für Bildung und Forschung (Externe Organisation)
  4. Social Sciences and Humanities Research Council of Canada (Externe Organisation)
  5. Impulse zum inklusiven Chemieunterricht; Dialoggespräch zwischen Praxis und Wissenschaft zum inklusiven naturwissenschaftlichen Unterricht
  6. Transdisziplinäre Entwicklungsteams in der Lehrer_innenbildung - Verbindung von Akteuren aus dem Kontext schulischer und hochschulischer Bedingungen
  7. Verzahnung von beruflicher und akademischer Bildung sicherstellen: Theoretische Implikationen eines gestaltungsorientierten Forschungsprojekts zur Qualitätssicherung hybrider Ausbildungsangebote
  8. Transdisziplinäre Entwicklungsteams in der Lehrer_innenbildung –Verbindung von Akteuren aus dem Kontext schulischer und hochschulischer Bedingungen
  9. »Medialität <-> Historizität. Zur Rolle von Mediengeschichtsforschung in der Medienwissenschaft«, WISSENSCHAFTS-, MEDIZIN- UND TECHNIKREFLEXION AUF DEM PRÜFSTAND (1. Jahrestagung der Gesellschaft für Geschichte der Wissenschaften, der Medizin und der Technik)
  10. Schulische Elternbeteiligung – Chancen und Herausforderungen für eine inklusive Schulentwicklung. Wissenschaftliche Perspektiven und praktische Ansätze.
  11. Erfolgsfaktor Mensch im digitalen Zeitalter Jahresforum für NPOs, öffentliche Verwaltung, Stiftungen und Sozialunternehmen

Publications

  1. Gerhard O. Forde: The Captivation of the Will. Luther vs. Erasmus on Freedom and Bondage, Grand Rapids / Cambridge 2005
  2. Was wollen Kinder und Jugendliche in Bezug auf Nachhaltigkeit und Konsum wissen, wie kommunizieren sie und wie informieren sie sich? Eine Literaturanalyse
  3. Kreditwürdigkeitsprognosen
  4. Hajo Diekmannshenke/Stefan Neuhaus/Uta Schaffers (Hg.): Das Komische in der Kultur
  5. Bilder im Fluge
  6. Der Prüfungsbericht
  7. Settingbasierte Gesundheitsförderung und Prävention in Deutschland
  8. Relationship between safe sex and acculturation into the gay subculture
  9. Konzerninterne Lieferung keine "Verbreitung an die Öffentlichkeit"
  10. Klatsch als müßiges Geschwätz?
  11. Textkohäsion und deren Bedeutung für das Textverständnis: Wie reagieren Lernende auf temporale Kohäsion am Beispiel eines Sachtextes?
  12. Umwelt- und Nachhaltigkeitsthemen für die breite Masse
  13. An die Philipper und gegen das Imperium Romanum? Potenziell Anti-Römisches im Philipperbrief
  14. Milena Cairo/Moritz Hannemann/Ulrike Haß/Judith Schäfer (Hg.): Episteme des Theaters. Aktuelle Kontexte von Wissenschaft, Kunst und Öffentlichkeit
  15. Beschränkung der Informationsrechte des Aufsichtsrats in Bezug auf die Rechnungslegungsunterlagen des Vorstands und den Prüfungsbericht des Abschlussprüfers
  16. Die europäische Dimension der allgemeinen Bildung
  17. Benutzung der Marke im Ausland kann Kennzeichnungskraft erhöhen
  18. Entscheidungsspielräume der Verwaltung
  19. "Also, es hat was Starkes, was Mächtiges, Männer halt ..." - Dimensionen eines militärischen Gendermanagements in Medien und Alltag
  20. Pestizidrückstände in ländlichen und urbanen Grund- und Oberflächengewässern
  21. Beschäftigungswirkungen von befristeten Arbeitsverträgen und Leiharbeit
  22. Gesund durch Gesundheitstourismus?
  23. Europa für Bürgerinnen und Bürger. Empirische Befunde im Lichte politischer Mündigkeit