Zusammenfassung
Die Messung domänenspezifischer Kompetenzen von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf (SFB) stellt eine Herausforderung für das Nationale Bildungspanel dar. Im Rahmen zusätzlicher Machbarkeitsstudien ist das Nationale Bildungspanel bestrebt, reliable und zu Schülerinnen und Schülern ohne sonderpädagogischen Förderbedarf vergleichbare Kompetenztestungen für Schülerinnen und Schüler mit SFB zu ermöglichen. In dieser Studie wird der Frage nachgegangen, wie die Lesekompetenz und die mathematische Kompetenz von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf im Bereich Lernen (SFB-L) reliabel erfasst werden können. Zu diesem Zweck wurden sowohl die Lesekompetenz (N = 404) als auch die mathematische Kompetenz (N = 1.098) von Schülerinnen und Schülern mit SFB-L der Klassestufe 9 getestet. Neben dem Standard-Test, der ursprünglich für Schülerinnen und Schüler ohne SFB-L entwickelt wurde, wurde eine adaptierte Testversion zur Erfassung der Lesekompetenz eingesetzt. Zur Erfassung der mathematischen Kompetenz wurden zwei adaptierte Testversionen verwendet, die auf die Bedürfnisse von Schülerinnen und Schülern mit SFB-L angepasst worden waren. Die Daten wurden mit Modellen der Item- Response-Theorie ausgewertet. Die Ergebnisse zur Passung von Aufgabenschwierigkeit und Personenfähigkeit zeigen für beide Kompetenzdomänen, dass die Aufgaben aus den Standard-Tests für Schülerinnen und Schüler mit besonderem Förderbedarf tendenziell zu schwierig sind. Zudem ist die Trennschärfe vieler Aufgaben gering. Mit den adaptierten Testversionen wird eine deutlich bessere Passung von Aufgabenschwierigkeit und Personenfähigkeit erreicht. Entsprechend resultieren bessere Kennwerte für die Güte der Aufgaben. Wir stellen die Ergebnisse in den Kompetenzbereichen Lesen und Mathematik gegenüber und gehen auf domänenübergreifende Implikationen für die Testung von Schülerinnen und Schülern mit besonderem Förderbedarf ein.
Abstract
Measuring domain-specific competencies of students with special educational needs (SEN) represents a challenge for the National Educational Panel Study (NEPS). In order to enable the assessment of students with SEN, the NEPS has set up feasibility studies in which the possibility of obtaining reliable test scores that are comparable to test scores of students without SEN is analyzed. In this study, we address the question of how the reading competence and the mathematical competence of students with special educational needs in learning (SEN-L) may reliably be assessed.
For this purpose, students with SEN-L in grade 9 completed a test of reading competence (N = 404) as well as a test of mathematical competence (N = 1.098). In addition to the standard test that was originally developed for students without SEN-L, reading competence was assessed with an adapted test version. Mathematical competence was tested with two different adapted test versions aiming at meeting students’ special needs.
Data were analyzed using models of Item Response Theory. For both domains, the results on test targeting reveal that the items of the standard tests are rather hard for students with SEN-L. Concerning item fit, item discrimination is low for many items of the tests. In turn, the adapted test versions yield a better test targeting and item fit improved substantially. We compare the results in both domains – reading competence and mathematical competence – and derive implications for the assessment of students with SEN-L.
Access this chapter
Tax calculation will be finalised at checkout
Purchases are for personal use only
Preview
Unable to display preview. Download preview PDF.
Similar content being viewed by others
Literatur
Aßmann, C., Steinhauer, H. W., Kiesl, H., Koch, S., Schönberger, B., Müller-Kuller, A., et al. (2011). Sampling designs of the National Educational Panel Study: Challenges and solutions. Zeitschrift für Erziehungswissenschaft 14, 51–65. doi:10.1007/s11618-011- 0181–8
von Aster, M., Weinhold Zulauf, M., & Horn, R. (2006). ZAREKI-R.: Neuropsychologische Testbatterie für Zahlenverarbeitung und Rechnen bei Kindern. München: Pearson.
Autorengruppe Bildungsberichterstattung. (2012). Bildung in Deutschland 2012. Ein indikatorengestützter Bericht mit einer Analyse zur kulturellen Bildung im Lebenslauf. Bielefeld: Bertelsmann Verlag.
Barkow, I., Leopold, T., Raab, M., Schiller, D., Wenzig, K., Blossfeld, H.-P., et al. (2011). RemoteNEPS: Data dissemination in a collaborative workspace. Zeitschrift für Erziehungswissenschaft 14, 315–325. doi:10.1007/s11618-011-0192-5
Blossfeld, H.-P., & von Maurice, J. (2011). Education as a lifelong process. Zeitschrift für Erziehungswissenschaft 14, 19–34. doi:10.1007/s11618-011-0179-2
Blossfeld, H.-P., von Maurice, J., & Schneider, T. (2011). The National Educational Panel Study: Need, main features, and research potential. Zeitschrift für Erziehungswissenschaft 14, 5–17. doi:10.1007/s11618-011-0178-3
Bos, W., Bonsen, M., Baumert, J., Prenzel, M., Selter, C., & Walther, G. (2008). TIMSS 2007. Mathematische und naturwissenschaftliche Kompetenzen von Grundschulkindern in Deutschland im internationalen Vergleich. Münster: Waxmann.
Bos, W., Bonsen, M., Gröhlich, C., Guill, K., May, P., Rau, A., et al. (2009). KESS 7: Kompetenzen und Einstellungen von Schülerinnen und Schülern – Jahrgangsstufe 7. Hamburg, Germany: Behörde für Bildung und Sport.
Duchhardt, C., & Gerdes, A. (2013). NEPS Technical Report for Mathematics – Scaling results of Starting Cohort 4 in ninth grade (NEPS Working Paper No. 22). Bamberg: University of Bamberg, National Educational Panel Study.
Ehmke, T., Duchhardt, C., Geiser, H., Grüßing, M., Heinze, A., & Marschik, F. (2009). Kompetenzentwicklung über die Lebensspanne: Erhebung von mathematischer Kompetenz im Nationalen Bildungspanel. In A. Heinze, & M. Grüßing (Hrsg.), Mathematiklernen vom Kindergarten bis zum Studium: Kontinuität und Kohärenz als Herausforderung für den Mathematikunterricht (S. 313–327). Münster: Waxmann.
Gebhardt, M., Oelkrug, K., & Tretter, T. (2013). Das mathematische Leistungsspektrum bei Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in der Sekundarstufe. Ein explorativer Querschnitt der fünften bis neunten Klassenstufe in Münchner Förderschulen. Empirische Sonderpädagogik 2, 130–143.
Gebhardt, M., Schwab, S., Schaupp, H., Rossmann, P., & Gasteiger Klicpera, B. (2012). Heterogene Gruppen in mathematischen Grundfertigkeiten: Eine explorative Erkundung der Fähigkeiten im Grundrechnen in Integrationsklassen der 5. Schulstufe. Zeitschrift für Inklusion-Online 1-2. http://www.inklusion-online.net/index.php/inklusion-online/article/view/69/69
Gehrer, K., Zimmermann, S., Artelt, C., & Weinert, S. (2013). NEPS framework for assessing reading competence and results from an adult pilot study. Journal for Educational Research Online 5, 50–79.
Gehrer, K., Zimmermann, S., Artelt, C., & Weinert, S. (2012). The assessment of reading competence (including sample items for grade 5 and 9) [Scientific Use File 2012, Version 1.0.0.] Bamberg: University of Bamberg, National Educational Panel Study.
Gölitz, D., Roick, T., & Hasselhorn, M. (2006). DEMAT 4+. Deutscher Mathematiktest für vierte Klassen. Göttingen: Hogrefe.
Grünke, M. (2004). Lernbehinderung. In G. Lauth, M. Grünke, & J. Brunstein (Hrsg.), Interventionen bei Lernstörungen (S. 65–77). Göttingen: Hogrefe.
Haberkorn, K., Pohl, S., Hardt, K., & Wiegand, E. (2012). NEPS technical report for reading – Scaling results of starting cohort 4 in ninth grade (NEPS Working Paper No. 16). Bamberg: Otto-Friedrich-Universität, Nationales Bildungspanel.
Hammill, D. D. (1990). On defining learning disabilities: An emerging consensus. Journal of Learning Disabilities 23, 74–84. doi:10.1177/002221949002300201
Heydrich, J., Weinert, S., Nusser, L., Artelt, C., & Carstensen, C. H. (2013). Including students with special educational needs into large-scale assessments of competencies: Challenges and approaches within the German Educational Panel Study (NEPS). Journal for Educational Research Online 5, 217–240.
Joncas, M. (2007). PIRLS 2006 sample design. In M. Martin, I. Mullis, & A. Kennedy (Hrsg.), PIRLS 2006 technical report. (S. 35–49). Boston, MA: Boston College.
Jude, N., & Klieme, E. (2010). Das Programme for International Student Assessment (PISA). In E. Klieme, C. Artelt., J. Hartig, N. Jude, O. Köller, M. Prenzel et al. (Hrsg.), PISA 2009: Bilanz nach einem Jahrzehnt (S. 11–21) Münster: Waxmann.
Kamil, M. L., Affl erbach, P. P., Pearson, D. P., & Birr Moje, E. (2011). Reading research in a changing era: An introduction to the handbook of reading research. In M. L. Kamil, D. P. Pearson, E. Birr Moje, & P. P. Affl erbach (Hrsg.), Handbook of reading research (S. xiii–xxvi). New York: Routledge.
Kavale, K. A., & Reece, J. H. (1992). The character of learning disabilities. Learning Disability Quarterly 15, 74–94.
Kintsch, W. (2007). Comprehension: A paradigm for cognition. Cambridge, UK: Cambridge
University Press.
KMK = Sekretariat der Ständigen Konferenz der Kultusminister der Länder in der Bundesrepublik Deutschland. (2014). Sonderpädagogische Förderung in Schulen 2003 bis 2012. http://www.kmk.org/fileadmin/pdf/Statistik/Dokumentationen/Dokumentation_SoPaeFoe_2012.pdf
Kocaj, A., Kuhl, P., Kroth, A. J., Pant, H. A., & Stanat, P. (2014). Wo lernen Kinder mit sonderpädagogischem Förderbedarf besser? Ein Vergleich schulischer Kompetenzen zwischen Regel- und Förderschulen in der Primarstufe. Kölner Zeitschrift für Soziologie und Sozialpsychologie 66, 165–191.
Kocaj, A., Kuhl, P., Weirich, S., & Haag, N. (2015). Zur Validität und Messinvarianz bei der Erfassung der Kompetenzen von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Large-Scale-Assessments. In P. Kuhl, P. Stanat, B. Lütje-Klose, C. Gresch, H. A. Pant & M. Prenzel (Hrsg.), Inklusion von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen: Grundlagen und Befunde (S. 335-370). Wiesbaden: Springer VS.
Koretz, D. M. (1997). The assessment of students with disabilities in Kentucky (CSE Technical Report 431). Los Angeles, CA: CRESST/RAND Institute on Education and Training.
Kristen, C., Edele, A., Kalter, F., Kogan, I., Schulz, B., Stanat, P., et al. (2011). The education of migrants and their children across the life course. Zeitschrift für Erziehungswissenschaft 14, 121–137. doi:10.1007/s11618-011-0194-3
Lehmann, R., & Hoffmann, E. (2009). Berliner Erhebung arbeitsrelevanter Basiskompetenzen von Schülerinnen und Schülern mit dem Förderbedarf „Lernen“. Münster: Waxmann
Lutkus, A. D., Mazzeo, J., Zhang, J., & Jerry, L. (2004). Including special-needs students in the NAEP 1998 reading assessment part II: Results for students with disabilities and limited-English proficient students (Research Report ETS-NAEP 04-R01). Princeton, NJ: ETS.
Mazzeo, J., Carlson, J. E., Voelkl, K. E., & Lutkus, A. D. (2000). Increasing the participation of special needs students in NAEP: A report on 1996 NAEP research activities. Washington, DC: National Center for Education Statistics.
Moser Opitz, E. (2008). Zählen, Zahlbegriff, Rechnen. Theoretische Grundlagen und eine empirische Untersuchung zum mathematischen Erstunterricht in Sonderklassen. Bern: Haupt.
Müller, K., Sälzer, C., Mang, J., & Prenzel, M. (2014, März). Kompetenzen von Schülerinnen und Schülern mit besonderem Förderbedarf. Ergebnisse aus dem PISA 2012 Förderschul-Oversample. Vortrag auf der 2. Tagung der Gesellschaft für Empirische Bildungsforschung, Frankfurt.
OECD (2003). The PISA 2003 assessment framework: Mathematics, reading, science and problem-solving knowledge and skills. Paris: OECD.
OECD (2012). PISA 2009 Technical Report. Paris: OECD.
Olson, J. F., Martin, M. O., & Mullis, I. V. S. (2008). TIMSS 2007 Technical Report. Boston: TIMSS & PIRLS International Study Center.
Pearson (2011, October 7th). Pearson to develop framework for OECD’s PISA students assessment for 2015 [Pearson announcement]. http://www.pearson.com/news/2011/october/pearson-to-develop-frameworks-for-oecds-pisa-student-assessment-f.html?article=true
Pellegrino, J., Chudowsky, N., & Glaser, R. (2001). Knowing what students know: The science and design of educational assessment. Washington, DC: National Academy Press.
Pitoniak, M. J., & Royer, J. M. (2001). Testing accommodations for examinees with disabilities: A review of psychometric, legal, and social policy issues. Review of Educational Research 71, 53–104. doi:10.3102/00346543071001053
Pohl, S. (2014). Longitudinal multi-stage testing. Journal of Educational Measurement, 50, 447–468. doi: 10.1111/jedm.12028
Pohl, S., & Carstensen, C. H. (2012). NEPS Technical Report: Scaling the data of the competence test (NEPS Working Paper No. 14). Bamberg, Germany: University of Bamberg, National Educational Panel Study.
Pohl, S., Südkamp, A., Hardt, K., Carstensen, C., & Weinert, S. (2015). Testability and testtaking behavior of students with special educational needs in large-scale assessments. Manuskript eingereicht zur Publikation.
Prenzel, M., Sälzer, C., Klieme, E., & Köller, O. (2013). PISA 2012. Fortschritte und Herausforderungen in Deutschland. Münster: Waxmann.
Rasch, G. (1960). Probabilistic models for some intelligence and attainment tests. Copenhagen: Nielsen & Lydiche (Expanded Edition, Chicago, University of Chicago Press, 1980).
Richter, D., Engelbert, M., Böhme K., Haag, N., Hannighofer, J. et al. (2012). Anlage und Durchführung des Ländervergleichs. In: P. Stanat, H. A. Pant, K. Böhme, & D. Richter (Hrsg.), Kompetenzen von Schülerinnen und Schülern am Ende der vierten Jahrgangsstufe in den Fächern Deutsch und Mathematik – Ergebnisse des IQB-Ländervergleichs 2011. Münster: Waxmann.
Schaupp, H., Lenart, F., & Holzer, N. (2010). Eggenberger Rechentest (ERT 4+): Diagnostikum für Dyskalkulie für das Ende der 4. Schulstufe bis der Mitte der 5. Schulstufe. Bern: Huber.
Stanat, P., Pant, H. A., Böhme, K., & Richter, D. (2012). Kompetenzen von Schülerinnen und Schülern am Ende der vierten Jahrgangsstufe in den Fächern Deutsch und Mathematik: Ergebnisse des IQB-Ländervergleichs 2011. Münster: Waxmann.
Südkamp, A., Pohl, S., & Weinert, S. (2015). Assessing reading comprehension of students with special educational needs—Identification of appropriate testing accommodations. Manuskript eingereicht zur Publikation.
Swanson, H. L. (1999). Reading research for students with LD: A meta-analysis of intervention outcomes. Journal of Learning Disabilities 32, 504–532. doi:10.1177/002221949903200605
Taboada, A., Tonks, S. M., Wigfield, A., & Guthrie, J. T. (2009). Effects of motivational and cognitive variables on reading comprehension. Reading and Writing 22, 85–106. doi:10.1007/s11145-008-9133-y
Thurlow, M. L. (2010). Steps toward creating fully accessible reading assessments. Applied Measurement in Education 23, 121–131. doi:10.1080/08957341003673765
Thurlow, M. L., Bremer, C., & Albus, D. (2008). Good news and bad news in disaggregated subgroup reporting to the public on 2005-2006 assessment results (Technical Report 52). Minneapolis, MN: University of Minnesota, National Center on Educational Outcomes.
Weinert, S., Artelt, C., Prenzel, M., Senkbeil, M., Ehmke, T., & Carstensen, C. H. (2011). Development of competencies across the life span. Zeitschrift für Erziehungswissenschaft 14, 67–86. doi:10.1007/s11618-011-0182-7
Wright, B. D., & Masters, G. N. (1982). Rating scale analysis: Rasch measurement. Chicago: MESA Press.
Wu, M., Adams, R. J., Wilson, M., & Haldane, S. (2007). Conquest 2.0. [Computer Software] Camberwell, Australia: ACER Press.
Xu, X., Sikali, E., Oranje, A., & Kulick, E. (2011, April). Multi-stage testing in educational survey assessments. Paper presented at the annual meeting of the National Council on Measurement in Education (NCME), New Orleans, LA.
Yamamoto, K., & Everson, H. T. (1995). Modeling the Mixture of IRT and Pattern Responses by a Modified HYBRID Model (ETS Research Report RR-95-16). Princeton, NJ: Educational Testing Service.
Ysseldyke, J. E., Thurlow, M. L., Langenfeld, K. L., Nelson, R. J., Teelucksingh, E., & Seyfarth, A. (1998). Educational results for students with disabilities: What do the data tell us? (Technical Report 23). Minneapolis, MN: University of Minnesota, National Center on Edcational Outcomes.
Author information
Authors and Affiliations
Corresponding author
Editor information
Editors and Affiliations
Rights and permissions
Copyright information
© 2015 Springer Fachmedien Wiesbaden
About this chapter
Cite this chapter
Südkamp, A., Pohl, S., Hardt, K., Jordan, AK., Duchhardt, C. (2015). Kompetenzmessung in den Bereichen Lesen und Mathematik bei Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf. In: Kuhl, P., Stanat, P., Lütje-Klose, B., Gresch, C., Pant, H., Prenzel, M. (eds) Inklusion von Schülerinnen und Schülern mit sonderpädagogischem Förderbedarf in Schulleistungserhebungen. Springer VS, Wiesbaden. https://doi.org/10.1007/978-3-658-06604-8_9
Download citation
DOI: https://doi.org/10.1007/978-3-658-06604-8_9
Published:
Publisher Name: Springer VS, Wiesbaden
Print ISBN: 978-3-658-06603-1
Online ISBN: 978-3-658-06604-8
eBook Packages: Humanities, Social Science (German Language)