Propiedades psicométricas y estandarización de la subprueba de cálculo matemático del WRAT-4 en adolescentes colombianos

Abstract

The aim of this study was to obtain the psychometric properties of Form B of the WRAT-4 (Wide Range Achievement Test) mathematical calculation subtest in Colombian adolescents. The study included the participation of 722 students from ninth, tenth, and eleventh grades in public and private schools in Colombia. The psychometric properties were evaluated through item analysis (discrimination and difficulty indices), construct validity (exploratory and confirmatory factor analysis), reliability (KR-20 and McDonald’s omega), and the generation of normative scores, with effect size analysis and percentiles. The results showed that the subtest presented adequate discrimination indices (> .30) and item difficulty distribution ∈ (.55, .74), as well as content validity (CMIN/DF = 1.83, GFI = .93, CFI = .92, TLI = .91, RMSEA = .03, AIC = 774.38) and reliability (KR-20 = .81, ω = .71). In conclusion, the WRAT4 mathematical subtest can be used to assess arithmetic, fractions, and algebra skills in Colombian adolescents.

Keywords:

mathematics validity factor analysis high school

References

Abreu-Mendoza, R. A., Chamorro, Y., & Matute, E. (2018). Psychometric properties of the WRAT math computation subtest in Mexican adolescents. Journal of Psychoeducational Assessment, 37(8), 957-972. https://doi. org/10.1177/0734282918809793

American Educational Research Association [AERA]. (2018). Standards for educational and psychological testing. AERA.

Aragón, L. (2012). Evaluación Psicológica. Historia, Fundamentos Teóricos, conceptuales y Psicometría (1. ª ed.). Editorial El Manual Moderno.

Arango-Lasprilla, J., Rodríguez-Irizarry, W., Oliveras-Rentas, R., & Olabarrieta-Landa, L. (2018). La práctica de la neuropsicología en Puerto Rico: implicaciones para la certificación de la especialidad. Revista Iberoamericana de Neuropsicología, 1(1), 45-62. https://neuropsychologylearning.com/portfolio-item/neuropsicologia-en-puerto-rico/

Argibay, J. (2006). Técnicas psicométricas, Cuestiones de validez y confiabilidad. Subjetividad y Procesos Cognitivos, (8), 15-33. http://dspace.uces.edu.ar:8180/dspace/bitstream/handle/123456789/765/T%C3%A9cnicas_psicom%C3%A9tricas.pdf?sequence=1

Arsalidou, M., & Taylor, M. J. (2011). Is 2 + 2 = 4? Meta-analyses of brain areas needed for numbers and calculations. Neuroimage, 54(3), 2382-2393. https://doi.org/10.1016/j.neuroimage.2010.10.009

Artemenko, C., Soltanlou, M., Ehlis, A. C., Nuerk, H. C., & Dresler, T. (2018). The neural correlates of mental arithmetic in adolescents: a longitudinal fNIRS study. Behavioral and brain functions, 14, 5. https://doi. org/10.1186/s12993-018-0137-8

Butterworth, B. (2010). Foundational numerical capacities and the origins of dyscalculia. Trends in Cognitive Sciences, 14(12), 534-541. https://doi.org/10.1016/j.tics.2010.09.007

Cipresso, P., & Immekus, J. C. (Eds.). (2022). Statistical Guidelines: New Developments in Statistical Methods and Psychometric Tools. Frontiers Researh Topics.

Cohen, R., & Swerdlik, M. (2001). Pruebas y evaluación psicológica (4. ª ed.). McGraw-Hill.

Devine, A., Soltész, F., Nobes, A., Goswami, U., & Szücs, D. (2013). Gender differences in developmental dyscalculia depend on diagnostic criteria. Learning and Instruction, 27, 31-39. https://doi.org/10.1016/j.learninstruc.2013.02.004

Dorneles, B. V. (2019). Mathematical learning and its difficulties in Latin-American countries. En A. Fritz, V. G. Haase & P. Räsänen (eds.), International handbook of mathematical learning difficulties (pp. 201-212). Springer.

Dugard, P., Todman, J., & Staines, H. (2022). Approaching multivariate analysis: A practical introduction (2 ª ed.). Taylor & Francis.

Fabrigar, L. R., & Wegener, D. T. (2011). Exploratory factor analysis. Oxford University Press.

Feld, V., Taussik, I., & Azzareto, C. (2006). Test PRO-CÁLCULO. Test para la evaluación del procesamiento del número y el cálculo en niños. Paidós.

Fonseca-Aguilar, P., Olabarrieta-Landa, L., Rivera, D., Aguayo, A., Ortiz, X. A., Rabago, B. V., Agudelo, Y, Álvarez, E., & Arango-Lasprilla, J. C. (2015). Situación actual de la práctica profesional de la neuropsicología en México. Psicología desde el Caribe, 32(3), 344-364. http://www.scielo.org.co/pdf/psdc/v32n3/v32n3a02.pdf

Frangou, P., Correia, M., & Kourtzi, Z. (2018). GABA, not BOLD, reveals dissociable learning-dependent plasticity mechanisms in the human brain. Elife, 7, e35854. https://doi.org/10.7554/eLife.35854

Gilmore, C., Göbel, S. M., & Inglis, M. (2018). An Introduction to Mathematical Cognition K (1. ª ed.). Taylor y Francis Group. https://doi.org/10.4324/9781315684758

González, R., & Hornauer-Hughes, A. (2014). Cerebro y lenguaje. Revista Hospital Clínico Universidad de Chile, 25(1), 144-153. https://www.redclinica.cl/Portals/0/Users/014/14/14/Cerebro_%20y_lenguaje.pdf

Gyamfi, A., & Wren, D. G. (2022). Determining the Difficulty and Discrimination Parameters of a Mathematics Performance-Based Assessment. Creative Education, 13(11), 3483-3489. https://doi.org/10.4236/ ce.2022.1311223

Hayes, A. F., & Coutts, J. J. (2020). Use omega rather than Cronbach’s alpha for estimating reliability. But… Communication Methods and Measures, 14(1), 1-24. https://doi.org/10.1080/19312458.2020.1718629

Hebben, N., & Milberg, W. (2011). Fundamentos para la evaluación neuropsicológica (2. ª ed.). Editorial Manual Moderno.

Herrera, A. N., & León, F. A. (2022). Desarrollo del Instrumento para Evaluar la Calidad Técnica de Pruebas Psicológicas. Revista Colombiana de Psicología, 31(2), 65-76. https://doi.org/10.15446/rcp.v31n2.93018

Hoyle, R. H. (Ed.). (2012). Handbook of structural equation modeling. Guilford press. Hurtado, L. (2018). Relación entre los índices de dificultad y discriminación. Revista digital de investigación en docencia universitaria, 12(1), 273-300. http://dx.doi.org/10.19083/ridu.12.614

Klein, E., Moeller, K., Glauche, V., Weiller, C., & Willmes, K. (2013). Processing pathways in mental arithmetic—evidence from probabilistic fiber tracking. PloS one, 8(1), e55455. https://doi.org/10.1371/journal. pone.0055455

Kroesbergen, E. H., van Luit, J. E., van Lieshout, E. C., Van Loosbroek, E., & van de Rijt, B. A. (2009). Individual Differences in Early Numeracy: The Role of Executive Functions and Subitizing. Journal of Psychoeducational Assessment, 27(3), 226-236. https://doi.org/10.1177/0734282908330586

Le Corre, M., Van de Walle, G., Brannon, E. M., & Carey, S. (2006). Re-visiting the competence/performance debate in the acquisition of the counting principles. Cognitive Psychology, 52(2), 130-169. https://doi. org/10.1016/j.cogpsych.2005.07.002

Ley 1090 de 2006. Por la cual se reglamenta el ejercicio de la profesión de Psicología, se dicta el Código Deontológico y Bioético y otras disposiciones. Diario Oficial n. º 46383 del 6 de septiembre de 2006. Congreso de Colombia. https://www.funcionpublica.gov.co/eva/gestornormativo/norma.php?i=66205

Lloret-Segura, S., Ferreres-Traver, A., Hernández-Baeza, A., & Tomás-Marco, I. (2014). El análisis factorial exploratorio de los ítems: una guía práctica, revisada y actualizada. Anales de psicología/annals of psychology, 30(3), 1151-1169. https://doi.org/10.6018/analesps.30.3.199361

Looi, C., Thompson, J., Krause, B., & Kadosh, R. C. (2016). The neuroscience of mathematical cognition and learning. OECD Education Working Papers, 136. https://doi.org/10.1787/5jlwmn3ntbr7-en

Matute, E., Rosselli, M., Ardila, A., & Ostrosky-Solís, F. (2007). Evaluación neuropsicológica infantil. Manual Moderno.

Ministerio de Educación Nacional de Colombia [MinEducación]. (2022). El Ministerio de Educación Nacional pone a disposición la información estadística de educación superior 2021. MinEducación. https://snies.mineducacion. gov.co/portal/401926

Ministerio de Educación Nacional de Colombia [MinEducación] (2 de diciembre de 2021). Colombia: qué y cómo mejorar a partir de la prueba PISA. MinEducación. https://www.mineducacion.gov.co/1621/article-162392.html

Mora, C. N., Sierra, M. S., & Castro, C. (2013) Revisión de pruebas psicológicas para niños validadas o estandarizadas en Colombia [Tesis de grado]. Universidad de La Sabana, Colombia. https://intellectum.unisabana.edu. co/bitstream/handle/10818/9552/MAR%c3%8dA%20SOLEDAD%20SIERRA%20%20tesis.pdf?sequence=1&isAllowed=y

Núñez, M., & Lozano, I. (2007). The test of early mathematics ability. TEMA-3. TEA Ediciones. Organización para la Cooperación y el Desarrollo Económicos [OCDE]. (2018). PISA: 2018. Insights and interpretations. OCDE. https://www.oecd.org/content/dam/oecd/en/about/programmes/edu/pisa/publications/national-reports/pisa-2018/PISA%202018%20Insights%20and%20Interpretations%20FINAL%20PDF.pdf

Olabarrieta-Landa L., Caracuel A., Pérez-García M., Panyavin I., Morlett-Paredes A., & ArangoLasprilla J. C. (2016). The profession of neuropsychology in Spain: Results of a national survey. The Clinical Neuropsychologist, 30(8), 1335-1355. https://doi.org/10.1080/13854046.2016.1183049

Reigosa-Crespo, V., Valdés-Sosa, M., Butterworth, B., Estévez, N., Rodríguez, M., Santos, E., Torres, P., Suárez, R., & Lage, A. (2012). Basic Numerical Capacities and Prevalence of Developmental Dyscalculia: The Havana Survey. Developmental Psychology, 48(1), 123-135. https://doi.org/10.1037/a0025356

Resolución 8430 de 1993. Por la cual se establecen las normas científicas, técnicas y administrativas para la investigación en salud. Ministerio de Salud. https://www.minsalud.gov.co/sites/rid/Lists/BibliotecaDigital/ RIDE/DE/DIJ/RESOLUCION-8430-DE-1993.PDF

Rosselli, M., & Matute, E. (2011). La neuropsicología del desarrollo típico y atípico de las habilidades numéricas. Revista neuropsicología, neuropsiquiatría y neurociencias, 11(1), 123-140. https://dialnet.unirioja.es/servlet/ articulo?codigo=3640864

Siegler, R. S., & Lortie-Forgues, H. (2017). Hard lessons: Why rational number arithmetic is so difficult for so many people. Current Directions in Psychological Science, 26(4), 346-351. https://doi. org/10.1177/0963721417700129

Silver, A. M., & Libertus, M. E. (2022). Environmental influences on mathematics performance in early childhood. Nature Reviews Psychology, 1, 407-418. https://doi.org/10.1038/s44159-022-00061-z

Sueiro, J., & Pereña, J. (2015). TEDI-MATH, Test para el diagnóstico de las Competencias Básicas en Matemáticas (2. ª ed.). TEA Ediciones.

Wilkinson, G. S., & Robertson, G. J. (2006). WRAT 4 Wide Range Achievement Test. Psychological Assessment Resources.

Wechsler, D. (2007). Escala Wechsler de Inteligencia para Niños-IV. Manual Moderno.

Zacharopoulos, G., Sella, F., & Kadosh, R. C. (2021). The impact of a lack of mathematical education on brain development and future attainment. Proceedings of the National Academy of Sciences, 118(24), e2013155118. https://doi.org/10.1073/pnas.2013155118

Reference by