Jesús Moral: "No sé si Educación ha descuidado el acompañamiento a los centros que participan en PISA"

BarcelonaJesús Moral (1959, Córdoba) es profesor de matemáticas y ha trabajado durante casi dos décadas en el departamento de Educación. Ha sido jefe de servicio de Organización de Centros, secretario del Consejo Escolar de Cataluña, secretario del Consejo Superior de Evaluación del Sistema Educativo y subdirector general de Innovación y Formación. En 2018 formó parte del equipo del departamento responsable de la organización de las pruebas PISA. En una conversación con el ARA, analiza el error que ha invalidado la inclusión de los resultados de Cataluña en las pruebas internacionales y que, por tanto, imposibilita comparar el nivel de los alumnos catalanes con el de otros territorios y con años anteriores.

¿Se imaginaba que podía pasar una situación como esta?

— No, no me lo esperaba. Seguí muy atentamente la comparecencia de la consejera, pero me faltan datos, me falta mucha información para entender qué ha pasado. Las pruebas PISA son muy importantes, no se pueden menospreciar, y su procedimiento está muy reglamentado y tiene mucha credibilidad. Existen diferentes mecanismos de supervisión y de control para que no pasen cosas extrañas como lo que ha pasado, hay muchos organismos involucrados y, por eso, son muy rigurosos y muy estrictos en el procedimiento.

¿Cómo funciona exactamente?

— La Organización para la Cooperación y el Desarrollo Económico (OCDE), que es quien impulsa las pruebas PISA, realiza un muestreo y selecciona los centros que participarán. Esta selección se comunica al Instituto Nacional de Evaluación Educativa y, junto con el departamento de Educación, se trabaja para verificar que la muestra es realmente representativa. En caso de que un centro no pueda participar, hay centros sustitutos escogidos también por la OCDE con las mismas características para no alterar la muestra. Nosotros convocábamos los centros, les explicábamos el marco conceptual de la prueba para que conocieran los criterios de aplicación y también los de exención que marca la OCDE.

Una de las hipótesis que hay es una posible confusión.

— Sí, por la coincidencia en el tiempo entre esta evaluación internacional (que se hizo entre el 31 de marzo y el 16 de mayo) y las pruebas de fin de etapa de la ESO (el 10 y el 11 de abril). Es cierto que los criterios de exención de la OCDE son diferentes de los criterios locales, donde se incluyen otros aspectos como la dislexia o la vulnerabilidad emocional, entre otros, mientras que en PISA solo se tiene en cuenta la discapacidad física, el dominio insuficiente de la lengua o la discapacidad cognitiva, emocional o conductual. Nosotros teníamos mucho cuidado para no hacerlas coincidir. Los años 2015, 2018 y 2022 las pruebas de 4º de la ESO fueron en febrero y las PISA en abril-mayo.

¿Entiende que el Gobierno no conociera la incidencia hasta marzo?

— Me extraña. Podría ser, pero la Agencia de Evaluación y Prospectiva de la Educación (APE) debería haber estado muy atenta para evitar estas incidencias y que las pruebas no salgan sesgadas. Antes se hacía desde el Consejo Superior de Evaluación, que ahora está haciendo la transición hacia la APE, que ha asumido su competencia, y no sé si esto ha implicado que se descuide el acompañamiento a los centros participantes. Se hace un estudio a fondo de los centros de la muestra, de su censo, la composición social que tienen, el dominio de la lengua del alumnado y los trastornos de aprendizaje que tienen y después lo valida el Instituto Nacional de Evaluación Educativa. Se ha de ser muy riguroso y aplicar adecuadamente los criterios. Es extraño, espero con ansias las conclusiones de las diligencias que ha abierto el departamento.

¿Había maneras de detectar el error antes?

— PISA tiene un punto débil que es la falta de validación en tiempo real antes de comenzar la prueba. Pero es responsabilidad del departamento transmitir adecuadamente la información a los centros. Los criterios de exención de la prueba son diferentes de los de nuestras evaluaciones, pero el departamento lo debe saber, se debe responsabilizar y se debe anticipar a posibles incidencias. Es su obligación. Debe movilizar inspectores e informar a directores y profesores. En 2018 nosotros incluso hicimos un Moodle con los alumnos para que estuvieran familiarizados con la prueba antes de hacerla.

¿Qué consecuencias cree que tendrá este error?

— No disponer de datos fiables tiene un impacto gravísimo en el sistema educativo porque no habrá indicadores para orientar las políticas públicas. Los últimos resultados nos indicaban que íbamos mal, y si había o no una recuperación ahora ya no lo sabremos. Además, existe el problema del descrédito y la desconfianza. Los centros educativos han pasado un curso muy complicado y ahora se suma esta incidencia grave. Además, Cataluña ha perdido las pruebas censales de competencias básicas, porque ahora las hacen muestrales, por lo que estamos en un momento complejo y no hay información fidedigna para tomar decisiones. Debemos aprovecharlo para abrir un debate profundo del modelo de evaluación que queremos en Cataluña porque no nos podemos permitir más desajustes en una situación de emergencia educativa como la que tenemos.