Boletín del Grupo
de Investigación RED

Tecnológico de Antioquia
No. 9
11 de noviembre de 2026
Nota de investigación Publicado en Data

Educación · PISA · Medición

PISA 2018 y 2022: antes de comparar, revisar la regla

La prueba PISA pregunta a los estudiantes de 15 años si se sienten parte de su colegio, y la OCDE informa cuánto cambió esa respuesta entre 2018 y 2022 en cada país. Para que esa comparación valga, el cuestionario tiene que haber medido lo mismo en los dos años. Este estudio lo revisó país por país. No dice por qué cambió el sentido de pertenencia ni qué país está mejor: dice dónde la comparación es confiable.

Autores Jorge A. Restrepo-Morales · Eduar Antonio Rodríguez Flores · Emerson Andrés Giraldo Betancur · Freddy Zea Restrepo

Para quiénDocentes, directivos de colegios, estudiantes, periodistas y personas interesadas en la educación. No hace falta formación previa.

ObjetivoMostrar que una comparación entre dos años de PISA solo vale si el cuestionario midió lo mismo en los dos, y dónde se cumple esa condición.

De 69 sistemas educativos con datos suficientes, en 65 el cuestionario funcionó como la misma regla en 2018 y en 2022. En Francia, Macao, Montenegro y Vietnam no: allí una parte del cambio que se ve puede venir del instrumento y no de los estudiantes.

Comparar dos mediciones con una regla que cambió es como pesarse en dos básculas distintas: la diferencia puede ser de la persona o de la báscula. Con los cuestionarios pasa igual. Si una pregunta se entiende distinto de un año al otro, el promedio se mueve aunque los estudiantes sientan lo mismo. Por eso, antes de leer un cambio, conviene revisar la regla.

El cuestionario tiene seis frases. Tres están en positivo, como «siento que pertenezco al colegio» o «hago amigos con facilidad», y tres en negativo, como «me siento solo en el colegio». Las respuestas se ordenan en dos dimensiones: sentirse parte y no sentirse excluido. En tres de los cuatro países donde la regla falló, el problema estuvo en una sola frase, y al apartarla la comparación se recupera. En Vietnam no bastó, y sus resultados no se recomiendan.

Donde sí se puede comparar, lo que cambió fue poco y no fue igual en todas partes. El cambio típico fue de 0,08 en una dimensión y de 0,07 en la otra, en una escala donde 1 es la distancia habitual entre dos estudiantes de un mismo país. Solo en 23 y en 28 de los 69 sistemas el cambio pasó de 0,10. Hubo países donde la pertenencia subió y países donde bajó.

La nota en una lámina

La regla, el cambio y lo que no se puede decir

Dónde vale la comparación, cuánto cambió la pertenencia y qué preguntas quedan abiertas.

Infografía: PISA 2018 y 2022, antes de comparar, revisar la regla. A la izquierda, ¿midió lo mismo?: de 69 sistemas educativos, en 65 la comparación se sostiene y en 4 no, que son Francia, Macao, Montenegro y Vietnam; se revisaron seis frases del cuestionario, tres en positivo y tres en negativo, de las que salen dos dimensiones, sentirse parte y no sentirse excluido; al apartar la frase «siento que pertenezco al colegio» la comparación se recupera en Francia, Macao y Montenegro, y en Vietnam no basta; con un criterio más exigente fallarían 20, entre ellos Brasil, Perú y Uruguay. En el centro, ¿cuánto cambió?: el cambio típico fue de 0,08 en sentirse parte y de 0,07 en no sentirse excluido, en una escala donde 1 es la distancia habitual entre dos estudiantes de un mismo país; en Colombia sentirse parte subió 0,12, en México no sentirse excluido bajó 0,19 y en España bajó 0,21; son cambios pequeños y van en las dos direcciones, y donde baja no sentirse excluido más estudiantes dicen sentirse solos. A la derecha, lo que el atlas no dice: no compara países entre sí; no dice por qué cambió; en 2022 cada estudiante respondió solo una parte del cuestionario; un cambio pequeño puede detectarse y aun así pesar poco. Por ahora, en casi todos los países la comparación aguanta, y lo que cambió fue poco.
Cómo leer la lámina, de izquierda a derecha. Primero, en cuántos países el cuestionario midió lo mismo. Luego, de qué tamaño fue el cambio, con tres ejemplos. Al final, lo que este estudio no permite afirmar.

Deslice la lámina para verla completa

La nota en cifras

Lo que muestran los datos

Cálculos propios con los cuestionarios de estudiantes de PISA 2018 y PISA 2022, que la OCDE publica.

65 de 69 Sistemas educativos donde el cuestionario midió lo mismo en los dos años La comparación se sostiene
4 Sistemas donde no se sostiene: Francia, Macao, Montenegro y Vietnam En tres se recupera al apartar una frase
0,08 y 0,07 Cambio típico en sentirse parte y en no sentirse excluido En una escala donde 1 es la distancia habitual entre estudiantes
20 Sistemas que fallarían con un criterio más exigente, entre ellos Brasil, Perú y Uruguay El resultado depende de qué tan estricta sea la vara

En la región el cambio no fue parejo: unos países suben en una dimensión y otros bajan en la otra

Cambio entre 2018 y 2022 en las dos dimensiones del sentido de pertenencia. Hacia la derecha, más pertenencia

−0,2−0,1+0,10Colombia+0,12−0,01Rep. Dominicana+0,12+0,01Uruguay+0,12+0,03Panamá+0,05+0,03Brasil−0,03+0,01Perú0,00−0,15Argentina+0,04−0,17Costa Rica−0,04−0,17Chile−0,09−0,12México−0,06−0,19España−0,11−0,21Sentirse parteNo sentirse excluido
Cada barra compara a un país consigo mismo: no sirve para decir que en un país haya más pertenencia que en otro. En Brasil y en Panamá los cambios no se distinguen del azar; tampoco el de Colombia en no sentirse excluido. Uruguay y Perú están entre los que fallarían con el criterio más exigente. Fuente: atlas de comparabilidad, con datos de PISA 2018 y 2022 de la OCDE; cálculos propios.

En Colombia, República Dominicana y Uruguay subió la dimensión de sentirse parte, cerca de 0,12. En México, Costa Rica, Argentina, Perú y Chile bajó la de no sentirse excluido: allí más estudiantes dijeron sentirse solos o fuera de lugar. España tuvo la caída más grande del grupo. Son movimientos pequeños, pero con tantos estudiantes encuestados se alcanzan a detectar.

Una señal de que la cuenta va bien encaminada es que coincide con la oficial. En los 65 sistemas comparables, los cambios del atlas y los del índice que publica la OCDE van casi siempre en la misma dirección: en una medida de coincidencia que va de 0 a 1, dan 0,84 y 0,93.

Con cautela

Lo que esta nota no dice

No dice por qué cambió el sentido de pertenencia. Entre las dos mediciones hubo cierres de colegios, pero el estudio compara dos fotos y no puede atribuir el cambio a una causa. Tampoco compara países entre sí: revisa si cada país se puede comparar consigo mismo en el tiempo. El cuestionario de 2022 se aplicó por partes, de modo que cada estudiante respondió solo algunas preguntas, y las reglas para juzgar el ajuste no se han probado con tantas respuestas faltantes. Además, que haya dos dimensiones puede deberse en parte a la redacción de las frases, en positivo y en negativo. Y con un criterio más exigente, los países donde la comparación falla pasan de 4 a 20.

Antes de leer un titular sobre cuánto subió o bajó un indicador de PISA, vale preguntar si el cuestionario midió lo mismo las dos veces. Para el sentido de pertenencia, la respuesta es sí en casi todos los países. Los datos, país por país, están abiertos para quien quiera revisarlos.

Para ver

El boletín en video

Un recorrido de 3 min 16 s por la nota, narrado en español con voz sintética.

Boletín RED No. 93 min 16 sEspañol

PISA 2018 y 2022: antes de comparar, revisar la regla

Ver en YouTube · descargar el video

Láminas elaboradas con las cifras del boletín y voz sintética con Gemini TTS (Google).

La fuente

El estudio

Autores
Jorge A. Restrepo-Morales y Eduar Antonio Rodríguez Flores (Universidad Autónoma del Perú); Emerson Andrés Giraldo Betancur y Freddy Zea Restrepo (Tecnológico de Antioquia).
Título original
Within-Country Comparability of the PISA School Belonging Scale, 2018-2022: Invariance Diagnostics and Latent Mean Change for 69 Education Systems.
Estado
PublicadoData (MDPI), 11(11), 283, 25 de octubre de 2026. doi.org/10.3390/data11110283
Diseño
Descriptor de datos. Para cada sistema, análisis factorial confirmatorio de dos factores con indicadores ordinales y secuencia de invarianza de medida entre los dos ciclos (configural, de umbrales, métrica y escalar); invarianza parcial donde la escalar no se sostiene; cambio en las medias latentes con errores estándar por pesos replicados. Los veredictos se contrastan con las marcas por ítem y con el índice de pertenencia de la OCDE.
Datos
OCDE: archivos de uso público del cuestionario de estudiantes de PISA 2018 y PISA 2022. El atlas incluye los sistemas con al menos 500 respuestas en los dos ciclos y no redistribuye microdatos.
Datos abiertos
Atlas con 33 archivos, el código y un diccionario de datos: doi.org/10.5281/zenodo.23499187
Proyecto
Métodos multivariados y multicriterio en la explicación de diversas realidades empresariales, fase III · código SIGP 206001326 · investigador principal Jorge A. Restrepo-Morales · financiación interna del Tecnológico de Antioquia, desde febrero de 2024.

Ficha del producto

Créditos

Producto
Boletín RED No. 9. Boletín web de divulgación con infografía y gráficos, acompañado de un video de 3 min 16 s.
Investigación
Los autores citados arriba, del Grupo de Investigación RED y sus aliados.
Textos
Jorge A. Restrepo-Morales, con un borrador asistido por IA.
Infografía y gráficos
Elaborados con código a partir de las cifras del boletín; no se usó un generador de imágenes.
Video
Guion y láminas elaborados con las cifras del boletín; voz sintética en español.
Diseño y maquetación web
Jorge A. Restrepo-Morales, con apoyo de un asistente de IA.
Institución responsable
Grupo de Investigación RED, Facultad de Ciencias Administrativas y Económicas, Tecnológico de Antioquia.

Uso de inteligencia artificial. Gemini TTS (Google) generó la voz sintética del video. Un asistente de IA (Claude, de Anthropic) apoyó el borrador de los textos, la infografía, el guion, el código de los gráficos y la maquetación. Los autores revisaron las cifras y son responsables del contenido.