Ahora que el primer mes de clases terminó, los padres pueden prepararse para el próximo hito del año escolar; pronto recibirán informes de las pruebas estatales que sus hijos tomaron el año pasado.

Mis estimaciones muestran que aproximadamente 26 millones de estudiantes en escuelas públicas tomaron exámenes estatales en lectura y matemáticas el año pasado. Muchos de ellos también tomaron pruebas estatales en ciencia. Estas pruebas brindan información importante a los padres sobre el desempeño de sus hijos en la escuela.

Sin embargo, mi investigación también muestra que cuando los padres reciben el informe de puntaje de sus hijos, pueden tener dificultades para separar la información importante de la información estadística.

Además, es posible que los resultados ni siquiera les brinden información precisa sobre el crecimiento académico de sus hijos.

¿Es su hijo 'competente'?

La ley Que Ningún Niño se Quede Atrás, promulgada en 2002, requirió que todos los estados establecieran "estándares de nivel de logro" en lectura y matemáticas para los grados tercero a octavo, y para un grado en la escuela secundaria, típicamente 10 o 11. Los estados también debían desarrollar pruebas para medir el nivel de "competencia" en cada prueba

La nueva ley federal aprobada en diciembre 2015, la Acta de éxito de cada estudiante (ESSA), continuará esta práctica.

Como resultado, los informes de prueba que los padres reciben clasifican a los niños en niveles de logro tales como "básico" o "competente". Cada estado decide cómo se llaman estas clasificaciones, pero al menos una categoría debe significar "competente".

Estas categorías de nivel de logro se describen en los informes de calificaciones de las pruebas, por lo que los padres pueden entender fácilmente esta información. Por ejemplo, me parece útil cada año para ver si mis hijos alcanzan el dominio en cada área temática.

Pero los resultados de los exámenes de los niños en un año dado, y su nivel de rendimiento, no son la única información reportada en algunos estados. Un nuevo índice estadístico, denominado "percentil de crecimiento de los estudiantes" está encontrando su camino en los informes Enviado a casa a los padres en los estados 11. Veintisiete estados usan este índice para evaluar también a los maestros.

Aunque una medida del “crecimiento” o progreso de los estudiantes parece una buena idea, los percentiles de crecimiento de los estudiantes aún no han sido respaldados por la investigación. De hecho varios estudios sugieren ellos no proporcionan descripciones precisas del progreso del alumno y la eficacia docente.

Qué significa eso?

¿Qué son exactamente los "percentiles de crecimiento de los estudiantes"?

Son índices propuestos en 2008 por Damian W. Betebenner, un estadístico que sugirió ser usado como una medida descriptiva de “Crecimiento académico” de los alumnos. de un año escolar al siguiente. La idea era describir el progreso de los estudiantes en comparación con sus compañeros.

Al igual que las tablas de crecimiento que usan los pediatras para describir la altura y el peso de los niños, los percentiles de crecimiento de los estudiantes varían desde un mínimo de uno a un máximo de 99. Sin embargo, su cálculo implica mucho más error que la medición física, como la altura y el peso. Nuestra investigación en la Universidad de Massachusetts Amherst indica error sustancial en su cálculo.

Los percentiles de crecimiento de los estudiantes se derivan de los puntajes de los exámenes, que no son descripciones perfectamente precisas de la competencia académica de los estudiantes: los puntajes de los exámenes están influenciados por muchos factores, como las preguntas hechas en un día en particular, el temperamento de los estudiantes, su nivel de compromiso al tomar el examen. Prueba o simplemente los métodos utilizados para puntuar sus respuestas.

El percentil de crecimiento de cada estudiante se calcula utilizando al menos dos puntajes de exámenes diferentes, generalmente separados por un año o más. Las calificaciones más recientes de un estudiante se comparan con las calificaciones más recientes de los estudiantes que obtuvieron puntuaciones similares en años anteriores. Esto es para ver cuál de esos estudiantes obtuvo puntajes más altos o más bajos este año.

El problema, sin embargo, es que cada uno de los cálculos conlleva algún error de medición. Cálculos adicionales solo componen ese error. Tanto es así que los resultados terminan con el doble de error. Sin sofisticación estadística. Puede borrar este error.

La pregunta es, ¿por qué tantos estados utilizan una medida tan poco confiable?

Usándolo para la rendición de cuentas

El uso de los percentiles de crecimiento de los estudiantes se debe en parte al deseo de ver cuánto aprenden los estudiantes en un año en particular, y de vincular ese progreso con los sistemas de responsabilidad, como la evaluación de los maestros.

En 2010, el Concurso de becas Race-to-the-Top invitó a los estados a encontrar formas innovadoras de utilizar los puntajes de los exámenes para evaluar a los maestros, lo que allanó el camino para que esta nueva medida de "crecimiento" se aplique rápidamente en muchos estados.

Sin embargo, el uso de los percentiles de crecimiento de los estudiantes comenzó antes de que se realizaran investigaciones sobre su exactitud. Solo ahora hay un cuerpo de investigación suficiente para evaluarlos, y todos los estudios apuntan a la misma conclusión: contienen muchos errores.

Además de nuestra investigación en la Universidad de Massachusetts Amherst, la investigación sobre la precisión de los percentiles de crecimiento de los estudiantes ha sido realizada por organizaciones sin fines de lucro tales como WestEd, Servicio de prueba educativa y otros instituciones de investigación. Los investigadores JR Lockwood y Katherine E. Castellano recientemente concluido que "una base de investigación sustancial ya señala que las estimaciones del porcentaje de crecimiento de los estudiantes para estudiantes individuales tienen grandes errores".

Sin embargo, muchos estados parecen desconocer estos hallazgos de investigación. Massachusetts incluso va tan lejos como para Clasificar a los niños con percentiles de crecimiento. menos que 40 como "menor crecimiento" y los niños con percentiles de crecimiento mayores que 60 como "mayor crecimiento".

Medición del desempeño docente

Como mencioné anteriormente, los estados de 27 están utilizando los percentiles de crecimiento de los estudiantes para clasificar a los docentes como "efectivos" o "ineficaces". La investigación sobre el uso de los percentiles de crecimiento para este propósito indica que podrían subestimar el rendimiento de los maestros más efectivos, y sobrestimar el rendimiento de los docentes menos efectivos: exactamente lo contrario de lo que estos estados intentan hacer con sus sistemas de evaluación de docentes.

Un informe reciente de WestEd evaluó el uso de los percentiles de crecimiento de los estudiantes para evaluar a los maestros y Concluido ellos "no alcanzaron un nivel de estabilidad" que sería necesario para decisiones tan importantes.

Volvamos a las medidas tradicionales.

Creo que los percentiles de crecimiento de los estudiantes nos han dado un paso atrás en el uso de pruebas educativas para mejorar el aprendizaje de los estudiantes.

Las medidas tradicionales del desempeño de los niños en las pruebas educativas, como si son "competentes" en un año determinado y sus calificaciones reales, dan una buena idea de qué tan bien se desempeñaron en matemáticas o lectura en un año en particular.

Estos rangos de percentiles tradicionales todavía se reportan en muchas pruebas educativas, como lo fueron cuando nosotros, como padres, estábamos en la escuela. Los rangos de percentiles tradicionales nos compararon con un grupo nacional o estatal en un año determinado, en lugar de compararnos con la forma en que otros niños en la nación o el estado estaban "creciendo" en los diferentes exámenes que tomaron en diferentes años, como los percentiles de crecimiento estudiantil intentan hacer.

Teniendo en cuenta lo que ahora sabemos sobre los percentiles de crecimiento de los estudiantes, mi consejo para los padres es no solo ignorarlos en los informes de calificaciones de sus hijos, sino también ponerse en contacto con el departamento de educación de su estado y preguntar por qué informan de una estadística tan poco confiable.

Desarrollar medidas de cuánto han aprendido los alumnos a lo largo de un año es una buena meta. Desafortunadamente, los percentiles de crecimiento de los estudiantes no hacen un buen trabajo para medir eso.

Sobre el Autor

Stephen Sireci, profesor de política educativa, Universidad de Massachusetts Amherst

Este artículo se publicó originalmente el La conversación. Leer el articulo original.

Libros relacionados:

at InnerSelf Market y Amazon