La ira y la confusión siguieron a la publicación de los resultados de la Scottish Qualification Agency (SQA) de este año, la primera de las naciones del Reino Unido en publicar resultados escolares después del COVID-19. Aproximadamente una cuarta parte de las calificaciones recomendadas por los maestros se cambiaron:la mayoría fueron rebajadas, y esto era más probable que les ocurriera a los alumnos de las zonas más pobres. Esta controversia muestra que la evaluación no es neutral:el sistema de evaluación puede beneficiar a algunos grupos de estudiantes sobre otros y requiere más que procesos técnicos para garantizar la justicia.

Si bien el gobierno escocés inicialmente defendió los resultados en nombre del mantenimiento de los estándares, tienen razón al haber reconocido ahora que el enfoque era demasiado tecnocrático y rompió un vínculo esencial entre lo que un estudiante realmente ha hecho y la calificación que recibe, que es el significado genuino de los estándares. Pero este problema no es nuevo en los resultados de este año.

Cómo funciona la evaluación

Para comprender las fortalezas y debilidades del enfoque inicial de SQA, necesitamos comparar dos enfoques diferentes de evaluación:basado en normas y basado en criterios. En la evaluación basada en criterios, el trabajo de los estudiantes se evalúa en función de criterios específicos, como la fuerza del argumento, calidad de la investigación o claridad de expresión. Todos los estudiantes son evaluados con los mismos criterios.

El número de As en un año podría subir o bajar, y subir no significa necesariamente la temida "inflación de calificaciones - donde se supone que los aumentos en las calificaciones significan una reducción en los estándares. Una gran variación puede ser poco probable pero no imposible - y la variación en sí misma no debe verse como un problema. Calificación basada en criterios se considera solo porque mantiene un vínculo entre lo que un estudiante ha hecho realmente, los criterios de calificación y la calificación que reciben.

En la evaluación basada en normas, Los resultados dependen de comparar a los estudiantes en una forma de clasificación:cuanto más alta sea su clasificación, cuanto mayor sea tu marca. Exactamente el mismo trabajo podría obtener una A un año y una C otro año, dependiendo del desempeño de otros estudiantes, en lugar de la calidad del trabajo. En el pasado, incluso había un porcentaje fijo de calificaciones cada año.

Evaluación en 2020

Cuando se cancelaron los exámenes finales de este año, la SQA pidió a los maestros que emitieran juicios basados ​​en una variedad de fuentes, incluyendo exámenes preliminares, trabajo en clase, trabajo practico, exámenes y tareas en clase. El objetivo era tener una idea amplia del nivel de aprendizaje de los estudiantes.

Siempre que los maestros tuvieran criterios comunes para los niveles de grado, este sistema tiene muchas ventajas en comparación con los exámenes tradicionales. También se animó a los profesores a hablar entre ellos sobre sus juicios. Esta forma de toma de decisiones conjunta utilizando criterios contribuye a resultados de evaluación más justos y sólidos.

La controversia se relaciona con algo llamado "moderación", cuyo objetivo es verificar la calidad, estándares y consistencia, ajustar las puntuaciones iniciales de una amplia gama de marcadores.

Los problemas surgen cuando la moderación intenta estandarizar grupos grandes, como en todo un país, y lo hace utilizando enfoques basados ​​en normas, socavando así los principios del marcado basado en criterios. La moderación basada en normas es administrativamente conveniente pero educativamente poco sólida.

Fue a través de la moderación que una cuarta parte de los estudiantes cambiaron sus calificaciones. El gobierno escocés dijo inicialmente que sin moderación el grado de aumento en las calificaciones entre los estudiantes desfavorecidos no se consideraría creíble. Para moderar los resultados, el SQA utilizó una variedad de mecanismos, incluida la comparación de los estudiantes de este año con el rendimiento promedio en su escuela en años anteriores. Si la variación se consideró demasiado grande, los resultados se ajustaron utilizando las clasificaciones proporcionadas por los profesores.

Una vez que se decide la calificación de un estudiante con referencia a sus compañeros o estudiantes anteriores, esto es un marcado basado en normas. Rompe el vínculo fundamental entre lo que un estudiante ha hecho realmente, los criterios y la calificación que merecen.

Sistema basado en estándares

Las versiones de moderación basada en normas han estado sucediendo durante décadas, en todas partes del Reino Unido y bajo gobiernos de todas las tendencias.

El SQA tiene varios procedimientos sofisticados para reducir la injusticia, pero el problema sigue siendo que el sistema asociado durante mucho tiempo con la protección de normas en el Reino Unido utiliza expectativas basadas en normas. La presión para hacerlo a menudo proviene de universidades y empleadores que quieren usar las calificaciones para facilitar la selección entre estudiantes:pero ¿es este el propósito de la escolarización o la evaluación del aprendizaje de los estudiantes?

El enfoque adoptado inicialmente este año también fue defectuoso porque el SQA no estaba comparando lo similar con lo similar. Los resultados del año anterior se basaron en gran medida en una final, examen tradicional, lo cual es muy diferente a la amplia gama de elementos que los maestros usaron para emitir juicios este año. Existe evidencia de que los enfoques tradicionales de la educación y la evaluación ponen en desventaja a los estudiantes de la clase trabajadora. El aumento en las calificaciones pre-moderadas de los estudiantes más pobres puede que no carezca de credibilidad, pero puede mostrar que los enfoques de evaluación en los que hemos confiado durante años han sido injustos y en sí mismos no creíbles.

Tomando el liderazgo del enfoque recomendado por la SQA de juicios hechos a través de discusiones profesionales, Debería haberse hecho un esfuerzo para volver a las escuelas:cualquier moderación solo puede basarse en la evidencia de una interpretación diferente de los criterios.

Consumiría mucho tiempo para los maestros y el personal de SQA, pero considere los beneficios finales en términos de rigurosidad, evaluación creíble y justa que moldeará el futuro de una generación. Lo más importante es que por ningún motivo rompemos el vínculo entre el trabajo de un alumno, los criterios y su marca.

La controversia, y el cambio de opinión del gobierno escocés, reforzar la necesidad de explorar los fundamentos de lo que llamamos estándares para que defenderlos no sea simplemente una justificación del statu quo. Los resultados de este año en Escocia no son necesariamente más o menos justos que los de años anteriores, pero probablemente injusto en nuevas formas:COVID-19 ha arrojado luz sobre el problema más amplio de la justicia y la evaluación.

Este artículo se ha vuelto a publicar de The Conversation con una licencia de Creative Commons. Lea el artículo original.