EVIDENCIA DE PROBLEMAS EN LAS PSU

Aun cuando autoridades educacionales han señalado que la PSU fue "un éxito" y que funcionó perfectamente7 , ello no es así. Una prueba de selección a las universidades que funcione bien debiese tender a producir una distribución de las respuestas de los alumnos (es decir, respuestas correctas corregidas por las incorrectas) que se aproxime a una curva normal. Sobre este punto hay consenso entre los expertos en medición. El análisis de la información entregada por el DEMRE permite afirmar que la distribución original de los puntajes en la PSU-MAT no cumplió con esto.
Los expertos en medición señalan que en casos como éste -en que la distribución original presenta una marcada falta de normalidad- el mal funcionamiento de los ítems es la causa más común del fenómeno. A la fecha, el DEMRE no ha entregado, como correspondería, un informe técnico acerca del funcionamiento de la PSU. Tampoco se ha realizado una evaluación cualitativa, independiente y objetiva sobre la calidad de los ítems, dado que los facsímiles utilizados en la PSU no se han hecho públicos. Sin lugar a dudas, la rapidez con que debieron ser ensambladas las pruebas PSU, no facilitó el proceso de escrutinio de los ítems. Del mismo modo, la premura limitó la posibilidad de realizar los estudios requeridos tratándose de pruebas de altas consecuencias.8
En resumen, el sólo hecho de encontrar una distribución de puntajes originales que se aleja radicalmente de la normalidad es en sí mismo un síntoma de que algo no anda bien en un instrumento. Si a ello se suman los otros antecedentes del contexto en que las pruebas fueron desarrolladas, no hay lugar a dudas de que las pruebas PSU necesitan ser evaluadas de manera integral.

¿QUIÉN RESPONDE?

Los sucesos de esta primera aplicación de la PSU dejan en claro que el Consejo de Rectores no aquilató apropiadamente la magnitud del cambio en el sistema de admisión a las universidades al tomar la decisión de desmantelar el antiguo esquema. Posiblemente fueron influenciados por los argumentos dados por los impulsores del proyecto SIES, quienes sostuvieron que se trataba de un cambio menor y sin consecuencias.9
De haberse aplicado la PAA en conjunto con la PSU por al menos un par de años, se habría podido detectar el comportamiento diferencial de ambas pruebas, otorgando un tiempo prudente para afinar las nuevas pruebas y no se habrían producido los problemas vividos este año en el proceso de admisión.