Metodología del Ceneval

Haz clic en este ícono para interactuar con la infografía

Regresa a la página principal

IV. Piloteo y verificación empírica

Este proceso se enfoca en analizar el funcionamiento del instrumento de evaluación y de los reactivos que lo integran. Por medio de la implementación de una o varias modalidades de piloteo se identifica la posibilidad de mejorar elementos del perfil referencial, l a delimitación del objeto de medida o la aplicación del examen. Con base en esta información se seleccionan los reactivos idóneos para incorporarlos en las versiones del examen, se identifican cuáles se utilizarán para calificar a los sustentantes y cuáles serán inhabilitados.

VIII. Emisión de resultados

La entrega de resultados permite dar a conocer el desempeño de la población que sustentó la prueba mediante un reporte, cuyo contenido sea comprensible para los usuarios y congruente con las características de la evaluación. La entrega de resultados institucional o individual a cada sustentante respeta las políticas de seguridad y confidencialidad para salvaguardar la información, la cual se resguarda para atender posibles aclaraciones y efectuar análisis con fines de investigación. El Ceneval se compromete con la entrega oportuna, clara y precisa de los resultados.

III. Construcción del banco de reactivos

Los reactivos permiten hacer inferencias sobre un conocimiento, una habilidad o una competencia. Para conformar el banco, los reactivos elaborados por especialistas en el contenido del instrumento deben someterse a una revisión técnica efectuada por personal del Ceneval; posteriormente, otros grupos validan el contenido. Los reactivos aceptados pasan por revisiones técnicas y una revisión editorial, para garantizar que estén libres de errores de contenido antes de incorporarlos en los estudios piloto.

I. Diseño de la evaluación

La aprobación institucional de un nuevo instrumento de evaluación es el punto de partida para comenzar con su desarrollo. Primero se lleva a cabo un análisis para establecer las características de la evaluación y determinar si será necesario generar un proyecto compuesto por más de un instrumento o si será uno independiente. Estas características se incorporan al formato del perfil referencial. El producto de esta fase es un insumo para el trabajo de las áreas académicas, los cuerpos colegiados y las áreas técnicas del Centro involucradas en cada proceso de la Metodología.

VI. Aplicación

La aplicación debe apegarse a las características de la evaluación de cada examen señaladas en el perfil referencial. Su implementación depende de la planeación de este proceso y de la capacitación de quienes participan, así como de los procedimientos logísticos para la distribución de materiales.

II. Delimitación del objeto de medida

Los productos que se elaboran en este proceso dependen de si se trata de un proyecto o un instrumento independiente. En el primer caso se genera un documento rector en el que se conceptualiza el objeto de evaluación y se elabora el marco de sustento (documento que plantea la definición conceptual y los niveles cognitivos que se evalúan). En el caso de los instrumentos independientes solo se elabora el marco de sustento. Con base en estos elementos se construyen las especificaciones de los reactivos, que describen lo que el sustentante debe hacer para demostrar su dominio en el contenido evaluado. Estos documentos son la materia prima para la construcción de los reactivos y aportan evidencias para sustentar la validez de las inferencias que se realicen a partir de los resultados del examen.

VII. Procesamiento de la información y calificación

Una vez que se cuenta con las respuestas de los sustentantes a un examen se procesa la información para obtener sus calificaciones. Cuando se genera más de una versión del examen se emplean procedimientos de equiparación entre versiones para que estas midan de manera equivalente a todos los que presentan la prueba. Para los sustentantes, el aspecto más importante tras resolver su examen es la calificación. Necesitan tener la certeza de que sus resultados se obtienen de manera correcta. El Ceneval sigue diversos mecanismos de control de calidad que permiten corroborar que la calificación se obtiene siguiendo altos estándares técnicos y de confidencialidad.

IX. Elaboración de material complementario

La elaboración de materiales complementarios constituye un proceso paralelo e independiente, pero ligado al desarrollo del examen, y es determinante para la implementación de la evaluación y la validez de las inferencias que se hacen con base en sus resultados. Algunos de estos materiales son la guía para el sustentante, el manual técnico y los cuestionarios de contexto.

V. Ensamble de versiones

Una vez que los reactivos transitan por las fases de elaboración, validación del contenido y revisión editorial, ya fueron probados en un estudio piloto y cumplen con los lineamientos técnicos y los criterios estadísticos institucionales son considerados para integrar distintas versiones del instrumento, con base en la estructura y el diseño del ensamble. Cada versión (cuadernillo o forma) pasa por una revisión editorial antes de su publicación.