MÓDULO DIDÁCTICO Ineval

PRESENTACIÓN

El Instituto Nacional de Evaluación Educativa, Ineval, con el fin de documentar el proceso de producción de la evaluación del Sistema Nacional de Educación, ha desarrollado una serie de cuadernillos técnicos que sintetizan la gestión de cada unidad implicada en la generación de los diferentes instrumentos de evaluación.

EMPEZAR

Criterios generales para la elaboración de ítems

Los productos que desarrolla el Ineval, a través de la Dirección de Producción de Ítems (DPIT), deben cumplir una serie de características de calidad para aplicarse en los diferentes instrumentos de evaluación o para publicarse en los informes y la documentación que el organismo elabora. Por ello, para que se cumpla con los objetivos, la DPIT tiene el siguiente proceso de producción de ítems.

EMPEZAR

Parámetros técnicos para la elaboración de ítems

Formatos de ítems

Estructura de un ítem de evaluación

Índice

Este documento tiene como finalidad orientar la comprensión de los conceptos centrales en la producción de evaluaciones educativas en base estructurada, teniendo en consideración que el proceso evaluativo es una suma de decisiones y metodologías que deben cuidar la coherencia de cada uno de los elementos y fases que lo componen.

Recomendaciones

Ejercicios

Evaluación

Elaboración

es la creación de un ítem que elabora un especialista del área a evaluar. El especialista es capacitado desde la DPIT en los lineamientos técnicos que debe cumplir cada ítem.

EVALUACIÓN

El Ineval tiene como misión promover la calidad de la educación a través de la evaluación integral del Sistema Nacional de Educación. Se entiende como evaluación:

Al proceso que permite determinar evidencias e instrumentos para reunir, analizar, interpretar y sintetizar información que favorezca la toma de decisiones sobre las adecuaciones que se deberán hacer en los diversos ámbitos escolares; es decir, no es un fin en sí misma, sino que proporciona información a los agentes educativos para identificar los resultados alcanzados frente a los objetivos iniciales y reconsiderar aquellos aspectos que deben reforzarse. En otras palabras, la evaluación tiene sentido en la medida en que contribuye a mejorar la calidad; no es suficiente para lograrla, pero sí indispensable (Secretaría de Educación de Veracruz, 2010, pág.10).

Instrumentos usados en la evaluación

Los instrumentos usados por el Ineval para las diferentes evaluaciones y los que competen en este cuadernillo técnico son:

Prueba estandarizada es el instrumento de evaluación de referencia para la población a la que se dirige, debido a que recaba información comparable entre todos los sustentantes.

Prueba de base estructurada es aquella que contiene ítems de opción múltiple que, con diferentes formas y diseños, obtienen datos de los conocimientos y las habilidades de los sustentantes.

Ejemplo

Revisión técnica

Es la revisión efectuada por técnicos de la DPIT, en la que se constata que todo ítem cumpla los lineamientos técnicos del Instituto.

ÍTEM DE OPCIÓN MÚLTIPLE

El ítem de opción múltiple es aquel que cuenta con varias opciones de respuesta, de las cuales solo una es correcta. Está compuesto por el planteamiento, las opciones de respuesta y los argumentos.

Evalúa tus conocimientos

La evaluación permite reflejar y entender mejor la complejidad del proceso educacional y definir responsabilidades, que significan, de un lado el cumplimiento de deberes, de otro, el ejercicio de derechos

Paulo Freire

Planteamiento

Contexto

Es el primer elemento del ítem, está formado por el contexto y la instrucción.

Es el estímulo que sirve como base para que el evaluado tenga un punto de referencia concreto al momento de resolver lo que se solicita en la instrucción. El contexto puede ser un texto, una imagen, una situación, un gráfico, entre otros. El uso de estos recursos debe aportar en la resolución del ítem.

+ info

Ejemplos

Incorrecto

Correcto

Son autores latinoamericanos que ganaron el premio Nobel, excepto:

Identifique el autor latinoamericano que nunca ganó el premio Nobel.

Correcto

Incorrecto

Seleccione los organismos internacionales que participan en algunos casos de vulneración de derechos humanos.

Seleccione los organismos internacionales que intervienen en casos de vulneración de derechos humanos.

+ info

FORMATOS DE ÍTEMS

Los ítems de opción múltiple se pueden elaborar en uno de los cinco formatos establecidos por el Instituto: simple, completamiento, elección de elementos, ordenamiento o emparejamiento. Cadaelaborador decidirá el formato más adecuado a utilizar al momento de crear un ítem, de acuerdo con la operación cognitiva a evaluar, los criterios de plausibilidad, la población objetivo y su creatividad. En el caso de elaborar más de un ítem de una misma DO, se recomienda utilizar diferente formato para cada ítem.

El formato del ítem se debe adaptar a su contenido, por lo que luego de analizar la estructura, específicamente la DO, es importante determinar qué se va a plantear y qué formato es el más adecuado.

+ info

02:00

Practica lo aprendido

Ordenamiento

En este formato se presenta una lista de elementos que deben ser ordenados de acuerdo con el criterio indicado.

Planteamiento

En la instrucción se utiliza el verbo ordene u ordena, según la población objeto de evaluación.• La instrucción se coloca después del contexto y antes del listado de elementos a ordenar. En la instrucción se especifica el criterio de ordenamiento (jerárquicamente, cronológicamente, ascendentemente, secuencialmente, entre otros). • Se incluye una lista de entre cuatro y seis elementos. • Cada elemento del listado debe iniciar con mayúscula.

• Se omite cualquier signo de puntuación al final de los elementos.• Los elementos del listado deben estar relacionados al proceso, el procedimiento, las etapas, las secuencias, entre otros, que se requieren ordenar. • Los elementos se numeran empleando la barra de herramientas del sistema.

Info

02:00

Ítem de opción múltiple

+ info

Opciones de respuesta

Todos los elementos de la columna izquierda deben relacionarse con el mismo número de descripciones de la columna derecha. Es decir, si el elemento 1 se relaciona con dos descripciones, todos los demás elementos deberán relacionarse con dos.

La plausibilidad de las respuestas está determinada por el contenido de la segunda columna, no por las combinaciones de las opciones de respuesta.

Se presentan a manera de combinaciones alfanuméricas que relacionan los elementos de la columna izquierda con los de la derecha.

Las combinaciones se separan con una coma y un espacio en blanco.

Existe equilibrio en la frecuencia con la que aparecen los elementos.

Las combinaciones alfanuméricas se ordenan ascendentemente de forma horizontal como vertical, considerando en primer lugar el orden de los números y a continuación el orden alfabético de los literales.

+ ejemplo

Validación

Es la verificación conceptual. Participan varios especialistas del área a evaluar, de manera simultánea. Este equipo discierne sobre el correcto empleo del contenido de un ítem, su pertinencia en relación con el modelo, la estructura y el contexto ecuatoriano.

CONSIDERACIONES PARA LA ELABORACIÓN DE ÍTEMS DIRIGIDOS A LA POBLACIÓN INFANTIL

Considerando las particularidades de esta población objetivo se han determinado directrices específicas para que el contenido presentado sea más amigable, comprensible y no presente sesgos.

Evitar las instrucciones directas en forma imperativa. Se recomienda que la instrucción sea en forma interrogativa.

Inadecuado

Adecuado

Para la preparación de un pastel la receta indica que se debe usar 1 libra de harina, pero la cuchara medidora es de 4 onzas. ¿Cuántascucharadas de 4 onzas se deben usar para preparar el pastel?

Una estudiante debe hornear un pastel para su familia. La receta establece que debe emplear 1 libra de harina, sin embargo, su cuchara medidora solo permite medir 4 onzas exactas. Con base en esa información, ¿cuántas cucharadas de 4 onzas debe utilizar la estudiante para cumplir con lo solicitado?

Inadecuado

Adecuado

Verónica irá al zoológico y desea ver al león, por lo que observa la imagen que muestra la ubicación de los animales.

Identifica el par ordenado en que se ubica el punto E.

+ info

+ info

• Para mejorar la comprensión del ítem se deben incluir ayudas visuales (dibujos, tablas, fotos, anuncios, figuras geométricas, gráficos estadísticos, mapas, planos cartesianos, entre otros). • Se recomienda incluir una instrucción antes del contexto, para orientar la acción que realizará el evaluado “Lee el texto”, “Mira la imagen”, entre otros. • La unidad de medida solicitada en el planteamiento debe especificarse en cada opción de respuesta.

Revisión de estilo

Es la revisión y corrección de la redacción del contenido de los ítems, efectuada por técnicos de la DPIT.

PARÁMETROS TÉCNICOS PARA EL DISEÑO DE IMÁGENES

Se debe realizar en una mesa de trabajo de 10 x 10 cm para que las imágenes sean proporcionales al momento de exportarlas y subirlas al sistema. • La mesa de trabajo desde Adobe Photoshop debe ser directa: 5 x 5 cm para el planteamiento y 2,5 x 2,5 cm para las opciones de respuesta. • Las imágenes serán guardadas en formato .png, transparente y a 300 píxeles. • Se recomienda elaborar todos los gráficos del planteamiento, opciones de respuesta y argumentos en un solo archivo editable .ai, debidamente identificados y en forma ascendente. • Las imágenes no deben tener espacios vacíos (aire) alrededor de las figuras. • Solamente cuando el ítem lo requiera deberá incluirse un recuadro alrededor de las figuras de las opciones de respuesta. • Las imágenes que son elaboradas o creadas por el elaborador externo deben ser guardadas en formato .ai y luego deben ser exportadas en formato .png a 300 .ppi y transparente. • Se recomienda tener disponible el archivo editable .ai en el cual se crearon las imágenes. • Los archivos de las imágenes, específicamente de razonamiento abstracto deben tener asignado un nombre con el código generado en el sistema. • Para almacenar y resguardar imágenes se debe crear una carpeta con el nombre del proyecto que se subdividirá en carpetas.

Cromática

En las imágenes que sean de carácter plano o bidimensional, en las que sea necesario diferenciar un segmento de otro, se deben utilizar los porcentajes de grises que se detallan a continuación:

Info

Todas las imágenes descargadas de la web se pueden utilizar a color o en escala de grises .PNG, siempre que no afecten a la resolución del ítem.

En las imágenes que sean de carácter volumétrico o tridimensional, en las que sea necesario diferenciar un segmento de otro, se deben utilizar los porcentajes de grises que se detallan a continuación:

+ ejemplo

+ ejemplo

Notas: Las imágenes para la población infantil pueden emplear color, así como aquellas en las que se requiera identificar colores con su respectiva justificación. Toda imagen a utilizar, antes de ser cambiada a escala de grises, debe ser mayor a 500 píxeles. En un mismo ítem no es posible mezclar ilustraciones e imágenes, sino que se deben cargar solo imágenes o solo ilustraciones.

Bases de los planteamientos y las opciones de respuesta

La caja contenedora de forma cuadrada con módulos deberá tener una dimensión de 6 x 6 cm con 350 x 350 píxeles.

La caja contenedora de base cuadrada deberá tener una dimensión de 5 x 5 cm con 300 x 300 píxeles.

+ ejemplo

+ ejemplo

Notas: Evitar dejar espacios en blanco arriba y debajo de la imagen, excepto en las imágenes que lo requieran (abstracto).

+ ejemplo

¡Aprobación!

una vez que el ítem ha pasado por el proceso técnico de producción, el director de la DPIT lo aprueba. En cualquiera de las fases del proceso de composición de ítems, estos pueden ser rechazados, cuando no cumplan con los parámetros técnicos establecidos por el Ineval.

Ejercicios

EMPEZAR

PREGUNTA 1/5

¿Cuál de los siguientes enunciados describe correctamente una prueba de base estructurada según el Ineval?

C) Es una prueba que no tiene en cuenta la validez y confiabilidad de las respuestas y se usa solo en pequeñas poblaciones de prueba.

C) Es una prueba que contiene ítems de opción múltiple y ofrece respuestas alternas como verdaderas y falsas, identificación y ubicación de conocimientos, jerarquización, relación o correspondencia, análisis de relaciones, completación o respuesta breve, analogías, opción múltiple o multi-ítem de base común.

A) Es una prueba que recaba información comparable entre todos los sustentantes y se integra fácilmente a un proceso imparcial, transparente y de gran escala.

¡Correcto!

SIGUIENTE

PREGUNTA 2/5

¿Qué función tiene la estructura de evaluación en los proyectos e instrumentos de evaluación según el texto?

A) La estructura de evaluación define los contenidos a evaluar en cada proyecto e instrumento de evaluación, mediante niveles de desagregación jerárquicos.

C) La estructura de evaluación se encarga de la corrección y calificación de los ítems de los instrumentos de evaluación.

B) La estructura de evaluación se utiliza para realizar pruebas de validez y confiabilidad de los instrumentos de evaluación.

¡Correcto!

SIGUIENTE

PREGUNTA 3/5

¿Cuál de las siguientes afirmaciones es correcta sobre el contexto en el planteamiento de un ítem según el texto?

A) El contexto puede ser un texto, una imagen, una situación, un gráfico, entre otros, y debe aportar en la resolución del ítem sin distraer, confundir o generar pistas.

B) El contexto debe incluir múltiples problemas centrales para evaluar de manera integral al sustentante.

C) La dificultad del ítem está definida principalmente por la complejidad del contexto presentado.

¡Correcto!

SIGUIENTE

PREGUNTA 4/5

¿Cuál de las siguientes afirmaciones describe correctamente un distractor plausible en las opciones de respuesta de un ítem?

C) Un distractor plausible es una opción incorrecta que debe ser fácil de identificar y descartar para los evaluados con conocimiento básico del tema.

A) Un distractor plausible es una opción incorrecta que debe ser completamente diferente en contexto y categoría a la respuesta correcta.

B) Un distractor plausible es una opción incorrecta que, aunque es errada, resulta admisible dentro del contexto del ítem y pertenece al mismo campo semántico y categoría que la respuesta correcta.

¡Correcto!

SIGUIENTE

PREGUNTA 5/5

¿Cuál de las siguientes afirmaciones es correcta sobre los formatos de ítems de opción múltiple según el texto?

A) Los ítems de opción múltiple solo pueden presentarse en formato simple, que incluye un planteamiento y la respuesta correcta.

C) Es recomendable usar el mismo formato para todos los ítems de una misma Definición Operacional (DO) para mantener la consistencia.

B) Los ítems de opción múltiple se pueden elaborar en cinco formatos: simple, completamiento, elección de elementos, ordenamiento o emparejamiento, y el formato se debe elegir según la operación cognitiva a evaluar y otros criterios.

¡Correcto!

SIGUIENTE

RESULTADOS

1/5

2/5

0/5

0 correctas

1 correcta

2 correctas

3/5

4/5

5/5

3 correctas

4 correctas

5 correctas

BIBLIOGRAFÍA

Centro Nacional de Evaluación para la Educación Superior CENEVAL. (2016). Manual de criterios editoriales CENEVAL. Ciudad de México, México.

01

Ministerio de Educación, Dirección General de Evaluación de la Calidad de la Educación. (2012) Manual de elaboración de ítems. Ciudad de México, México.

02

Guerrero J. Galo. (2013). Expresión oral y escrita. Loja, Ecuador: UTPL.

03

Ramírez J. et al. (2003). Instrumentos de evaluación a través de competencias. Santiago de Chile, Kinesis.

04

Real Academia Española. (2018). Diccionario de la lengua española (22.a ed.). Consultado en http://www.rae.es/rae.html

05

Secretaría de Educación de Bachillerato. (2010). Manual para la elaboración de reactivos bajo el enfoque por competencias. México: Secretaría de Educación del Estado de Veracruz. Recuperado de: https://docentesalbatros.files.wordpress.com/2011/10/manual-para-la-elaboracionde-reactivos-_ dgb_.pdf

06

Intentalo de Nuevo

¡Muy Bien!

Opciones de respuesta

Están formadas por combinaciones numéricas (cada número se relaciona con un elemento del listado). • Todas las opciones de respuesta presentan el mismo número de elementos. • No son válidas las opciones en las que los números están ordenados de forma ascendente o descendente; 1, 2, 3, 4 o 4, 3, 2, 1. • Todos los elementos del listado deben presentarse en cada opción de respuesta, en lo posible con diferente orden. Se puede repetir un mismo elemento dos veces en la misma ubicación, debido a que puede orientar la elección de una opción de respuesta. • Los elementos de las opciones de respuesta se separan con coma y espacio.

¿Tienes una idea?

¡Que fluya la comunicación!

Con las plantillas de Genially podrás incluir recursos visuales para dejar a tu audiencia con la boca abierta. También destacar alguna frase o dato concreto que se quede grabado a fuego en la memoria de tu público e incluso embeber contenido externo que sorprenda: vídeos, fotos, audios... ¡Lo que tú quieras! ¿Necesitas más motivos para crear contenidos dinámicos? Bien: el 90% de la información que asimilamos nos llega a través de la vista y, además, retenemos un 42% más de información cuando el contenido se mueve.

• Genera experiencias con tu contenido.
• Tiene efecto WOW. Muy WOW.
• Logra que tu público recuerde el mensaje.
• Activa y sorprende a tu audiencia.

Debilidades

Contextualiza tu tema

• Planificar la estructura de tu comunicación.
• Jerarquizarla y darle peso visual a lo principal.
• Definir mensajes secundarios con interactividad.
• Establecer un flujo a través del contenido.
• Medir los resultados.

Intentalo de Nuevo

Debilidades

Contextualiza tu tema

• Planificar la estructura de tu comunicación.
• Jerarquizarla y darle peso visual a lo principal.
• Definir mensajes secundarios con interactividad.
• Establecer un flujo a través del contenido.
• Medir los resultados.

Fortalezas

Contextualiza tu tema

• Planificar la estructura de tu comunicación.
• Jerarquizarla y darle peso visual a lo principal.
• Definir mensajes secundarios con interactividad.
• Establecer un flujo a través del contenido.
• Medir los resultados.

Opciones de respuesta

Las opciones de respuesta son las alternativas que se incluyen en un ítem, a fin de que el evaluado escoja aquella que resuelve lo solicitado en el planteamiento. De estas alternativas, solo una será correcta y las otras deben ser distractores plausibles.

Un distractor plausible es una opción de respuesta incorrecta que, conforme al contexto del ítem, es admisible pero errada. Los distractores plausibles deben pertenecer al mismo campo semántico y categoría de la respuesta correcta, pero conceptualmente deben incumplir con las especificaciones solicitadas en el planteamiento.

El propósito de este tipo de alternativas es plantear distracciones que serán discriminadas por los evaluados que claramente tienen dominio sobre lo que se les cuestiona. Así se evita que los evaluados respondan correctamente un ítem por sentido común o que descarten opciones por la forma como está expresado el planteamiento.

Para construir los distractores plausibles se pueden considerar los errores comunes que cometen los evaluados en el tema a tratar, sin subestimarlos. Se pueden incluir errores de cálculo, procedimiento o hipótesis que presentan los evaluados con mayor frecuencia.

¡No te rindas!

Intentalo de Nuevo

Ayúdale a encontrar el par ordenado donde se ubica el león para que pueda dirigirse hacia ese lugar.

Intentalo de Nuevo

Intentalo de Nuevo

Intentalo de Nuevo

1, 3, 4, 2

3, 4, 2, 1

4, 1, 3, 2

4, 2, 3, 1

¡Puedes mejorar!

Intentalo de Nuevo

¡Buen trabajo!

¡No te rindas!

Fortalezas

Contextualiza tu tema

• Planificar la estructura de tu comunicación.
• Jerarquizarla y darle peso visual a lo principal.
• Definir mensajes secundarios con interactividad.
• Establecer un flujo a través del contenido.
• Medir los resultados.

Intentalo de Nuevo

Intentalo de Nuevo

Especificaciones para la instrucción:

• Se debe formular como una pregunta, y no como una frase inconclusa.
• Debe ser planteada en positivo. En caso de utilizar una negación, se debe emplear la palabra “excepto” resaltada con negrita.

• Termina en punto (.), salvo los ítems que terminan en excepto, los cuales finalizan en dos puntos (:).

• Debe ser concisa y no contener información adicional que puede ser incluida en el contexto.
• El verbo conjugado de la instrucción debe estar acorde con el formato de ítem a utilizar y la población a evaluar.

• Cuando la Definición operacional permita utilizar contexto, la instrucción debe referenciarlo utilizando expresiones como: “A partir de”, “Con base en”, “De acuerdo con” o “En función de”.
• La ubicación de la instrucción dependerá del formato de ítem a utilizar (véase en los formatos de ítems).

• No emplear los cuantificadores universales: nunca, siempre, completamente, totalmente, entre otros.

Personas con Discapacidad

• Definir a las personas con discapacidad desde una perspectiva de derechos humanos, evitando términos despectivos como "discapacitados", "lisiados", etc.

¡sigue intentando!

Intentalo de Nuevo

02:00

Lea el siguiente texto

En todo el mundo, alrededor de 2 000 000 de personas presentan esclerosis múltiple. Esta es una enfermedad del sistema nervioso central en la que las fibras nerviosas pierden su recubrimiento, compuesto por proteínas y grasa, que facilita la conducción de los impulsos eléctricos desde y hacia el cerebro. En ciertos casos, los primeros síntomas de esta enfermedad incluyen debilidad muscular, visión doble, alteraciones sensitivas, entre otros.

Axón terminal

Cuerpo celular

Vainas de mielina

Nodos de Ranvier

¿Tienes una idea?

Después de explicar cada relación, se añade, entre paréntesis, la combinación alfanumérica a la que se hace referencia, por ejemplo (1a). • Para el argumento de la opción de respuesta correcta, se explicitan las razones por las que las relaciones cumplen con la instrucción del planteamiento. • Los argumentos de los distractores plausibles deben explicar solo una relación incorrecta, es decir, deben explicar solamente por qué uno de los elementos de la columna izquierda no se relaciona con uno de los elementos de la columna derecha.