R3 psicometria

ELEMENTOS DE UN TEST

.

Especificaciones

Test referi dos a la norma

Marco general

Pasos para elaborar un test

Definicion de la variable medida

ESEncificacion

Construccion de items

Edicion

Estudio piloto

Elaboración

Se ocupan de posicionar a un individuo dentro de un grupo decomparación.

Son útiles cuando todos los alumnos del grupo examinado dominan los conocimientos básicos y se requiere evaluar a aquellos que llegan a niveles superiores.

Se utilizan para evaluar la comprensión de un individuo y habilidades en relación a un tema específico.

Se compone de preguntas que implican criterios determinados e ilustran las ñpuntuaciones de la persopna en relación con un punto designado.

Test referidos a criterio

Seleccion de otros instrumentos de medida

aplicacion del test

Propiedades psicometricas

Propiedades psicometricas

Todo proceso comienza por una explicación detallada y precisa las razones que motivan su desarrollo. Delimitar con claridad la variable objeto de medición, cual va a ser el contexto de aplicación, las circunstancias en que se va a aplicar el instrumento, el tipo de aplicación (individual, colectiva), el formato de administración (lápiz, papel, informática) y qué decisiones se van a tomar a partir de las puntuaciones (selección, diagnóstico, etc.)

El objetivo esencial de esta segunda fase es la definición operativa, semántica y sintáctica de la variable medida (AERA, APA y NCME, 2014; Carretero y Pérez, 2005; Wilson, 2005. Es importante realizar una revisión de la literatura publicada al respecto, ya que esto permite, por un lado, delimitar la variable objeto de medición y considerar las dimensiones relevantes de la misma y, por otro, identificar con claridad los comportamientos más representativos de tal variable.

En esta fase se deben describir de forma detallada y precisa aspectos concernientes a los requerimientos de aplicación del instrumento, el tipo, número, longitud, contenido y distribución de los ítems, especificaciones e instrucciones en la entrega del material y aspectos relacionados con la seguridad del mismo.

Constituye una de las etapas más cruciales dentro del proceso de elaboración del test. Los principios básicos que deben regir la construcción de cualquier banco de ítems son: representatividad, relevancia, diversidad, claridad, sencillez y comprensibilidad (Muñiz, et. al., 2005). Los ítems deben ser comprensibles para la población a la cual va dirigido el instrumento de medida, utilizando un lenguaje inclusivo y evitando en todo momento un lenguaje ofensivo y/o discriminatorio. ítems con redacción defectuosa o excesivamente vagos van a incrementar el porcentaje de varianza explicada por factores irrelevantes, con la consiguiente merma en las evidencias de validez de la prueba.

En esta fase se compone y se imprime la primera versión del test, además de construir la base de datos con las claves de corrección. Ese paso ha sido con frecuencia subestimado pese a que es esencial, pues se podría echar a perder el contenido. Buenos ítems pobremente editados dan como resultado un mal test. Se puede haber construido un buen banco de ítems que de nada servirá si luego se presentan de forma desorganizada, con errores tipográficos, o en un cuadernillo defectuoso.

La finalidad de esta fase es examinar el funcionamiento general del instrumento de medida en una muestra de participantes con características semejantes a la población objeto de interés. Esta fase es de suma importancia ya que permite detectar, evitar y corregir posibles errores, así como llevar a cabo una primera comprobación del funcionamiento del test en el contexto aplicado. Existen dos tipos de estudio piloto: Cualitativo: que permite debatir diferentes aspectos relacionados con el instrumento de medida, por ejemplo, la detección de errores, así como llevar a cabo una primera comprobación del funcionamiento del test en el contexto aplicado. Cuantitativo: Permite examinar las propiedades métricas de la versión preliminar del instrumento de medida y ha de llevarse a cabo con personas similares a las que va dirigida la prueba. En ambos casos se deben anotar de forma detallada todas las incidencias acaecidas durante la aplicación, como por ejemplo, preguntas o sugerencias de los participantes, grado de comprensión de los ítems, así como posibles errores o problemas detectados en el instrumento.

Ejemplo:

• Pruebas estandarizadas como el SAT para determinar la probabilidad de éxito de un estudiante en la universidad.
• Evaluaciones producidas comercialmente como la Prueba de habilidades básicas (CTBs), prueba de habilidades básicas de Iowa (ITBS) y la prueba de Aprovechamiento de California (CAT).
• Test de Inteligencia y evaluaciones de preparación escolar.

Ejemplo:

• Evaluación de Medición del Progreso Infantil (MSP), para reflejar un progreso adecuado los estudiantes deben tener un puntaje mínimo de 400 en matemáticas, ciencias, lectura y escritura.
• Evaluaciones aplicadas en clase, ya que todos los estudiantes del grupo tienen la misma prueba y se espera que demuestren un cierto nivel de dominio en las habilidades aprendidas.

La selección adecuada de otros instrumentos de evaluación permite recoger evidencias a favor de la validez de las puntuaciones de los participantes. La selección adecuada de otras variables de interés permite aglutinar diferentes tipos de evidencias que conduzcan a una mejor interpretación de las puntuaciones en el instrumento de medida dentro de un contexto y uso particular. Las asociaciones entre las variables son la base para la obtención de evidencias de validez de relación con variables externas, que permite la construcción de una red nomológica. La decisión de qué instrumentos se deben utilizar complementariamente con el desarrollado viene afectada tanto por cuestiones sustantivas como pragmáticas, referidas a exigencias de tiempo y lugar y, cómo no, materiales como la posibilidad de acceso al test, cuestiones económicas, etc. Evidentemente, las exigencias materiales y temporales así como las razones éticas no permiten aplicar todos los instrumentos que quisiéramos, si bien aquí no se trata de pasar cuantos más mejor, sino de seleccionar aquellos de mayor calidad científica, a partir de los cuales se pueda profundizar en el significado de nuestras puntuaciones

En esta fase de estudio de campo se incluye la selección de la muestra (tipo, tamaño y procedimiento), la aplicación propiamente dicha del instrumento de medida a los participantes y el control de calidad y seguridad de la base de datos. La representatividad y generalizabilidad de los resultados depende en gran medida de que la muestra elegida sea realmente representativa de la población objeto de estudio. Elegir una muestra pertinente en cuanto a representatividad y tamaño es esencial, si se falla en todo esto lo demás va a quedar invalidado.

Se procede al estudio de las propiedades psicométricas una vez aplicado el test a la muestra de interés, las cuáles son: análisis de los ítems, estimación de la fiabilidad de las puntuaciones, obtención de evidencias de validez (por ejemplo, estudio de la dimensionalidad, análisis del funcionamiento diferencial de los ítems, relación con variables externas) y construcción de baremos. En esta fase debe estar por encima de todo el rigor metodológico. Todos los pasos y decisiones que se tomen se deben describir con claridad y deben estar correctamente razonadas.

En último lugar, se procede a la elaboración la versión definitiva del test, se envía un informe de resultados a las partes legítimamente implicadas en el proceso de evaluación y se elabora el manual que permita su utilización a otras personas o instituciones. Dicho manual debe contener con detalla las características relevantes de la prueba. Pero esto no concluye aquí, ya que posteriores estudios deberán seguir recogiendo ecidencias de validez que permitan tomar decisiones fundadas a partir de las puntuaciones de las personas.