La evaluación de la mediación en las EOI | Salamanca

La evaluación de la mediación en las EOI. Dos ejemplos exportables.

Cristina Rodríguez EOI Santiago de Compostela Josep Ma Montcada Escubairó Departament d'Educació | Generalitat de Catalunya V Congreso Internacional SICELE | Salamanca | 2021

El contexto de las Escuelas Oficiales de Idiomas

Pruebas unificadas de certificación

- Distintos idiomas - Niveles A2, B1, B2, C1 y C2- Pruebas unificadas en el contexto autonómico (distintas especificaciones)- Publicación del Real Decreto 1/2019 - A partir de las convocatorias de 2020 existe una prueba de mediación diferenciada (20% de la puntación global)

Cataluña

Primeras decisiones

• Mediación intralingüística por la realidad bilingüe de Cataluña.
• Currículum:
• B1: Transmisión de información (ME y MO) y liderazgo, gestión de la comunicación, fomentar el desarrollo de ideas (MO).
• B2: ídem pero adecuados al nivel (tipología textual, ámbitos de uso, ...)
• C1: Transmisión de información específica (ME) y respuesta personal a un input multimodal además de liderazgo, gestión de la comunicación, fomentar el desarrollo de ideas (MO).
• C2: Transmisión de información específica (ME) y respuesta personal a un input multimodal, análisis crítico de textos además de liderazgo, gestión de la comunicación, fomentar el desarrollo de ideas (MO).
• Volumen complementario:
• Transmitir información específica
• Expresar una reacción personal a textos creativos | Analizar y criticar textos creativos.
• Facilitar la interacción colaborativa entre compañeros. | Colaborar en la construcción del conocimiento.
• Gestionar la interacción. | Fomentar el discurso para construir conocimiento.

Validez del constructo

• ¿Mediación interlingüística o intralingüística?
• ¿Qué objetivos del currículum abordaremos?
• ¿Cuáles son los descriptores del VC que nos sirven?

FUENTES

Primeras decisiones

• Redacción de escalas con los siguientes criterios:
• ME: Gestión del contenido y transmisión del contenido.
• MO: Gestión del contenido, transmisión del contenido y gestión de la comunicación.
• Utilización de las puntuaciones de la convocatoria cuatrimestral para hacer un estudio de validación.
• Reformulación del proceso de unificación de criterios para los correctores.

Fiabilidad

• ¿Con qué escalas vamos a corregir la prueba?
• ¿Cómo las validaremos?
• ¿Cómo vamos a entrenar a los correctores?

Primeras decisiones

• B1: Transmitir información específica de infografías (ME y MO).
• B2: Transmitir información específica de infografías (ME) Trasmitir información específica de textos y resumir y explicar textos (MO).
• C1. Transmitir información específica de un texto oral (conferencia, vídeo divulgativo, ...) (ME) Expresar respuesta personal a una imagen (graffiti, cuadro, mural, ...) (MO).
• C2: Transmitir información específica de un texto escrito (ME) Expresar respuesta personal a una texto escrito (poema, letra de canción, ...) (MO).

MO siempre en grupos, de 2 o de 3. (Ampliación del constructo)

Autenticidad

• ¿Qué tipo de tareas vamos a proponer a nuestros candidatos/as?
• ¿En qué situaciones mediamos cuotidianamente?

Primeras decisiones

• Escrita (10 puntos) y Oral (10 puntos).
• NO. Influencia de la capacidad del candidato en producción, recepción e interacción e incluso de su uso de la lengua.

Interactividad

• ¿Mediación escrita i oral? O sólo escrita?
• ¿Se puede realmente evaluar la mediación de forma aislada?

Primeras decisiones

• La mediación escrita ocupa el espacio del uso de la lengua. En C1 y C2 no había y augmentó el tiempo de administración de la prueba. La MO se administra con la prueba de Expresión e Interacción Oral con el consecuente aumento en el tiempo de administración.
• Aumento de la corrección subjetiva, en concreto para le ME, B1 (100), B2 (150), C1 (175) y C2 (200). Escalas de mediación fáciles de usar.

Practicalidad

• ¿Cómo encajamos la prueba en un examen ya bastante "apretado"?
• ¿Cómo van a corregir los correctores sin morir en el intento?

Primeras decisiones

• Estudio psicométrico de pruebas anteriores, haciendo simulación sin uso de la lengua.
• Estudio psicométrico de las primeras pruebas en vivo.

Impacto

• ¿Cómo va a cambiar la prueba existente?

Retos de futuro

• Dar al destinatario su justa importancia (tensión entre transmitis información específica y resumir y explicar textos)
• Formación de redactores:

• Análisis de producciones de ME y transcripciones de MO para identificar evidencias de mediación lingüística
• Análisis cualitativo y cuantitativo de pruebas administradas (largo plazo).

Constructo

Escala de evaluación

OperacionalizaciónTarea

Galicia

Primera etapa: Formación

RCeL, Universidad Kapodistríaca de Atenas Bessie Dendrinos, Maria Stathopoulou

Conclusiones de la formación

• La mediación, sea oral o escrita, es una actividad compleja que integra los otros modos de comunicación.

4 Modos de comunicación / Actividades de lengua

Consejo de Europa, 2020

Conclusiones de la formación

• La mediación, sea oral o escrita, es una actividad compleja que integra los otros modos de comunicación.
• El acto comunicativo de mediación siempre está inmerso en un contexto socio-cultural.

MECR (2001) y Companion Volume (2020)

Interpretación socio-cognitiva (socio-constructivista):

• Enfoque orientado a la acción
• Aprendiz como agente social
• Co-construcción del significado

Conclusiones de la formación

• La mediación, sea oral o escrita, es una actividad compleja que integra los otros modos de comunicación.
• El acto comunicativo de mediación siempre está inmerso en un contexto socio-cultural.
• La autenticidad de las actividades de mediación y de los textos utilizados es un elemento fundamental.

Segunda etapa: Análisis

Análisis de tareas actuales: ¿Es la mediación algo realmente nuevo, o ya lo estamos haciendo? ¿Hasta qué punto está presente la mediación en nuestras tareas de examen y escalas y actuaciones de los candidatos?

Example Speaking Task 1

You read the following text in a news editorial: You are going to talk about how you stand on this particular issue. You must include ALL OF THE FOLLOWING ASPECTS: 1. Explain to your partner in your own words what you have just read. 2. Discuss the main challenges faced by older workers. 3. Make predictions and speculate about what the situation may be like in the future. Support your opinions with arguments.

The employment problems of older workers do not seem to be substantially worse than those of other workers. In fact, for much of the past two decades older workers have had faster employment growth than other age groups. However, while the job displacement rate of older workers is not unusually high compared to other workers, once displaced, older workers do have more difficulty returning to employment. (Adapted from www.nytimes.com)

Elementos clave

Temas complejos Textos informativos / argumentativos Objetivos: Tarea 1: Explicar y evaluar información● Describir temas complejos● Narrar de forma elaborada, integrando sub-temas ● Recapitular y reformular información ● Comenzar, mantener y concluir una presentación

Elementos clave

Temas complejos Textos informativos / argumentativos Objetivos: Tarea 1: Explicar y evaluar información● Describir temas complejos● Narrar de forma elaborada, integrando sub-temas ● Recapitular y reformular información ● Comenzar, mantener y concluir una presentación

Tarea 1 Eficacia comunicativa y adecuación

Reformula el texto de forma clara, destacando las ideas más importantes. Describe el tema principal de forma detallada, integrando subtemas y rematando con una conclusión adecuada. Desarrolla sus ideas, destacando aspectos importantes y apoyando sus argumentos con detalles y ejemplos relevantes. Usa estructuras organizativas, conectores y mecanismos de cohesión de manera apropiada.

CV - Processing text in speech

Tarea 1 Eficacia comunicativa y adecuación

Can summarise discussion on matters within his/her academic or professional competence, elaborating and weighing up different points of view and identifying the most significant points. Can summarise clearly in well-structured speech the main points made in complex spoken and written texts in fields of specialisation other than his/her own, although he/she may occasionally check particular technical concepts. Can explain subtle distinctions in the presentation of facts and arguments. Can exploit information and arguments from a complex spoken or written text to talk about a topic, glossing with evaluative comments, adding his/her opinion, etc. Can explain the attitude or opinion expressed in a spoken or written text on a specialised topic, supporting inferences he/she makes with reference to specific passages in the original.

Reformula el texto de forma clara, destacando las ideas más importantes. Describe el tema principal de forma detallada, integrando subtemas y rematando con una conclusión adecuada. Desarrolla sus ideas, destacando aspectos importantes y apoyando sus argumentos con detalles y ejemplos relevantes. Usa estructuras organizativas, conectores y mecanismos de cohesión de manera apropiada.

CV - Processing text in speech

Tarea 1 Eficacia comunicativa y adecuación

Can summarise discussion on matters within his/her academic or professional competence, elaborating and weighing up different points of view and identifying the most significant points. Can summarise clearly in well-structured speech the main points made in complex spoken and written texts in fields of specialisation other than his/her own, although he/she may occasionally check particular technical concepts. Can explain subtle distinctions in the presentation of facts and arguments. Can exploit information and arguments from a complex spoken or written text to talk about a topic, glossing with evaluative comments, adding his/her opinion, etc. Can explain the attitude or opinion expressed in a spoken or written text on a specialised topic, supporting inferences he/she makes with reference to specific passages in the original.

Reformula el texto de forma clara, destacando las ideas más importantes. Describe el tema principal de forma detallada, integrando subtemas y rematando con una conclusión adecuada. Desarrolla sus ideas, destacando aspectos importantes y apoyando sus argumentos con detalles y ejemplos relevantes. Usa estructuras organizativas, conectores y mecanismos de cohesión de manera apropiada.

CV - Processing text in speech

Tarea 1 Eficacia comunicativa y adecuación

Can summarise discussion on matters within his/her academic or professional competence, elaborating and weighing up different points of view and identifying the most significant points. Can summarise clearly in well-structured speech the main points made in complex spoken and written texts in fields of specialisation other than his/her own, although he/she may occasionally check particular technical concepts. Can explain subtle distinctions in the presentation of facts and arguments. Can exploit information and arguments from a complex spoken or written text to talk about a topic, glossing with evaluative comments, adding his/her opinion, etc. Can explain the attitude or opinion expressed in a spoken or written text on a specialised topic, supporting inferences he/she makes with reference to specific passages in the original.

Reformula el texto de forma clara, destacando las ideas más importantes. Describe el tema principal de forma detallada, integrando subtemas y rematando con una conclusión adecuada. Desarrolla sus ideas, destacando aspectos importantes y apoyando sus argumentos con detalles y ejemplos relevantes. Usa estructuras organizativas, conectores y mecanismos de cohesión de manera apropiada.

Tercera etapa: Especificación

Prueba oral / Prueba escrita Mediación de textos: Trasladar información específica Resumir y explicar textos Explicar datos Mediación de conceptos

EXPRESIÓN ORAL NIVEL B1, TEMA: COMER FUERA

EXPRESIÓN ORAL NIVEL B1, TEMA: VIAXES

Vostede e a outra persoa candidata queren organizar unha viaxe para o seu grupo de amigos/as. Atopou o seguinte anuncio:Deben falar dos seguintes puntos:· Informe a persoa candidata B sobre a viaxe que aparece no anuncio, o tipo de aloxamento e as datas. A persoa candidata B ten un anuncio distinto.· Elixan unha das dúas viaxes e digan por que.· Decidan que actividades facer durante a viaxe.

MEDIACIÓN ESCRITA NIVEL B1, TEMA: ENSINO

Vostede atopou o seguinte anuncio na Web: Vostede ten un amigo interesado en aprender unha lingua estranxeira. Atopou este anuncio e decide escribirlle un correo electrónico. Debe tratar os seguintes puntos: · Informe ao seu amigo sobre o curso que atopou na Web. · Explíquelle o prezo, os horarios e a duración.

MEDIACIÓN ESCRITA NIVEL C1, TEMA: TRABALLO

Vostede traballa no departamento de recursos humanos dunha empresa. O seu xefe quere mellorar as condicións de traballo para garantir un bo clima no traballo e a satisfacción dos traballadores e encargoulle facer unha enquisa entre os seus colegas para coñecer o que máis lles preocupa do seu traballo. Escriba un informe no que inclúa os principais resultados da enquisa e interprete ditos resultados. No seu informe debe tratar os puntos seguintes: · Resuma os resultados da enquisa · Interprete os resultados obtidos

MEDIACIÓN ORAL NIVEL C2, TEMA: ECONOMICS

You read the following text online:

The prediction of social behavior significantly involves the way people make decisions about resources and wealth, so the science of decision making historically was the province of economists. And the basic assumption of economists was always that, when it comes to money, people are essentially rational. It was largely inconceivable that people would make decisions that go against their own interests. Although successive refinements of expected-utility theory made room for individual differences in how probabilities were estimated, the on-the-surface irrational economic behavior of groups and individuals could always be forced to fit some rigid, rational calculation. The problem is people just aren’t rational. They systematically make choices that go against what an economist would predict or advocate.

You are at a round table discussion and have been asked to speak about this topic. Talk about the following points:

• Explain in your own words what you have just read.
• Identify the point of view of the researcher.

La evaluación de la mediación

Validación Creación de escala Adaptación a RD 1/2019 Pilotaje Feedback Extender formación Etc.

La evaluación de la mediación : Un ciclo

Posibles beneficios · Reforma y mejora de las tareas · Mayor contextualización, uso de realia, y enfoque realmente comunicativo a través de tareas · Menos aislamiento de las cuatro destrezas Largo camino, en un unos años tendremos conclusiones