MCS - 07 - M8 - R1

Módulo 8

El enfoque del Marco Lógico Resumen narrativo

Comunicación para la salud y el cambio social

Maestría en Comunicación para la Salud

Investigación, Monitoreo y Evaluación (IM&E)

Proyectos de Comunicación para la Salud y el Cambio Social

Investigación, monitoreo y evaluación (IM&E)

La IM&E se orienta a medir y analizar el desempeño, a fin de gestionar con más eficacia los efectos y productos que son los resultados en materia de desarrollo. (Ortegón, 2015, p. 47)

La IM&E son elementos vitales en programas exitosos de comunicación. Nunca es muy tarde para hacer investigación. (Parks, 2008, p. 4)

Marco guía de la IM&E

• Ayudar en el desarrollo de planes y actividades eficaces de seguimiento y evaluación.
• Formular objetivos medibles a corto, medio y largo plazo.
• Definir las relaciones entre las metas, actividades, productos, resultados e impactos.
• Demostrar cómo las actividades de la estrategia pueden llevar a resultados y tener un impacto en el tema en cuestión.

Obregón & Vega, 2019, p. 45

IM&E

• Garantizan que los programas se adapten para lograr el mayor impacto sostenible al menor costo
• Promueven foros para la participación de diversos actores
• Prueban y evalúan la efectividad del programa
• Alertan sobre un tema que cambia los insumos del programa
• Justifican el apoyo continuo financiero/político
• Responden a los actores involucrados (stakeholders)
• Proporcionan retroalimentación en todos los niveles.

IM&E en programas de comunicación

Parks, 2008, p. 4

Tiempos

Se trata de un estimado que dependerá de cada proyecto, pero como se verá más adelante es fundamental incluir la investigación, el monitoreo y la evaluación dentro del proyecto.

Parks, 2008, p. 4

Investigación formativa

5 pasos:

1. Identificación de las necesidades
2. Recopilación de Información existente y vacíos de Información
3. Elaboración de un diseño metodológico
4. Recopilación de los datos
5. Análisis de datos e informe

Obregón & Vega, 2019, p. 45

Investigación formativa

En el diseño de proyectos con MML habíamos denominado a la investigación formativa, investigación de diagnóstico que es la que aporta los insumos para poder proponer los objetivos de cambio social a los que se orienta nuestro proyecto.

El informe de resultados de la investigación formativa

• El diseño del proyecto se sustenta sobre los datos que se recopilan en el diagnóstico (investigación formativa).
• Estos datos se convierten en la línea base del proyecto, puesto que desde allí arrancan las estrategias propuestas para el cambio.
• En el diseño metodológico (cómo se obtiene la información) se pudieron utilizar técnicas cuantitativas. De ellas, la información se tabula agrupando respuestas similares para cada pregunta. Los resultados se formulan como porcentajes del total.
• La información recopilada mediante técnicas cualitativas: observación, entrevistas individuales o grupos focales debe transcribirse, analizarse y codificarse.
• El informe incluirá estos valores numéricos de las técnicas cuantitativas y categorías diferenciadoras y aspectos comunes de las técnicas cualitativas.

Uso del informe de investigación

• Permite compartir información sobre la situación actual de la comunidad entre organizaciones sociales, ONG, instituciones gubernamentales y otros posibles aliados, a fin de llevarlos a una comprensión compartida del problema o la situación que se está investigando.
• Facilita la identificación de las variables o categorías más pertinentes y relevantes para enfocarse en la estrategia de comunicación. Estas variables o categorías incluyen falta de información, creencias existentes y normas sociales que apoyan un comportamiento particular o falta de capacidad para desarrollarlo.
• Proporciona entradas clave para guiar el diseño, el tono y el lenguaje de los mensajes, así como los medios y canales de comunicación que se utilizarán en cada caso. Esta información se puede utilizar más adelante para informar las decisiones sobre ambientes, caracteres o diálogos que se incluirán en diferentes productos de comunicación.

Una vez que la estrategia se ha diseñado sobre la base de la investigación formativa previa, es necesario considerar cómo se evaluará antes de iniciar la etapa de implementación.

• El propósito de esta evaluación es identificar características esenciales del diseño de materiales en apoyo al proyecto.
• La prueba preliminar permite evaluar reacciones inmediatas las cuales no determinan con precisión qué es lo que va a funcionar, pero sirven para evitar errores que pueden ser costosos.
• Materiales como folletos, hojas volantes y mensajes que se transmitirán en medios son importantes de evaluar antes de su diseminación.

Evaluación de reacciones preliminares

• Determina si los mensajes son claros y convincentes.
• Identifica mensajes no deseados, respuestas impredecibles y otros aspectos posibles de modificación.
• Ayuda a seleccionar entre una gama grande de mensajes y materiales
• Ofrece una idea sobre el impacto que podrían generar los materiales
• Proporciona evidencia para respaldar el monitoreo y la evaluación posterior
• Evalúa si los grupos participantes prestan atención y comprenden los mensajes.

Evaluación de reacciones preliminares

Evaluación de reacciones preliminares

Evaluación de reacciones preliminares

Evaluación de reacciones preliminares

• Adicionalmente se puede utilizar una escala de Likert para describir reacciones a la exposición al material, ejemplo:
• Métodos básicos para recabar información: a) grupos focales, b) entrevistas específicas c) exposición natural (al azar).

Evaluación de reacciones preliminares

Monitoreo

• Seguimiento sistemático y periódico de la ejecución de una actividad.
• Determina el grado de coincidencia de su resultado con lo programado
• Detecta oportunamente deficiencias, obstáculos o necesidades de ajuste.
• Implica la recolección de datos y la medición del progreso hacia los objetivos y el propósito del proyecto.

Monitoreo

Monitoreo

“El monitoreo de la implementación de las actividades programadas facilita la rendición de cuentas sobre si el plan de acción se está implementando o no y, a largo plazo, garantiza el progreso hacia el logro de los objetivos. Este ejercicio puede llevarse a cabo de manera participativa creando espacios para que el público pueda autoevaluar su propia participación, así como la eficacia del programa”(Obregón y Vega, 2019, p.50)

4 tipos de monitoreo

1. Monitoreo de la implementación compara lo que planificado con lo que se está realizando en la práctica dando seguimiento al marco lógico.
2. Evaluación del proceso examina qué tan bien las actividades se desarrollan en términos de alcance, calidad, satisfacción de los/las participantes, niveles de participación.
3. Monitoreo de comportamiento mide actitudes y comportamientos seleccionando un grupo de participantes para explicar resultados de acciones tales como capacitación y su orientación al logro de objetivos planteados.
4. Cambio significativo permite la colección sistemática y el análisis participativo de historias y relatos desde el punto de vista de los/las participantes. Las historias pueden ser positivas o negativas y pueden o no incluir cambios en comportamientos individuales, actitudes grupales, capacidad organizativa, políticas, condiciones sociales, etc.

Evaluación (evaluación sumativa)

“Tacchi y Lennie (2014) consideran que la evaluación de las estrategias de comunicación para el desarrollo es una práctica útil, así como una acción de aprendizaje continuo y de mejora de los procesos organizacionales. Más allá de probar el impacto de las intervenciones, esta práctica busca mejorar las prácticas de desarrollo que pueden generar innovaciones más adelante. También puede facilitar un cambio de énfasis de la responsabilidad externa, característica de las evaluaciones tradicionales, a una centrada en la responsabilidad interna y comunitaria. Los dos autores recomiendan un modelo de evaluación centrado en los elementos participativos, argumentando que pueden mejorar las iniciativas en términos de desarrollo y cambio social a largo plazo y de forma sostenible”.(Obregón y Vega, 2019, p.51)

Evaluación

Evaluación de impacto Evalúa la sostenibilidad de los cambios identificados en la evaluación de resultados un tiempo después de que finaliza el proyecto para determinar si se ha logrado su propósito y cuál ha sido la contribución que la comunicación ha hecho para este logro. Parks, 2008, pp. 18

Evaluación de resultados Se centra en si los resultados generalmente expresados en términos de cambios sociales o de comportamiento se han logrado dentro del periodo de tiempo determinado.

Evaluación

Referencias

Obregón, R., y Vega, J. (2019). Voces con Propósito. Manual sobre Estrategias de Comunicación para el Desarrollo y el Cambio Social. FES - Univ. del Norte. https://fesmedia-africa.fes.de/media-and-publications/training-manuals Ortegón, E., Pacheco, J.F. & Prieto, A. (2015) Metodología del marco lógico para la planificación, el seguimiento y la evaluación de proyectos y programas. Santiago de Chile: CEPAL. https://repositorio.cepal.org/bitstream/handle/11362/5607/S057518_es.pdf Parks, W. (2008). Essentials for Excelllence. Research Monitoring and Evaluating Strategic Communication for Behaviour and Social Change with Special Reference to the Prevention and Control of Avian Influenza/Pandemic Influenza. UNICEF Pacific Office. https://s3.amazonaws.com/gpei-tk/reference_links/en/Essentials_for_excellence.pdf?1505707328

¡gracias!