Want to make creations as awesome as this one?

Transcript

Te invitamos a recordar el Horizonte de Monitoreo y Evaluación que conocimos en el primer módulo para entender la temporalidad de cada una de las evaluaciones.

Tipos de evaluación

Información

Evaluación de Diseño: Enfoque de Trabajo de Campo para la Mejora de la Implementación de Programas

Esta evaluación se realiza durante el primer año de operación de los programas nuevos o que tuvieron cambios sustantivos, según lo estipula el numeral vigésimo segundo de los Lineamientos Generales para la Evaluación de los Programas Federales.

Evaluación de diseño

Los principales usuarios de la evaluación son las dependencias y entidades a cargo de la operación de dichos programas y se realiza a partir del segundo año de creación.

Temas de la evaluación de Consistencia y Resultados

Es un proceso descrito en el numeral décimo sexto de los Lineamientos Generales para la Evaluación de los Programas Federales, tiene como objetivo analizar sistemáticamente tanto el diseño como el desempeño global de los programas federales. Su finalidad principal es mejorar la gestión de los programas federales y medir el logro de sus resultados, y se basa en la matriz de indicadores. La ECyR contiene seis temas específicos.

Evaluación de consistencia y resultados (ECyR)

CONEVAL
CONEVAL
Publicación de los informes finales de evaluacion
Comite directivo del CONEVAL
Aprobación de los informes finales de evaluación
CONEVAL y entes evaluadores
Revisión de los resultados
CONEVAL y actores externos
CONEVAL y actores externos
Realización de pilotos (solo si la metodología lo considera)
Revisión de literatura relacionada y normativa
Mesas de reflexión y retroalimentación con usuarios, expertos y organismo internacionales

La evaluación específica

Se utiliza con el objetivo de profundizar en un aspecto particular del proceso de un programa y comprende las evaluaciones no incluidas en la lista general. Estas evaluaciones se pueden realizar con análisis de gabinete como de campo. La Evaluación Específica se conforma del siguiente proceso:

Seguimiento de ASM
Cobertura
Productos
Presupuesto

Información

Resultados

Sintetiza el desempeño de los programas sociales a lo largo de un ejercicio fiscal. Incluye una síntesis creada por las unidades responsables del programa que muestra el avance en el cumplimiento de los objetivos y metas de los programas. Esto se logra mediante el análisis de indicadores de resultados, de servicios y de gestión. El informe de la Evaluación Específica de Desempeño reporta datos de un ejercicio fiscal y se presenta en dos formatos principales: un informe completo y un reporte ejecutivo que integran los siguientes temas generales:

Evaluación específica de desempeño

Información

Analiza

Procesos

Operación

Utilidad

Información

Examina mediante trabajo de campo si un programa está llevando a cabo sus procesos operativos de manera eficaz y eficiente. El principal objetivo es determinar si dichos procesos contribuyen al logro del propósito del programa. Las principales características de la evaluación de procesos son las siguientes:

Evaluación de procesos

Las dependencias y entidades deben enviar al CONEVAL la propuesta de términos de referencia.
El CONEVAL emite una opinión sobre los términos de referencia.
Tienen el fin de mejorar su gestión y obtener evidencia adicional sobre su desempeño.
Son de aplicación opcional de acuerdo con las necesidades e intereses de las dependencias y entidades.

El numeral vigésimo cuarto de los Lineamientos Generales para la Evaluación de los Programas Federales estipula que las evaluaciones complementarias a programas federales son opcionales, según las necesidades e intereses de las dependencias y entidades, realizadas para obtener información adicional que pueda contribuir a mejorar los programas o políticas. Entre sus características principales se encuentran las siguientes:

Evaluación complementaria

Contenido del guión

Guión de Análisis de Factibilidad

Valorar si es posible desarrollar la evaluación

Se utiliza para identificar con metodologías rigurosas los cambios en los indicadores a nivel de resultados que son atribuibles a la ejecución de un programa específico. La importancia de esta evaluación radica en la medición de los efectos netos del programa sobre los beneficiarios. Los resultados obtenidos permiten extraer conclusiones acerca de la eficacia del programa para resolver el problema al que está dirigido. Para llevar a cabo una evaluación de impacto, el programa debe cumplir con los siguientes requisitos:

Análisis de factibilidad

Evaluación de impacto

No todos los programas cuentan con las condiciones necesarias en términos de información sobre beneficiarios y no beneficiarios o de mediciones antes y después de la intervención. Por ello, es necesario desarrollar un análisis de factibilidad que permitirá conocer si un programa cuenta con los elementos para desarrollar esta evaluación. Uno de los principales desafíos para la evaluación de impacto es la falta del contrafactual, lo que dificulta la identificación de relaciones causales. A pesar de estos desafíos, realizar una evaluación de impacto adecuada es crucial para determinar la efectividad de un programa.

Información

METODOLOGÍA

Contrafactual

Sus principales usuarios son los tomadores de decisiones a nivel gerencial

Diagnostica y analiza una problemática pública, así como la respuesta gubernamental para atenderla

Aporta información valiosa para el diseño de politicas públicas

El numeral décimo sexto de los Lineamientos Generales para la Evaluación de los Programas Federales estipula que las evaluaciones estratégicas son aquellas que se aplican a un programa o conjunto de programas en torno a las estrategias, políticas e instituciones para evaluar su efectividad. Entre sus principales características se encuentran las siguientes:

Evaluación estratégica

Su principal objetivo es evaluar la congruencia del diseño del programa; es decir, evalúa la congruencia entre la configuración de un programa con su funcionamiento, el padrón de beneficiarios, la entrega de apoyos y su vinculación con la planeación nacional. Esto se logra a través de un análisis de gabinete que se basa en la documentación normativa del programa y en la información disponible sobre la cobertura de este hasta la fecha de la evaluación. Para realizar la evaluación de diseño, se toman en cuenta los términos de referencia vigentes y se puede incluir trabajo de campo.

Contrafactual

El contrafactual es una estimación de cuál habría sido el resultado para los participantes en el programa en ausencia del mismo.

Contenido del Guion

El guion contiene los elementos necesarios para la elaboración del análisis de factibilidad y referencias bibliográficas de evaluación de programas en distintos ámbitos

Análisis de factibilidad

Previamente se debe desarrollar un análisis de factibilidad de este tipo de evaluación y enviarla a CONEVAL para sus comentarios.

Información

Se necesita suficiente información para poder controlar todos los otros factores que pueden estar incidiendo en las condiciones resultantes en la población

Valorar si es posible desarrollar la evaluación

El CONEVAL, la Secretaría de Hacienda y Crédito Público y la Secretaría de la Función Pública valorarán, junto con el programa si es posible desarrollar la evaluación.

Guion de Análisis de Factibilidad

Para la elaboración de este análisis, se cuenta con el documento denominado Guion de Análisis de Factibilidad para llevar a cabo una Evaluación de impacto.

Metodología

Inferir este contrafactual para el estudio de los efectos de una intervención, requiere de metodologías y técnicas rigurosas