Evaluación MRMRMR

Evaluación Integral del proyectoMRMRCH

29 Marzo 2022

Lo que veremos hoy

Contexto

Hallazgos y conclusiones

Recomendaciones

Uso de la evaluación

Lecciones aprendidas

Comentarios y preguntas

Contexto de la evaluación

¿qué nos trajo acá y cómo llegamos?

objetivos de la evaluación

Objetivos específicos

Objetivo General

Lorem ipsum dolor

Determinar si el diseño del proyecto es congruente con la problemática y las necesidades de la población meta

Evaluar el diseño, ejecución y resultados del Proyecto MRMRCH para su rendición de cuentas y réplica en otras regiones basado en evidencia

Generar recomendaciones para la gestión del proyecto y su replicabilidad

Evaluar el diseño, ejecución y resultados del Proyecto Mercado Regional Mayorista de la Región Chorotega para su rendición de cuentas y réplica en otras regiones basado en evidencia

Analizar la compatibilidad del proyecto con otras intervenciones públicas

Valorar el logro de los objetivos del proyecto en sus fases de Inversión/ejecución y Operación

alcance de la evaluación

Población

Cobertura geográfica

-Abastecedores, concesionarios, desabastecedores - OSC: Pob. no beneficiaria -Instituciones

Regional Ch.Upala Cóbano, Lepanto y Paquera

Tipo de Evaluación

- Formativa/Sumativa - Integral - Mixta - Durante

Temporalidad

2008-2021 (I-S)

criterios, preguntas y técnicas

Técnicas

Análisis document.320

¿En qué grado el diseño del proyecto permite dar respuesta a las necesidades de la población beneficiaria identificadas en la Fase de Preinversión??

Pertinencia

Entrevistas17

¿Cuál es la compatibilidad del proyecto con otras acciones a nivel nacional, internacional e institucional?

Coherencia

Criterios y preguntas de la evaluación asociadas

GruposFocales 4

¿En qué medida se han logrado los objetivos del Proyecto en sus diferentes fases (Inversión/Ejecución y Operación?

Eficacia

Encuestas

¿Qué aspectos de sostenibilidad ha identificado para el proyecto?

Sostenibilidad

Hallazgos y conclusiones

• ¿Qué se encontró?

Conceptualización de pertinencia del diseño

Conceptualización del proyecto (problema, objetivos, población afectada, gobernanza, lógica causal, entre otros)Guía metodológica general para la identificación, formulación y evaluación de proyectos de inversión pública (GIP) Guía de Evaluabilidad: parámetros y variables (diagnóstico, estrategia programática, lógica causal, diseño de SyE)

Pregunta del criterio

¿En qué grado el diseño del proyecto permite dar respuesta a las necesidades de la población beneficiaria identificadas en la Fase de Preinversión?

Pre inversión: pertinencia

A. Diagnóstico (2008)

• En términos generales tiene las variables que integran un diagnóstico: antecedentes, problema, dimensión, población afectada

Actores

• Existió un estudio de actores: posición ante el proyecto. 96% apoyó el proyecto

Cultural

• Desde la perspectiva de las personas consultadas, este estudio era necesario para un proyecto de este alcance

"No hay tradición de asociatividad, son muy pocas las organizaciones que lo tienen… no se contempló el contexto donde iba a estar enclavado el mercado"

(Informante 1, comunicación personal, 06 de julio 2021).

"La gente no creía que nosotros fuéramos a construir el proyecto, ellos nos decían vean cuando tengan el proyecto construido entonces vienen y me dicen y entonces yo empiezo, pero hasta que no lo vea construido yo no siembro una mata más...El tema de la incredulidad no es solo para los productores, también estaba en los mismos compañeros del sector público…”,

(Grupo focal 3, comunicación personal, 23 de julio 2021)

B. Estrategia Programática

Identificación de 4 ≠ OE. Similitud entre ellos indistinto de la fuente. No son lo suficientemente exhaustivos para alcanzar el OG. Los OE no abordan las estrategias para alcanzar el OG (el cómo se obtendrá).

Objetivos específicos

Identificación de 5 ≠ OG. Tema clave en 4 OG fue "sistema eficiente" Congruencia entre binomio problema-OG Claridad e integralidad: -Mdo Mayorista y destino. -Dos grandes componentes. -Intrasectorial

Objetivo General

1.

Se entendió de forma diferente lo que correspondió al abordaje de "selección de mejor alternativa" de solución del problema. Se realizó la "selección de la mejor alternativa" únicamente para la causa relacionada con infraestructura (ubicación).

Alternativa de solución

3.

2.

• Incidencia en las fases del proyecto

B. Estrategia Programática

Pre inversión

Gobernaza: actores y roles

Organización y estructura administrativa

Población objetivo

Rol participativo

Delimitación general.Caracterización parcial (Prioridad de entrada / fase Ejecución)

Descripción sucinta.Siguientes fases se agrega info pero no lo sufienciente en cuanto a definición de responsabilidad según actor (PIMA) Matriz "v13"

Planificación con actores nacionales y regionales

C. Lógica Causal

Insumos

Productos

Efectos e impacto

Actividades

Normativa, humanos, financieros, estudios, etc

7/8 servicios relacionados con la operación de la infraestructura

Congruencia entre actividades y OG. Mapa procesos (estratégicos / operativos)

Congruencia entre los efectos e impactos planificados.

-Ausencia de planificación de ciertas actividades y productos necesarios (integrales) -Concentración componente infraestructura y operación (izq) / Concentración componente Gestión de OyD (der) -Concentración actividades y productos por parte del PIMA -Baja congruencia entre lo que se planifica y lo que el proyecto espera lograr

D. Diseño de SyE

Sistema: Existen insumos que apuntan a facilitar la construcción de un sistema de seguimiento (indicadores de resultados, ficha de indicadores), no obstante, hay vacíos importantes: responsables, periodicidad, uso de la información, etc.

Planificación del proyecto

76%

Global grado medio el diseño del proyecto es permitenente para dar respuesta a las necesidades de la población (integra los elementos básicos de la planificación). Existen elementos que restan calidad al diseño.

Diagnóstico y Estrategia programática: grado alto. Modelo lógico y Seguimiento y evaluación: grado medio.

grado alto: 81 a100 grado medio: 41 a 80

Conceptualización del Coherencia Grado en que los objetivos y el diseño de la intervención están vinculadas a acciones Internacionales Nacionales Institucionales

Pregunta de evaluación¿Qué tan compatible es el proyecto con otras acciones a nivel internacional, nacional e institucional?

1. Internacional

El proyecto aporta al alcance de los ODS al impulsar la Seguridad Alimentaria y nutrición, productividad económica de la región y sinergias institucioanales para "no dejar a nadie atrás"

2. Nacional

20 PPE 2010 al 2018 (OG, OE, comercialización agropecuaria / compromisos conjuntos entre instituciones) Ámbitos temáticos relacionados con el OG: 1. Seguridad alimentaria y nutricional; 2. Desarrollo agropecuario y rural; 3. Planes de desarrollo nacional; 4. Ambiente (cambio climático, biodiversidad) 5. Empleo, producción y financiamiento del desarrollo

45% alineación directa

Pob. Objetivo (atención necesidades integral)

Coordinación y comunicación (sinergias /eficiencia)

Objetivo del proyecto (fin común)

Complementaridad

"El proyecto fue catalogado en las Mesas de Trabajo [por Guanacaste] como transversal… el INA adaptó la oferta de productos que tenían a las necesidades del mercado: buenas prácticas agrícolas, buenas prácticas de manufactura, atención al cliente, etc... Senara: la ampliación del canal del sur para habilitar más hectáreas para siembra de productos no tradicionales para llevarlos al mercado, esto para facilitar el trabajo del MAG, del INDER para que den asistencia técnica a los productores y se produzca lo que el mercado necesita. Ahí se denota la coherencia que tiene el proyecto del Mercado"

(Informante 4, comunicación personal, 31 mayo 2021)

Coherencia del proyecto

3. Institucional

Hay un "engache" entre el proyecto y los compromisos internacionales y nacionales. No obstante, la mayoría de los compromisos institucionales (visualizados mediante los instrumentos de planificación), no reflejan un "enganche" con el proyecto. - Afectación al cumplimiento del OG.

Compromisos en PPE

Compromisos internacionales

Compromisos en PEI y POI

12% alineación directa, 86% indirecta

Vínculo directo únicamente con los PEI y POI del PIMA. *POI regionales/Evaluaciones PEI o POI: Inder, Infocoop, INA.

Conceptualización de eficacia

Logro de los objetivos de cada fase: - Planificado vrs ejecutado - % de cumplimiento de metas 2021 - % opinión positiva de personas entrevistadas

Pregunta del criterio

¿En qué medida se han logrado los objetivos del proyecto en sus diferentes fases?

Inversión-Operación: eficacia

Inversión

Diseño

Financiamiento

Licitación

Aprobación expedita de las acciones relacionadas con el financiamiento externo. Viabilidad completa del proyectoConstrucción y equipamiento (Mayor canalización de recursos financieros) Gestión de la O y D.

Licitaciones para ambos componentes (fondo y forma)

Diseño construcctivo(fondo y forma) Espacio participativo para definir el dimensionamiento.

Gestión de oferta y demanda

Visión social (contexto cultural) trasciende esta fase. Comisión + 2 consultorías con los productos aprobados ¿Qué se encontró? Pocas organizaciones presentaban las capacidades para llegar a ser concesionarios. La preparación de las organizaciones requieren de más recursos (legales, humanos, financieros y temporales) y adaptados a los elementos socioculturales de la zona de alcance.

SuperávitTiempo

Trasciende esta fase

Ejecución

Construcción y equipamiento

Ejecución según en forma y fondo de acuerdo al diseño y lo licitado PIMA

Operación

65%

Metas lb

Resultados (1 - 2 años)

Metas pndip

Coyuntura: pandemia contracción de la economía de la región.

Variables técnicas (infraestructura y dinámica propia del PIMA)

90%

Aporte de la Comisión MRMRCH En la práctica para alcanzar los efectos se requiere de todos los actores.

Opinión positiva de los resultados (entrevistas y GF)

Conceptualización de sostenibilidad

Factores que inciden en la operación del proyecto: - Centrales - Medios - Transversales

Pregunta del criterio

¿En qué medida el proyecto es sostenible?

Operación: sostenibilidad

Sostenibilidad

FActores centrales

Factores medios

Factores transversales

Baja comunicación y difusión de servicios a todos los beneficiarios. Seguimiento: No existe un sistema integral que aborde los avances del proyecto, metas e indicadores inconsistencias. Desde la parte jerárquica y de manera integral. Participación de beneficiarios: apropiación, ser parte del mismo, , interés del avance. Tecnología: ambiente, comercio ectrónico, innovación tecnológica (red de frío). seguridad alimentaria

Apoyo político variante Capacidad institucional afectada (apoyo político, apropiación, liderazgo y recursos) Diferentes visiones de quién debe ser el que ejerza el liderazgo del proyecto y su Comisón (OG y competencias institucionales) Articulación de actores: coherencia "pasiva" en articulación y comunicación del proyecto. Proyecto Integral.

Variaciones en el entorno: pandemia, normativa fiscal, situaciones de carácter ambiental (sequía) Sociocultural (asociatividad, abordaje laboral- institucional)

Recomendaciones

MRMRCH (operación) ¿Cómo mejorar?

¿Y cómo proceder con las recomendaciones?

Ejecución del Plan de Acción

Análisis de las recomendaciones

Formulación RdG y PdA

Seguimiento a las recomendaciones

-Comisión MRMRCH (regional), SEPSA (nacional). -Secretarías de Planificación de otros Sectores

Ajustar la estructura programática y causal del proyecto

Continuar el fortalecimiento de la gestión de OyD del proyecto

Fortalecer el modelo de gobernanza

Construir e implementar un sistema de seguimiento y evaluación

-Jerarcas y cuerpos directivos, Comisión y Secretarías de Planificación

Generar espacios de diálogo y participación entre actores

1.

2.

-Sensibilización política próx Gobierno.-Consolidación figura del liderazgo y re-definición de actores (nacional, regional / Comisiones, espacios de coordinación regional). -Oficialización y comunicación del modelo de gobernanza.

Fortalecer el modelo de gobernanza

Ajustar la estructura programática y causal del proyecto

-Reformular la definición de Pob. Objetivo.-Congruencia de la lógica causal utilizando el modelo de GpRD (objetivos específicos y niveles). -Ajuste criterio de priorización de entrada.

3.

4.

-Construcción de un sistema a partir de los ajustes de la estructura programática, lógica causal, ODS y modelo de gobernaza. -Aprovechamiento y experiencia de SEPSA y COREDES, y difusión hacia la totalidad de actores. -Operacionalización del sistema: pasos y mecanismos formales. -Encuesta de satisfacción diferentes usuarios.

Construir e implementar un sistema de seguimiento y evaluación

Generar espacios de diálogo y participación entre actores

-Activar los espacios de realimentación. -Incentivar soluciones y proceso de mejora continua desde las voces y decisiones (perspectiva participativa y de desarrollo regional). -Estrategia de comuniciación y difusión para atraer a los agentes económicos. -Apropiación política, institucional y población objetivo. -Ley de Desarrollo Regional.

5.

-Establecimiento de un proceso permanente de difusión y promoción sobre el proyecto. -Identificación integral del perfil que presenten los distintos grupos que conforman la población objetivo del proyecto (oferentes y demandates) -Fortalecimiento de los servicios de capacitación y asesoría . -Fortalecimiento de la coordinación con el Sistema de Banca para el Desarrollo, tanto con sus servicios técnicos como financieros. -Inventario y programación de recursos de las diferentes instituciones que participan y tienen responsabilidad en el marco de la operación.

Continuar el fortalecimiento de la gestión de OyD del proyecto

¿Qué extraer para otros proyectos?

Lorem ipsum dolor sit amet, consecter adipiscing elit, sed diam nonummy

Réplica y +

05

06

Participativa

Estrategia en cuanto ubicación, tamaño y tecnología

estrategia

05

Sociocultural

Sumar este tipo de estudio a proyectos con estrategia de atención de distintos agentes económicos

estudio

Liderazgo

04

Representación y negociación de los distintos sectores Ley de Desarrollo Regional

central y regional

Coherencia

Internacional, nacional e institucional Inventario de capacidades institucionales

en la práctica

03

02

Tecnología y ambiente

Tecnología y ambiente en su operación (producción y comercialización)

línea

01

Social

Entrada diversificada (%) Caracterización de los agentes económicos desde la preinversión

visión

¡Muchas gracias!