Módulo 1: Contextualización de la Evaluación de Impacto
CONTEXTO Y CONCEPTOS
Módulo 1: Contextualización de la Evaluación de Impacto
Este módulo describe el marco en el que la formación tiene resultados económicos y sociales; exponiendo su relación con los Objetivos de desarrollo Sostenible (ODS) y abordando el impacto en las personas, las empresas y la sociedad. Explica el vínculo de la evaluación de impacto con el trabajo decente y finalmente, introduce el concepto de gestión por resultados en la evaluación de impacto.
Adicionalmente incluye los conceptos básicos sobre la evaluación, expone su diversidad para diferenciar entre ellos y establecer qué es y qué no es la evaluación de impacto. Describe las diferentes instancias en que se aplica la evaluación en la formación y desarrollo de competencias, explica la diferencia entre evaluar y monitorear. Para ahondar en un énfasis practico, aborda finalmente las preguntas: ¿por qué? y ¿para qué evaluar?
Objetivo
01
Desarrollar capacidades básicas sobre métodos de evaluación que se tendrán en cuenta en el momento de diseñar, manejar y orientar evaluaciones de programas o políticas activas de formación profesional que brinden oportunidades de mejora en los ámbitos educativo y laboral, teniendo en cuenta las transformaciones digitales que se plantean como reto en cada una de las industrias.
Al finalizar este módulo el participante podrá:
Objetivos
02
Identificar los conceptos clave referidos a la evaluación.
Analizar la finalidad y utilidad de evaluar el impacto de la formación.
03
Valorar la información que brinda la evaluación de impacto para la gestión y la toma de decisiones.
04
Módulo 1: Contextualización de la Evaluación de Impacto
Contexto
¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
¿De qué manera la formación se relaciona con el desarrollo económico y social?
Conceptualización
¿Para qué evaluar el impacto de la formación?
¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
¿Qué se entiende por evaluación de impacto?
¿Por qué evaluar el impacto?
¿Qué implica evaluar la formación?
¿Qué es evaluar?
Módulo 1: Contextualización de la Evaluación de Impacto
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
1.4. ¿Qué es evaluar?
1.5. ¿Qué implica evaluar la formación?
Módulo 1: Contextualización de la Evaluación de Impacto
1.6. ¿Qué se entiende por evaluación de impacto?
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
1.8. ¿Por qué evaluar el impacto?
1.9. ¿Para qué evaluar el impacto de la formación?
1.10. Teoría del cambio
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
La educación, la formación profesional y el aprendizaje permanente son pilares fundamentales para el empleo de los trabajadores; les facilitan condiciones para mejorar su empleabilidad y su calidad de vida y contribuyen con el desarrollo empresarial sostenible. Estos cometidos están ligados con los ODS, en especial los relativos a la reducción de la pobreza.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
recogen los propósitos de los programas de formación y desarrollo de competencias que promueven los ministerios de educación y de trabajo, ejecutados por ellos mismos y por instituciones públicas y privadas.
El primero de los ODS, “Poner fin a la pobreza en todas sus formas en todo el mundo” junto con una de las metas para hacer realidad dicho objetivo, cual es
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Una de las áreas estratégicas del mandato de la OIT es el resultado:
“Transición económica, social y ambiental en favor del empleo pleno, productivo y libremente elegido y el trabajo decente para todos”, para lo cual el desarrollo de las competencias es esencial.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
En recientes discusiones sobre la importancia del desarrollo de las capacidades y competencias, la OIT ha insistido en que
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
La formación es “piedra angular del trabajo decente” , con una visión de aprendizaje permanente que guarda coherencia con las políticas públicas en los ámbitos económico, fiscal, social y del mercado de trabajo, todas ellas fundamentales para el crecimiento económico sostenible, de la creación de empleo y el desarrollo social.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
El ODS que se enfoca directamente en el crecimiento del empleo es el Objetivo 8: Orientado hacia el trabajo decente y el crecimiento económico. Entre las metas que plantea, más relacionadas con impactos que podría tener la formación profesional están las de “lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración por trabajo de igual valor”; “reducir considerablemente la proporción de jóvenes que no están empleados y no cursan estudios ni reciben capacitación”.
Objetivos de Desarrollo Sostenible
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Desde el punto de vista social, son una herramienta en el combate a la pobreza y la promoción de la igualdad de oportunidades, mediante la integración de las personas en los ámbitos laboral, social y de la ciudadanía.
La formación y el desarrollo de competencias constituyen la base para la competitividad de las economías y de las empresas.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
El resultado final de estas medidas ha de estar a la mano para una continua retroalimentación y mejoramiento en el diseño de políticas activas del mercado de trabajo.
Para ello propone incentivar los mecanismos de aprendizaje permanente y de mayores oportunidades de acceso a diversas modalidades de calificación y recalificación.
El informe sobre el Futuro del Trabajo
Anotó la necesidad de adoptar incentivos para promover inversiones en áreas clave que promuevan el trabajo decente y sostenible.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Para este fin, la evaluación de impacto es una herramienta ineludible que ha de ser mejorada y aplicada con mayor frecuencia.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La Recomendación 195 de la OIT, alienta a los países miembros a “apoyar y facilitar la investigación en materia de desarrollo de los recursos humanos y la formación”, la que podría comprender “las inversiones en formación, así como la eficacia y el impacto de la misma”.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Contando con un entorno económico y social propicio, la formación y el desarrollo de competencias contribuyen a la mejora del desempeño de las personas y de las empresas, lo que se traduce en crecimiento del empleo y desarrollo para la sociedad.
Beneficios
Sociedad
Personas
Empresas
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
mejores condiciones de trabajo, de remuneración, a una mayor empleabilidad y una mejor calidad de vida.
Las personas
que participan en la formación pueden acceder a
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Investigaciones de Centro Europeo para el Desarrollo de la Formación Profesional (CEDEFOP), han demostrado que una combinación de la educación y la formación profesional con medidas sociales y laborales ayuda a adaptar a los diferentes perfiles de jóvenes en riesgo de abandono prematuro de la educación y la formación.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
En estos segmentos se concentra gran parte de la pobreza, de la informalidad y del déficit de trabajo decente en la región.
En América Latina y el Caribe, factores como la heterogeneidad y la segmentación en el mercado de trabajo inciden en los impactos de la formación.
Una alta proporción de la población activa es joven y vulnerable al desempleo.
Casi un tercio del mercado laboral se encuentra en zonas rurales y más de la mitad del empleo corresponde a trabajadores independientes, domésticos, trabajadores familiares no remunerados, o asalariados en microempresas.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Adicionalmente, los cambios sin precedentes generados por la pandemia COVID-19, generaron no solamente una reducción aguda del empleo con una pérdida en horas de trabajo en 2020 cerca de cuatro veces más que la registrada en la crisis del 2009.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
en la economía informal, los jóvenes y las mujeres, las poblaciones rurales y las demás áreas sectoriales deterioradas por la pandemia.
Va a ser necesario disponer de dispositivos de información rápida y confiable sobre los impactos de los programas de formación para las poblaciones más afectadas,
Los impactos de los programas de formación que se pongan en marcha durante y a la salida de la crisis, no se pueden desconocer.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Si bien existen importantes desarrollos en la región e instituciones de vanguardia, también es cierto que algunos sistemas locales de formación tienen dificultades para el acceso de ciertos colectivos de la población -lo que conlleva a exclusión laboral- y además requieren mejorar la articulación entre la oferta y la demanda.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Por ello la OIT en su observatorio sobre el COVID-19 ha insistido en que los encargados de la adopción de políticas se verán ante el desafío de facilitar una sólida recuperación, que promueva el empleo, los ingresos, los derechos de los trabajadores y el dialogo social, a fin de lograr un recuperación centrada en el ser humano.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
pueden ser más innovadoras y sostenibles.
sus trabajadores, una fuente importante de ventaja competitiva, como activos y agentes del cambio,
Las empresas
de todos los tamaños, que consideran a
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Para tal fin, las empresas deben identificar
Fomentar la formación en el lugar de trabajo
Las cualificaciones que precisan
Promover una cultura de aprendizaje permanente
Facilitar el intercambio de conocimientos
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Las empresas sostenibles son decisivas para la creación de riqueza e innovación, permiten mejorar los niveles de vida y las condiciones sociales, contribuyendo así al logro del trabajo decente y el desarrollo sostenible
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
En las ramas con más altos niveles de productividad se emplea a un bajo porcentaje de trabajadores.
Los niveles de productividad son elevados solo en algunas ramas de actividad, mientras que en otras son bastante inferiores al promedio.
La segmentación del mercado de trabajo también se verifica en la estructura empresarial.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La OIT calcula que la economía informal involucra al
Para el sector rural, una importante fracción del empleo se genera en la pequeña unidad agropecuaria de tipo familiar. El desarrollo de las competencias es fundamental para que la fuerza laboral se desplace de la economía informal hacia los empleos en la economía formal, así como para aumentar la productividad del trabajo.
75%
Trabajadores
y representa el
40%
PIB
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Las evaluaciones de impacto han de considerar el rol fundamental de las empresas como lugares de aprendizaje y la medida en que los programas de formación y aprendizaje a la salida de la crisis, impactan en su recuperación y reapertura a los negocios.
El cierre de un grupo de actividades económicas a raíz de las medidas de confinamiento y restricción a la movilidad a resultado en la clausura de lugares de trabajo y con ello de oportunidades de aprendizaje y práctica laboral.
Muchas empresas, particularmente las MyPYMES han resultado especialmente afectadas por la pandemia COVID-19.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Mayores tasas de ocupación y formalidad
Reducción de la pobreza
Inclusión social
Respeto de los derechos laborales
Competitividad en los mercados mundiales
La sociedad
percibe los impactos del desarrollo de competencias mediante empleos de mejor calidad.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
- Expectativas de sus sujetos de atención
La formación profesional debe responder al entorno
así como a las
Esta es la doble pertinencia de la formación, tanto social como económica.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
El desarrollo de las cualificaciones puede contribuir a la construcción de sociedades más equitativas. Existe una estrecha relación entre las diversas formas de exclusión del mercado de trabajo como
los bajos ingresos laborales
con la pobreza y la discriminación
el desempleo
el subempleo
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La tasa de desempleo juvenil se vio ante una situación atípica cuando se registraron tendencias a la baja debidas al desistimiento de los jóvenes de continuar buscando empleo, la cual se bautizó como “fuera de la fuerza de trabajo” (retirados del mercado de trabajo por no estar disponibles para trabajar y/o buscar un empleo)
Estos rasgos de desigualdad como se sabe, se han acentuado por causa del COVID-19, a partir del segundo trimestre del 2020 y todavía con efectos en 2021.
Ello constituye un enorme desafío para la formación profesional que debe atraer a los jóvenes y ser vista como una alternativa para la inserción laboral y ciudadana.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
El aprendizaje en equipo
todo lo cual conduce a una mejor integración social
Un ambiente formativo adecuado estimula
La construcción de conocimientos y mejores actitudes
motivaciones y valores
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Es el punto de convergencia de los cuatro objetivos estratégicos de la OIT:
La finalidad primordial de la OIT es promover oportunidades para que los hombres y las mujeres puedan conseguir un trabajo decente y productivo en condiciones de libertad, equidad, seguridad y dignidad humana.
La promoción de los derechos fundamentales en el trabajo
01
El empleo
02
La protección social
03
El dialogo social
04
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
La formación y el desarrollo de competencias y cualificaciones, allana el camino para la obtención de un trabajo decente y productivo.
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Los ODS han marcado una aspiración global en 17 tópicos clave del desarrollo sostenible. En particular la OIT está comprometida con el Objetivo 8 “Promover el crecimiento económico sostenido, inclusivo y sostenible, el empleo pleno y productivo y el trabajo decente para todos” una forma de verificar el logro de estos objetivos es mediante la fijación de metas. En efecto, este objetivo se ha especificado en un conjunto de 8 metas a saber (la numeración asume como 1 el título mismo del objetivo)
Metas
Promover políticas orientadas al desarrollo que apoyen las actividades productivas, la creación de puestos de trabajo decentes, el emprendimiento, la creatividad y la innovación, y fomentar la formalización y el crecimiento de las microempresas y las pequeñas y medianas empresas, incluso mediante el acceso a servicios financieros
Mejorar progresivamente, de aquí a 2030, la producción y el consumo eficientes de los recursos mundiales y procurar desvincular el crecimiento económico de la degradación del medio ambiente, conforme al Marco Decenal de Programas sobre modalidades de Consumo y Producción Sostenibles, empezando por los países desarrollados.
Lograr niveles más elevados de productividad económica mediante la diversificación, la modernización tecnológica y la innovación, entre otras cosas centrándose en los sectores con gran valor añadido y un uso intensivo de la mano de obra.
De aquí a 2030, lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración por trabajo de igual valor
De aquí a 2020, reducir considerablemente la proporción de jóvenes que no están empleados y no cursan estudios ni reciben capacitación
Metas
Adoptar medidas inmediatas y eficaces para erradicar el trabajo forzoso, poner fin a las formas contemporáneas de esclavitud y la trata de personas y asegurar la prohibición y eliminación de las peores formas de trabajo infantil, incluidos el reclutamiento y la utilización de niños soldados, y, de aquí a 2025, poner fin al trabajo infantil en todas sus formas
Aumentar el apoyo a la iniciativa de ayuda para el comercio en los países en desarrollo, en particular los países menos adelantados, incluso mediante el Marco Integrado Mejorado para la Asistencia Técnica a los Países Menos Adelantados en Materia de Comercio
Proteger los derechos laborales y promover un entorno de trabajo seguro y sin riesgos para todos los trabajadores, incluidos los trabajadores migrantes, en particular las mujeres migrantes y las personas con empleos precarios
De aquí a 2020, desarrollar y poner en marcha una estrategia mundial para el empleo de los jóvenes y aplicar el Pacto Mundial para el Empleo de la Organización Internacional del Trabajo
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
El uso de indicadores adecuados para la evaluación de impacto puede aportar información relevante para valorar las diferentes dimensiones del enfoque de trabajo decente, más adelante en esta guía se abordará el uso de indicadores para la evaluación. En el caso de los ODS, se han definido indicadores que permitirán evaluar hasta qué punto se logran las metas especificadas.
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Por ejemplo, para la meta 8.5 del ODS 8, que reza: “De aquí a 2030, lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración del trabajo de igual valor” en el caso de España, se han definido dos indicadores que son monitoreados por el Instituto Nacional de Estadística :
Indicador 8.5.1. Ingreso medio por hora de las personas empleadas, desglosado por sexo, edad, ocupación y personas con discapacidad
Indicador 8.5.2. Tasa de desempleo, desglosada por sexo, edad y personas con discapacidad.
1.4. ¿Qué es evaluar?
Dentro de la amplia y variada literatura sobre evaluación se encuentran; diversas definiciones, aquí algunas de ellas:
1.4. ¿Qué es evaluar?
Proceso sistemático, continuo e integral, destinado a determinar en qué medida se han alcanzado los objetivos previamente determinados.
(Serie metodológica volumen 6 2005, SENAR, Brasil)
1.4. ¿Qué es evaluar?
Proceso sistemático y continuo que incorpora tanto el estudio de los procesos, resultados e impacto, como la mirada de los sujetos hacia los cuales se dirigen las acciones.
(Diseño de la evaluación de impacto de las políticas de formación continua, 2010, MTEySS, Argentina)
1.4. ¿Qué es evaluar?
Es la valoración de un programa, proyecto o política que se utiliza para responder preguntas específicas relacionadas con el diseño, implementación y resultados. Su propósito es determinar el cumplimiento de los objetivos, la eficiencia, la efectividad, el impacto y la sustentabilidad del programa, debe proporcionar información que sea creíble y útil.
(Principles for evaluation of development assistence, OCDE, 1991)
1.4. ¿Qué es evaluar?
Es un medio clave para mejorar el proceso de toma de decisiones, generar conocimiento en la organización y proveer evidencia relevante y verificable sobre la eficiencia, efectividad, impacto y sostenibilidad. En otras palabras, provee un balance de una intervención particular, enfocado en que funcionó, que no funcionó y por qué. Las evaluaciones también examinan si o no se tomó el mejor camino y si este se ejecutó de un modo óptimo.
(OIT, 2020)
1.4. ¿Qué es evaluar?
Más allá de los matices, cabe señalar que la mayoría de las definiciones hacen hincapié en la necesidad de verificar el logro de los objetivos así como en el carácter sistemático, continuo e integral de los procesos de evaluación.
1.4. ¿Qué es evaluar?
Al considerar la evaluación de cualquier proyecto, programa o política, es necesario abordar ciertos conceptos clave tales como:
El momento en que la evaluación se lleva a cabo
01
Las preguntas que se espera que la evaluación responda
02
Los criterios y dimensiones que orientan la evaluación
03
El momento para la evaluación:
Hace referencia al lugar en el tiempo, en que se lleva a cabo la evaluación:
Evaluación ex ante: tiene lugar durante la fase de planificación de la intervención e implica evaluar la pertinencia y calidad de la misma en relación con la necesidad o demanda.
Evaluación intermedia: se lleva a cabo durante la ejecución y tiene por objetivo realizar los ajustes e introducir las mejoras que permitan cumplir con los objetivos.
Evaluación ex post: se realiza un tiempo después de la finalización para verificar si se han alcanzado los objetivos propuestos.
El momento para la evaluación:
Dependiendo del momento en el que se desarrolla la evaluación no sólo cambia su finalidad sino también las preguntas esenciales a las que se busca responder, las dimensiones o criterios en los que se centra la evaluación y las herramientas e indicadores que se utilizan para medir si se han logrado o no los objetivos planteados.
1.5. ¿Qué implica evaluar la formación?
Como se explicó en el contexto, es necesario conocer el grado EN QUE LOS PROGRAMAS
step 1
de formación contribuyen a alcanzaR LOS OBJETIVOS RELATIVOS
al empleo y la mejora de las condiciones sociales y económicas de
las personas, las empresas y la sociedad en su conjunto.
Duis autem vel eum iriure dolor in hendrerit in
+info
1.5. ¿Qué implica evaluar la formación?
"teniendo en cuenta la importancia de los mecanismos y los procesos, su eficacia se debería evaluar en función de los resultados. El establecimiento de indicadores cualitativos y cuantitativos destinados a evaluar la consecución de los objetivos en materia de educación y capacitación, en consonancia con el Programa del Trabajo Decente, es apropiado para llegar a una comprensión común de los logros, las deficiencias y las enseñanzas extraídas"
La OIT plantea que
1.5. ¿Qué implica evaluar la formación?
aun cuando los responsables de la implementación, las empresas y los propios participantes, están cada vez más interesados en conocerlos.
suelen incluir evaluaciones de la satisfacción o del aprendizaje alcanzado.
Sin embargo, los resultados y efectos, directos e indirectos, se evalúan con menor frecuencia,
Las intervenciones para la formación y el desarrollo de competencias
1.5. ¿Qué implica evaluar la formación?
Se proponen cinco niveles en la evaluación de las acciones formativas. Se ha incluido un quinto nivel, el enfoque del retorno de la inversión, complementario de la evaluación de impacto.
Estos diferentes niveles deben considerarse como un sistema, ya que entre ellos hay una relación causal y secuencial.
¿Cómo se obtiene la información?
¿Qué se evalúa?
Nivel de evaluación
Generalmente utiliza cuestionarios que responden los participantes al finalizar la acción formativa. También pueden implementarse otras técnicas, como grupos de trabajo, o entrevistas en profundidad. La utilización de cuestionario s de satisfacción se encuentra estandarizada en la mayoría de las entidades formativas.
Busca indagar cómo reaccionan los participantes frente a la formación: cómo valoran la pertinencia de los contenidos, el desempeño de los docentes, la organización, la metodología, el cumplimiento de los objetivos y otros aspectos generales de la intervención formativa.
1 Reacción o satisfacción de los participantes.
Es la primera etapa de una formación efectiva.
Se valora parcialmente el diseño y particularmente el proceso y los recursos utilizados, desde la perspectiva del participante.
2 Aprendizaje
Se valoran los primeros resultados de la formación que, en muchas ocasiones, constituyen por sí mismos el objetivo principal de las actividades formativas. Si el participante no ha aprendido, no se podrá avanzar en los siguientes niveles.
Busca conocer la eficacia de la acción formativa a la hora de desarrollar las competencias de los participantes. Responden a este nivel las pruebas de evaluación, cada vez, en mayor medida, ligados a la demostración, por diferentes medios, de la adquisición de una determinada competencia.
La evaluación de este nivel se realiza mediante instrumentos de evaluación del aprendizaje. Por ejemplo: test, observación del desempeño, portafolio de evidencias u otras modalidades adecuadas al tipo de competencia a evaluar.
Aunque la formación se haya desarrollado correctamente, puede pasar que los aprendizajes no se pongan en práctica por diferentes razones. Además de constatar si el aprendizaje se transfiere al desempeño laboral, la evaluación identifica factores que incidieron en la transferencia. Constituye un paso más en la comprobación de los cambios que genera la formación.
3 Transferencia o aplicación
Supone avanzar un paso más en el conocimiento de los efectos de la formación; además de los cambios en las competencias de las personas, se busca valorar hasta qué punto esta formación está siendo aplicada en los entornos de trabajo.
Generalmente se aplican cuestionarios o se realizan consultas a los participantes y a quienes los supervisan directamente. Es en el ámbito de las empresas donde se encuentra más extendido este nivel de evaluación.
Busca verificar el logro de los objetivos de formación con diferente alcance de acuerdo al tipo de intervención. Puede tratarse de impactos que haya generado la acción formativa en el resultado del trabajo de las personas, los resultados organizacionales o la sociedad en su conjunto.
Definir indicadores que sean confiables, que se puedan medir, sencillos y válidos. También es necesario investigar los impactos de carácter cualitativo que la formación ha generado. Las metodologías para la obtención de la información son variadas y se desarrollan en el módulo 3.
4 Impacto
Este nivel es el que nos ocupa en esta Guía; la traducción de los resultados de la formación en impactos. En este nivel se sitúa la valoración de la relación “causa-efecto”.
5 Retorno de la inversión (ROI)
Este nivel implica asignar valores económicos a los impactos para calcular la rentabilidad de la inversión que se realizó para llevar a cabo la formación.
Se vinculan los resultados con los costos para calcular la rentabilidad. Se deben considerar los costos de realizar la formación y también pueden considerarse los costos de no hacerlo.
Compara los costos de la inversión realizada con el valor de los beneficios obtenidos, en términos monetarios.
1.6. ¿Qué se entiende por evaluación de impacto?
La evaluación de impacto es un tipo particular de evaluación. A continuación, algunas definiciones:
Evaluación de Impacto
Término que indica si el proyecto tuvo un efecto en su entorno en términos
socio-culturales
Institucionales
Técnicos
Económicos
Medioambientales
Fuente: Tomado de (OCDE 1992)
Evaluación de Impacto
Es un tipo de evaluación sumativa que se realiza al final de una intervención para determinar en qué medida se produjeron los resultados previstos.
Fuente: Tomado de (CEPAL 2005)
Evaluación de Impacto
Trata de determinar si hubo cambios, la magnitud que tuvieron, a qué segmentos de la población objetivo afectaron, en qué medida y qué contribución realizaron los distintos componentes del proyecto al logro de sus objetivos
Fuente: Tomado de (Cohen y Franco 2002)
Evaluación de Impacto
Medición de los cambios en el bienestar de los individuos, que pueden ser atribuidos a un programa o una política específica.
Fuente: Tomado de (Banco Mundial 2003)
Evaluación de Impacto
Fuente: Tomado de Mundial, B. (2016). Evaluación de impacto en la práctica: segunda edición.
Es un método que existe para apoyar las políticas públicas basadas en evidencia ofreciendo un conjunto de instrumentos para verificar y mejorar
LA EFECTIVIDAD
LA EFICIENCIA
de los programas centrándose en los resultados
LA CALIDAD
Evaluación de Impacto
Se encargan de probar un enfoque desconocido
A programas innovadores
Proporcionan evidencia robusta y creíble sobre el desempeño del programa y si ha alcanzado o no los resultados deseados
se pueden aplicar
Se encarga de responder a preguntas clave de un programa
De manera selectiva
Fuente: Tomada de Frankel N, G. A. (2009). Fundamentos de monitoreo y evaluación. Cursillo autodirigido.
Evaluación de Impacto
1.6. ¿Qué se entiende por evaluación de impacto?
Al momento de realizar una evaluación de impacto se debe tener en cuenta los siguientes Principios de la OIT:
06
03
05
02
04
01
Independiente
Transparencia y Consulta
Competencia
Imparcialidad
Calidad
Utilidad
1.6. ¿Qué se entiende por evaluación de impacto?
Al abordar la evaluación de impacto es necesario destacar:
01
La relación de causalidad
02
La variedad de impactos
03
Los distintos impactos
1.6. ¿Qué se entiende por evaluación de impacto?
- Desarrollo económico?
- Cohesión social?
- Trabajo decente?
- Productividad?
La evaluación de impacto se basa en el contraste entre la situación de partida y lo que ocurre una vez que la formación ha tenido lugar. Ese contraste busca revelar los cambios que se pueden atribuir a la intervención que se evalúa.
Impacto en la sociedad
- Ambiente de trabajo?
- Innovación?
- Aprendizaje organizacional?
- Competitividad?
Impacto en las empresas
- Empleabilidad?
- Bienestar?
- Condiciones de trabajo?
- Remuneración?
- Desarrollo profesional?
Impacto en las personas
1.6. ¿Qué se entiende por evaluación de impacto?
Los organismos que ejecutan programas de formación deben tener en cuenta todas estas preguntas, desde el diseño de sus programas, en su ejecución y en la evaluación de impacto.
Para medir el impacto en la sociedad se pueden formular, entre otras
Como se mencionó antes, la evaluación de impacto debe dar respuestas a algunas preguntas en relación con la sociedad, las empresas y las personas
Las empresas pueden plantearse el impacto a través de preguntas como
Las personas se pueden preguntar
Para medir el impacto en la sociedad se pueden formular, entre otras
- ¿Se ha mejorado la calidad de los programas de formación en los que se invierten fondos públicos?
- ¿Han tenido más oportunidades de acceso a la formación las poblaciones vulnerables al desempleo, los jóvenes, las mujeres, las personas con discapacidad, las minorías étnicas?
- ¿Ha permitido la formación un acceso a trabajos decentes?
- ¿Cuál es el retorno económico del presupuesto dedicado a la formación?
- ¿Están las políticas económicas y fiscales creando un entorno propicio para que la formación contribuya al mejoramiento de la productividad, el crecimiento del empleo y el desarrollo?
Las empresas pueden plantearse
- ¿Qué mejoras de la productividad pueden atribuirse a la acción de formación?
- ¿Se verifican cambios positivos en las condiciones de trabajo?
- ¿Los procesos de trabajo son más eficientes como resultado de las nuevas competencias desarrolladas?
- ¿Disminuyeron los accidentes de trabajo?
- ¿El clima laboral ha mejorado como efecto de la acción formativa?
- ¿La proporción de productos finales rechazados ha disminuido?
- ¿Cuánto retorna por cada unidad invertida en aprendizaje?
Las personas se pueden preguntar
- ¿Ha sido útil la formación para encontrar un empleo?
- ¿Se han desarrollado competencias que se demandan en el empleo?
- ¿Han mejorado los ingresos como resultado de las nuevas competencias adquiridas?
- ¿Se tiene mejor empleabilidad?
- ¿Han mejorado las condiciones de trabajo?
- ¿Qué cambios en el bienestar se han producido?
1.6. ¿Qué se entiende por evaluación de impacto?
Las instituciones que ejecutan programas de formación deben tener en cuenta todas estas preguntas, desde el diseño de sus programas, en su ejecución y en la evaluación de impacto.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
de ajuste para optimizar la gestión y los resultados esperados.
El monitoreo
busca detectar oportunamente deficiencias, obstáculos y/o necesidades
se desarrolla durante la ejecución de la acción formativa,
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
Mediante el monitoreo se hace un seguimiento continuo y riguroso
El monitoreo de indicadores recopila y reporta
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
La evaluación intermedia del programa
Examina en forma periódica qué está sucediendo para responder preguntas específicas relacionadas con el diseño, la ejecución y los resultados, para intervenir oportunamente.
Indaga sobre las condiciones que pueden facilitar o impedir el logro de los objetivos.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
en el rumbo pretendido antes de que concluya.
medidas de corrección que mantengan el programa
se realizan durante la ejecución y tienen como finalidad poner en marcha
Tanto el monitoreo como la evaluación intermedia, o de desempeño del programa
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
El impacto
Se mide al finalizar el programa y busca establecer la relación causa-efecto entre una acción de formación y los resultados.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
El impacto
Es la medida en que la intervención ha generado o se espera que genere efectos significativos, positivos o negativos, intencionados o no. Dentro del proceso de evaluación el impacto busca identificar los efectos sociales, ambientales y económicos de la intervención.
1.8. ¿Por qué evaluar el impacto?
Debido a la importancia que ha adquirido el desarrollo de competencias y calificaciones, así como el monto significativo de inversiones públicas y privadas, es necesario conocer el impacto de las acciones de formación llevadas a cabo.
1.8. ¿Por qué evaluar el impacto?
Conocer los resultados, efectos e impactos de los programas de formación resulta fundamental para tomar decisiones respecto de la calidad, la pertinencia y equidad de los mismos.
La necesidad de evaluar el impacto se reconoce cada vez más en ámbitos institucionales, públicos, privados y por las personas interesadas en la formación.
1.8. ¿Por qué evaluar el impacto?
En esta misma línea, hay quienes opinan que una evaluación de impacto no siempre se justifica y se debe ser selectivo para determinar los casos en que se llevará a cabo.
“lo que no se mide no se puede mejorar”
“entre evaluar y no evaluar, siempre es mejor evaluar"
que se puede complementar con:
Al respecto, en esta Guía se propone la regla de:
La cadena de resultados y su aplicación en la formación profesional:
se realizan procesos que conducen al aprendizaje.
se asignan recursos y
Para que una acción formativa tenga sentido y genere resultados debe responder a una necesidad de formación.
se definen los objetivos a lograr
Luego de identificar cuál es la necesidad, o sea la demanda de formación
La cadena de resultados y su aplicación en la formación profesional:
La calidad
Pertinencia
Equidad
con que se ejecuten las intervenciones, determinan los efectos de las personas, las empresas y la sociedad.
La cadena de resultados y su aplicación en la formación profesional:
A la visión de este ciclo como un proceso, se le denomina la cadena de resultados, que se muestra en el gráfico siguiente:
La cadena de resultados y su aplicación en la formación profesional:
Los insumos
Son fundamentalmente, recursos financieros que se utilizan para desarrollar procesos de aprendizaje, construir un centro, diseñar un programa de formación, elaborar recursos didácticos, capacitar docentes, entre otros.
1.8. ¿Por qué evaluar el impacto?
La inversión se realiza para incrementar cierta oferta. En el caso dela formación este incremento se ve en términos de:
- Centros de formación construidos y dotados
- Materiales didácticos elaborados
- Talleres de formación disponibles
- Currículos por competencias diseñados
Los efectos deseados se producen una vez llevado a cabo el proceso de formación en respuesta a la demanda.
1.8. ¿Por qué evaluar el impacto?
Los efectos directos
Se perciben en el corto plazo y se pueden medir al finalizar cada curso, por ejemplo:
- Evaluaciones de competencia aplicadas
- Participantes formados
- Certificados otorgados
1.8. ¿Por qué evaluar el impacto?
El impacto
Es el último propósito de la formación que debería reflejarse en mejoras en el bienestar de los participantes, en la productividad de las empresas y en la sociedad en su conjunto.
1.9. ¿Para qué evaluar el impacto de la formación?
La información que genera la evaluación apoya la toma de decisiones para ajustar las intervenciones, ampliarlas, recortarlas o sustituirlas.
Es útil para los gestores de los programas, los decisores de políticas públicas, las empresas y las personas en general, para:
1.9. ¿Para qué evaluar el impacto de la formación?
01
05
04
03
02
Revisar si el sistema de formación está simplemente orientado por la oferta, o es realmente una respuesta a la demanda . Si un programa de formación está orientado solo por la oferta, puede ser solamente un buen motivo de gasto de recursos invertidos de un modo inercial y con bajísimo impacto.
La conformación de un sistema de información más amplio y permanente que apoye la definición de políticas de formación profesional más coherentes.
Contribuir a la creación de mejores sistemas de formación y desarrollo de competencias y calificaciones.
Mejorar la gestión de los programas y abrir procesos de aprendizaje organizacional.
Difundir el conocimiento sobre el programa y las actividades desarrolladas.
1.9. ¿Para qué evaluar el impacto de la formación?
10
11
09
08
06
07
Saber en qué medida la información ha incidido en la mejora de los resultados de la empresa y si la inversión realizada tiene un retorno positivo.
Precisar el valor de la formación suministrada por las empresas, en especial cuando se quiere estimular este tipo de capacitación.
Estimular el aprendizaje y que la personas puedan tomar mejores decisiones para su desarrollo de carrera.
La rendición de cuentas y la transparencia en la utilización de los recursos.
Promover una cultura de aprendizaje y formación permanente en las organizaciones.
Favorecer una mejor gestión y comprensión de todas las partes implicadas.
Ciclo de la formación profesional
Anticipación de necesidades
Preparación de la respuesta
Ejecución
Evaluación
Certificación
El futuro de la formación profesional: desafíos y lineamientos para su fortalecimiento
1.10. Teoría del cambio
Cuando se elabora el diseño de programa de formación, se hace en relación con una demanda insatisfecha. Usualmente es la generación de habilidades y competencias que son demandadas en el mercado y por tanto se sustenta en un conjunto de hipótesis sobre el modo en que dicho programa (denominado “intervención” en la jerga de proyectos) producirá un resultado diferente y mejor a lo que existe.
1.10. Teoría del cambio
Son estas hipótesis las que determinan el tipo de indicadores para el monitoreo y la evaluación del programa. Por ello es necesario que estén bien sustentadas y formuladas de modo que se puedan prever sin dificultad los efectos e impactos deseados.
1.10. Teoría del cambio
Por ello, un primer paso fundamental en la elaboración de un proyecto de formación profesional es formular explícitamente lo que se espera lograr, es decir la teoría del cambio implícita en el diseño.
1.10. Teoría del cambio
Explica cómo se puede impulsar el cambio en el proyecto y cómo se obtienen resultados que contribuyan a lograr impactos finales.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Sirve de guía para hacer el monitoreo y evaluación del proyecto con el fin de hacer más eficientes los procesos
La teoría del cambio se desarrolla cuando el proyecto se adapta a problemas y estrategias nuevas.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Puede elaborarse para un programa, un proyecto, una estrategia, una política o una organización
donde se tiene en cuenta todos los procesos del proyecto como insumos, productos, resultados e impacto
step 1
se hace mediante una cadena de resultados
Duis autem vel eum iriure dolor in hendrerit in
+info
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Se puede emplear cuando se quiere determinar la situación actual del proyecto, que se pretende alcanzar, que hacer para efectuar buenos resultados y determinar que indicadores aplicar.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Teoría del cambio mediante una cadena de resultados
Productos
Resultados
Actividades
Impacto
Insumos
Fuente: Tomada de https://www.unicef-irc.org/publications/pdf/Brief%202%20Theory%20of%20Change_ES.pdf
Importancia de la teoría del cambio en la evaluación de impacto
La teoría del cambio es útil dentro de la evaluación de impacto para establecer que datos se deben recopilar y analizar para proporcionar un marco de resultados.
01
En una evaluación de impacto es importante verificar si la teoría del cambio sirve para la recopilación, análisis y divulgación de datos.
02
En la evaluación de impacto la teoría se encarga de proceder con los cambios necesarios para lograr los objetivos propuestos en el proyecto verificando la idoneidad y exactitud de los procesos.
03
Conocimiento asociado
Material de apoyo a este módulowww.oitcinterfor.org
1. Objetivos de Desarrollo Sostenible (ODS), 2021.
2. Guía Abreviada de Indicadores de Educación para el ODS 4. 2018
3. Trabajo decente, concepto e indicadores.
Experiencias y aplicaciones
4. Recomendación 195 de la OIT sobre el desarrollo de los recursos humanos, 2004.
1. Indicadores de educación para el ODS 4. 2018
5. Resolución sobre la promoción de empresas sostenibles. OIT, 2007.
2. La medición del trabajo decente con indicadores estadísticos. OIT, 2003.
6. Conclusiones sobre las calificaciones para el incremento de la productividad, el crecimiento del empleo y el desarrollo. OIT, 2008.
3. Trabajo decente: significados y alcances del concepto. Indicadores propuestos para su medición. MTEySS Argentina, 2007.
7. Video Objetivos de Desarrollo Sostenible https://www.youtube.com/watch?v=MCKH5xk8X-g
4. Calidad, pertinencia y equidad. Un enfoque integrado de la formación profesional. OIT/Cinterfor, 2008.
8. Manual para la evaluación de impacto de proyectos de lucha contra la pobreza. CEPAL, 2005.
5. Diseño de la evaluación de impacto de las políticas de formación continua. MTEySS, Argentina, 2010.
9. Evaluación de impacto en la práctica: segunda edición. Banco Mundial, 2016.
10. Fundamentos de monitoreo y evaluación. Cursillo autodirigido. Frankel N, G.A. 2009.
Conocimiento asociado
Material de apoyo a este módulowww.oitcinterfor.org
11. Calificaciones para la mejora de la productividad el crecimiento del empleo y el desarrollo. OIT, 2008.
12. The Roles of Evaluation for Vocational Education and Training. OIT, 1999.
Experiencias y aplicaciones
13. Vocational education and training is good for you. CEDEFOP, 2011.
6. Evaluación de políticas públicas en México. R. Canto, 2010.
14. Manual para la evaluación de impacto de programas de jóvenes. E. Abdala, 2004.
7. Evaluación de impacto de la formación profesional modalidad: habilitación, complementación y formación continua en centros. INFOTEP, 2006.
15. Evaluación de impacto de la formación en las organizaciones. P. Pineda, 2000.
8. Evaluación de impacto en la inserción laboral de los beneficiarios de los cursos sectoriales de formación profesional. Argentina, OIT, 2014.
16. Video Sinopsis Evaluación de Impacto https://www.youtube.com/watch?v=8l4k8PSIpG8
9. Video Sinopsis Evaluación de Impacto https://www.youtube.com/watch?v=8l4k8PSIpG8
10. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
17. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
9. Evaluación de impacto del Programa de Apoyo al Empleo. El Colegio de México, 2010.
18. Principles for evaluation of development assistence, OECD, 1991
10. Evaluación de impacto del programa jóvenes rurales emprendedores del servicio nacional de aprendizaje-SENA. Fedesarrollo, 2010.
10. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
19. ILO policy guidelines for results-based evaluation. OIT, 2020
20. Guidance Note 2.5: Impact Evaluation. OIT, 2020
Gracias
MODULO 1
Yesica Fernández Mal
Created on May 4, 2021
Start designing with a free template
Discover more than 1500 professional designs like these:
View
Essential Learning Unit
View
Akihabara Learning Unit
View
Genial learning unit
View
History Learning Unit
View
Primary Unit Plan
View
Vibrant Learning Unit
View
Art learning unit
Explore all templates
Transcript
Módulo 1: Contextualización de la Evaluación de Impacto
CONTEXTO Y CONCEPTOS
Módulo 1: Contextualización de la Evaluación de Impacto
Este módulo describe el marco en el que la formación tiene resultados económicos y sociales; exponiendo su relación con los Objetivos de desarrollo Sostenible (ODS) y abordando el impacto en las personas, las empresas y la sociedad. Explica el vínculo de la evaluación de impacto con el trabajo decente y finalmente, introduce el concepto de gestión por resultados en la evaluación de impacto.
Adicionalmente incluye los conceptos básicos sobre la evaluación, expone su diversidad para diferenciar entre ellos y establecer qué es y qué no es la evaluación de impacto. Describe las diferentes instancias en que se aplica la evaluación en la formación y desarrollo de competencias, explica la diferencia entre evaluar y monitorear. Para ahondar en un énfasis practico, aborda finalmente las preguntas: ¿por qué? y ¿para qué evaluar?
Objetivo
01
Desarrollar capacidades básicas sobre métodos de evaluación que se tendrán en cuenta en el momento de diseñar, manejar y orientar evaluaciones de programas o políticas activas de formación profesional que brinden oportunidades de mejora en los ámbitos educativo y laboral, teniendo en cuenta las transformaciones digitales que se plantean como reto en cada una de las industrias.
Al finalizar este módulo el participante podrá:
Objetivos
02
Identificar los conceptos clave referidos a la evaluación.
Analizar la finalidad y utilidad de evaluar el impacto de la formación.
03
Valorar la información que brinda la evaluación de impacto para la gestión y la toma de decisiones.
04
Módulo 1: Contextualización de la Evaluación de Impacto
Contexto
¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
¿De qué manera la formación se relaciona con el desarrollo económico y social?
Conceptualización
¿Para qué evaluar el impacto de la formación?
¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
¿Qué se entiende por evaluación de impacto?
¿Por qué evaluar el impacto?
¿Qué implica evaluar la formación?
¿Qué es evaluar?
Módulo 1: Contextualización de la Evaluación de Impacto
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
1.4. ¿Qué es evaluar?
1.5. ¿Qué implica evaluar la formación?
Módulo 1: Contextualización de la Evaluación de Impacto
1.6. ¿Qué se entiende por evaluación de impacto?
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
1.8. ¿Por qué evaluar el impacto?
1.9. ¿Para qué evaluar el impacto de la formación?
1.10. Teoría del cambio
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
La educación, la formación profesional y el aprendizaje permanente son pilares fundamentales para el empleo de los trabajadores; les facilitan condiciones para mejorar su empleabilidad y su calidad de vida y contribuyen con el desarrollo empresarial sostenible. Estos cometidos están ligados con los ODS, en especial los relativos a la reducción de la pobreza.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
recogen los propósitos de los programas de formación y desarrollo de competencias que promueven los ministerios de educación y de trabajo, ejecutados por ellos mismos y por instituciones públicas y privadas.
El primero de los ODS, “Poner fin a la pobreza en todas sus formas en todo el mundo” junto con una de las metas para hacer realidad dicho objetivo, cual es
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Una de las áreas estratégicas del mandato de la OIT es el resultado:
“Transición económica, social y ambiental en favor del empleo pleno, productivo y libremente elegido y el trabajo decente para todos”, para lo cual el desarrollo de las competencias es esencial.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
En recientes discusiones sobre la importancia del desarrollo de las capacidades y competencias, la OIT ha insistido en que
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
La formación es “piedra angular del trabajo decente” , con una visión de aprendizaje permanente que guarda coherencia con las políticas públicas en los ámbitos económico, fiscal, social y del mercado de trabajo, todas ellas fundamentales para el crecimiento económico sostenible, de la creación de empleo y el desarrollo social.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
El ODS que se enfoca directamente en el crecimiento del empleo es el Objetivo 8: Orientado hacia el trabajo decente y el crecimiento económico. Entre las metas que plantea, más relacionadas con impactos que podría tener la formación profesional están las de “lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración por trabajo de igual valor”; “reducir considerablemente la proporción de jóvenes que no están empleados y no cursan estudios ni reciben capacitación”.
Objetivos de Desarrollo Sostenible
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Desde el punto de vista social, son una herramienta en el combate a la pobreza y la promoción de la igualdad de oportunidades, mediante la integración de las personas en los ámbitos laboral, social y de la ciudadanía.
La formación y el desarrollo de competencias constituyen la base para la competitividad de las economías y de las empresas.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
El resultado final de estas medidas ha de estar a la mano para una continua retroalimentación y mejoramiento en el diseño de políticas activas del mercado de trabajo.
Para ello propone incentivar los mecanismos de aprendizaje permanente y de mayores oportunidades de acceso a diversas modalidades de calificación y recalificación.
El informe sobre el Futuro del Trabajo
Anotó la necesidad de adoptar incentivos para promover inversiones en áreas clave que promuevan el trabajo decente y sostenible.
1.1. ¿De qué manera la formación se relaciona con el desarrollo económico y social?
Para este fin, la evaluación de impacto es una herramienta ineludible que ha de ser mejorada y aplicada con mayor frecuencia.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La Recomendación 195 de la OIT, alienta a los países miembros a “apoyar y facilitar la investigación en materia de desarrollo de los recursos humanos y la formación”, la que podría comprender “las inversiones en formación, así como la eficacia y el impacto de la misma”.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Contando con un entorno económico y social propicio, la formación y el desarrollo de competencias contribuyen a la mejora del desempeño de las personas y de las empresas, lo que se traduce en crecimiento del empleo y desarrollo para la sociedad.
Beneficios
Sociedad
Personas
Empresas
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
mejores condiciones de trabajo, de remuneración, a una mayor empleabilidad y una mejor calidad de vida.
Las personas
que participan en la formación pueden acceder a
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Investigaciones de Centro Europeo para el Desarrollo de la Formación Profesional (CEDEFOP), han demostrado que una combinación de la educación y la formación profesional con medidas sociales y laborales ayuda a adaptar a los diferentes perfiles de jóvenes en riesgo de abandono prematuro de la educación y la formación.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
En estos segmentos se concentra gran parte de la pobreza, de la informalidad y del déficit de trabajo decente en la región.
En América Latina y el Caribe, factores como la heterogeneidad y la segmentación en el mercado de trabajo inciden en los impactos de la formación.
Una alta proporción de la población activa es joven y vulnerable al desempleo.
Casi un tercio del mercado laboral se encuentra en zonas rurales y más de la mitad del empleo corresponde a trabajadores independientes, domésticos, trabajadores familiares no remunerados, o asalariados en microempresas.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Adicionalmente, los cambios sin precedentes generados por la pandemia COVID-19, generaron no solamente una reducción aguda del empleo con una pérdida en horas de trabajo en 2020 cerca de cuatro veces más que la registrada en la crisis del 2009.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
en la economía informal, los jóvenes y las mujeres, las poblaciones rurales y las demás áreas sectoriales deterioradas por la pandemia.
Va a ser necesario disponer de dispositivos de información rápida y confiable sobre los impactos de los programas de formación para las poblaciones más afectadas,
Los impactos de los programas de formación que se pongan en marcha durante y a la salida de la crisis, no se pueden desconocer.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Si bien existen importantes desarrollos en la región e instituciones de vanguardia, también es cierto que algunos sistemas locales de formación tienen dificultades para el acceso de ciertos colectivos de la población -lo que conlleva a exclusión laboral- y además requieren mejorar la articulación entre la oferta y la demanda.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Por ello la OIT en su observatorio sobre el COVID-19 ha insistido en que los encargados de la adopción de políticas se verán ante el desafío de facilitar una sólida recuperación, que promueva el empleo, los ingresos, los derechos de los trabajadores y el dialogo social, a fin de lograr un recuperación centrada en el ser humano.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
pueden ser más innovadoras y sostenibles.
sus trabajadores, una fuente importante de ventaja competitiva, como activos y agentes del cambio,
Las empresas
de todos los tamaños, que consideran a
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Para tal fin, las empresas deben identificar
Fomentar la formación en el lugar de trabajo
Las cualificaciones que precisan
Promover una cultura de aprendizaje permanente
Facilitar el intercambio de conocimientos
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Las empresas sostenibles son decisivas para la creación de riqueza e innovación, permiten mejorar los niveles de vida y las condiciones sociales, contribuyendo así al logro del trabajo decente y el desarrollo sostenible
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
En las ramas con más altos niveles de productividad se emplea a un bajo porcentaje de trabajadores.
Los niveles de productividad son elevados solo en algunas ramas de actividad, mientras que en otras son bastante inferiores al promedio.
La segmentación del mercado de trabajo también se verifica en la estructura empresarial.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La OIT calcula que la economía informal involucra al
Para el sector rural, una importante fracción del empleo se genera en la pequeña unidad agropecuaria de tipo familiar. El desarrollo de las competencias es fundamental para que la fuerza laboral se desplace de la economía informal hacia los empleos en la economía formal, así como para aumentar la productividad del trabajo.
75%
Trabajadores
y representa el
40%
PIB
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Las evaluaciones de impacto han de considerar el rol fundamental de las empresas como lugares de aprendizaje y la medida en que los programas de formación y aprendizaje a la salida de la crisis, impactan en su recuperación y reapertura a los negocios.
El cierre de un grupo de actividades económicas a raíz de las medidas de confinamiento y restricción a la movilidad a resultado en la clausura de lugares de trabajo y con ello de oportunidades de aprendizaje y práctica laboral.
Muchas empresas, particularmente las MyPYMES han resultado especialmente afectadas por la pandemia COVID-19.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
Mayores tasas de ocupación y formalidad
Reducción de la pobreza
Inclusión social
Respeto de los derechos laborales
Competitividad en los mercados mundiales
La sociedad
percibe los impactos del desarrollo de competencias mediante empleos de mejor calidad.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La formación profesional debe responder al entorno
así como a las
Esta es la doble pertinencia de la formación, tanto social como económica.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
El desarrollo de las cualificaciones puede contribuir a la construcción de sociedades más equitativas. Existe una estrecha relación entre las diversas formas de exclusión del mercado de trabajo como
los bajos ingresos laborales
con la pobreza y la discriminación
el desempleo
el subempleo
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
La tasa de desempleo juvenil se vio ante una situación atípica cuando se registraron tendencias a la baja debidas al desistimiento de los jóvenes de continuar buscando empleo, la cual se bautizó como “fuera de la fuerza de trabajo” (retirados del mercado de trabajo por no estar disponibles para trabajar y/o buscar un empleo)
Estos rasgos de desigualdad como se sabe, se han acentuado por causa del COVID-19, a partir del segundo trimestre del 2020 y todavía con efectos en 2021.
Ello constituye un enorme desafío para la formación profesional que debe atraer a los jóvenes y ser vista como una alternativa para la inserción laboral y ciudadana.
1.2. ¿Cómo impactan la formación y el desarrollo de competencias a las personas, las empresas y la sociedad?
El aprendizaje en equipo
todo lo cual conduce a una mejor integración social
Un ambiente formativo adecuado estimula
La construcción de conocimientos y mejores actitudes
motivaciones y valores
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Es el punto de convergencia de los cuatro objetivos estratégicos de la OIT:
La finalidad primordial de la OIT es promover oportunidades para que los hombres y las mujeres puedan conseguir un trabajo decente y productivo en condiciones de libertad, equidad, seguridad y dignidad humana.
La promoción de los derechos fundamentales en el trabajo
01
El empleo
02
La protección social
03
El dialogo social
04
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
La formación y el desarrollo de competencias y cualificaciones, allana el camino para la obtención de un trabajo decente y productivo.
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Los ODS han marcado una aspiración global en 17 tópicos clave del desarrollo sostenible. En particular la OIT está comprometida con el Objetivo 8 “Promover el crecimiento económico sostenido, inclusivo y sostenible, el empleo pleno y productivo y el trabajo decente para todos” una forma de verificar el logro de estos objetivos es mediante la fijación de metas. En efecto, este objetivo se ha especificado en un conjunto de 8 metas a saber (la numeración asume como 1 el título mismo del objetivo)
Metas
Promover políticas orientadas al desarrollo que apoyen las actividades productivas, la creación de puestos de trabajo decentes, el emprendimiento, la creatividad y la innovación, y fomentar la formalización y el crecimiento de las microempresas y las pequeñas y medianas empresas, incluso mediante el acceso a servicios financieros
Mejorar progresivamente, de aquí a 2030, la producción y el consumo eficientes de los recursos mundiales y procurar desvincular el crecimiento económico de la degradación del medio ambiente, conforme al Marco Decenal de Programas sobre modalidades de Consumo y Producción Sostenibles, empezando por los países desarrollados.
Lograr niveles más elevados de productividad económica mediante la diversificación, la modernización tecnológica y la innovación, entre otras cosas centrándose en los sectores con gran valor añadido y un uso intensivo de la mano de obra.
De aquí a 2030, lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración por trabajo de igual valor
De aquí a 2020, reducir considerablemente la proporción de jóvenes que no están empleados y no cursan estudios ni reciben capacitación
Metas
Adoptar medidas inmediatas y eficaces para erradicar el trabajo forzoso, poner fin a las formas contemporáneas de esclavitud y la trata de personas y asegurar la prohibición y eliminación de las peores formas de trabajo infantil, incluidos el reclutamiento y la utilización de niños soldados, y, de aquí a 2025, poner fin al trabajo infantil en todas sus formas
Aumentar el apoyo a la iniciativa de ayuda para el comercio en los países en desarrollo, en particular los países menos adelantados, incluso mediante el Marco Integrado Mejorado para la Asistencia Técnica a los Países Menos Adelantados en Materia de Comercio
Proteger los derechos laborales y promover un entorno de trabajo seguro y sin riesgos para todos los trabajadores, incluidos los trabajadores migrantes, en particular las mujeres migrantes y las personas con empleos precarios
De aquí a 2020, desarrollar y poner en marcha una estrategia mundial para el empleo de los jóvenes y aplicar el Pacto Mundial para el Empleo de la Organización Internacional del Trabajo
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
El uso de indicadores adecuados para la evaluación de impacto puede aportar información relevante para valorar las diferentes dimensiones del enfoque de trabajo decente, más adelante en esta guía se abordará el uso de indicadores para la evaluación. En el caso de los ODS, se han definido indicadores que permitirán evaluar hasta qué punto se logran las metas especificadas.
1.3. ¿Cómo se relacionan la formación profesional, el trabajo decente y la evaluación de impacto?
Por ejemplo, para la meta 8.5 del ODS 8, que reza: “De aquí a 2030, lograr el empleo pleno y productivo y el trabajo decente para todas las mujeres y los hombres, incluidos los jóvenes y las personas con discapacidad, así como la igualdad de remuneración del trabajo de igual valor” en el caso de España, se han definido dos indicadores que son monitoreados por el Instituto Nacional de Estadística :
Indicador 8.5.1. Ingreso medio por hora de las personas empleadas, desglosado por sexo, edad, ocupación y personas con discapacidad
Indicador 8.5.2. Tasa de desempleo, desglosada por sexo, edad y personas con discapacidad.
1.4. ¿Qué es evaluar?
Dentro de la amplia y variada literatura sobre evaluación se encuentran; diversas definiciones, aquí algunas de ellas:
1.4. ¿Qué es evaluar?
Proceso sistemático, continuo e integral, destinado a determinar en qué medida se han alcanzado los objetivos previamente determinados.
(Serie metodológica volumen 6 2005, SENAR, Brasil)
1.4. ¿Qué es evaluar?
Proceso sistemático y continuo que incorpora tanto el estudio de los procesos, resultados e impacto, como la mirada de los sujetos hacia los cuales se dirigen las acciones.
(Diseño de la evaluación de impacto de las políticas de formación continua, 2010, MTEySS, Argentina)
1.4. ¿Qué es evaluar?
Es la valoración de un programa, proyecto o política que se utiliza para responder preguntas específicas relacionadas con el diseño, implementación y resultados. Su propósito es determinar el cumplimiento de los objetivos, la eficiencia, la efectividad, el impacto y la sustentabilidad del programa, debe proporcionar información que sea creíble y útil.
(Principles for evaluation of development assistence, OCDE, 1991)
1.4. ¿Qué es evaluar?
Es un medio clave para mejorar el proceso de toma de decisiones, generar conocimiento en la organización y proveer evidencia relevante y verificable sobre la eficiencia, efectividad, impacto y sostenibilidad. En otras palabras, provee un balance de una intervención particular, enfocado en que funcionó, que no funcionó y por qué. Las evaluaciones también examinan si o no se tomó el mejor camino y si este se ejecutó de un modo óptimo.
(OIT, 2020)
1.4. ¿Qué es evaluar?
Más allá de los matices, cabe señalar que la mayoría de las definiciones hacen hincapié en la necesidad de verificar el logro de los objetivos así como en el carácter sistemático, continuo e integral de los procesos de evaluación.
1.4. ¿Qué es evaluar?
Al considerar la evaluación de cualquier proyecto, programa o política, es necesario abordar ciertos conceptos clave tales como:
El momento en que la evaluación se lleva a cabo
01
Las preguntas que se espera que la evaluación responda
02
Los criterios y dimensiones que orientan la evaluación
03
El momento para la evaluación:
Hace referencia al lugar en el tiempo, en que se lleva a cabo la evaluación:
Evaluación ex ante: tiene lugar durante la fase de planificación de la intervención e implica evaluar la pertinencia y calidad de la misma en relación con la necesidad o demanda.
Evaluación intermedia: se lleva a cabo durante la ejecución y tiene por objetivo realizar los ajustes e introducir las mejoras que permitan cumplir con los objetivos.
Evaluación ex post: se realiza un tiempo después de la finalización para verificar si se han alcanzado los objetivos propuestos.
El momento para la evaluación:
Dependiendo del momento en el que se desarrolla la evaluación no sólo cambia su finalidad sino también las preguntas esenciales a las que se busca responder, las dimensiones o criterios en los que se centra la evaluación y las herramientas e indicadores que se utilizan para medir si se han logrado o no los objetivos planteados.
1.5. ¿Qué implica evaluar la formación?
Como se explicó en el contexto, es necesario conocer el grado EN QUE LOS PROGRAMAS
step 1
de formación contribuyen a alcanzaR LOS OBJETIVOS RELATIVOS
al empleo y la mejora de las condiciones sociales y económicas de
las personas, las empresas y la sociedad en su conjunto.
Duis autem vel eum iriure dolor in hendrerit in
+info
1.5. ¿Qué implica evaluar la formación?
"teniendo en cuenta la importancia de los mecanismos y los procesos, su eficacia se debería evaluar en función de los resultados. El establecimiento de indicadores cualitativos y cuantitativos destinados a evaluar la consecución de los objetivos en materia de educación y capacitación, en consonancia con el Programa del Trabajo Decente, es apropiado para llegar a una comprensión común de los logros, las deficiencias y las enseñanzas extraídas"
La OIT plantea que
1.5. ¿Qué implica evaluar la formación?
aun cuando los responsables de la implementación, las empresas y los propios participantes, están cada vez más interesados en conocerlos.
suelen incluir evaluaciones de la satisfacción o del aprendizaje alcanzado.
Sin embargo, los resultados y efectos, directos e indirectos, se evalúan con menor frecuencia,
Las intervenciones para la formación y el desarrollo de competencias
1.5. ¿Qué implica evaluar la formación?
Se proponen cinco niveles en la evaluación de las acciones formativas. Se ha incluido un quinto nivel, el enfoque del retorno de la inversión, complementario de la evaluación de impacto.
Estos diferentes niveles deben considerarse como un sistema, ya que entre ellos hay una relación causal y secuencial.
¿Cómo se obtiene la información?
¿Qué se evalúa?
Nivel de evaluación
Generalmente utiliza cuestionarios que responden los participantes al finalizar la acción formativa. También pueden implementarse otras técnicas, como grupos de trabajo, o entrevistas en profundidad. La utilización de cuestionario s de satisfacción se encuentra estandarizada en la mayoría de las entidades formativas.
Busca indagar cómo reaccionan los participantes frente a la formación: cómo valoran la pertinencia de los contenidos, el desempeño de los docentes, la organización, la metodología, el cumplimiento de los objetivos y otros aspectos generales de la intervención formativa.
1 Reacción o satisfacción de los participantes. Es la primera etapa de una formación efectiva. Se valora parcialmente el diseño y particularmente el proceso y los recursos utilizados, desde la perspectiva del participante.
2 Aprendizaje Se valoran los primeros resultados de la formación que, en muchas ocasiones, constituyen por sí mismos el objetivo principal de las actividades formativas. Si el participante no ha aprendido, no se podrá avanzar en los siguientes niveles.
Busca conocer la eficacia de la acción formativa a la hora de desarrollar las competencias de los participantes. Responden a este nivel las pruebas de evaluación, cada vez, en mayor medida, ligados a la demostración, por diferentes medios, de la adquisición de una determinada competencia.
La evaluación de este nivel se realiza mediante instrumentos de evaluación del aprendizaje. Por ejemplo: test, observación del desempeño, portafolio de evidencias u otras modalidades adecuadas al tipo de competencia a evaluar.
Aunque la formación se haya desarrollado correctamente, puede pasar que los aprendizajes no se pongan en práctica por diferentes razones. Además de constatar si el aprendizaje se transfiere al desempeño laboral, la evaluación identifica factores que incidieron en la transferencia. Constituye un paso más en la comprobación de los cambios que genera la formación.
3 Transferencia o aplicación Supone avanzar un paso más en el conocimiento de los efectos de la formación; además de los cambios en las competencias de las personas, se busca valorar hasta qué punto esta formación está siendo aplicada en los entornos de trabajo.
Generalmente se aplican cuestionarios o se realizan consultas a los participantes y a quienes los supervisan directamente. Es en el ámbito de las empresas donde se encuentra más extendido este nivel de evaluación.
Busca verificar el logro de los objetivos de formación con diferente alcance de acuerdo al tipo de intervención. Puede tratarse de impactos que haya generado la acción formativa en el resultado del trabajo de las personas, los resultados organizacionales o la sociedad en su conjunto.
Definir indicadores que sean confiables, que se puedan medir, sencillos y válidos. También es necesario investigar los impactos de carácter cualitativo que la formación ha generado. Las metodologías para la obtención de la información son variadas y se desarrollan en el módulo 3.
4 Impacto Este nivel es el que nos ocupa en esta Guía; la traducción de los resultados de la formación en impactos. En este nivel se sitúa la valoración de la relación “causa-efecto”.
5 Retorno de la inversión (ROI) Este nivel implica asignar valores económicos a los impactos para calcular la rentabilidad de la inversión que se realizó para llevar a cabo la formación.
Se vinculan los resultados con los costos para calcular la rentabilidad. Se deben considerar los costos de realizar la formación y también pueden considerarse los costos de no hacerlo.
Compara los costos de la inversión realizada con el valor de los beneficios obtenidos, en términos monetarios.
1.6. ¿Qué se entiende por evaluación de impacto?
La evaluación de impacto es un tipo particular de evaluación. A continuación, algunas definiciones:
Evaluación de Impacto
Término que indica si el proyecto tuvo un efecto en su entorno en términos
socio-culturales
Institucionales
Técnicos
Económicos
Medioambientales
Fuente: Tomado de (OCDE 1992)
Evaluación de Impacto
Es un tipo de evaluación sumativa que se realiza al final de una intervención para determinar en qué medida se produjeron los resultados previstos.
Fuente: Tomado de (CEPAL 2005)
Evaluación de Impacto
Trata de determinar si hubo cambios, la magnitud que tuvieron, a qué segmentos de la población objetivo afectaron, en qué medida y qué contribución realizaron los distintos componentes del proyecto al logro de sus objetivos
Fuente: Tomado de (Cohen y Franco 2002)
Evaluación de Impacto
Medición de los cambios en el bienestar de los individuos, que pueden ser atribuidos a un programa o una política específica.
Fuente: Tomado de (Banco Mundial 2003)
Evaluación de Impacto
Fuente: Tomado de Mundial, B. (2016). Evaluación de impacto en la práctica: segunda edición.
Es un método que existe para apoyar las políticas públicas basadas en evidencia ofreciendo un conjunto de instrumentos para verificar y mejorar
LA EFECTIVIDAD
LA EFICIENCIA
de los programas centrándose en los resultados
LA CALIDAD
Evaluación de Impacto
Se encargan de probar un enfoque desconocido
A programas innovadores
Proporcionan evidencia robusta y creíble sobre el desempeño del programa y si ha alcanzado o no los resultados deseados
se pueden aplicar
Se encarga de responder a preguntas clave de un programa
De manera selectiva
Fuente: Tomada de Frankel N, G. A. (2009). Fundamentos de monitoreo y evaluación. Cursillo autodirigido.
Evaluación de Impacto
1.6. ¿Qué se entiende por evaluación de impacto?
Al momento de realizar una evaluación de impacto se debe tener en cuenta los siguientes Principios de la OIT:
06
03
05
02
04
01
Independiente
Transparencia y Consulta
Competencia
Imparcialidad
Calidad
Utilidad
1.6. ¿Qué se entiende por evaluación de impacto?
Al abordar la evaluación de impacto es necesario destacar:
01
La relación de causalidad
02
La variedad de impactos
03
Los distintos impactos
1.6. ¿Qué se entiende por evaluación de impacto?
La evaluación de impacto se basa en el contraste entre la situación de partida y lo que ocurre una vez que la formación ha tenido lugar. Ese contraste busca revelar los cambios que se pueden atribuir a la intervención que se evalúa.
Impacto en la sociedad
Impacto en las empresas
Impacto en las personas
1.6. ¿Qué se entiende por evaluación de impacto?
Los organismos que ejecutan programas de formación deben tener en cuenta todas estas preguntas, desde el diseño de sus programas, en su ejecución y en la evaluación de impacto.
Para medir el impacto en la sociedad se pueden formular, entre otras
Como se mencionó antes, la evaluación de impacto debe dar respuestas a algunas preguntas en relación con la sociedad, las empresas y las personas
Las empresas pueden plantearse el impacto a través de preguntas como
Las personas se pueden preguntar
Para medir el impacto en la sociedad se pueden formular, entre otras
Las empresas pueden plantearse
Las personas se pueden preguntar
1.6. ¿Qué se entiende por evaluación de impacto?
Las instituciones que ejecutan programas de formación deben tener en cuenta todas estas preguntas, desde el diseño de sus programas, en su ejecución y en la evaluación de impacto.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
de ajuste para optimizar la gestión y los resultados esperados.
El monitoreo
busca detectar oportunamente deficiencias, obstáculos y/o necesidades
se desarrolla durante la ejecución de la acción formativa,
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
Mediante el monitoreo se hace un seguimiento continuo y riguroso
El monitoreo de indicadores recopila y reporta
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
La evaluación intermedia del programa
Examina en forma periódica qué está sucediendo para responder preguntas específicas relacionadas con el diseño, la ejecución y los resultados, para intervenir oportunamente.
Indaga sobre las condiciones que pueden facilitar o impedir el logro de los objetivos.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
en el rumbo pretendido antes de que concluya.
medidas de corrección que mantengan el programa
se realizan durante la ejecución y tienen como finalidad poner en marcha
Tanto el monitoreo como la evaluación intermedia, o de desempeño del programa
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
El impacto
Se mide al finalizar el programa y busca establecer la relación causa-efecto entre una acción de formación y los resultados.
1.7. ¿Cuál es la diferencia entre monitoreo, evaluación intermedia y evaluación de impacto?
El impacto
Es la medida en que la intervención ha generado o se espera que genere efectos significativos, positivos o negativos, intencionados o no. Dentro del proceso de evaluación el impacto busca identificar los efectos sociales, ambientales y económicos de la intervención.
1.8. ¿Por qué evaluar el impacto?
Debido a la importancia que ha adquirido el desarrollo de competencias y calificaciones, así como el monto significativo de inversiones públicas y privadas, es necesario conocer el impacto de las acciones de formación llevadas a cabo.
1.8. ¿Por qué evaluar el impacto?
Conocer los resultados, efectos e impactos de los programas de formación resulta fundamental para tomar decisiones respecto de la calidad, la pertinencia y equidad de los mismos.
La necesidad de evaluar el impacto se reconoce cada vez más en ámbitos institucionales, públicos, privados y por las personas interesadas en la formación.
1.8. ¿Por qué evaluar el impacto?
En esta misma línea, hay quienes opinan que una evaluación de impacto no siempre se justifica y se debe ser selectivo para determinar los casos en que se llevará a cabo.
“lo que no se mide no se puede mejorar”
“entre evaluar y no evaluar, siempre es mejor evaluar"
que se puede complementar con:
Al respecto, en esta Guía se propone la regla de:
La cadena de resultados y su aplicación en la formación profesional:
se realizan procesos que conducen al aprendizaje.
se asignan recursos y
Para que una acción formativa tenga sentido y genere resultados debe responder a una necesidad de formación.
se definen los objetivos a lograr
Luego de identificar cuál es la necesidad, o sea la demanda de formación
La cadena de resultados y su aplicación en la formación profesional:
La calidad
Pertinencia
Equidad
con que se ejecuten las intervenciones, determinan los efectos de las personas, las empresas y la sociedad.
La cadena de resultados y su aplicación en la formación profesional:
A la visión de este ciclo como un proceso, se le denomina la cadena de resultados, que se muestra en el gráfico siguiente:
La cadena de resultados y su aplicación en la formación profesional:
Los insumos
Son fundamentalmente, recursos financieros que se utilizan para desarrollar procesos de aprendizaje, construir un centro, diseñar un programa de formación, elaborar recursos didácticos, capacitar docentes, entre otros.
1.8. ¿Por qué evaluar el impacto?
La inversión se realiza para incrementar cierta oferta. En el caso dela formación este incremento se ve en términos de:
- Centros de formación construidos y dotados
- Materiales didácticos elaborados
- Talleres de formación disponibles
- Currículos por competencias diseñados
Los efectos deseados se producen una vez llevado a cabo el proceso de formación en respuesta a la demanda.1.8. ¿Por qué evaluar el impacto?
Los efectos directos
Se perciben en el corto plazo y se pueden medir al finalizar cada curso, por ejemplo:
1.8. ¿Por qué evaluar el impacto?
El impacto
Es el último propósito de la formación que debería reflejarse en mejoras en el bienestar de los participantes, en la productividad de las empresas y en la sociedad en su conjunto.
1.9. ¿Para qué evaluar el impacto de la formación?
La información que genera la evaluación apoya la toma de decisiones para ajustar las intervenciones, ampliarlas, recortarlas o sustituirlas.
Es útil para los gestores de los programas, los decisores de políticas públicas, las empresas y las personas en general, para:
1.9. ¿Para qué evaluar el impacto de la formación?
01
05
04
03
02
Revisar si el sistema de formación está simplemente orientado por la oferta, o es realmente una respuesta a la demanda . Si un programa de formación está orientado solo por la oferta, puede ser solamente un buen motivo de gasto de recursos invertidos de un modo inercial y con bajísimo impacto.
La conformación de un sistema de información más amplio y permanente que apoye la definición de políticas de formación profesional más coherentes.
Contribuir a la creación de mejores sistemas de formación y desarrollo de competencias y calificaciones.
Mejorar la gestión de los programas y abrir procesos de aprendizaje organizacional.
Difundir el conocimiento sobre el programa y las actividades desarrolladas.
1.9. ¿Para qué evaluar el impacto de la formación?
10
11
09
08
06
07
Saber en qué medida la información ha incidido en la mejora de los resultados de la empresa y si la inversión realizada tiene un retorno positivo.
Precisar el valor de la formación suministrada por las empresas, en especial cuando se quiere estimular este tipo de capacitación.
Estimular el aprendizaje y que la personas puedan tomar mejores decisiones para su desarrollo de carrera.
La rendición de cuentas y la transparencia en la utilización de los recursos.
Promover una cultura de aprendizaje y formación permanente en las organizaciones.
Favorecer una mejor gestión y comprensión de todas las partes implicadas.
Ciclo de la formación profesional
Anticipación de necesidades
Preparación de la respuesta
Ejecución
Evaluación
Certificación
El futuro de la formación profesional: desafíos y lineamientos para su fortalecimiento
1.10. Teoría del cambio
Cuando se elabora el diseño de programa de formación, se hace en relación con una demanda insatisfecha. Usualmente es la generación de habilidades y competencias que son demandadas en el mercado y por tanto se sustenta en un conjunto de hipótesis sobre el modo en que dicho programa (denominado “intervención” en la jerga de proyectos) producirá un resultado diferente y mejor a lo que existe.
1.10. Teoría del cambio
Son estas hipótesis las que determinan el tipo de indicadores para el monitoreo y la evaluación del programa. Por ello es necesario que estén bien sustentadas y formuladas de modo que se puedan prever sin dificultad los efectos e impactos deseados.
1.10. Teoría del cambio
Por ello, un primer paso fundamental en la elaboración de un proyecto de formación profesional es formular explícitamente lo que se espera lograr, es decir la teoría del cambio implícita en el diseño.
1.10. Teoría del cambio
Explica cómo se puede impulsar el cambio en el proyecto y cómo se obtienen resultados que contribuyan a lograr impactos finales.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Sirve de guía para hacer el monitoreo y evaluación del proyecto con el fin de hacer más eficientes los procesos
La teoría del cambio se desarrolla cuando el proyecto se adapta a problemas y estrategias nuevas.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Puede elaborarse para un programa, un proyecto, una estrategia, una política o una organización
donde se tiene en cuenta todos los procesos del proyecto como insumos, productos, resultados e impacto
step 1
se hace mediante una cadena de resultados
Duis autem vel eum iriure dolor in hendrerit in
+info
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Se puede emplear cuando se quiere determinar la situación actual del proyecto, que se pretende alcanzar, que hacer para efectuar buenos resultados y determinar que indicadores aplicar.
Fuente: Tomada de Rogers, P. (2016). Teoría del cambio.
1.10. Teoría del cambio
Teoría del cambio mediante una cadena de resultados
Productos
Resultados
Actividades
Impacto
Insumos
Fuente: Tomada de https://www.unicef-irc.org/publications/pdf/Brief%202%20Theory%20of%20Change_ES.pdf
Importancia de la teoría del cambio en la evaluación de impacto
La teoría del cambio es útil dentro de la evaluación de impacto para establecer que datos se deben recopilar y analizar para proporcionar un marco de resultados.
01
En una evaluación de impacto es importante verificar si la teoría del cambio sirve para la recopilación, análisis y divulgación de datos.
02
En la evaluación de impacto la teoría se encarga de proceder con los cambios necesarios para lograr los objetivos propuestos en el proyecto verificando la idoneidad y exactitud de los procesos.
03
Conocimiento asociado
Material de apoyo a este módulowww.oitcinterfor.org
1. Objetivos de Desarrollo Sostenible (ODS), 2021.
2. Guía Abreviada de Indicadores de Educación para el ODS 4. 2018
3. Trabajo decente, concepto e indicadores.
Experiencias y aplicaciones
4. Recomendación 195 de la OIT sobre el desarrollo de los recursos humanos, 2004.
1. Indicadores de educación para el ODS 4. 2018
5. Resolución sobre la promoción de empresas sostenibles. OIT, 2007.
2. La medición del trabajo decente con indicadores estadísticos. OIT, 2003.
6. Conclusiones sobre las calificaciones para el incremento de la productividad, el crecimiento del empleo y el desarrollo. OIT, 2008.
3. Trabajo decente: significados y alcances del concepto. Indicadores propuestos para su medición. MTEySS Argentina, 2007.
7. Video Objetivos de Desarrollo Sostenible https://www.youtube.com/watch?v=MCKH5xk8X-g
4. Calidad, pertinencia y equidad. Un enfoque integrado de la formación profesional. OIT/Cinterfor, 2008.
8. Manual para la evaluación de impacto de proyectos de lucha contra la pobreza. CEPAL, 2005.
5. Diseño de la evaluación de impacto de las políticas de formación continua. MTEySS, Argentina, 2010.
9. Evaluación de impacto en la práctica: segunda edición. Banco Mundial, 2016.
10. Fundamentos de monitoreo y evaluación. Cursillo autodirigido. Frankel N, G.A. 2009.
Conocimiento asociado
Material de apoyo a este módulowww.oitcinterfor.org
11. Calificaciones para la mejora de la productividad el crecimiento del empleo y el desarrollo. OIT, 2008.
12. The Roles of Evaluation for Vocational Education and Training. OIT, 1999.
Experiencias y aplicaciones
13. Vocational education and training is good for you. CEDEFOP, 2011.
6. Evaluación de políticas públicas en México. R. Canto, 2010.
14. Manual para la evaluación de impacto de programas de jóvenes. E. Abdala, 2004.
7. Evaluación de impacto de la formación profesional modalidad: habilitación, complementación y formación continua en centros. INFOTEP, 2006.
15. Evaluación de impacto de la formación en las organizaciones. P. Pineda, 2000.
8. Evaluación de impacto en la inserción laboral de los beneficiarios de los cursos sectoriales de formación profesional. Argentina, OIT, 2014.
16. Video Sinopsis Evaluación de Impacto https://www.youtube.com/watch?v=8l4k8PSIpG8
9. Video Sinopsis Evaluación de Impacto https://www.youtube.com/watch?v=8l4k8PSIpG8
10. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
17. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
9. Evaluación de impacto del Programa de Apoyo al Empleo. El Colegio de México, 2010.
18. Principles for evaluation of development assistence, OECD, 1991
10. Evaluación de impacto del programa jóvenes rurales emprendedores del servicio nacional de aprendizaje-SENA. Fedesarrollo, 2010.
10. Evaluación: una herramienta de gestión para mejorar el desempeño de los proyectos, BID,1997.
19. ILO policy guidelines for results-based evaluation. OIT, 2020
20. Guidance Note 2.5: Impact Evaluation. OIT, 2020
Gracias