Por Arturo Galindo y Sebastián Martínez Oficina de Planificación Estratégica y Efectividad en el Desarrollo
Las evaluaciones de impacto permiten dimensionar la magnitud de un efecto de un programa y conocer estadísticamente la incertidumbre sobre dicho estimado. Este proceso genera evidencia robusta sobre qué programas funcionan, qué programas no lo hacen y cómo mejorarlos para optimizar los resultados en materia de desarrollo.
Las evidencias generadas por las evaluaciones se convierten en un medio para informar al público y promover la apertura a través de la rendición de cuentas. En un contexto en el que los responsables de políticas y la sociedad civil exigen resultados y rendición de cuentas a los programas públicos, la evaluación de impacto puede ofrecer evidencias sólidas y creíbles del desempeño y, lo que es fundamental, puede determinar si un programa ha logrado los resultados deseados.
1 ¿En qué consiste la evaluación de impacto?
Las evaluaciones de impacto son un tipo particular de evaluación que intenta responder a preguntas sobre causa y efecto. A diferencia de las evaluaciones generales, que pueden responder a muchos tipos de preguntas, las evaluaciones de impacto se preocupan por saber cuál es el impacto (o efecto causal) de un programa sobre un resultado de interés.
2 ¿Qué evaluar?
No todas las políticas ameritan una evaluación de impacto. Éstas son costosas y deben priorizarse. Por ello, es importante definir si la política a evaluar es innovadora (pone a prueba un enfoque prometedor); replicable (si va a ser escalable y transferible a una situación diferente); significa una estrategia pertinente (requiere considerables recursos y cubre, o puede expandirse para cubrir, a un gran número de personas, y/o podrá generar un ahorro considerable); su efectividad no está comprobada; y si los resultados serán influyentes para informar decisiones fundamentales sobre políticas.
3 La generación de conocimiento en una evaluación de impacto
Las evaluaciones de impacto están contribuyendo rápidamente a generar una base de evidencia global sobre el desempeño de una gama de reformas de programas y políticas, y constituyen repositorios de conocimiento sumamente relevantes para el diseño de las mismas.
Además, al reunir evaluaciones de impacto enfocadas en programas de la misma naturaleza, el repositorio de conocimiento permite, más allá de acumular evidencia, explorar las preguntas que facilitan la refinación del diseño de próximas intervenciones. Es así como el conocimiento compartido abiertamente puede fomentar un ciclo en el cual, de las evidencias de un programa o intervención, se crean nuevas preguntas que van refinando los programas y generando conocimiento cada vez más profundo sobre cómo asignar de manera más eficiente los recursos escasos en programas para el desarrollo.
Este conocimiento derivado de las evaluaciones de impacto contribuye a que los hacedores de políticas públicas puedan sostener y expandir programas costo-efectivos, y puedan reformular, mejorar o eliminar programas inefectivos.
En un esfuerzo por concentrar las herramientas de evaluación de impacto generadas por profesionales en el BID e instituciones externas, el BID lanzó una plataforma web conocida como el Portal de evaluación del BID. Este sitio contiene diversos recursos, instrumentos y recomendaciones que los usuarios pueden consultar y adaptar a sus necesidades específicas.
4 Evaluación de impacto en la práctica
En los años noventa, el Gobierno de México lanzó y evaluó rigurosamente uno de los primeros programas de transferencias condicionadas, Progresa (hoy llamado Prospera), con el objetivo de combatir la pobreza e invertir en el capital humano de los niños. El programa realiza transferencias monetarias condicionadas en co-responsabilidades en salud y educación.
En zonas rurales, la evaluación de impacto se incorporó como parte de la ampliación del programa a cientos de comunidades en el trayecto de varios años. Dentro de una muestra de evaluación, las comunidades fueron asignadas aleatoriamente a recibir la intervención hacia el inicio del periodo de expansión (grupo de tratamiento), o un par de años más tarde (grupo de comparación). Esta asignación aleatoria, semejante a un proceso de lotería o sorteo, permitió la comparabilidad de los grupos de tratamiento y control, y así el aislamiento de los impactos del programa de otros factores externos o variantes en el tiempo que podrían de otra manera incidir en los resultados de interés.
La evaluación encontró impactos prometedores en la acumulación de capital humano de los beneficiarios, incluyendo mayor matriculación escolar y mejores resultados nutricionales en los niños, y menor incidencia de enfermedades en los niños y adultos.
Los resultados derivados de la evaluación de impacto del programa Progresa contribuyeron a la sostenibilidad y expansión del programa en México, y a la rápida propagación de los programas de transferencias monetarias condicionadas en todo el mundo. Desde que comenzó en 1997, Prospera se ha replicado en 52 países alrededor de América Latina, Asia y África.
En conclusión, el conocimiento generado y compartido de las evaluaciones de impacto y las lecciones aprendidas de las mismas nos permiten tomar decisiones mejor fundamentadas y susceptibles de ser modificadas en caso de que sea necesario introducir cambios en la dirección estratégica. Buscando así, promover el conocimiento y mejorar continuamente la manera en que se puede promover desarrollo en América Latina y el Caribe.
- Este artículo está basado en el libro “La evaluación de impacto en la práctica”, una co-publicación entre el BID y el Banco Mundial. Accede a la publicación para conocer más detalles sobre métodos y casos concretos sobre esta práctica.
- También, te invitamos a ver el webinar “¿Cómo mejoran vidas las evaluaciones de impacto?” donde participan los autores del libro, o puedes leer más sobre el mismo en el blog post “¿Cómo implementar una evaluación de impacto?”
- Además, accede a los resultados de la evaluación de impacto de programas en América Latina y el Caribe entre 2012 a 2015 en la publicación “Panorama de la efectividad en el desarrollo” (DEO, por sus siglas en inglés).
- Sigue las novedades sobre el impacto de los proyectos de desarrollo en América Latina y el Caribe en el blog del BID “Hacia el Desarrollo Efectivo”
¿Qué metodologías de evaluación de impacto te interesan más? ¡Suma tu comentario abajo!
HSJacob - Evaluación desempeño a Gerentes Dice
Hola, de antemano gracias por este artículo.
A mí me ha funcionado mucho el evaluar por objetivos respecto el puesto o departamento laboral, dejar que los evaluados puedan ver o entender su proceso y desarrollo, logra un enfoque de responsabilidad mayor e incluso que iguales participen en su evaluación dará mayor confianza en su resultada.
Luis Oliveros Dice
BUenos días. Muy bueno este artículo. Soy Jefe de unidad estadística en una Unidad de Planificación para una institución pública en Venezuela. Estoy desarrollando un sistema de indicadores que me permitan medir la efectividad de ciertas actividades que ayudan a cumplir un programa específico. La parte que no logró hacer es identificar o mejor dicho asignar pesos a dichos programas para medir el impacto que tengran sobre el Plan Central de la institución.
Milena Botero Dice
Hola, que buen artículo.
Tengo una pregunta: Para determinar el buen resultado en la evaluación de impacto, cuál de bebe ser la muestra o características de esa muestra con la cual se pueda garantizar una buena evaluación y permita así una optima toma de decisiones?
Open Knowledge (admin) Dice
Estimada Milena, muchas gracias por tu comentario e interés en el tema. Te recomendamos leer el capítulo 15 de la publicación “La evaluación de impacto en la practica” en donde se habla específicamente de la elección de la muestra. Puedes acceder a la publicación a través de este link: https://publications.iadb.org/handle/11319/7844?locale-attribute=es&locale-attribute=en
Saludos!
Equipo de Abierto al Público
ClasificacionDe Dice
Excelente articulo,
Al parecer aplica para una amplia cantidad de situacion en el mundo empresarial, desde impacto ambiental, hasta impacto en los negocios.
Saludos
Diana Morales Dice
Me parece impresindible la evaluacion de impacto para cualquier tipo de proyecto , en especial los de indole social y educativos.He trabajado en varios proyectos educativos para la comunidad muy novedosos y he elaborado metodologias de evaluacion sencillas, pero efectivas, para medir el impacto, lo que ha permitido la continuidad de los mismos.
Gracias por los aportes presentados en el blog.
Desastre Ferrão Coxi Dice
Gosto de temas interessantes o caso de avaliação de impacto sendo que minha tese de doutoramento cingiu-se nesta temática, mais propriamente sobre reforma educativa em Angola. Nele abordou-se situações que tem que ver com o impacto que a Reforma Educativa teve e tem tido no melhoramento da vida do estdante e concumitantemente na vida dos cidadãos angolanos.
Foi bom e espero estar cada vez mais informado sobre matérias ligadas a avaliação de impacto de diversos programas já abordados.
Teresa SUSANA Mendoza indara Dice
Muy buen artículo, me interesa profundizar más sobre evaluación de impacto y evaluación de la sostenibilidad. y las herramientas específicas que se podrían aplicar