I Convocatoria internacional CAF de evaluaciones de impacto para una mejor gestión

Sesión informativa

El fin de esta sesión es prestar ayuda a quienes estén interesados en postular. Comentaremos algunas condiciones generales de la Convocatoria Internacional, la experiencia de la convocatoria de 2016 junto con el DNP y vamos a abrir un espacio para preguntas y respuestas.

Invitamos a quienes quieran entender el proceso para participar, el tipo de proyectos que esperamos seleccionar, el proceso de evaluación y selección de postulaciones, el proceso de evaluación de impacto, o que tengan preguntas puntuales sobre el formulario a conectarse el lunes, 23 de octubre a las 10:30 a.m. hora de Venezuela.

Políticas elegibles

¿Qué tipo de políticas pueden aplicar? 

En CAF, pensamos que todos los tipos de políticas públicas son importantes y que en principio todas se pueden evaluar (si cumplen los requerimientos técnicos necesarios y hay interés en evaluar). Para la convocatoria aplican todas las políticas con un objetivo muy claro que sean implementadas por instituciones públicas y alineadas con la misión institucional. Deben ser políticas con acciones claras que beneficien directamente a personas o instituciones (públicas o privadas) o que estén destinadas a mejorar procesos de gestión de la institución.

Algunos ejemplos son: iniciativas para aumentar el pago de impuestos puntualmente [ link a experimentos de DIAN ] o programas para aumentar la inclusión financiera [ link a programa de UNICAS].

Aunque estamos interesados en todo tipo de políticas, las políticas destinadas a mejorar procesos de gestión tendrán prioridad en el proceso de selección

¿Qué quieren decir con políticas destinadas a mejorar procesos de gestión? 

En todos los niveles de cualquier institución, independientemente de su objetivo y naturaleza, se toman decisiones sobre cómo utilizar sus recursos o cómo cumplir sus objetivos de la forma más efectiva, es decir, la mejor forma de gestionar la institución.

En estos casos, no necesariamente hay un beneficiario directo. El Estado y la ciudadanía se benefician más bien indirectamente a través de instituciones que son más eficientes. Los beneficios por lo tanto no se miden en términos de bienestar o variables de impacto usuales, sino en eficiencia, rapidez o calidad con la que se realiza una actividad.

Algunas de las iniciativas buscan mejorar un proceso comparando distintas alternativas para aprovechar una oportunidad de mejora, mientras que otras iniciativas son innovaciones complementarias al proceso.

 Prioridades temáticas

En ambas ventanas tendrán prioridad las propuestas de evaluación a iniciativas de gestión, aunque también se podrán seleccionar propuestas de evaluación a programas públicos que sean relevantes, innovadoras y factibles.

Adicionalmente, habrá un énfasis temático en cada ventana. En la primera, se priorizarán propuestas en temas de: hábitat y desarrollo urbano, infraestructura, transporte y logística, seguridad ciudadana y ciudades. En la segunda priorizaremos propuestas en temas de: productividad e innovación, educación, salud, género y otros temas de inclusión social.

Las propuestas de gestión que no correspondan a ninguno de los temas anteriores, pueden ser enviadas en cualquiera de las dos ventanas de aplicación.

Premios

¿Qué ganan las instituciones seleccionadas?

El objetivo de la convocatoria es diseñar e implementar 15 evaluaciones de impacto rigurosas que se seleccionarán a través de un proceso competitivo donde participarán instituciones de toda América Latina.

Las instituciones dueñas de las propuestas ganadoras recibirán una asesoría gratuita por parte de un equipo altamente calificado para diseñar e implementar una evaluación de impacto rigurosa. El equipo de trabajo, que estará conformado por profesionales con amplia experiencia en proyectos de evaluación y académicos de renombre, dará apoyo personalizado durante todo el proceso de evaluación.

Aprenderán también sobre la efectividad de su acción, lo que servirá para mejorar la calidad de los servicios y productos que ofrecen. Durante este proceso, además obtendrán experiencia de primera mano sobre el proceso de evaluación que quedará como un activo de conocimiento en la institución para futuros esfuerzos de evaluación. La medición y sus resultados también generarán difusión internacional sobre la acción y la efectividad de la institución, así como prestigio al ser pioneros en el uso de la evaluación de impacto como una herramienta de gestión.

Adicionalmente, las instituciones tendrán la oportunidad de entablar relación y trabajar de cerca con una institución de gran envergadura y prestigio internacional como CAF.

¿Cuáles son los premios?

El primer componente del premio es una propuesta metodológica de evaluación de impacto rigurosa que será liderada y gestionada por la DEIAP. Al final del proceso de diseño de la propuesta, los ganadores recibirán un documento donde se detallará la metodología de evaluación de la política y sus requerimientos técnicos. La CAF se compromete a apalancar recursos humanos y financieros para cubrir los costos de la fase de diseño de la evaluación.

El segundo componente del beneficio contempla acompañamiento técnico a las 15 iniciativas seleccionadas para implementar la evaluación de impacto de principio a fin. Además de la participación activa y directa del equipo de la DEIAP, la CAF podrá colaborar para hallar financiamiento (incluyendo, cuando sea posible, fondos propios de la CAF)para cubrir los gastos asociados a la implementación de la evaluación. La posibilidad de utilizar fondos propios de CAF se evaluará caso a caso.

Es importante enfatizar que los gastos de evaluación NO incluyen lo relacionado con la implementación de la política a evaluar. De igual forma, CAF también se compromete a colaborar con la institución implementadora para gestionar fondos adicionales en caso que sea necesario.

Cronograma

Selección

¿Cómo es el proceso de selección?

El proceso será el mismo en ambas ventanas de aplicación y consta de dos fases:

• Fase 1: los objetivos de esta fase son seleccionar preliminarmente a las políticas que tienen mayor factibilidad de ser evaluadas y obtener información sobre la persona que llena la aplicación para determinar su nivel de vinculación con la política a evaluar. Durará aproximadamente 3 semanas y termina con una decisión final sobre cuáles aplicaciones pasan a la fase 2 y cuáles no.
• Fase 2: el objetivo de esta fase es confirmar la factibilidad técnica de la evaluación a través de información más detallada sobre la política, sus beneficiarios, información disponible, presupuesto de implementación, entre otros, así como confirmar el compromiso de las personas involucradas en la implementación y de la institución responsable. Durará aproximadamente 3 semanas y termina con un veredicto final de cuáles aplicaciones son  beneficiaras finales de los servicios de evaluación y cuáles no.

La Evaluación

¿Qué ocurre si eres seleccionado en la última fase?

Si una aplicación resulta seleccionada en el grupo ganador, entonces la política entrará a formar parte del roster (o conjunto) de proyectos de evaluación que maneja la DEIAP. Para formalizar el ingreso, la institución responsable de la política a evaluar deberá suscribir un acuerdo de entendimiento con CAF para establecer el alcance de la evaluación, así como las responsabilidades de cada parte (ver "Acuerdo de ejemplo" aquí).

Posteriormente iniciará el proceso formal de evaluación que, en general, debe seguir la siguiente estructura: exploración inicial sobre la pregunta de evaluación y el programa o iniciativa a evaluar, diseño detallado de la propuesta metodológica, ejecución e implementación de la evaluación de impacto y difusión de resultados finales.

La duración de la evaluación dependerá de las características del proyecto que se vaya a evaluar. En general, se espera que el proceso de diseño de la evaluación empiece dentro de los 4 meses posteriores a la publicación de los resultados finales.

Instituciones postulantes

¿Qué países pueden participar?

Podrán aplicar instituciones ubicadas en cualquier país de América Latina y El Caribe.

 ¿Qué tipo de instituciones?

Sólo se aceptarán aplicaciones provenientes de instituciones pertenecientes al sector público. Por lo tanto, no se considerarán válidas aplicaciones provenientes de instituciones no públicas sin fines de lucro como ONGs o Universidades.

¿Quiénes pueden completar la aplicación?

La aplicación debe ser completada por un funcionario público que trabaje directamente para la institución postulante. Idealmente, dicha persona debe ser responsable o trabajar directamente con la política a evaluar.

Como funcionario, ¿qué implica completar la aplicación?

Al completar la aplicación el funcionario está postulando a la institución para la que trabaja y se está identificando como el representante de dicha institución para el proceso de selección. Sin embargo, de quedar seleccionada, la institución podrá designar a otro funcionario para que sea el representante de la misma en las fases posteriores.

Ayuda para mi postulación

Para facilitar el proceso de aplicación, hemos puestos a disposición de los interesados las siguientes herramientas de ayuda.

Por el gran número de instituciones que estimamos estarán interesadas en aplicar, sugerimos que si desea obtener respuestas a sus dudas de forma rápida y oportuna, intente usar todos los recursos que ofrecemos en la página antes de comunicarse con el equipo de CAF.

Recursos

• Aplicaciones de ejemplo:

Ejemplo de iniciativa de gestión 1:

• Video
• Hangout 1: Se responderán preguntas sobre la aplicación (27 de marzo de 2017, hora y canal por confirmar)
• Hangout 2: Se responderán preguntas sobre la aplicación (25 de abril de 2017, 10 a.m. hora de Venezuela)
• Vínculos de interés:
• Portal de Evaluación de Impacto del BID
• Manual de evaluación de impacto (Banco Mundial)
• La evaluación de impacto en la práctica (Banco Mundial) 
• Guía práctica para la evaluación de impacto (libro) 
• Manual para la evaluación de la CEPAL
• Recursos y ejemplos de J-PAL
• Ejemplos de J-PAL
• Evaluación de impacto de IPA
• Ejemplos de 3ie (en inglés)
• Ejemplos en temas conductuales y de gestión de BIT (en inglés)
• Handbook de J-PAL (inglés)
• Contacto para preguntas: impacto@caf.com - impact@caf.com