CAF apoya evaluación de impacto del Programa Red Primeros Meses en Argentina
El proyecto de evaluación de la Red de Primeros Meses (RPM), postulado por el Gobierno de la Ciudad Autónoma de Buenos Aires en Argentina, fue uno de los seleccionados de la I Convocatoria Internacional CAF de Evaluaciones de Impacto para una Mejor Gestión para ser objeto de una evaluación.
La evaluación buscó mejorar la gestión del programa RPM, identificando actividades innovadoras, complementarias al programa, que aumentasen su efectividad, partiendo de la presunción de que muchas potenciales beneficiarias no conocían la existencia del programa ni sus beneficios.
La RPM es un programa que implementa el gobierno de la CABA en el marco del programa Ciudadanía Porteña y que busca incrementar el número de controles pre y post-natales de las mujeres embarazadas y de sus bebés. Las mujeres reciben una ayuda económica cada tres meses condicional a que den prueba de que han asistido a los controles mensuales durante el embarazado y hasta que el bebé cumpla un año.
Para aumentar la inscripción al programa, la DEIAP y el equipo de la Unidad de Evaluación de la Secretaría de Planificación, Evaluación y Coordinación de Gestión del gobierno de la CABA, contemplaron inicialmente varias alternativas de campañas informativas para dar a conocer el programa y sus beneficios.
Finalmente, dadas las características de la población objetivo y de la información de contacto con que se contaba, se diseñaron dos campañas de envío de mensajes personalizados por Whatsapp. Los mensajes se diseñaron utilizando elementos de la economía conductual: mensajes cortos, simples, informativos del programa, incorporando sus atractivos, resaltando la parte afectiva y la firma de una autoridad.
Actividades y hallazgos realizados
La evaluación de impacto consistió en establecer una relación causa-efecto entre el envío de mensajes de distinto tipo a las potenciales beneficiarias y la inscripción en el RPM.
Para lograrlo, primero fueron focalizadas 7.834 familias vulnerables identificando mujeres en edad fértil, que aún no fueran miembros de RPM y con un número de teléfono celular reportado. La familias focalizadas fueron divididas en tres grupos: quienes recibieron el mensaje de beneficio económico del programa, quienes recibieron el de beneficio no económico y quienes no recibieron mensaje alguno. Cada grupo de tratamiento recibió un total de diez mensajes por un período de 5 semanas en junio de 2018.
Como principal hallazgo, se observó un aumento en las inscripciones a la RPM posterior a la intervención, concentrado principalmente en aquellos que recibieron los mensajes de beneficio económico, y sobre todo inmediatamente después del envío de los mensajes. Aunque también se evidenció que este impacto fue desapareciendo rápidamente con el paso del tiempo.
Por otra parte, la evaluación no pudo encontrar una diferencia significativa en el número de inscripciones entre el grupo que recibió los mensajes enfatizando el beneficio no económico de la RPM y el grupo que no recibió mensaje alguno.
A pesar de que la muestra efectiva fue muy pequeña, el experimento arrojó aprendizajes relevantes sobre la utilidad de comunicarse con la población beneficiaria (y potenciales beneficiarios) y de que la comunicación sea constante, oportuna y apropiada. De igual forma el esfuerzo de la evaluación fue útil para reflexionar con los gestores del programa sobre la importancia de entender a profundidad lo que motiva a las familias a participar o no en programas de ayuda social, y en cómo este mayor conocimiento puede ayudar a mejorar el diseño y el delivery de dichos programas.