Evaluaciones que marcan la diferencia” es una colección de 8 historias de evaluación recogidas en distintos lugares del mundo, y una de las primeras investigaciones sistemáticas sobre los factores que contribuyen a que las evaluaciones de alta calidad sean utilizadas por las partes interesadas para mejorar los programas y proyectos, y mejorar así la vida de las personas. Estas historias reflejan no sólo el punto de vista de los evaluadores, sino también de quienes comisionan y de quienes usan las evaluaciones. Esta historia es la septima de las ocho historias desarrolladas en el marco del proyecto. Para compartirlas en Inglés y Francés, visitar el Blog Evaluations that make a difference.

——–

Contemplar a las mujeres indígenas de la Sierra de Tarahumara, una zona de montaña en el estado de Chihuahua en el norte de México, evoca escenas bucólicas de la época de la conquista española. Estas comunidades se han mantenido durante siglos alejadas de las ciudades, agrupadas en pequeñas aldeas y grupos familiares dispersos, cultivando unos pocos productos estacionales y dedicados a la cría de pollos, cabras y ganado. Prácticamente todos sus miembros viven en la pobreza, y en muchos casos son semi-nómadas.

El acceso a la Sierra de Tarahumara es complicado, y a veces se necesitan varios días para llegar a los asentamientos. Por tanto, es muy difícil de hacer contacto con ellos para entrevistar y seleccionar las familias candidatas para el Programa de Desarrollo Humano Oportunidades.Pero el esfuerzo vale la pena porque el programa es realmente notable.

El nombre de este programa, originalmente llamado Progresa, fue cambiado posteriormente a Oportunidades, y más tarde a Prospera, nombre con que se lo conoce actualmente. Este programa, implementado en México desde el año 1997, tiene como objetivo nada menos que romper el ciclo aparentemente interminable de pobreza que caracteriza a muchas comunidades rurales. Lo hace mediante el uso de un enfoque de transferencias monetarias condicionadas (TMC), donde las familias reciben pagos condicionados a la realización de determinadas actividades, tales como asegurar la asistencia regular de sus hijos a la escuela o el cumplimiento con ciertos servicios de salud. Estos incentivos ayudan al logro de mejores niveles de educación, salud y nutrición, y proporcionan también un apoyo necesario para los habitantes de la Sierra de Tarahumara para emprender actividades económicas que les permitan aumentar sus ingresos familiares y su calidad de vida.

Las comunidades indígenas fueron beneficiarias del programa desde su creación, a la vez que participaron también en las distintas evaluaciones realizadas entre 1999 al 2006. Sin embargo, aunque dichas evaluaciones confirmaban que los indígenas estaban participando efectivamente en el programa, no resultaba claro si estaban logrando los objetivos fijados en materia de salud, educación y, en última instancia, desempeño económico. De acuerdo con Mercedes González de la Rocha, antropóloga y directora de la evaluación cualitativa de impacto del programa Oportunidades, la ausencia de un enfoque que hiciera explícita la indagación en las comunidades indígenas había dejado un punto ciego en la base de conocimientos del programa. O, como ella dice, Lo que uno no se pregunta, simplemente, ¡no lo ve!

Esta afirmación significó un claro punto de partida para aumentar la influencia de la variable etnicidad en la nueva evaluación cualitativa desarrollada el año 2008. Para entonces, el programa tenía ya una década de experiencia en su implementación en México, lo que favoreció la realización de una evaluación exhaustiva. Los evaluadores diseñaron una estrategia para el trabajo de campo que comprendía 11 regiones indígenas interculturales en los estados de Chiapas, Chihuahua, Oaxaca y Sonora. En cada región fue analizada la cobertura y las operaciones del programa. La evaluación identificó también los principales obstáculos en la implementación del mismo, con especial atención a la relación entre los promotores y las mujeres representantes de las comunidades indígenas, las vocales.

Lo que los evaluadores encontraron fue bastante inesperado: existían serios problemas de comunicación a partir de las diferencias de lengua. Prácticamente ninguno de los promotores, y apenas unas pocas de las vocales, eran bilingües. Aunque el programa había estado operando desde el año 1997 con un mayor impacto en las zonas indígenas que en las no indígenas (como había sido documentado por evaluaciones anteriores), el importante problema de la comunicación no había sido suficientemente abordado. Por ejemplo, la evaluación encontró que las mujeres indígenas jóvenes – la mayoría de las cuales eran bilingües, aunque su castellano era a menudo muy limitado – no entendían con precisión al personal de Oportunidades y la información técnica que proporcionaban. Esta situación se agravaba en el caso de las mujeres mayores, quienes no hablaban castellano en absoluto. Los promotores asignados a la región habían hecho todo lo posible a fin de superar la barrera idiomática, pero los resultados no habían sido satisfactorios.

En algunas áreas, la mayoría de las mujeres indígenas no comprendían qué propósito perseguía el programa. No entendían tampoco qué beneficio había en pasar horas escuchando a especialistas médicos, quienes hablaban sobre temas que ellas no entendían en un idioma que apenas podían descifrar. Algunas veces la información que se comunicaba entraba en conflicto con sus costumbres tradicionales. Por ejemplo, cuando las mujeres indígenas participaron en la capacitación sobre la importancia del examen físico para detectar un posible cáncer de mama, las hacía sentir muy incómodas la idea de un extraño tocándolas en sus partes íntimas. ¡Estas mujeres ni siquiera se desnudan delante de sus maridos! Por lo tanto, una práctica destinada a salvar sus vidas resultaba así totalmente inaceptable por razones culturales.

La evaluación encontró también que, si bien la cobertura del programa había mejorado en diversas zonas indígenas, en la Sierra de Tarahumara, un 30% de la población había quedado fuera del programa. Resultaba claro que la falta de acceso a los servicios de salud y educación que brindaba Oportunidades había sido provocado por la situación de monolingüismo, que impedía que las mujeres indígenas pudieran beneficiarse de la información escrita y oral transmitida por el personal del programa.

Era urgente tomar medidas para resolver este grave problema, y eso fue lo que hizo Oportunidades. La evaluación cualitativa sugirió que fueran reclutados jóvenes indígenas ya egresados de la escuela como promotores bilingües, a fin de contribuir a la mejora de las comunicaciones y operaciones en las mismas comunidades indígenas. Esta disposición también dio lugar a un impacto positivo adicional al proporcionar empleos y salarios a los jóvenes en su espacio vital, permitiéndoles compartir el aprendizaje adquirido con sus propias comunidades.

El entonces Coordinador General del programa Oportunidades, Dr. Salvador Escobedo, recuerda:

Logramos hacer el cambio en las reglas de operación para incluir a los promotores bilingües, y ese fue el primer paso. Luego estuvimos trabajando de manera paralela un programa de capacitación con el Instituto Nacional de Lenguas Indígenas (INALI) para generar un mecanismo para que pudieran evaluar a los jóvenes indígenas que nosotros queríamos contratar como promotores sociales que hablen una lengua indígena. Nos abocamos a trabajar con las trece lenguas más habladas, el Tzotzil, el Maya, el Totonaco, etc. Y en eso nos ayudó el INALI, porque queríamos que fueran lenguas que los indígenas pudieran entender.

Para ello, comenzaron capacitando en el INALI a un grupo de 15 jóvenes, hombres y mujeres, quienes se diplomaron como capacitadores de programas sociales en lengua indígena. Ellos fueron los primeros en desplazarse a las zonas más alejadas del país para llevar la voz del Programa de manera adecuada en los idiomas que las comunidades requerían. “El proyecto contemplaba preparar a 350 promotores para lograr la cobertura casi total de poblaciones indígenas monolingües, en Yucatán, Oaxaca, Chiapas, Jalisco y la Sierra de Tarahumara. Hasta que yo dejé el programa, se habían capacitado a 250 jóvenes, y estaba pendiente una nueva evaluación para saber cómo había resultado esta implementación”, sostiene Salvador Escobedo.

Finalmente, el proceso de incorporación de los promotores bilingües se desarrolló sin prisa y sin pausa durante los dos años siguientes. Esto favoreció una mayor participación e interacción de las mujeres indígenas en cada reunión, quienes fueron profundizando su entendimiento sobre la importancia de enviar a sus hijos a la escuela, alimentarlos correctamente, utilizar los recursos básicos, etc. En algunas zonas llegaron a conformar grupos de estimulación temprana para sus hijos más pequeños. El rol jugado por la evaluación cualitativa con su señalamiento sobre la marginación parcial que causaba el monolingüismo resultó clave en esta transformación.

Otro aspecto importante que fue señalado por la evaluación cualitativa del año 2008 abordaba la práctica de encuestar a cada hogar para evaluar si era o no elegible para el programa. En el caso de las comunidades de la Sierra Tarahumara, esto era redundante (además de ineficiente e incluso absurdo), ya que cada hogar era incuestionablemente pobre – por no hablar de la dificultad y el costo de llegar hasta dichas comunidades sólo para realizar la encuesta.

Escobedo, quien conocía de cerca la realidad de las comunidades indígenas de México, hizo suyo aquel señalamiento y puso en marcha la aplicación de las propuestas que le daba la evaluación cualitativa.

La primera medida fue convencer a los funcionarios responsables y a las entidades internacionales como el Banco Interamericano de Desarrollo (BID) y el Banco Mundial, quienes colaboraban con el Programa Oportunidades, sobre la necesidad de cambiar las reglas de focalización y cobertura a fin de favorecer la implementación del programa en las zonas indígenas aisladas. Esto implicaba un desafío importante para los gerentes del proyecto pues, más allá de estar convencidos de lo oportuno de esa recomendación, debían realizar los cambios sin que pareciera desvirtuarse el espíritu del Programa Oportunidades, el cual hacía foco en situaciones de pobreza (identificadas por la encuesta de hogares), a la vez que exigía determinadas corresponsabilidades de los beneficiarios (como los controles de salud y la asistencia escolar de los niños).

A finales del 2011 y comienzos del 2012, una grave sequía afectó a la zona de la Sierra de Tarahumara, y se corrió el rumor, luego desmentido, que los indígenas se estaban suicidando por falta de alimentos. La Dra. Iliana Yaschine, quien fuera Directora de Evaluación del Programa Oportunidades en el período 2002-2006, y quien posteriormente coordinó un estudio en la Sierra de Tarahumara documentando el trabajo de Oportunidades ante la crisis generada por la sequía, recordaba lo siguiente:

Esto se publicó en un diario de Chihuahua y generó una respuesta inmediata por parte del Gobierno Federal, y por eso decidió intervenir en distintas regiones con la Secretaría de Desarrollo Social. Fue entonces que comunicaron la decisión de que Oportunidades intervenga para solucionar el problema justamente en la zona de la Sierra de Tarahumara.

La importante movilización y atención prestada a la zona permitió detectar que hubo 8 mil familias (40 mil indígenas) a quienes se había dado de baja pues no habían cumplido con las corresponsabilidades, tales como mandar a los hijos a la escuela o asistir a las charlas de salud (por diversos factores, entre ellos la barrera idiomática, como lo señaló la evaluación cualitativa). La cifra era preocupante, y su reincorporación iba a resultar difícil, por no decir, imposible dadas las reglas de operación del programa. Esto lo reafirma Escobedo cuando dice que:

El Banco Mundial y el BID se oponían a eliminar el requisito de las corresponsabilidades en esas zonas, en parte, porque no querían desvirtuar el Programa, y que se generara un nuevo Programa; pero eso no se podía hacer de la noche a la mañana. Las reglas de operación así lo indican; y es triste, doloroso, pero real.

Sin embargo, dada la magnitud del problema en el contexto de la grave sequía que afectaba a los indígenas de la Sierra de Tarahumara, la situación pudo resolverse a partir de la intervención del mismo Presidente de la República, Felipe Calderón quien ordenó la inmediata reincorporación de 8 mil familias. Esto pudo hacerse reincorporándolas al Programa de Apoyo Alimentario, programa de transferencias que no exige el cumplimiento de corresponsabilidades, operado también por la Coordinación Nacional del Programa Oportunidades. Los promotores indígenas llevaron la buena nueva a sus comunidades, a la vez que se impulsó una renovada capacitación de promotores bilingües a fin de atender de inmediato a las familias indígenas.

Adicionalmente, se cambiaron las reglas del programa Oportunidades a fin de instrumentar la estrategia de cobertura total –recomendada por la evaluación cualitativa-, la cual permitía en localidades pequeñas y distantes la incorporación de familias al programa sin el requisito de la encuesta de hogar. Esta modificación ayudó a ampliar la cobertura del Programa, lo cual sumado a la reincorporación de las familias comentada antes, permitió a partir de entonces atender a toda la población indígena de la Sierra de Tarahumara.

Según Yaschine:

Sin la evaluación cualitativa, no hubiera sido posible hacer el cambio, aun con la crisis de la sequía, esa es mi percepción. Yo vi en el terreno la implementación de esta decisión en el momento de la crisis, donde se hizo un esfuerzo adicional para implementar el apoyo a las familias afectadas, ya no en los hogares sino en los Centros de Atención y Registro donde se entregaban las despensas. Recuerdo que se mencionó mucho lo que las evaluaciones cualitativas dijeron sobre este tema, y que eso había impulsado los cambios durante la crisis.

Las conclusiones y recomendaciones de la evaluación cualitativa realizada en las comunidades indígenas resultaron fundamentales para la toma de decisiones, siendo un insumo clave para que los directivos del programa pudieran realizar cambios que impactarían directamente en los participantes del programa. En el caso de los promotores bilingües, la evaluación señaló una dimensión de adecuación cultural que había sido desatendida en el diseño original de la intervención, la cual -una vez contemplada- permitió potenciar el efecto de la misma. En cuanto a la implementación de la estrategia de cobertura total en la Sierra de Tarahumara, la coyuntura de la sequía favoreció implementar una recomendación de la evaluación para la mejor atención de sus comunidades indígenas.

La historia de la evaluación cualitativa muestra la relevancia de la sensibilidad cultural en la evaluación de los proyectos sociales. En palabras de Gonzalez de la Rocha:

Lo que uno no se pregunta, simplemente, ¡no lo ve!

Mercedes González de la Rocha y Agustín Escobar Latapí fueron co-autores de esta historia, y dirigieron la evaluación cualitativa externa del programa Oportunidades, haciendo las recomendaciones que llevaron a mejoras importantes en la vida de los beneficiarios.

Iliana Yaschine fue Directora de Evaluación en el programa Oportunidades desde el año 2002 al año 2006.

Salvador Escobedo (Director del programa en aquel  tiempo) brindó valiosas ideas para esta historia.

Pablo Rodríguez-Bilella y Omar Zevallos contribuyeron a perfilar la historia. Las fotografías fueron tomadas por Agustín Escobar Latapí e Iliana Yaschine.

Página oficial del programa, con abundante información general sobre el mismo.

Sitio web de la Universidad de Texas que concentra información sobre las evaluaciones externas del programa.

Evaluaciones que marcan la diferencia” es una colección de 8 historias de evaluación recogidas en distintos lugares del mundo, y una de las primeras investigaciones sistemáticas sobre los factores que contribuyen a que las evaluaciones de alta calidad sean utilizadas por las partes interesadas para mejorar los programas y proyectos, y mejorar así la vida de las personas. Estas historias reflejan no sólo el punto de vista de los evaluadores, sino también de quienes comisionan y de quienes usan las evaluaciones. Esta historia es la quinta de las ocho historias desarrolladas en el marco del proyecto. Para compartirlas en Inglés y Francés, visitar el Blog Evaluations that make a difference.

——–

Al igual que muchos países, Kenia tiene una enorme población de jóvenes desempleados. Dependiendo de la perspectiva que uno asuma, esto resulta o bien una bomba de relojería, o bien una oportunidad para la formación profesional: una formación pertinente que permita a los jóvenes encontrar trabajo, ganar y ahorrar dinero, y salir de la pobreza.

El Instituto Comunidad y Progreso de Empoderamiento Juvenil (CAP YEI) abrió su primer centro de formación en Nairobi en el año 2011. En la India, el CAP ya había alcanzado un cierto éxito en brindar a jóvenes vulnerables la oportunidad de adquirir habilidades de trabajo útiles a través de la formación técnica y profesional. Ahora, el CAP YEI estaba dispuesto a aprender cómo este enfoque podría funcionar en Kenia. Financiado por la Fundación MasterCard en el marco de su iniciativa Aprende, Gana y Ahorra, el CAP YEI en colaboración con la Universidad de Minnesota, evalúa el desempeño de su trabajo para hacer cambios tanto en el corto como en el largo plazo y aprender sobre lo que funciona y lo que no. Las evaluaciones en curso han ayudado a dotar a los participantes de Kenia con habilidades técnicas y psicológicas para conseguir un trabajo o bien para iniciar su propio negocio.

Douglas Moseti, coordinador regional de la CAP YEI de Nairobi, ha estado vinculado al programa desde que éste comenzó. «Nos dirigimos a personas entre 18 y 25 años de edad que puedan demostrar que proceden de entornos vulnerables. En general, son personas huérfanas o provienen de familias monoparentales o de familias numerosas, donde un alto número de personas dependen de un único sostén de la familia. »

Moseti sabe lo que significa necesitar una mano amiga en la vida. Él creció en la pobreza y se vio obligado a abandonar la escuela varias veces cuando su madre no pudo pagar las cuotas escolares. Acabó pudiendo finalizar la escuela secundaria gracias a un afortunado encuentro en su iglesia. Sin embargo, con un diploma de escuela secundaria sólo podía aspirar a un trabajo con una remuneración equivalente a US $1 al día. Un curso de capacitación profesional de 2 años estaba fuera de su alcance, al menos por el momento.

CAP YEI ofrece 3 meses de capacitación adaptada a la demanda del mercado laboral. Para determinar qué cursos ofrecer, el personal de la CAP YEI explora el mercado local, y contacta a empresas y a empresarios a fin de identificar qué puestos de trabajo de nivel inicial o de entrada están disponibles. Con su primer centro en Nairobi – donde ahora tienen nueve – descubrieron que muchos hoteles requieren personal y guardias de seguridad, y que las empresas de construcción necesitan constructores y electricistas. Aprovechando que CAP YEI se vincula con los potenciales empleadores para identificar qué puestos de trabajo podrían ofrecer a sus graduados, también les pide opinión acerca del contenido de los cursos de capacitación, les anima a que ofrezcan tutorías personalizadas para los estudiantes de CAP YEI así como pasantías en su empresa una vez éstos se hayan graduado en el programa.

Es importante destacar que el ciclo de capacitación no termina con las clases, como ocurre en la mayoría de los programas de capacitación profesional. Cada ciclo culmina una vez cada graduado se ha ubicado en una pasantía o un empleo, o bien ha comenzado su propio negocio. Moseti describe lo que sucedió con el primer grupo de alumnos.

Había 141 estudiantes en esa primera cohorte, atendidos por 6 personas de CAP YEI -quienes éramos muy nuevos. Nos dijeron que deberíamos ubicar en empleos por lo menos al 80% de ellos. Esa vez no alcanzamos la meta, pues la industria no creía que un nuevo empleado pudiera ser entrenado en apenas 3 meses, y no teníamos manera de mostrar a los posibles empleadores que los alumnos sí podían hacer el trabajo que se les encomendaba. Pero nos las apañamos para ubicar laboralmente al 67% de los alumnos, incluyendo a un 5% que iniciaron sus propios negocios.

Luego pasa a describir la evaluación que se lleva a cabo una vez se ha conseguido ubicar laboralmente a cada grupo que se gradúa.
Una vez que una cohorte ha completado todo, repasamos la instancia que hemos terminado antes de comenzar con un nuevo grupo. Los facilitadores, el coordinador regional, y el director del programa describen todo el proceso. Nosotros hacemos preguntas: ¿Tenemos las personas adecuadas en las clases? ¿Les transmitimos las habilidades adecuadas? Nos fijamos también en la asistencia del estudiante a las capacitaciones y en el trabajo, y nos preguntamos si su ubicación laboral resultó positiva. ¿Qué curso brindó la mejor oportunidad de una buena ubicación laboral? Cuando la capacitación no conduce a puestos de trabajo, realizamos cambios y procuramos conseguir más gente de la industria que nos ayude y nos diga qué falta, y así ofrecemos eso. En un centro donde los estudiantes tenían dificultades para conseguir trabajo en el área de electricidad y electrónica, llevamos a cabo un nuevo análisis de mercado y diseñamos un plan de estudios para ofrecer capacitación en la construcción. En otro lugar, la confección de prendas de vestir se sustituyó por la capacitación en sistemas de seguridad y de gestión.

James Chepyegon, director del proyecto CAP YEI, utiliza un sistema de información de gestión desarrollado por CAP YEI para recoger datos sobre las inscripciones en los cursos, sobre los graduados por cohorte, la tasa de ubicación de los egresados en el mercado de trabajo, y los cambios en las actitudes y formas de vida de los estudiantes después del entrenamiento.

Los estudiantes son encuestados antes y después de la capacitación para ver cómo sus actitudes han cambiado, cómo realizaron la transición hacia al empleo, cómo han creado sus propias empresas, cómo sus puntos de vista sobre la vida han cambiado como resultado de la formación y el empleo, y cuán bien comprenden las relaciones laborales con los empleadores.

Estos datos relacionados con el proyecto se combinan con datos recogidos anualmente por un equipo de la Universidad de Minnesota, quien viaja hasta Kenia para estudiar a las principales partes interesadas del proyecto, incluyendo por tanto a los participantes y a los empleadores. Sus datos se compilan en un estudio longitudinal para ver cómo la capacitación cambia la trayectoria de vida y modos de vida de los participantes. Esta evaluación de impacto está diseñada para enfatizar el componente de aprendizaje en el monitoreo, la evaluación y la dimensión educativa del programa, a fin de ayudar a CAP YEI a aprender durante la implementación misma de sus acciones y responder a las necesidades de los jóvenes destinatarios.

Uno de los hallazgos más sorprendentes de las evaluaciones ha sido el importante rol que juegan las habilidades para la vida en la preparación de los jóvenes para su inserción en el mundo del trabajo. La profesora Joan Dejaeghere, que lidera el equipo de la Universidad de Minnesota, comenta respecto a las visitas anuales de su equipo, donde realiza encuestas y entrevistas con los participantes.

Año tras año, CAP YEI brinda habilidades para la vida, generando confianza en sí mismos, enseñándoles a ser asertivos, formándolos en la realidad de los mercados de trabajo y su funcionamiento, ubicándolos respecto a dichos mercados y lo que pueden esperar de ellos, y sumando conocimientos de educación financiera. Los jóvenes dicen que esa preparación para la vida es lo que marca la diferencia. Dicen: ahora puedo insertarme en algún trabajo, empezar algo, moverme a algo nuevo y administrar las finanzas.

La Dra. Heidi Eschenbacher, otro miembro del equipo, viene a reafirmar esa idea: «Nuestros hallazgos sugieren que la preparación para la vida, combinada con habilidades técnicas, ayudan a los jóvenes a adquirir la confianza suficiente para sentir que ellos pueden utilizar esas habilidades técnicas. En otras palabras, necesitan habilidades para la vida para alcanzar la confianza que les permita ser eficaces en sus habilidades técnicas.”

El trabajo que se lleva a cabo sobre las habilidades para la vida va desde tutorías con hombres de negocios exitosos (muchos de los cuales comenzaron con poco pero lograron tener éxito), a la capacitación en educación financiera y la capacitación para jóvenes emprendedores que buscan iniciar su propio negocio. Chepyegon confirma que las evaluaciones muestran claramente que los vínculos que se establecen entre graduados y empleadores, así como el trabajo sobre habilidades para la vida, son elementos que funcionan muy bien en el programas. ‘Son’, dice, ‘el aspecto más relevante para el éxito del CAP YEI en su objectivo de conseguir oportunidades de acceso para los jóvenes.’

Su fuerza reside, en parte, en la forma como el módulo de habilidades para la vida ha ido cambiando en respuesta a las evaluaciones que han hecho los participantes a lo largo del tiempo. Chepyegon añade:

El departamento de iniciativa empresarial se hizo más fuerte, capaz de dar cuenta de las actividades desde el momento en que se identificaron los potenciales emprendedores individuales para ayudarles a poner en marcha sus pequeños negocios, incluyendo la creación y registro de grupos de iniciativa empresarial, y el apoyo para el éxito de sus pequeños negocios. Alrededor de 200 empresarios están actualmente funcionando en trabajos de tiempo completo y parcial.

Moseti comprende bien el incremento de confianza que brinda el hecho de tener un mentor, ya que él mismo lo experimentó. Recuerda:

Una persona prominente me encargó el trabajo de la instalación eléctrica en un edificio muy grande. Dios me concedió el favor del jefe. Siempre que existía la necesidad de un chofer -y dado que yo estaba calificado-, yo era convocado para comprar materiales y hacer recados que requerían de un conductor. Me convertí en su hombre clave en la obra y terminé por convertirme en el capataz de su edificio con responsabilidades eléctricas y en otros sectores de la construcción.

Más tarde Moseti se vinculó a la empresa de Tecnologías de Comunicación e Información de su jefe, fue promovido y consiguió un buen aumento de sueldo. Recientemente, Moseti se reunió con la primera cohorte de graduados en Nairobi que fue seguida por la Universidad de Minnesota para su estudio longitudinal, y tuvo la oportunidad de valorar en qué medida el proyecto puede considerarse un éxito:

Setenta y ocho de los 141 estudiantes asistieron a esa reunión. Todos, menos uno de ellos, estaban trabajando. Descubrí que la mayoría de estos jóvenes (casi el 40%) habían comenzado con auto-empleo en grandes empresas. Una señora se había convertido en una agente para grandes bancos interesados en extender sus servicios a las zonas rurales. Ella dice estar ganando 30.000 chelines al mes a partir de estos servicios de banca móvil, los que incluyen Mpesa, Equity Agent, y Cooperative Bank Agent. Otro graduado importa ropa y zapatos de Dubai, y los vende en Kenia.

La alianza entre aprendizaje y evaluación en CAP YEI está contribuyendo de forma notable a ayudar a los jóvenes a salir adelante y a aprender de lo que se vaya interponiendo en su camino. El profesor David Chapman, co-líder de la evaluación externa, comenta:

Ha habido algunas sorpresas en el cuarto año de la recogida de datos de campo, planificada para 5 años. Si bien la sabiduría convencional podría sugerir que los participantes pasan por el entrenamiento y luego encuentran o crean un puesto de trabajo, la realidad es que ellos son actores multitarea para ganar dinero. En sus esfuerzos para iniciar sus propios negocios, estos jóvenes tienen problemas para conseguir el capital necesario. Eso está cambiando lentamente. Los bancos en Kenia han estado a la vanguardia de los servicios bancarios para jóvenes y han encontrado que los programas de préstamos grupales tienen una mejor tasa de reembolso de la que reciben de sus clientes más convencionales.

CAP YEI, en respuesta a este hallazgo, ha procurado alcanzar una serie de alianzas con los proveedores de servicios financieros a fin de dar seguimiento a indicadores claves, como el número de cuentas abiertas, la cantidad de fondos otorgados, la media de capital inicial, la media de ganancia tras la puesta en marcha y el promedio de ahorro por cliente. Todo con el propósito de facilitar a los graduados de su programa obtener el apoyo financiero que necesitan para iniciar sus propios negocios.

En definitiva, el proceso de mejora continua del programa se ha mostrado muy útil para ayudar a los jóvenes a conseguir y mantener buenos empleos. Sobre todo en situaciones dinámicas como las que representan los mercados de trabajo en los que muchos jóvenes ya están listos para entrar.

—————-

Christopher Johnstone, Acacia Nikoi, y los investigadores de la University of Minnesota llevaron adelante la evaluación externa anual del programa, y presentaron los datos que ayudaron a refocalizar la programación del proyecto y mejorar los servicios para los jóvenes.

James Chepyegon, ejecutivo de monitoreo y evaluación, fue el responsable de llevar adelante el monitoreo interno del proyecto, interpretar las implicaciones de los datos de monitoreo y evaluación, y capacitar al personal del proyecto.

Ashok Ankathi (director del proyecto en aquel entonces) realizó cambios programáticos a partir de las recomendaciones de la evaluación.

Douglas Mose  (coordinador regional en Nairobi en ese tiempo) brindó el contexto de los beneficiarios que ayudó a perfilar la historia.

Narradora: Deborah Glassman

La Red EvaluAR -Red Argentina de Evaluación- acaba de presentar en sociedad el informe Mapa Diagnóstico de la Evaluación en Argentina. El mismo es fruto del trabajo voluntario y profesional de diversos colegas de la red EvaluAR, quienes bajo la coordinación de Natalia Aquilino y Paula Amaya, han realizado un primer avance muy valioso para mapear  la realidad de la evaluación de políticas públicas en Argentina.  El proyecto se originó cuando la Red EvaluAR resultó ganadora de uno de los proyectos de apoyo entre pares auspiciados por EvalPartners, titulado “Celebrando el 2015 como Año Internacional de Evaluación: logros y retos de la evaluación en Argentina”.

La publicación apunta a desarrollar un primer mapa diagnóstico de la evaluación en la Argentina sobre un conjunto de factores orientados a dar cuenta de distintos aspectos del proceso evaluativo. Para ello, se adoptó una estrategia cualitativa que rescata a los actores que intervienen en distintos aspectos de la evaluación a nivel estatal y provee insumos críticos para conocer:

a) algunos aspectos conceptuales acerca de cómo se entiende a la evaluación;

b) la normativa nacional y provincial vigente;

c) la calidad del diseño de planes y programas para ser evaluados;

d) algunas experiencias de evaluación reconocidas;

e) la relación de la evaluación con la calidad de las políticas públicas,

f) las oportunidades y desafíos que se presentan para fortalecer la mirada evaluativa y la cultura de evaluación en Argentina.

El trabajo ofrece una mirada tanto sobre el nivel nacional, como también abordaje particulares a la realidad de la evaluación en la Ciudad Autónoma de Buenos Aires, y las provincias de Córdoba, Mendoza, Salta, y Corrientes.

Una brevísima reseña del trabajo se ilustra en el siguiente video, y el trabajo completo puede consultarse aquí: Mapa Diagnóstico de la Evaluación en Argentina.

Me comentaba una colega hace unos días que me veía «algo obsesionado» con mis publicaciones en Facebook sobre actividad física, nutrición, y alimentación.  Tengo referencias que algunos familiares también están preocupados con esto que -para ellos- linda el fanatismo 😉 . Y si bien este fascinante campo de la salud (y sus múltiples aristas) comprende un tema  íntimamente personal (y para eso tengo este blog, también, no?) , por otro lado es un área de interés vital para las cuestiones del desarrollo y la complejidad.

Tantas lecturas (y una pizca de obsesión, je) no me permiten todavía ser lo sistemático que quisiera para poder transmitir con la claridad necesaria aquello que me resulta tan fascinante desde hace ya un buen tiempo.  Para ello hay más avezados blogueros, como Spartan Gourmet, Eva Muerde la Manzana, o Darío Pescador (por citar a algunos de calidad y que tengo a mano ahora).

Pero como hoy es Viernes, y debería ser Light, les comparto algunas ideas del blog Esto no es comida, que me parecen simpáticas y que a la vez también pueden generar curiosidad por conocer más de estos temas. Pues ahí van!

(donde dice Enero, en el hemisferio sur debe leerse Julio 😉 )

Extractos del libro Elogio de la Bicicleta, del antropólogo francés Marc Augé…

«Nadie puede hacer un elogio de la bicicleta sin hablar de sí mismo. La bici forma parte de la historia de cada uno de nosotros. Su aprendizaje remite a momentos particulares de la infancia y la adolescencia. Gracias a ella, todos hemos descubierto un poco de nuestro propio cuerpo, de sus capacidades físicas, y hemos experimentado la libertad a la que está indisolublemente ligada.»

«El ciclismo es un humanismo: Pedaleo, luego existo»

«A la bicicleta le corresponde un papel determinante: ayudar a los seres humanos a recobrar la conciencia de sí mismos y de los lugares que habitan. Necesitamos la bicicleta para ensimismarnos en nosotros mismos, mientras volvemos a centrarnos en los lugares que vivimos: devolver a la ciudad su dimensión simbólica y su vocación inicial: favorecer los encuentros humanos.»

«Se sabe que una vez que uno aprendió a andar en bicicleta, como a nadar, ya no lo olvida. Pero hay algo más. El conocimiento progresivo de uno mismo al que corresponde el aprendizaje de la bici deja huellas inolvidables e inconscientes. Hay aquí una paradoja que le da su originalidad: la paradoja del tiempo y de la eternidad, si se quiere. Los jóvenes que montan una bicicleta viven la experiencia conquistadora de su cuerpo. Es una experiencia de conquista porque esos jóvenes están, como se suele decir, en la flor de la edad. Más o menos fornidos, más o menos veloces, más o menos talentosos, todos son, en principio, vigorosos y se miden con el relieve del espacio proyectándose en él; saben que hay momentos en que pueden hender el aire con mayor vigor y entonces sienten la sensación de «tener el mundo bajo sus pedales», por así decirlo. Esta sensación se borra con el uso y desaparece en algunas horas para dar lugar a la fatiga. También se hace más rara con la edad, sobre todo cuando a uno le falta entrenamiento.»

Recomiendo ver una excelente compilación de miradas sobre la bicicleta en el blog Una Antropóloga en la Luna…

«Evaluaciones que marcan la diferencia” es una colección de 8 historias de evaluación recogidas en distintos lugares del mundo, y una de las primeras investigaciones sistemáticas sobre los factores que contribuyen a que las evaluaciones de alta calidad sean utilizadas por las partes interesadas para mejorar los programas y proyectos, y mejorar así la vida de las personas. Estas historias reflejan no sólo el punto de vista de los evaluadores, sino también de quienes comisionan y de quienes usan las evaluaciones. Esta historia es la primera de las ocho historias desarrolladas en el marco del proyecto. Para compartirlas en Inglés y Francés, visitar el Blog Evaluations that make a difference.

—-

Desde que  finalizó la larga guerra civil en Sri Lanka en el año 2009, la economía nacional se ha recuperado a un ritmo asombroso, y el crecimiento del PBI oscila actualmente entre el 6% y el 8%. No hay duda de que la paz ha traído dividendos: el turismo se ha recuperado y China ha hecho grandes inversiones en infraestructura. Además, los trenes atraviesan de nuevo el largo de esta isla con forma de perla, ubicada en el océano Índico frente a la costa sur de la India.

Pero no todo son buenas noticias. Con el regreso de la paz, las pequeñas y medianas empresas (PyMEs) descubrieron con pesar que China, India y Bangladesh habían copado – a sus expensas – todos los mercados globales a los que exportar la producción en serie y textil. Además, el gobierno nacional había prestado poca atención al sector PyME en los últimos años. Para los cientos de empresarios que alquilan  tierras en alguno de los 18 polígonos industriales de propiedad estatal gestionados por la Junta de Desarrollo Industrial (IDB), el auge económico parecía no haber llegado.

La lista de quejas era larga y detallada. El precio de los alquileres estaba fuera de control, y más que se duplicaba año tras año. Además, a pesar de que los alquileres eran satisfechos, no parecía haber ninguna correlación con la calidad de la infraestructura. Las carreteras tenían más baches que asfalto, la electricidad era poco fiable y el marketing coordinado simplemente brillaba por su ausencia. Aunque el gobierno estaba invirtiendo a conciencia en la infraestructura nacional, las empresas más pequeñas parecían pasar inadvertidas.

R.S. Balanathan, director gerente de la  firma exportadora de seda Ko Lanka, comenta que las industrias en los distintos estados estaban sin desarrollar: ‘Las carreteras eran malas, y los alquileres muy altos.’

En 2013, la situación empezó a cambiar cuando el Ministerio de Industrias Tradicionales y Desarrollo de Pequeñas Empresas encargó una evaluación integral del sector. Un equipo de evaluadores independientes liderados por Ajith Ekanayaka comenzó a viajar a cada uno de los 18 estados de todo el país para examinar los problemas que aquejaban al sector y sugerir soluciones a partir de ahí. Ekanayaka dejó muy claro que bajo ningún concepto esa evaluación debía verse relegada a una estantería. Debía tener un claro enfoque a la utilización y, además, de inmediato.

Durante cinco meses, los evaluadores reunieron su material, llevaron a cabo grupos focales con las distintas asociaciones industriales y entrevistaron a los gerentes y oficiales de distrito. Los tres grandes problemas que surgían una y otra vez eran la infraestructura en decadencia, los precios exorbitantes del alquiler y los elevados costes del préstamo. Algunos industriales tenían preocupaciones especiales, como por ejemplo los dedicados al metal. Estos industriales lamentaban no poder acceder a las materias primas dado que casi todo el metal de chatarra se estaba exportando. La evaluación también reveló que algunos propietarios de PyMEs fallidas estaban utilizando las propiedades para construir viviendas. Como la debilidad experimentada por el sector se iba alargando en el  tiempo, el empleo de minorías étnicas y de población rural pobre – que proporcionaban gran parte de la fuerza de trabajo en los polígonos industriales – también se vio disminuido.

El informe de evaluación dio voz a antiguos reclamos y recomendó cambios radicales. Lo que se necesitaba, argumentó Ekanayaka, era la intervención directa del gobierno nacional. El secretario del Ministerio de la Pequeña Empresa, Velayuthan Sivagnanasothy, reflexionaba sobre los hallazgos:

La evaluación mostró que el IDB era un mero cobrador de alquileres y que no había trabajado en la mejora de los polígonos industriales. Con una evaluación de este  tipo, el cambio sería mucho más fácil de generar. El proceso de evaluación fue una plataforma que sirvió para llevar la voz de los sin voz al más alto nivel de los responsables políticos.

Sivagnanasothy presentó la evaluación a todos los ministros relevantes del gabinete a  fin de asegurarse su apoyo. Con el gabinete de su lado, no había manera de que las cuestiones planteadas por la evaluación pudieran ser ignoradas.

Y así sucedió. El ministerio elaboró una política nacional de desarrollo de las PyMEs, realizando una amplia consulta y aprovechando la experiencia y el asesoramiento de otros ministerios y organismos. Pero incluso antes de que se pudiera adoptar dicha política, el cambio empezó a propagarse. Las recomendaciones prácticas de la evaluación habían sido “compradas”. ¿Por qué? Pues porqué los políticos habían tenido acceso a diversos insumos e ideas a través de sesiones preliminares de discusión. Y también porqué la evaluación fue construida con fuertes conexiones con los principales actores interesados, y sobre una amplia y creíble base de datos y evidencias. Según Sivagnanasothy, mucho se ha logrado a partir de esta evaluación. Él recuerda:

Cuando los alquileres subían, los industriales solían gritar y lamentarse: ¿cómo podremos hacerles frente?. Fuimos capaces de convencer al gobierno central de limitar el aumento del alquiler al 7% anual. Eso es un entorno predecible, y por tanto un entorno propicio. No sólo eso, sino que la introducción de préstamos focalizados con intereses más bajos y períodos de carencia más largos, significaba que las PyMEs podrían expandir sus operaciones con mayor facilidad. En cada una de las propiedades, la producción manufacturera ha aumentado, y con ella, las ganancias de las PyMEs, lo que ha derivado en más puestos de trabajo. Su efecto se ha derramado hasta las aldeas rurales.

El cambio tangible de actitud entre la administración del IDB hacia las PyMEs fue confirmado por Ratnamalala, que elogió a la evaluación por todo lo que ella revelaba. ‘Hemos ampliado nuestra prestación de servicios y hemos creado un cambio en la mentalidad de nuestros oficiales, orientándolos hacia el desarrollo.’

 El cambio para el IDB fue significativo, ya que se sometió a una reestructuración con el  fin de pasar de una actitud reactiva a una proactiva. El IDB se centra ahora en brindar capacitación, facilitar el acceso a materias primas (tales como la chatarra previamente escasa), y el acceso al crédito. No sólo eso, sino que el porcentaje del alquiler pagado que se destinaba a mejorar la infraestructura alrededor de los polígonos industriales se incrementó diez veces, de tan sólo un 3.2% por ciento a un 20 a 30%.

 A  fin de abordar el problema del acceso al crédito, el gobierno puso en marcha un plan especial con tarifas preferenciales para impulsarlo. Se introdujeron esquemas de marketing conjuntos para facilitar a los compradores potenciales el examen de la gama y la calidad de los productos. Todas las PyMEs pueden ahora acceder a un ‘programa de asistencia’ orientado a reintroducirlas en una situación de mayor bienestar, a la vez que la normativa se ha hecho más estricta a  fin de reducir el uso residencial de los polígonos. Además, a las industrias del metal se les proporcionó un balón de oxígeno – a expensas de los comerciantes de chatarra – con la prohibición de la exportación de chatarra. La suma inyectada en mejoras de infraestructura inmediatamente después de la evaluación fue de 305 millones de rupias de Sri Lanka (US$ 2,3 millones), y cabe decir que más fondos están en camino.

Para el director general del IDB, Ratnamalala, otro de los beneficios de la evaluación fue simplemente ser escuchados. ‘Tenemos acceso directo al gobierno central,’ dice. ‘Ahora, con estas mejoras, vamos a ver un crecimiento en nuestros polígonos industriales.’

En el terreno, los resultados que se derivan de los rápidos cambios promovidos por la evaluación, han sido impresionantes. Las voces de los pequeños y medianos empresarios han sido escuchadas, y las líneas de comunicación con el gobierno están abiertas. 

El exportador de seda Balanathan ha visto como ahora cuenta con más dinero en su bolsillo – y eso significa su expansión en los mercados claves de Europa y Oriente Medio. De tener 100 empleados en 2013, actualmente emplea a 130. ‘Tenemos una fuerte competencia con China y Bangladesh,’ dice, ‘pero estos cambios nos hacen más compe  vos. Ahora tenemos una mayor producción de seda que la suya. ¡Podemos ganarles!’

 ——

Velayuthan Sivagnanasothy, Secretario, Ministerio de Industrias Tradicionales y Desarrollo de Pequeñas Empresas (sivagnanasothy@hotmail.com) encargó la evaluación del Programa de atención a las Pequeñas Empresas y utilizó las recomendaciones de la evaluación para llevar adelante cambios en las políticas y acciones programáticas que produjeron verdaderos cambios en la vida de las personas.

Ajith Ekanayake, Consultor Independiente en Monitoreo y Evaluación, lideró al equipo de evaluación.

Vaidehi Anushyanthan, Director Asistente, Ministerio de Hacienda, coordinó conjuntamente la evaluación como punto focal del Departamento Nacional de Evaluación del Gobierno.

Narradores: Jessica Kenway y Doug Hendrie