El Desarrollo de Capacidades en Evaluación // Evaluation Capacity Development

(in English below)

Hoy tenemos como invitada a la amiga y colega Emma Rotondo,  coordinadora de PREVAL -Plataforma Regional de Desarrollo de Capacidades en Evaluación y Sistematización de América Latina y el Caribe.  Emma, quien es antropóloga, evaluadora y coach, trabaja en desarrollo de capacidades asociadas a procesos de gestión del conocimiento organizacionales.  Emma pone en común con nosotros pensares y preguntas a partir de la lectura de un relevante texto del Grupo de Desarrollo de Capacidades en Evaluación (fruto de un seminario internacional del cual dio buena cuenta Evaluateca  en una  primera y segunda entrega). El ECDG es uno de los socios de la iniciativa EvalPartners, la cual hace unos días también presentamos aquí.

Gracias Emma! 

……………………………….

Quiero compartir algunas reflexiones en torno al desarrollo de capacidades en evaluación a partir del texto “Un Acuerdo de Trabajo Internacional en Evaluación de Desarrollo de Capacidades” del Grupo de Desarrollo de Capacidades en Evaluación (Evaluation Capacity Development Group, ECDG). El texto surge del Seminario Internacional sobre Desarrollo de la Capacidad de Evaluación realizado del 17 al 21 de octubre pasado en Ginebra (Suiza).

El Seminario arribó a varias conclusiones, las principales precisan lo siguiente:

«existe una gran necesidad de desarrollar capacidades en evaluación sin un consenso acerca del cómo»

«generalmente se confunde desarrollo de la capacidad evaluativa  con entrenamiento»

«fuera de la asistencia financiada por donantes no habían sido capaces de desarrollar de manera adecuada y mantener la capacidad de evaluación»

El texto adelanta principios clave a tomar en cuenta tales como independencia, relevancia, utilidad, e integración.  Los participantes en el taller acordaron que el desarrollo de capacidades de evaluación involucra actividades y procesos que ayudan a crear, fortalecer y sostener la evaluación para individuos, equipos, grupos, redes, comunidades, organizaciones, sectores, países y regiones.

Al respecto, considero que no existe consenso en cómo desarrollar capacidades porque es una transdisciplina y profesión que se ha venido ejerciendo en diferentes contextos, con diferentes actores y procesos, y por tanto sus productos, tipos y usos son altamente situacionales. Puede tratarse de una evaluación interna o externa, temática o según el ciclo del programa/proyecto; incluyendo los sistemas de monitoreo y evaluación organizacionales, de proyectos o comunitarios, o también se puede facilitar procesos de valoración que alimenten sistemas de gestión del conocimiento.

El debate sobre cómo desarrollar capacidades tiene cierta antigüedad en la región de América Latina. Una aproximación sobre los enfoques, pasos y las competencias para desarrollar específicamente sistemas de Seguimiento y Evaluación fue construido por Preval y unos 25 evaluadores en el año 2005. En esa reflexión se precisaba que se requería no sólo de capacidades técnicas en herramientas de investigación económica y social, sino que también era fundamental desarrollar competencias en facilitación y coaching, entre otras. Resume esas reflexiones el texto de Preval (en Español) “Los sistemas de Seguimiento y Evaluación, enfoques y pasos para su diseño y factores de éxito”  y también en Inglés. La dimensión de evaluación asociada a procesos de aprendizaje social abre asimismo nuevas competencias. Es desde esa práctica o ejercicio de evaluación heterogénea, marcada por distintos usos, desde donde debemos partir para establecer principios, criterios y estándares de consenso, así como precisar las competencias necesarias de los evaluadores. La oferta de procesos de desarrollo de capacidades deberá pues ajustarse a estas competencias y habilidades necesarias para evaluar en la diversidad.

De hecho, en el año 2008 Preval abre las puertas a nuevos paradigmas del profesional de la evaluación al incluir en su propuesta formativa módulos relativos a herramientas de facilitación y de coaching con su “Programa de Formación de Facilitadores en metodologías Innovadoras de Evaluación”. Una experiencia de formación muy relevante y pionera ha sido el de Lùcia Calil en Brasil con la “Formación de Monitores”.  El enfoque en el que se enmarcan estas propuestas formativas conciben al profesional que actúa en procesos de Seguimiento y Evaluación como un facilitador de procesos participativos, capaz de catalizar aprendizajes y de contribuir a generar procesos sociales de construcción de conocimientos, a partir de la reflexión, el análisis y el intercambio en grupo o en comunidad con las y los actores, que promuevan aprendizajes y que movilicen la energía de los seres humanos y los sistemas sociales participantes.

Si bien no son las únicas competencias y habilidades a desarrollar, ni tampoco el Seguimiento y Evaluación es la única área de aplicación de la evaluación, quisiera comenzar la reflexión sobre el texto de ECDG haciendo una pregunta: ¿qué competencias son claves para el evaluador en sus diferentes roles y contextos? ¿Cuáles son prioritarias?

^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^

Today we have as a guest blogger my friend and colleague Emma Rotondo, coordinator of PREVAL-the Regional Platform of Evaluation Capacity Building in Evaluation and Systematization of Latin America and the Caribbean. Emma, who is an anthropologist, evaluator and coach, is working on capacity development processes associated with organizational knowledge management. After reading a relevant text of the Evaluation Capacity Development Group (based on an international workshop that our blogger friend from Evaluateca made one and two posts), Emma is sharing with us her thoughts and questions. ECDG is one of the supporting partners of the EvalPartners initiative, which I presented in Spanish here. 

Thanks Emma!

……………………………….

I want to share some reflections on evaluation capacity development from the text «An International Workshop Agreement on Evaluation Capacity Development » (Evaluation Capacity Development Group, ECDG). This text comes from the International Workshop on Evaluation Capacity Development held from October 17th to 21th 2011  in Geneva (Switzerland). The workshop arrived at several conclusions, the main being

«there is a great need for capacity building in evaluation without a consensus on how».

«….stand alone, piece–meal and one¬off assistance funded by donors had not been able to adequately develop and sustain evaluation capacity. …»

«Many have considered ECD to be synonymous with training of individuals.»

Subsequent text on key principles takes into account independence, relevance, usefulness, and integration. Workshop participants determined that evaluation capacity development (ECD) involves activities and processes that help create, strengthen, and sustain evaluation for individuals, teams, groups, networks, communities, organizations, sectors, countries and regions.

In this regard, I believe that there is no consensus on how to develop it because of its multidisciplinary and heterogeneous practice in different contexts, actors, and processes. It may be an internal or external evaluation, thematic or according to the cycle of the program/ project, including monitoring and evaluation systems, organizational, or community projects. Also evaluators can facilitate assessment processes that feed into knowledge management systems. The evaluative dimension associated with social learning processes also provides new perspective in evaluation professional practice. Therefore their products, types and uses are highly situational.

It is from this heterogeneous nature, characterized by different uses, from which we must start to develop principles, criteria and standards of consensus and define the professional competences required. The tender process for capacity building must comply with these competencies and skills necessary to assess diversity.

The debate on how to develop capabilities has some background in the region of Latin America. A proposal with approaches, steps and skills to develop specific monitoring and evaluation systems was created by Preval and about 25 evaluators in 2005. This reflection expressed that evaluators require not only technical skills with economic and social research tools, but it is also essential to develop skills in facilitation and coaching, among others. The text of Preval»The monitoring and evaluation systems, approaches and steps for its design and success factors»   summarizes these considerations.

In fact Preval in 2008 opened to new paradigms of professional evaluation to include in its proposal training modules, facilitation tools and coaching with its «Facilitator Training Program in Innovative Assessment Methodologies«. A very relevant experience and training has been pioneered by Lucia Calil in Brazil with the «Formation of Monitors»  which aims to improve monitoring, how to ask questions, listen and interpret events and situations.

These courses on formative programmes are part of professional training designed to contribute to monitoring and evaluation systems as a facilitator of participatory processes capable of catalyzing learning and contributing to the generation of new social knowledge arising from critical reflection, analysis and sharing in groups mobilizing the energy of human beings and social systems involved.

These ideas are not the only skills and abilities to develop evaluation competences and to start reflection about the ECDG text of ECD. I invite others to ask some questions: what skills are key to the evaluator in their different roles and contexts? What are competences and formative priorities?