ANEXO II. Metodología de la Evaluación

Para realizar la evaluación se emplearán técnicas mixtas usando tres metodologías basadas en la percepción de los diferentes actores (partes interesadas) para conformar una imagen holística del proyecto en todo su ciclo de vida y particularmente en el impacto. Para ello se realizará un mapeo de los actores y las alianzas a fin de comprender los roles, mandatos, necesidades y habilidades que fueron los factores que influyen en el logro de los resultados.

A. Sensemaking & sensegiving: un proceso social dinámico a través del cual los actores heterogéneos, interpretan y crean sentido para ellos mismos y para los demás en relación con su contexto de cambio de la realidad (resultados). El sensemaking tiene que ver con cómo las personas construyen su propia realidad y a la vez tiene un rol importante en el proceso de cambio.

El sensemaking51 no es sólo una actividad cognitiva de los individuos sino esencialmente una

actividad social que implica la participación de otras personas. Es además un acto retrospectivo,

puesto que sólo se puede crear sentido de aquellos eventos ya pasados (deconstrucción).

Los proyectos nacen en un contexto de incertidumbre y para lograr el éxito, se debe aprender a gestionar la ambigüedad propia del entorno inestable en el que intentan establecerse. Para lidiar con esta incertidumbre se deben elaborar una visión o modelo mental de cómo funciona el entorno en el que emprenderán (sensemaking desde las demandas) y luego ser capaz de comunicar a otros y ganar apoyo (sensegiving que se identifican a través de los resultados).

Esta metodología se aplicará a un grupo representativo de partes interesadas (actores clave), incluidos expertos independientes referenciales, para contextualizar e identificar el valor agregado de las intervenciones. Esto servirá para validar y dar sentido a los resultados, cristalizar y responder a algunos dilemas estratégicos, contribuir a la evaluación del programa de acuerdo con los criterios de evaluación e identificar lecciones aprendidas a la par que se va sistematizando los hallazgos.

B. Análisis de Contribución (CA): usado para para ilustrar cómo diferentes factores, procesos y niveles conducen a impactos. El análisis de contribución captura la interacción de los principales factores causales positivos y negativos, define las relaciones causales, como parte de una red más grande de relaciones causales entre múltiples variables independientes y dependientes.

En la práctica, significa recopilar información de una gama más pequeña de partes interesadas. El enfoque ajustado, que consta de 5 pasos, se explica en la figura siguiente.

51Si bien la tarea de darle sentido es individual (pensar, mapear y actuar sobre la información) se puede aprender, ¿qué sucede cuando las personas trabajan juntas, colaboran e intentan tener sentido juntas? Es decir, se construye un sentido colectivo y una percepción conjunta sobre los resultados. Es importante señalar que esta construcción puede ser realizada entre pares o llegar a una construcción entre diferentes stakeholders o actores, en cuyo caso se denominaría como “Collective sensemaking”.

Figura 3 - Análisis de Contribución

Paso 1: Seleccionar los vínculos causales que se explorarán

• Especificar las preguntas causales clave y los vínculos causales (o grupos de vínculos causales) que necesitan para ser explorado durante esta evaluación.

Paso 2: Análisis de los datos existentes para completar posibles contribuciones

• Se basa en lo anterior e implica un breve análisis de los indicadores de cada país, revisión complementaria de la información de Monitoreo y Evaluación con énfasis en los resultados a evaluar.

Paso 3: Completar el caso de contribución con evidencia

• Redactar evidencia para los vínculos causales bajo revisión y desarrollar una evidencia base de datos para cada vínculo causal (o grupo de vínculos causales)

Paso 4: Análisis de la evidencia por mecanismo o factor de influencia

• Después de recopilar la evidencia de los factores contribuyentes internos y externos, analizar por factor, por fuerza relativa, por impacto positivo o negativo de influencia en el resultado.

Paso 5: Redactar las valoraciones de contribución

• Para cada una de las preguntas causales, desarrollo de una historia sobre la contribución de la intervención al cambio observado.

Para este paso es fundamental la identificación de resultados. Esto se logra a través de un método participativo basado en encuestas y entrevistas, con preguntas que permiten recopilar información sobre los resultados, sin presuponer cuáles deberían haber sido, es decir, de forma objetiva. La recolección de resultados otorga evidencia sobre el cambio o valor agregado de la intervención; a continuación, trabajando de forma recursiva e iterativa, se determina si efectivamente la intervención ha contribuido a estos cambios y, si la información cuantitativa está disponible, se logra una cuantificación del impacto.

C. Design Thinking (invertido o incluso prospectivo): como metodología conductora de un taller, una guía de construcción participativa enfocada en el cliente (beneficiario final). Esta metodología contribuye a la construcción de un pensamiento conjunto (fortalecen el collective sensemaking) guiado por los hallazgos; los diferentes actores identifican las lecciones aprendidas y definen roles/compromisos para la sostenibilidad a futuro.