El análisis de contribución


En BetterEvaluation profundizan en el Análisis de contribución

El análisis de contribución es un enfoque diseñado para evaluar las preguntas causales e inferir la causalidad en las evaluaciones de la vida real de los programas.

Ofrece un enfoque detallado, diseñado para ayudar a los directores de programas, investigadores y diseñadores de políticas a llegar a conclusiones acerca de la contribución que ha efectuado (o está efectuando) su programa a determinados resultados.

El valor principal del análisis de contribución es que ofrece un enfoque diseñado para reducir la incertidumbre respecto de la contribución que la intervención está haciendo a los resultados observados, a través de (1) una comprensión mejorada de las causas por las cuales los resultados observados han tenido lugar (¡o no!) y (2) los roles desempeñados por la intervención y otros factores internos y externos.

El análisis de contribución: Sigue leyendo

Celebrar lo cotidiano y lo sencillo


No hay ninguna descripción de la foto disponible.

Un poco de pensamiento evaluativo en nuestra práctica cotidiana, Fuente: Chris Lysy, Freshspectrum

 

Ojalá que durante esta Navidad nuestras rutinas se transformen en aventuras, nuestros enfados en sonrisas, nuestros errores en aprendizajes/mejoras y nuestras tristezas en esperanzas.
Este año ha sido muy duro para tod@s pero, tristemente, especialmente duro para l@s más vulnerables.
Empiezan unos días para recordar y agradecer a quienes tenemos y hemos tenido en nuestra vida.
Celebrar lo cotidiano y lo sencillo es ahora más necesario que nunca.
Mis mejores deseos de felicidad para tod@s vosotr@s compañer@s. ¡Feliz Navidad a tod@s!
Disfrutemos de estos días con la compañía de tod@s: cercanos y no cercanos.
¡Ánimo, suerte y este año, sobre todo, mucha salud!

Sigue leyendo

El pensamiento evaluativo en nuestro trabajo cotidiano


Siguiendo con nuestra línea sobre «Pensamiento evaluativo» (PE), en el post de la aea365, «El pensamiento evaluativo como una forma de trabajar «, (24 de enero de 2017) por Guy Sharrock (Catholic Relief Services), Tom Archibald y Jane Buckley, como continuación de otra publicación de l a aea365 del 29 de abril de 2012, «Pensamiento evaluativo: El «Je Ne Sais Quoi«, describieron lo que aprendieron de su trabajo acerca del pensamiento evaluativo en Etiopía y Zambia.

Indicaban que se está produciendo un cambio de paradigma en la comunidad de ayuda que se aleja de los modelos lineales de cambio a modelos más dinámicos, reflexivos y receptivos. Esto requiere un manejo adaptativo. Requiere «equipos con habilidades e intereses en el aprendizaje y la reflexión» y el reconocimiento de que «el pensamiento evaluativo es indispensable para tomar decisiones informadas».

Definido como pensamiento crítico en el contexto de M&E motivado por una actitud de curiosidad y una creencia en el valor de la evidencia, el proceso de pensamiento evaluativo se resume en los siguientes puntos (Buckley, Archibald & Rochim, 2015):

  • Supuestos/Hipótesis: descubriendo las hipótesis que guían nuestras decisiones, acciones y elecciones
  • Validando: Animar a cuestionar y a tomar múltiples perspectivas para validar nuestros supuestos/hipótesis para perseguir comprensión más profunda
  • Tomar decisiones: posibilitando decisiones basadas en la evidencia en la preparación de acción y gestión adaptativa

Sigue leyendo

El pensamiento evaluativo en el ciclo de gestión y planificación


De nuevo sobre «Pensamiento evaluativo«(PE), contamos con este post «Pensamiento evaluativo en el diseño, gestión y evaluación de programas» en el que se analiza el PE aplicado al diseño, la gestión, la prestación de servicios y la evaluación de programas.

La Fundación Bruner ha identificado una lista de algunos de los comportamientos en las organizaciones que son indicativos del pensamiento evaluativo en cada área central de operaciones. Éstos son algunos ejemplos de este informe, indicando que las organizaciones utilizan el pensamiento evaluativo en:

1.Desarrollo y diseño del programa

Evaluar sistemáticamente el contexto de los servicios y programas para identificar brechas, redundancias y tendencias.

• Evaluar sistemática y regularmente (con datos) nuestra propia capacidad de crecimiento y nuestras capacidades para nuevos servicios.

• Incorporar los hallazgos de la evaluación en el diseño del programa.

• Involucrar a múltiples grupos de partes interesadas (beneficiarios, personal, gerentes, expertos, etc.) en el diseño y la planificación del programa.

• Desarrollar y documentar teorías y modelos de programas para guiar la implementación.

• Mejorar la evaluabilidad y desarrollar estrategias de evaluación desde/en el momento del diseño del programa para asegurar que la recopilación de datos sea significativa y manejable y esté integrada en las operaciones del programa.

• Integrar procesos de evaluación, reflexión, aprendizaje y mejora en los ciclos regulares del programa.

2.Gestión de programas Sigue leyendo

El pensamiento evaluativo en la práctica


Siguiendo con nuestra serie sobre «Pensamiento Evaluativo«, el post «Fomentar y practicar el pensamiento evaluativo» comparte algunos consejos para fomentar y practicar el pensamiento evaluativo dentro de nuestras organizaciones.

1. El contexto adecuado

Hay cinco principios clave para promover el pensamiento evaluativo (PE) en las organizaciones:

1. Seamos oportunistas. Aprovechemos las oportunidades para desarrollar la motivación intrínseca.

2. Empecemos poco a poco y vayamos despacio.

3. Brindemos oportunidades para aprender y practicar el pensamiento evaluativo.

4. Estemos preparad@s para combatir los prejuicios y la resistencia.

5. Practiquemos en múltiples contextos y junto a compañer@s.

2.Comenzar

El pensamiento evaluativo es un enfoque más que un conjunto de prácticas o estrategias distintas. Pero hay algunas estrategias tácticas que construyen el hábito y desarrollan las habilidades. Sigue leyendo

¿Cuál es la diferencia entre evaluación y pensamiento evaluativo?


Siguiendo con el post inicial sobre Pensamiento Evaluativo, y como se indica en el post «Pensamiento evaluativo: el corazón de la evaluación (significativa y útil)«, el pensamiento evaluativo:

(1) Se aplica de manera más amplia y está profundamente arraigado que las actividades/los procesos de evaluación.

(2) Está integrado en toda la organización y en todas sus operaciones. No se limita a un programa, un propósito, un punto en el tiempo.

(3) Está motivado por la curiosidad natural y las ganas de aprender y mejorar.

La evaluación es el «qué» y el pensamiento evaluativo es el «por qué».

La evaluación requiere ciertas habilidades, recursos y capacidades. El pensamiento evaluativo también requiere ciertas actitudes, motivos y hábitos.

Es posible evaluar sin pensamiento evaluativo. Pero hacerlo a menudo es doloroso y sin sentido. Sigue leyendo

Enfoques adaptativos en la función de evaluación


 

De cara a cumplir en la práctica su mandato en torno a la utilidad, credibilidad e independencia, los enfoques adaptativos en la función de evaluación se pueden orientar (a) hacia la mejora de la adaptabilidad a contextos cambiantes, (b) hacia la demanda y (c) hacia la oferta evaluativa:

(1) Hacia la cambiante utilización de los procesos/productos de la función de evaluación en contextos cambiantes:

(1.1) Previo a la fase de evaluación: Integración / (Inter) Relación / Involucramiento con los equipos de planificación:

(a) desarrollar capacidades (formación, trabajo en red, asesoría, planificación conjunta…) (a) integrando un enfoque de pensamiento evaluativo y (b) sobre la mejor manera de medir y hacer identificación, planificación y seguimiento (de cara a la mejora de la evaluabilidad de los procesos),

(b) apoyar y fortalecer la gestión del conocimiento de todas las fuentes de conocimiento posibles pero, en especial, la gestión del conocimiento de las evaluaciones (tanto propias como de otras organizaciones)

(1.2) Con posterioridad a la evaluación: a partir de las evaluaciones proporcionar evidencia de alta calidad y hacer que la evidencia y las lecciones sean mucho más accesibles para los formulador@s de políticas y a la gestión basada en resultados.

(2) Hacia una demanda evaluativa todavía por reforzar

Sigue leyendo

Iniciativa de Evaluación Global (GEI): no sin «Impacto Colectivo»


Fuente

Continuando con el post «Comienzo de la Iniciativa de Evaluación Global (GEI)«, la GEI necesita de un enfoque de impacto colectivo, de otra forma será otra más de las iniciativas similares que existen, contribuyendo aún más a la dispersión y fragmentación de esfuerzos para el desarrollo de marcos y capacidades de seguimiento y evaluación (M&E) para promover el uso de evidencia en la toma de decisiones públicas, mejorar la rendición de cuentas y contribuir a lograr mejores resultados.

GEI es una asociación innovadora que reúne a una coalición amplia y diversa de gobiernos, organizaciones de desarrollo (inter) nacionales y locales y expertos en M&E para aunar recursos financieros y técnicos para coordinar y expandir los esfuerzos de M&E a nivel mundial.

El gran reto será hacer reales/efectivas palabras como «coalición», «coordinación» y «asociación innovadora», para que el GEI sea en la práctica diferente a otras tantas experiencias (de coalición, asociación, coordinación) que se quedaron en casi nada (bueno sí, consiguieron «aunar algunos recursos» pero poca sostenibilidad e impacto).

El concepto de impacto colectivo: (1) se articuló por primera vez en el artículo de Stanford Social Innovation Review en 2011, (2) se basa en la idea de que para que las organizaciones contribuyan a soluciones duraderas a los problemas sociales a gran escala, deben (a) coordinar sus esfuerzos y (b) trabajar juntos en torno a un objetivo claramente definido.

Recordemos que el «Impacto Colectivo» es el compromiso de un grupo de actores de diferentes sectores con una agenda común para resolver un problema social específico, utilizando una «forma estructurada de colaboración». He entrecomillado «colaboración» porque en mi experiencia, con cierto  «buenismo», se suelen dar por sentado que la colaboración es fácil, o que es gratis o que no necesita tiempo, ni compromiso(s), recursos o sacrificios («Buenismo», buenas palabras e intenciones, sobran, lo que falta en la práctica es ese «impacto colectivo«) Sigue leyendo

Mejorando la evaluación y la gestión adaptativa


A partir de ODI tuvimos este post Pinceladas sobre programación adaptativa, y desde   BetterEvaluation éste otro Evaluando para la gestión adaptativa, que nos daban claves para mejorar y usar la evaluación para la gestión adaptativa:

  • Existe un considerable interés en el concepto de desarrollo adaptativo en diferentes sectores del desarrollo.
  • En la comunidad internacional no se suele usar la etiqueta “desarrollo adaptativo”, pero en muchos casos ya están realizando un trabajo en esa dirección. La “mejora de la calidad” es uno de esos enfoques probados.
  • La mejora de la calidad depende de los problemas, es iterativa y flexible. La metodología y los principios se pueden usar para identificar, probar e implementar cambios en cualquier contexto o parte de un sistema.
  • La mejora de la calidad se está utilizando con éxito, pero todavía hay una experiencia limitada y evidencias de cómo aplicar sus valores y filosofía más allá del nivel del proyecto e integrarlo dentro de las estructuras y sistemas nacionales.
  • El pensamiento de sistemas y el análisis del contexto de la economía política, pueden ayudar a integrar la mejora de la calidad en intervenciones complejas, y sostener sus logros.

Sigue leyendo

Evaluación y «Capacidades & Gestión/Programación» adaptativas


Las soluciones a algunos de los retos o fallos en nuestros sistemas de evaluación vienen de nuestra capacidad de utilizar «enfoques y capacidades» adaptativas :

I. Enfoques adaptativos: gestión y programación adaptativa

A. Los enfoques adaptativos se orientan:

(1) hacia la cambiante utilización de los procesos/productos de la función de evaluación en contextos cambiantes:

(i) asesorar sobre la mejor manera de medir y monitorear,

(ii) proporcionar evidencia de alta calidad y

(iii) hacer que la evidencia y las lecciones sean mucho más accesibles para los formulador@s de políticas y

(2) hacia una demanda evaluativa todavía por reforzar

(3) hacia la producción de evaluaciones. Sigue leyendo