MQ Patton y las implicaciones de la pandemia para l@s evaluador@s


MQPatton, uno de nuestros referentes, ha estado en este oficio de la evaluación y escribiendo sobre la profesión de evaluación durante casi 50 años. Durante la última década, ha escrito sobre “evaluación bajo condiciones de complejidad” (Developmental evaluation / Evaluación en o durante el desarrollo) y transformaciones de sistemas globales (Blue Marble Evaluation). En su post del 23 de Marzo 2020, Implicaciones en la evaluación de la actual pandemia,  MQPAtton nos da su visión sobre la actual pandemia y las implicaciones que puede tener para la evaluación. Esta es su opinión sobre dónde estamos y hacia dónde deberíamos ir como evaluador@s:

  1. Adaptemos ahora los planes y diseños de evaluación.
  2. Seamos proactivos. No esperemos y no pensemos que esto va a pasar rápidamente.
  3. Centrémonos en el uso, no en nosotr@s. El trabajo de las personas con las que trabajamos no es consolarnos ni ayudarnos como evaluador@s.
  4. Reglas de datos en tiempo real.
  5. Consideremos el estándar de rigor “suficientemente bueno”. Separarse del rigor como un estándar metodológico absoluto.
  6. Todo cambia en una crisis. Abraza el cambio, no te resistas.
  7. Participa en el pensamiento sistémico.
  8. Piensa globalmente, actúa localmente.
  9. Prepárate para defender el valor de la evaluación.
  10. Tengamos conocimiento, seamos un verificadores de hechos.
  11. Modela el pensamiento evaluativo sistemático.
  12. Aboga por mejores datos.
  13. Destaquemos la necesidad de una transformación de sostenibilidad global a más largo plazo.
  14. Sigue aprendiendo.
  15. Apoyarse mutuamente como comunidad de evaluación.

Adaptando el rol de la evaluación durante esta pandemia


Con el artículo “Reflexionando sobre el rol de la evaluación durante esta pandemia global” de Miranda Yates, el pasado 21 de marzo de 2020, desde la AEA ha comenzado los sábados una serie de posts/blogs que nos brindan un espacio para reflexionar e intercambiar información sobre nuestra práctica como evaluadores en respuesta a la pandemia global. Esta semana abordan cómo adaptar nuestros roles a las necesidades de l@s proveedor@s de servicios con los que trabajamos. Es normal sentirse sol@, ansios@ e incluso temeros@ en momentos de cambios sin precedentes como este. El mejor servicio que podemos brindarnos a nosotros mismos y a aquellos con quienes trabajamos es recordar que el cambio también crea espacio para la innovación y nuevas posibilidades para echar raíces. La comunidad de la AEA ha servido como fuente de inspiración, apoyo y colaboración durante décadas, y esperan que estos blogs también generen esas mismas conversaciones y colaboraciones.

Así, desde la ciudad de Nueva York, Miranda Yates de Good Shepherd Services, una organización de desarrollo juvenil y familiar de servicios múltiples. Es parte de un equipo de evaluadores intern@s, que se han esforzado por adaptarse a las demandas siempre cambiantes y urgentes impuestas a su organización sin fines de lucro por la pandemia COVID-19. En respuesta, les gustaría comenzar una comunidad de aprendizaje para compartir consejos, herramientas e ideas. A continuación se presentan algunos aspectos destacados basados ​​en sus experiencias durante las últimas dos semanas.

Algunas herramientas prácticas e ideas para evaluador@s: Sigue leyendo

Algunas lecciones para enfrentarse a la pandemia en países vulnerables y de renta media y baja


Las siguientes son las lecciones sobre respuesta a epidemias para aumentar la resiliencia de los países con publaciones más vulnerables, que son complementarias a las medidas de distanciamiento social y sistemas proactivos y de gran cobertura de tests rápidos que parecen que están funcionando en los países más desarrollados (a partir de los posts anteriores Enfrentarse al coronavirus también desde la evaluación y la gestión del conocimiento y Contribuyendo a la resiliencia de los países más pobres y vulnerables durante esta pandemia (I de II))

A. Lecciones sobre respuesta inmediata a partir de evaluaciones pasadas:

1.Garantizar la apropiación y la coordinación al más alto nivel del gobierno, lo que a su vez requiere enfoques a la medida, según las especificidades y necesidades nacionales y locales.

1.1. En el caso de la respuestas pasadas (1) acción basada en la evidencia ante la crisis, (2) debate político como base para el desarrollo y la acciones políticas, (3) las capacidades del personal fortalecido a todos los niveles para responder a la emergencia, (4) mejora del nivel de transparencia y apertura, y (5) el público en general participó en la respuesta a la epidémia, y (6) se movilizaron recursos para apoyar la respuesta nacional.

1.2. Se establecieron centros de operaciones de emergencia que facilitaron los esfuerzos de respuesta y coordinación de todas las partes involucradas.

2.El financiamiento y uso de ayudas públicas es esencial. Dada la naturaleza global de los bienes públicos de los efectos secundarios de la respuesta a las enfermedades infecciosas emergentes, la disponibilidad de subvenciones es crucial a nivel de país. Los países de bajos ingresos estarían especialmente “indispuestos” a emprender proyectos que respalden un bien público global sin financiamiento de subvenciones. Con la provisión de financiamiento de subvenciones, se puede hacer más para alentar la cooperación entre países a nivel regional, como para compartir datos, muestras y recursos técnicos. Durante las epidemias pasadas, algunos países no percibían mucha amenaza o riesgo, o carecían de interés en usar sus propios fondos para apoyar un bien público global. El financiamiento de subvenciones fue útil para conseguir que el apoyo a las intervenciones fueran más asequibles para estos países.

3. Asociarse  con agencias técnicas especializadas.La función de convocatoria y financiamiento de instituciones financieras como los Bancos de Desarrollo funcionan mejor cuando se combinan con la experiencia técnica de agencias especializadas. El apoyo de respuesta a las crisis proveniente de múltiples socios a menudo se vuelve descoordinado y puede abrumar a los gobiernos receptores.

4 Incluir mecanismos de compensación en la respuesta.

(a) Los mecanismos compensatorios demostraron ser un elemento crítico para informar sobre brotes epidémicos. Es importante que los afectados conozcan y tengan plena confianza en el sistema, por lo que los mecanismos deben diseñarse y publicitarse antes de que ocurran brotes de enfermedades. Sigue leyendo

Enfrentarse al coronavirus también desde la evaluación y la gestión del conocimiento


Lecciones aprendidas de Evaluaciones es lo que nos ofrece la función de evaluación del Banco Asiático de Desarrollo: “Respondiendo a la Crisis del Coronavirus: Lecciones desde la Evaluación” (“Responding to the Novel Coronavirus Crisis: 13 Lessons from Evaluation”)

El Coronavirus de 2019 (COVID-19), reportado por primera vez desde Wuhan, China, el 31 de diciembre de 2019, es la última enfermedad infecciosa emergente que declara una emergencia de salud pública de preocupación internacional. La situación está evolucionando con estrépito. La facilidad de los viajes mundiales y el aumento de la interdependencia global han agregado complejidad a la contención de enfermedades como el COVID-19 que afectan la salud y la estabilidad económica de las sociedades. El desafío inmediato es responder con urgencia para contener la propagación del nuevo virus e identificar, aislar y tratar rápidamente a los pacientes infectados, pero de una manera que ayude a mejorar las respuestas futuras. Además del enorme número de víctimas humanas, el impacto económico de la transmisión transfronteriza y la propagación de esta enfermedad infecciosa en el turismo, el comercio y la productividad ya alcanza miles de millones de dólares. A medida que el mundo se enfrenta a la tarea desalentadora de contener la propagación de COVID-19 y tratar a los enfermos, evaluaciones pasadas de las respuestas financieras y técnicas pasadas al (1) Síndrome Respiratorio Agudo Severo (SRAS), (2) el Ébola y (3) la Influenza Aviar proporcionan algunas lecciones sobre el apoyo a los países durante y después de las fases críticas de los brotes:

Las siguientes son las lecciones sobre respuesta inmediata

1.Garantizar la apropiación y la coordinación del apoyo al más alto nivel del gobierno, lo que a su vez requiere enfoques a la medida, según las especificidades y necesidades locales.

1.1. En el caso de la respuesta al brote de SRAS en la República Popular China, (1) se transmitieron señales claras e inequívocas a todos los niveles para iniciar una acción basada en la evidencia ante la crisis, (2) se alentó la discusión y el debate sobre políticas como base para el desarrollo y la acciones políticas, (3) las capacidades del personal fortalecido a todos los niveles para responder a la emergencia, (4) se mejoró el nivel de transparencia y apertura, y (5) el público en general participó en la respuesta a la epidémia, y (6) se movilizaron recursos para apoyar la respuesta nacional. Sigue leyendo

Errores frecuentes (y reincidentes) en los proyectos de cooperación


En el post “Errores frecuentes en los proyectos de cooperación” desde el portal solucionesong nos ofrecen pistas para evitar los errores más frecuentes que se cometen en los proyectos de cooperación al desarrollo, en concreto ligados al Enfoque del Marco Lógico. Esto me recuerda a mi tesis doctoral, errores que lamentablemente se repiten y se repiten (y se repiten) desde hace más de 30 años. Pero como nunca es tarde si la dicha es buena (como decían los Reincidentes), aquí están esas orientaciones:

1Integración en el taller de participación.

A los actores clave hay que involucrarles y prestarles el tiempo suficiente en su intervención para que expresen sus prioridades y sus opiniones. Ello será fundamental para definir los problemas y posibles soluciones que se manejarán en el proyecto, consiguiendo un trabajo grupal. Además, la participación activa de este colectivo es muy práctica puesto que serán ellos quienes se apropien del proyecto una vez éste se ejecute y quienes deban mantenerlo en el tiempo. Sigue leyendo

Recomendaciones para el empoderamiento y la rendición de cuentas


 

En línea con nuestras publicaciones sobre rendición de cuentas o sobre empoderamiento y participación, Duncan Green publicó “Once recomendaciones para trabajar en el empoderamiento y la rendición de cuentas en lugares complicados / peligrosos” (21 de febrero de 2020), como resultado del programa “Acción para el empoderamiento y la rendición de cuentas” (A4EA), en el que Duncan ha estado involucrado esporádicamente, ahora analizando los resultados de sus primeros 3 años de investigación, ya han identificado algunos “temas recurrentes” importantes en sus 5 países de enfoque (Egipto, Mozambique, Myanmar, Nigeria y Pakistán). ¿El resultado? “Once recomendaciones para trabajar en el empoderamiento y la rendición de cuentas en entornos frágiles, afectados por conflictos o violencia“.

Son solo seis páginas de recomendaciones para los donantes que buscan apoyar cosas buenas en algunos de los lugares más complicados y peligrosos del mundo. Pero para aquellos para quienes incluso eso es demasiado largo para ser leído, aquí hay algunos puntos destacados:

1.‘Piense detenidamente sobre el lenguaje más apropiado”: ha sido útil en algunos casos utilizar un lenguaje con menos carga política para transmitir mensajes similares; por ejemplo, hablar sobre “trabajar juntos” en lugar de “acción colectiva” o “crear un cambio positivo en la vida de las personas” en lugar de “empoderamiento”. También ha ayudado a ser lo más específico posible sobre lo que se está avanzando “. Sigue leyendo

Enfoques adaptativos en el desarrollo de capacidades en evaluación


Siguiendo con nuestra serie sobre enfoques adaptativos, Kristie A. Thomas, publicó en el blog de la AEA el siguiente post: “Semana ToE TIG: aplicación de un marco de cambio adaptativo a la enseñanza de la evaluación” (18 de febrero de 2020)

Kristie explicaba cómo usar el cambio adaptativo para informar un enfoque de desarrollo de capacidades en evaluación, reflejado en los desafíos que a menudo encuentra cuando enseña la evaluación (por ejemplo, ansiedad, resistencia o enfado de los estudiantes con algunas partes del curso; creencia de que la evaluación es inútil o incluso perjudicial).

Abordar estos desafíos requiere un marco de cambio adaptativo. En otras palabras, si el curso  expone a los participantes los materiales didácticos, pero sin prestar atención a sus actitudes y normas sobre la evaluación, es poco probable que salgan con una comprensión sólida de los materiales o una apreciación de su importancia.

Se sugieren varias estrategias para combatir estas actitudes y normas: Sigue leyendo

Evaluando para la gestión adaptativa


En relación a los enfoques adaptativos, desde el sitio “BetterEvaluation” nos ofrecen los “Desafíos para usar la evaluación para la gestión adaptativa“:

Teorías de cambio pobremente conceptualizadas

• Falta de entorno adecuado para llevar a cabo procesos de cambio.

• Capacidad del equipo del programa para actividades de evaluación.

• Capacidad de los directivos para la gestión adaptativa, por ejemplo, (1) la capacidad de gestionar cuando hay niveles más altos de incertidumbre, (2) la capacidad de tomar (suficientemente buenas) decisiones con datos incompletos que pueden no cumplir con todos los estándares de calidad Sigue leyendo

Carrera (no tan) profesional en la ayuda al desarrollo


 

Y relacionado con nuestros pasados posts sobre la “Carrera profesional” o “Carrera no profesional” (como lo podamos/queramos llamar desde cada una de nuestras “experiencias vitales”), desde el post de Duncan Green “Los mejores consejos para construir una carrera en ayuda y desarrollo” (12 de febrero de 2020), nos cuenta Duncan que presidió un gran panel sobre este tema en la London School of Economics. Los oradores procediían de grandes donantes: bilaterales como el DFID y USAID, bancos regionales como el BAD y el BERD, y el  Banco Mundial para agregar la visión multilateral, y desde todas las etapas de sus carreras, pero sus consejos se se podrían aplicar al resto del sector de ayuda y desarrollo.

Se les pidió que dieran sus mejores consejos. Es interesante porque este post ha sido contestado por una voz desde el sur cuestionando algunos de los planteamientos, pero ya hablaremos de ello en otro momento.

1. En el post de Duncan había una selección de consejos:

Coraje, humildad y brújula moral: no se trata solo de calificaciones extraordinarias, sino del tipo de persona que eres. Te enfrentarás a momentos de miedo: abrázalos; serás llamado por arrogancia, escucha y aprende. Y no abandones tu brújula moral: es, después de todo, al menos en parte, por lo que buscamos trabajo en este extraño sector. Sigue leyendo

Gestionar mejor: lo que tod@s podemos hacer para contribuir al éxito de la ayuda al desarrollo


Relacionado con nuestros posts pasados sobre la rendición de cuentas, interesante publicación “Gestionar mejor: lo que tod@s podemos hacer para contribuir al éxito de la ayuda” de Dan Honig (5 de febrero de 2020) en el que parte de la idea o afirmación de que “la gestión a través de controles sólo de arriba hacia abajo, se convierte en un objetivo en sí mismo, socavando el éxito de los proyectos”. Estos controles poco útiles a menudo surgen de la necesidad de tener en cuenta únicamente: (1) el rendimiento; (2) los ciclos políticos o las legislaturas o (3) las juntas ejecutivas, que inducen a las agencias a (a) ejercer controles estrictos de los procesos y (b) orientar los proyectos hacia lo que se puede medir y reportar.

El libro de Dan Honig 2018, “Navigation by Judgment“, presenta (1) datos empíricos cuantitativos de una base de datos de 14,000 proyectos y (2) evidencia cualitativa de ocho estudios de casos en apoyo de esta afirmación. Escribió el libro en parte porque supuso que sería útil mostrar a las agencias de ayuda al desarrollo y a los decisores, datos empíricos que demostraban el problema: que el primer paso para cambiar era el reconocimiento. Pero después de hablar sobre su libro con las agencias y decisores, estuvo seguro de que si bien su diagnóstico de 2018 fue correcto, su teoría del cambio fue totalmente errónea.

Las personas que trabajan en las agencias de desarrollo, desde el personal de campo hasta los gerentes senior, en general (1) ya comprenden la naturaleza del problema. (2) Han experimentado de primera mano la tensión entre la presentación de informes y el rendimiento, (3) se han enfrentado a las limitaciones que les impiden hacer lo que, en su opinión profesional, es más probable que logre los objetivos de su agencia (que comparten en gran medida). No necesitan datos empíricos para decirles lo que viven todos los días. Sorprendentemente, los decisores están de acuerdo también. Como decía un director ejecutivo del Banco Mundial: “Sé que cuando establezco objetivos, no obtengo lo que quiero. Pero es la única forma en que puedo mover el sistema, la única forma en que puedo dirigir; si renuncio a esa palanca, ¿qué tengo? ¿Por qué estoy aquí? ” Sigue leyendo