Una fundamentación del desarrollo de la capacidad de evaluación en la teoría de sistemas


Tras una decada de trabajo en Desarrollo de Capacidades en Evaluacion (ECD) en el Instituto Alemán para la Evaluación del Desarrollo (DEval), algunos de los miembros del proyecto Focelac+ (Sarah D. Klier, Raphael J. Nawrotzki, Nataly Salas-Rodríguez y Sven Harten), con la colaboracion de especialistas en teoría de sistemas (Charles B. Keating y Polinpapilinho F. Katina), han escrito un articulo (abril de 2022) sobre la práctica en ECD, fundamentarla desde la teoría de sistemas. El artículo Fundamentación del desarrollo de la capacidad de evaluación en la teoría de sistemas ilustra cómo aquellos que trabajen en el desarrollo de la capacidad en evaluación pueden utilizar la teoría de sistemas como una herramienta conceptual para obtener una mejor comprensión del funcionamiento y las interrelaciones presentes dentro de un sistema de evaluación determinado. Este post es un extracto de ese artículo.

Si bien el “pensamiento sistémico” es popular en el contexto del desarrollo de capacidades y la evaluación, no hay una comprensión profunda acerca de los beneficios de emplear la teoría de sistemas en el desarrollo de capacidades de evaluación. La teoría de sistemas proporciona una orientación útil para el trabajo relacionado con sistemas complejos (por ejemplo, sistemas de evaluación nacional).

Este artículo ilustra cómo l@s evaluador@s y profesionales del desarrollo de capacidades de evaluación pueden utilizar la teoría de sistemas como una herramienta conceptual para obtener una mejor comprensión de los aspectos funcionales y las interrelaciones presentes dentro de un sistema de evaluación dado. Específicamente, la perspectiva de la teoría de sistemas puede ayudar a dilucidar las razones del éxito o fracaso de un determinado programa o actividad de desarrollo de capacidades de evaluación. Con el objetivo de motivar a l@s evaluador@s y profesionales del desarrollo de capacidades de evaluación a utilizar la teoría de sistemas en su trabajo, este artículo presenta un marco de teoría de sistemas para el desarrollo de capacidades de evaluación y ofrece ejemplos prácticos de cómo se puede adoptar.

Sigue leyendo

Iniciativa de Evaluación Global (GEI): no sin «Impacto Colectivo»


Fuente

Continuando con el post «Comienzo de la Iniciativa de Evaluación Global (GEI)«, la GEI necesita de un enfoque de impacto colectivo, de otra forma será otra más de las iniciativas similares que existen, contribuyendo aún más a la dispersión y fragmentación de esfuerzos para el desarrollo de marcos y capacidades de seguimiento y evaluación (M&E) para promover el uso de evidencia en la toma de decisiones públicas, mejorar la rendición de cuentas y contribuir a lograr mejores resultados.

GEI es una asociación innovadora que reúne a una coalición amplia y diversa de gobiernos, organizaciones de desarrollo (inter) nacionales y locales y expertos en M&E para aunar recursos financieros y técnicos para coordinar y expandir los esfuerzos de M&E a nivel mundial.

El gran reto será hacer reales/efectivas palabras como «coalición», «coordinación» y «asociación innovadora», para que el GEI sea en la práctica diferente a otras tantas experiencias (de coalición, asociación, coordinación) que se quedaron en casi nada (bueno sí, consiguieron «aunar algunos recursos» pero poca sostenibilidad e impacto).

El concepto de impacto colectivo: (1) se articuló por primera vez en el artículo de Stanford Social Innovation Review en 2011, (2) se basa en la idea de que para que las organizaciones contribuyan a soluciones duraderas a los problemas sociales a gran escala, deben (a) coordinar sus esfuerzos y (b) trabajar juntos en torno a un objetivo claramente definido.

Recordemos que el «Impacto Colectivo» es el compromiso de un grupo de actores de diferentes sectores con una agenda común para resolver un problema social específico, utilizando una «forma estructurada de colaboración». He entrecomillado «colaboración» porque en mi experiencia, con cierto  «buenismo», se suelen dar por sentado que la colaboración es fácil, o que es gratis o que no necesita tiempo, ni compromiso(s), recursos o sacrificios («Buenismo», buenas palabras e intenciones, sobran, lo que falta en la práctica es ese «impacto colectivo«) Sigue leyendo

Comienzo de la Iniciativa de Evaluación Global (GEI)


Hoy da comienzo/se inaugura la Iniciativa de Evaluación Global (GEI) : una asociación global inclusiva para el desarrollo de marcos y capacidades de seguimiento y evaluación (M&E) (a) sostenibles y (b) apropiados por  los países para (i) promover el uso de evidencia en la toma de decisiones públicas, (ii) mejorar la rendición de cuentas y (iii) lograr mejores resultados.

Parte de la hipótesis de que una mejor evidencia contribuye a mejores políticas y, en última instancia, a mejorar la calidad de vida.

A nivel mundial, el 91 % de las estrategias nacionales de desarrollo de los países, aprobadas desde 2015, se refieren a la agenda 2030 y los Objetivos de Desarrollo Sostenible (ODS); sin embargo, de acuerdo con la Alianza Global para la Cooperación Efectiva para el Desarrollo, sólo el 35 % de ellos tienen datos y sistemas confiables para rastrear el progreso de sus políticas y programas.

En respuesta a esta brecha global en los sistemas y capacidades de M&E, GEI es una asociación que pretende (a) ser innovadora, (b) reunir a una amplia y diversa coalición de gobiernos, organizaciones de desarrollo (inter) nacionales y locales, y expertos en M&E para aunar recursos financieros y técnicos para coordinar y expandir los esfuerzos de M&E a nivel mundial.

«Ninguna institución tiene los recursos para abordar las brechas globales actuales en la capacidad de seguimiento y evaluación. Para abordar la escala de la necesidad se requerirán esfuerzos coordinados por amplias coaliciones y GEI es un paso en esa dirección, proporcionando una base sobre la que se puede construir. » – Alison Evans, vicepresidenta del Banco Mundial & Director General del Grupo de Evaluación Independiente Sigue leyendo

Modelo ADDIE para el diseño y ejecución de procesos de capacitación


El modelo ADDIE es un marco que lista procesos genéricos que utilizan diseñadores instruccionales y desarrolladores. Representa una guía descriptiva para la construcción de herramientas de formación y apoyo (como talleres) gracias al desarrollo de sus cinco fases que proceden de las iniciales de cada una de ellas en inglés:

  • Análisis
  • Diseño
  • Desarrollo
  • Implementación
  • Evaluación

ADDIE es el marco de un Sistema de Diseño Instruccional (SDI). La mayoría de los modelos actuales de la SDI son variaciones del proceso ADDIE.

Otros modelos incluyen el Dick y Carey y modelos ISD Kemp. El prototipado rápido es una alternativa de uso común de este enfoque; prototipado rápido es la idea de la revisión de retroalimentación continua o formativa, mientras se lleva a cabo la creación de materiales de instrucción. Este modelo se esfuerza para ahorrar tiempo y dinero por la captura de los problemas cuando todavía son fáciles de solucionar. Una expresión más reciente de prototipado rápido es SAM, por sus siglas en inglés (successive approximation model).

Las teorías de instrucción también juegan un papel importante en el diseño de materiales de instrucción. Teorías como el conductismo , el constructivismo , el aprendizaje social , y el cognitivismo ayudan a dar forma y definir el resultado de los materiales de instrucción. Sigue leyendo

Capacidades de Seguimiento y Evaluación al nivel institucional/organizacional


En el post Componentes de un sistema de seguimiento y evaluación mostramos una lista de 12 componentes de un sistema de Seguimiento y Evaluación (SyE)

Estos componentes han sido utilizados por ejemplo:

-Por el Banco Mundial para identificar componentes para un sistema de SyE nacional para gobiernos y socios (Gorgens & Kusek, 2009)

-En una herramienta de ONUSIDA y desarrollada para apoyar la implementación de una valoración del sistema nacional de SyE del VIH. El objetivo era facilitar una comprensión común de lo que se evalúa entre los diferentes actores involucrados en Seguimiento y Evaluación (SyE). La versión del libro de trabajo de Excel de la herramienta, que incluye cuadros de mando para mostrar los resultados de la evaluación y las acciones de mejora planificadas, se puede encontrar aquí. La guía detallada sobre cómo preparar e implementar dicha evaluación, utilizando la herramienta, se puede encontrar aquí.

A continuación los Componentes de un sistema de SyE: Sigue leyendo

Desarrollo de capacidades en evaluación: tendencias y principios


Siguiendo con el tema que ya hemos tocado en otros posts sobre el desarrollo y construcción de capacidades, en el post Desarrollo de capacidades: Tendencias emergentes, teníamos algunas tendencias emergentes para poner en práctica el desarrollo de capacidades. Si bien existe cierto consenso internacional sobre la nueva comprensión del desarrollo de capacidades, los enfoques operativos, los marcos y los métodos para poner en práctica del desarrollo de capacidades aún están tomando forma. Las siguientes pueden considerarse algunas tendencias emergentes:

  1. Del enfoque en aspectos simples y únicos hacia una perspectiva sistémica.
  2. De los  modelos fijos a una planificación flexible y soluciones específicas de la situación.
  3. De la transferencia de conocimiento al fortalecimiento de los procesos endógenos de creación de conocimiento.
  4. De la planificación fija hacia procesos adaptativos e incrementales de gestión
  5. Del taller al aprendizaje.
  6. De la ejecución externa a la facilitación
  7. De la medición cuantitativa de los resultados hacia enfoques más holísticos
  8. De soluciones rápidas al compromiso a largo plazo

Sigue leyendo

«Capacidad y Sistema» Nacional de Evaluación en la Agenda 2030


Parte de la Agenda 2030 y de la Agenda de Evaluación 2020 están enfocadas al desarrollo de la Capacidad Nacional de Evaluación (NEC) y de los Sistemas Nacionales de Evaluación (NES). Aquí tratamos de clarificar estos dos conceptos:

A. La Capacidad Nacional de Evaluación (NEC) es la capacidad colectiva del sistema de evaluación nacional (1) para lograr, alinear y mantener sus objetivos, estructura, procesos, cultura, capital humano y tecnología (2) para producir conocimiento evaluativo que informe prácticas y toma de decisiones para (3) mejorar la efectividad y la rendición de cuentas.

B. Un Sistema Nacional de Evaluación (NES) es (1) el conjunto de (a) instituciones, (b) personas y  (c ) actividades, junto con (d) las políticas, procedimientos y relaciones que los vinculan y guían, (2) involucrados en la demanda, oferta y uso de evaluación (3) para apoyar (a) la rendición de cuentas, (b) el aprendizaje y (c) la toma de decisiones. Sigue leyendo

Declaración de la plataforma BetterEvaluation frente al COVID-19


Esta es la Declaración de la plataforma BetterEvaluation frente al COVID-19 (Abril de 2020)

La pandemia de COVID-19 está transformando rápidamente nuestro mundo. Las personas, las comunidades y las organizaciones enfrentan enormes desafíos e incertidumbres. La crisis climática y los desastres naturales sin precedentes han puesto en tensión nuestros recursos limitados. Estos desafíos globales ponen en riesgo los Objetivos de Desarrollo Sostenible y amenazan el bienestar de las personas y el planeta. En BetterEvaluation creen que tienen un papel importante que desempeñar para responder a esta situación en desarrollo.

Trabajamos para apoyar una mejor evaluación a nivel mundial. Una buena evaluación ayuda a las personas a identificar la información que necesitan y darle sentido. Ayuda a informar las decisiones sobre qué hacer y cómo mejorar los resultados. Una buena evaluación es esencial para guiar el mejor uso de los recursos y para garantizar la rendición de cuentas y el aprendizaje. Durante esta pandemia y en el mundo posterior a la pandemia, nuestro trabajo es más importante que nunca.

Así es como están respondiendo: Sigue leyendo

Enfoques adaptativos en el desarrollo de capacidades en evaluación


Siguiendo con nuestra serie sobre enfoques adaptativos, Kristie A. Thomas, publicó en el blog de la AEA el siguiente post: «Semana ToE TIG: aplicación de un marco de cambio adaptativo a la enseñanza de la evaluación» (18 de febrero de 2020)

Kristie explicaba cómo usar el cambio adaptativo para informar un enfoque de desarrollo de capacidades en evaluación, reflejado en los desafíos que a menudo encuentra cuando enseña la evaluación (por ejemplo, ansiedad, resistencia o enfado de los estudiantes con algunas partes del curso; creencia de que la evaluación es inútil o incluso perjudicial).

Abordar estos desafíos requiere un marco de cambio adaptativo. En otras palabras, si el curso  expone a los participantes los materiales didácticos, pero sin prestar atención a sus actitudes y normas sobre la evaluación, es poco probable que salgan con una comprensión sólida de los materiales o una apreciación de su importancia.

Se sugieren varias estrategias para combatir estas actitudes y normas: Sigue leyendo

¿Y la carrera (no tan) profesional en la ayuda al desarrollo desde el «Sur Global»?


En mi anterior post «Carrera (no tan) profesional en la ayuda al desarrollo» hablaba de Duncan Green y algunos consejos para construir una carrera en el sector del desarrollo.

Makarand en su blog Development Debate, a través de su post «Entonces, ¿quieres trabajar en Desarrollo Internacional?«, replica a su amigo Duncan Green y nos viene a decir que si en el norte nos quejamos sobre la carrera profesional en el sector de la ayuda al desarrollo, en el sur global lo tienen peor.

Makarand consideró que el post de Duncan era demasiado «centrado en el Norte Global», así que decidió escribir sobre lo que significaría para l@s jóvenes del mundo en desarrollo hacer una carrera en el desarrollo internacional. Escribió el post sobre la base de lo que ha visto y experimentado en casi 12 años en Desarrollo Internacional, tras 14 años de trabajo en India.

Las opciones y las rutas para desarrollar una carrera en el desarrollo internacional difieren dependiendo de si perteneces al «mundo en desarrollo (Sur Global)» o al «mundo donante (Norte Global)». Sigue leyendo