La evaluación en la rendición de cuentas para resultados de planes estratégicos


Fuente

La función de evaluación puede reforzar el ciclo de gestión y planificación, mejorando la calidad del diseño y del sistema de seguimiento de los Planes Estratégicos de nuestras organizaciones.

A través de la Política de Evaluación y el Plan de Trabajo de evaluación de nuestras organizaciones se pueden fomentar las siguientes áreas de trabajo clave en la organización: (a) refuerzo del marco institucional en evaluación, (b) desarrollo de capacidades en evaluación (incluye fomento del pensamiento evaluativo y trabajo conjunto con equipos de planificación y seguimiento), (c) gestión del conocimiento y (d) la ejecución de diferentes tipos de evaluaciones. Desde estas áreas de trabajo se pueden apoyar los planes estratégicos de la organización:

1.Desarrollo y diseño del Plan Estratégico

1.1 Asegurar que existen sistemas para la incorporación en el diseño de los aprendizajes previos (desde sistemas de seguimiento, evaluaciones previas…) 

1.2 Mejorar la evaluabilidad desde el diseño: calidad del diseño, del seguimiento, del uso de la información de diseño y seguimiento, de la accesibilidad de las partes interesadas.

1.3 Apoyar a desarrollar y documentar teorías del cambio (TdC) y modelos de intervención para guiar el diseño y la implementación. TdC para asegurar que existe(n):

Sigue leyendo

Síntesis de evaluaciones: concepto y opciones


Desde la plataforma BetterEvaluation comparten este post “Sintetizar datos a través de evaluaciones“, donde se presentan enfoques y técnicas con el objetivo de responder a preguntas sobre un tipo de intervención en lugar de sobre un solo caso, respondiendo a preguntas como “¿Funcionan estos tipos de intervenciones?” o “¿Para quién, de qué manera y en qué circunstancias funcionan?” La tarea consiste en localizar la evidencia (que a menudo implica búsquedas bibliográficas en bases de datos, con especial énfasis en la búsqueda de estudios inéditos), evaluar su calidad y relevancia para decidir si incluirla o no, extraer la información relevante y sintetizarla. Las diferentes opciones utilizan diferentes estrategias y tienen diferentes definiciones de lo que constituye evidencia creíble.

Opciones para sintetizar procesos y/o productos evaluativos:

  1. Lecciones aprendidas del proceso evaluativo: las lecciones aprendidas pueden desarrollarse a partir del proceso de evaluación a medida que los evaluadores reflexionan sobre sus experiencias al realizar la evaluación.
  2. Mejor síntesis de evidencia: una síntesis que, como una síntesis realista, se basa en una amplia gama de evidencia (incluidos estudios de casos individuales) y explora el impacto del contexto, y también se basa en un enfoque iterativo y participativo para construir y usar una base de conocimientos. .
  3. Revisión sistemática: una síntesis que adopta un enfoque sistemático para buscar, evaluar, extraer y sintetizar evidencia de múltiples estudios. (1) Metanálisis, (2) metaetnografía y (3) síntesis realista son diferentes tipos de revisión sistemática.

Sigue leyendo

Evaluación del desarrollo de capacidades


Siguiendo nuestra sección de “desarrollo de capacidades“, y más concreto “desarrollo de capacidades y FAO“, en la línea del “Mejorando las prácticas de FAO para el apoyo del Desarrollo de Capacidades de los países miembros” (FAO, 2012), en el documento “Marco de evaluación del desarrollo de capacidades” (también) de la FAO de 2019 , se indica que el desarrollo de la capacidades es una modalidad fundamental del apoyo de la cooperación internacional en los países en los que trabaja. La mayoría de las intervenciones brindan algún tipo de apoyo para el desarrollo de capacidades que abarca los niveles individual, institucional y del entorno propicio, mientras que aproximadamente una cuarta parte se centra en capacitaciones individuales. En los informes de evaluación, hay evidencias concretas de que se han desarrollado capacidades en determinados grupos destinatarios. Sin embargo, es más difícil identificar los impactos a largo plazo y de mayor nivel, como en el entorno de políticas, la mejora de la estructura institucional y los sistemas de conocimiento.

A. Algunos factores que hicieron que el proceso de desarrollo de capacidades fuera exitoso fueron:

(1) mayor uso de la experiencia local y las instituciones nacionales,

(2) trabajar en múltiples niveles de influencia,

(3) evaluación participativa de las necesidades a nivel individual e institucional, Sigue leyendo

Estrategias para mejorar el uso y la influencia de la evaluaciones (II)


Continuamos con nuestra sección sobre “Uso evaluativo“, con lo presentado por Betterevaluation en su segunda entrega de las “7 estrategias para mejorar el uso y la influencia de la evaluación” sugeridas por Patricia Rogers sobre ¿Qué se puede hacer para apoyar el uso de la evaluación? Ya comenzamos en el post anterior Estrategias para mejorar el uso y la influencia de las evaluaciones (I) y ahora seguimos con la lista de estrategias de Patricia Rogers para antes, durante y después de una evaluación, y acciones que pueden ser tomadas por diferentes personas involucradas en la evaluación:

  1. Seleccionemos formatos de informes de evaluación adecuados, ajustados a cada audiencia y garanticemos su accesibilidad

Hay muchas opciones nuevas para informar los hallazgos de las evaluaciones. Tomar las decisiones correctas puede aumentar la probabilidad de que otros actores conozcan los hallazgos y comprendan lo que significan y por qué son importantes. Es probable que se necesite una variedad de diferentes productos de conocimiento y procesos de informes durante el período de evaluación y después de su finalización formal. Estás muy documentados diferentes formas innovadoras de informar los resultados Sigue leyendo

¿Cuál es la diferencia entre evaluación y pensamiento evaluativo?


Siguiendo con el post inicial sobre Pensamiento Evaluativo, y como se indica en el post “Pensamiento evaluativo: el corazón de la evaluación (significativa y útil)“, el pensamiento evaluativo:

(1) Se aplica de manera más amplia y está profundamente arraigado que las actividades/los procesos de evaluación.

(2) Está integrado en toda la organización y en todas sus operaciones. No se limita a un programa, un propósito, un punto en el tiempo.

(3) Está motivado por la curiosidad natural y las ganas de aprender y mejorar.

La evaluación es el “qué” y el pensamiento evaluativo es el “por qué”.

La evaluación requiere ciertas habilidades, recursos y capacidades. El pensamiento evaluativo también requiere ciertas actitudes, motivos y hábitos.

Es posible evaluar sin pensamiento evaluativo. Pero hacerlo a menudo es doloroso y sin sentido. Sigue leyendo

Criterios de evaluación del CAD en la práctica: éxito a partir de fracasos y malas prácticas


Comenzamos en el post anterior “La reforma criterios de evaluación del CAD: una oportunidad, los retos continúan” a hablar de la reforma de los criterios, y cómo esto implicaba oportunidades, aunque los viejos retos continúan, estos retos tienen que ver con su (I) propósito, (II) uso, (III) claridad y (IV) aplicabilidad·práctica”:

(I) Propósito de los criterios: En la práctica evaluativa, el propósito de los criterios de evaluación normalmente no está claro, ya que suelen verse como una imposición más que como soluciones alternativas para nuestro proceso de evaluación:

1. Normativo (imposición): Los criterios juegan un papel de apoyo (lentes o perspectivas alternativas para ver la intervención) PERO normalmente, “en la práctica”, se perciben con un papel normativo (obligatorio), es decir, no se entienden…

2. Perspectiva de silos (fragmentada / reduccionista). Los criterios se utilizan normalmente de forma reduccionista, aislada y como parte de un lenguaje y un mundo (el nuestro, es de l@s evaluador@s) en algunos momentos abstracto, complejo e ininteligible: Sigue leyendo

La evaluación en tiempo real en emergencias: ¿cómo?


Continuamos con el anterior post “La evaluación en tiempo real en emergenciasbasado en un resumen que hizo INTRAC sobre el tema, y compartimos algunas ideas sobre cómo se ejecuta una RTE. Hay algunas características de las Evaluaciones en Tiempo Real (RTE) que pueden ser diferentes a las de las evaluaciones más convencionales. Algunos de éstas son los siguientes (ver Cosgrave et al. 2009, Polastro 2012, Herson y Mitchell 2005):

Las RTE ejecutadas por organizaciones a título individual generalmente se llevan a cabo durante cortos períodos de tiempo, como 2-3 semanas. Esto se debe a que la intención es proporcionar retroalimentación en tiempo real que pueda ser accionada de inmediato. Los RTE a menudo son ejercicios ligero que lleva a cabo un equipo de evaluación de entre una y a cuatro personas, básicamente un número lo suficientemente pequeño como para caber dentro de un vehículo, ahora con COVID incluso sin necesidad de vehículo (pero hay que añadir algo de innovación e imaginación). El equipo puede ser interno, externo o una combinación. Debido a que generalmente se llevan a cabo en intervenciones humanitarias, los RTE tienden a ser más rápidos, flexibles y receptivos que los tipos de evaluación más tradicionales. Sigue leyendo

Participación de adolescentes en el monitoreo y evaluación


Haz clic para acceder a UNICEF_ADAP_GuidanceNote.pdf

En octubre de 2019 UNICEF ha publicado la nota de orientación sobre Participación de adolescentes en el monitoreo y evaluación (PA M&E)

Esta nota de orientación fue creada en respuesta a ese desafío, para ayudar al personal de UNICEF a determinar qué forma de PA M&E (1) puede dotar de mayor valor añadido; (2) cómo los adolescentes pueden participar de manera significativa, segura y ética en diferentes contextos; (3) qué cuestiones prácticas deberían ser consideradas al diseñar e implementar actividades participativas de M&E; y (4) qué herramientas y recursos se pueden usar para apoyar dicho proceso.

La nota de orientación es interactiva, lo que permite a los usuarios acceder a herramientas de soporte y orientación o navegar dentro del documento fácilmente. Su objetivo es ser un recurso práctico para el personal de UNICEF y por los socios de UNICEF. Sigue leyendo

El cambio estructural para #Eval4Action: barreras que hacen que nuestro deseo no sea realidad


En Gran #TwitterChat sobre #Eval4Action comenzaba con la pregunta: ¿Por qué la evaluación es un acelerador para lograr los ODS, incluso durante la crisis sanitaria y socioeconómica de COVID-19? Mis respuesta fueron:

La evaluación contribuye a la rendición de cuentas, el aprendizaje y la toma de decisiones basadas en la evidencia en apoyo de (a) la Agenda 2030 y los ODS y (b) de la respuesta #COVID19 a corto, mediano y largo plazo

La #evaluación puede fortalecer aprendizaje y rendición de cuentas para mejorar la relevancia, la coherencia, la eficacia, la eficiencia, la sostenibilidad y el impacto de los procesos hacia los #SDG, incluso durante la crisis sanitaria y socioeconómica #COVID19

 

Sin embargo, a esta altura del partido, algun@s presentimos ya que solo porque sepamos y comuniquemos (a) lo que tenemos que hacer, e incluso (b) cómo y cuándo se tienen que hacer los cambios, no significa que vayan a hacerse realidad las reformas estructurales para que la evaluación cumpla su teórica función social. Las barreras estructurales están ahí y no son fáciles de sortear.

Aquí algunas de las barreras que hemos ido anotando en este blog, que pueden también aplicarse a las barreras estructurales que no permiten que la función de evaluación cumpla su función social:  barreras (1) para el impacto colectivo, (2) para la colaboración, (3) para la coordinación, (4) para el aprendizaje institucional y la gestión del conocimiento: Sigue leyendo

Gran #TwitterChat sobre #Eval4Action


Hoy, la comunidad de evaluación internacional tuvimos un gran intercambio de ideas desde la campaña #Eval4Action. Tod@s somos aliados para lograr estos objetivos. Ha sido una experiencia trepidante al ritmo de este #TwitterChat sobre #Eval4Action No será fácil recopilar tanto, espero que lo hagan pronto, escuchemos.

A continuación las preguntas del #TwitterChat, lo que fueron mis respuestas, y añadiré más adelante algunas de las que considero mejores respuestas. Les animo a visitar el sitio de discusión.

Q1. El Secretario General de las Naciones Unidas ha lanzado una “Década de Acción” para acelerar el logro de los ODS para 2030. ¿Por qué la evaluación es un acelerador para lograr los ODS, incluso durante la crisis sanitaria y socioeconómica de COVID-19?

A.1.1 # La evaluación contribuye a la rendición de cuentas, el aprendizaje y la toma de decisiones basadas en la evidencia en apoyo de la Agenda 2030 y los ODS #Eval4Action #TwitterChat

A.1.2 La #evaluación contribuye a la rendición de cuentas, el aprendizaje y la toma de decisiones basadas en la evidencia en apoyo de la respuesta #COVID19 a corto, mediano y largo plazo Sigue leyendo