Síntesis de evaluaciones: tesoros, oportunidades y retos

Posted by

0


Fuente

Seguimos hablando de «Síntesis» con el documento «Compendio revisado de métodos de evaluación (2019-2020)», del «Grupo de trabajo de métodos» del Grupo de Evaluación de Naciones Unidas (UNEG), donde encontramos que la síntesis de evaluaciones intenta (1) combinar el conocimiento de evaluación existente y los hallazgos relevantes para un tema en forma de nuevos productos de conocimiento, para (2) apoyar una mejor difusión de los resultados de las evaluaciones y (3) ayudar en el diseño de nuevas evaluaciones. (4) Aborda el desafío de la “sobrecarga de información”, (5) entregando productos que destilan evidencia relevante para la toma de decisiones y (6) se lleva a cabo siguiendo un proceso bien estructurado.

A continuación se exponen ventajas, desventajas, oportunidades y retos:

1.Ventajas

• Ahorro en costos directos e indirectos (tanto para evaluador@s como para los grupos evaluados).

• Se enfoca en analizar factores estructurales / comunes de éxito / fracaso.

• Aumenta la percepción de solidez a medida que se basa en hallazgos anteriores, en lugar de comenzar desde cero. Sigue leyendo →

Síntesis de evaluaciones: concepto y opciones

Posted by

1


Fuente

Desde la plataforma BetterEvaluation comparten este post «Sintetizar datos a través de evaluaciones«, donde se presentan enfoques y técnicas con el objetivo de responder a preguntas sobre un tipo de intervención en lugar de sobre un solo caso, respondiendo a preguntas como «¿Funcionan estos tipos de intervenciones?» o «¿Para quién, de qué manera y en qué circunstancias funcionan?» La tarea consiste en localizar la evidencia (que a menudo implica búsquedas bibliográficas en bases de datos, con especial énfasis en la búsqueda de estudios inéditos), evaluar su calidad y relevancia para decidir si incluirla o no, extraer la información relevante y sintetizarla. Las diferentes opciones utilizan diferentes estrategias y tienen diferentes definiciones de lo que constituye evidencia creíble.

Opciones para sintetizar procesos y/o productos evaluativos:

  1. Lecciones aprendidas del proceso evaluativo: las lecciones aprendidas pueden desarrollarse a partir del proceso de evaluación a medida que los evaluadores reflexionan sobre sus experiencias al realizar la evaluación.
  2. Mejor síntesis de evidencia: una síntesis que, como una síntesis realista, se basa en una amplia gama de evidencia (incluidos estudios de casos individuales) y explora el impacto del contexto, y también se basa en un enfoque iterativo y participativo para construir y usar una base de conocimientos. .
  3. Revisión sistemática: una síntesis que adopta un enfoque sistemático para buscar, evaluar, extraer y sintetizar evidencia de múltiples estudios. (1) Metanálisis, (2) metaetnografía y (3) síntesis realista son diferentes tipos de revisión sistemática.

Sigue leyendo →

Evaluación del desarrollo de capacidades

Posted by

1


Fuente

Siguiendo nuestra sección de «desarrollo de capacidades«, y más concreto «desarrollo de capacidades y FAO«, en la línea del «Mejorando las prácticas de FAO para el apoyo del Desarrollo de Capacidades de los países miembros» (FAO, 2012), en el documento «Marco de evaluación del desarrollo de capacidades» (también) de la FAO de 2019 , se indica que el desarrollo de la capacidades es una modalidad fundamental del apoyo de la cooperación internacional en los países en los que trabaja. La mayoría de las intervenciones brindan algún tipo de apoyo para el desarrollo de capacidades que abarca los niveles individual, institucional y del entorno propicio, mientras que aproximadamente una cuarta parte se centra en capacitaciones individuales. En los informes de evaluación, hay evidencias concretas de que se han desarrollado capacidades en determinados grupos destinatarios. Sin embargo, es más difícil identificar los impactos a largo plazo y de mayor nivel, como en el entorno de políticas, la mejora de la estructura institucional y los sistemas de conocimiento.

A. Algunos factores que hicieron que el proceso de desarrollo de capacidades fuera exitoso fueron:

(1) mayor uso de la experiencia local y las instituciones nacionales,

(2) trabajar en múltiples niveles de influencia,

(3) evaluación participativa de las necesidades a nivel individual e institucional, Sigue leyendo →

Los siete secretos de un buen seguimiento y evaluación

Posted by

1


Fuente

Jess Dart de Clear Horizon Consulting  comparte sus siete secretos para un buen monitoreo y evaluación. Aquí están las ideas ahora no tan secretas para ayudar a mejorar su seguimiento y evaluación (M&E):

  1. Muchas iniciativas de M&E fracasan, así que adoptemos el M&E como algo que primero debe satisfacer las necesidades de nuestra propia organizació.
  2. ¡Un buen seguimiento y evaluación es deliberado! Fijemos, acotemos, el alcance bien.
  3. ¡Desarrollemos un modelo lógico de programa de manera participativa desde el principio! Generemos apropiación y claridad
  4. Desarrollemos preguntas de evaluación REALES para enmarcar nuestro plan de M&E, ¡y no muchas preguntas!
  5. Elijamos métodos mixtos para contar la historia de su programa
  6. Desarrollemos la capacidad del personal de nuestra organización en M&E: es el trabajo de todos
  7. Empleemos el arte de la gestión japonesa para informar: ¡comencemos pensando en el final, con el final en mente!

Sigue leyendo →

Impacto de COVID-19 en las evaluaciones de acción humanitaria

Posted by

0


Fuente

Cuando se cumple un año ya del comienzo, y siguiendo con nuestra serie sobre «evaluación y COVID» o «COVID19» interesante este borrador sobre «Prácticas en evolución en la evaluación de la acción humanitaria: desafíos pasados, presentes y futuros» de Scott Chaplowe, Ann Marie Castleman y Minji Cho

COVID-19 ha exacerbado las necesidades humanitarias en todo el mundo. A medida que las agencias humanitarias adaptan su programación para satisfacer estas necesidades emergentes, los enfoques de evaluación también deben adaptarse y evolucionar. , Ha habido una serie de publicaciones, orientaciones, declaraciones y protocolos relacionados con la evaluación en respuesta al COVID-19 (por ejemplo, ALNAP, 2020; Evaluation in Crisis, 2020; Patton, 2020; PNUD, 2020; UNFPA, 2020). A continuación se resumen algunas de las consideraciones clave para la Evaluación de la Acción Humanitaria (EAH) relacionadas con COVID-19 identificadas por organizaciones humanitarias:

1 No hacer daño. La crisis ha subrayado este principio en términos de los riesgos de salud y seguridad de la interacción cara a cara durante la recopilación de datos y de sobrecargar a las partes interesadas cuyos recursos y capacidades ya pueden verse afectados por la pandemia de COVID-19.

2 Análisis de evaluabilidad. Existe una mayor necesidad de análisis de contexto / riesgo para evaluar en qué medida se puede evaluar una intervención de manera confiable y creíble durante la crisis del COVID-19 (IED-OIOS, 2020; IEO / PNUD y OECD / DAC, 2020; PNUD, 2020; PMA, 2020; UNICEF, 2020)

3 Aplazamiento de la evaluación. El aplazamiento es una opción viable si los resultados de la evaluación seguirán siendo útiles para la toma de decisiones en un momento posterior, aunque se debe tener cuidado de evitar una acumulación de evaluaciones que resultará imposible de realizar (PNUD, 2020; PMA, 2020). . Sigue leyendo →

Pensamiento evaluativo para la evaluación transformadora

Posted by

0


Fuente

Siguiendo con nuestra serie sobre «Pensamiento evaluativo»,  exploramos el post de Thomas Archibald sobre «Habilidades de pensamiento crítico y evaluativo para la evaluación transformadora» y nos centramos en la parte referida a Pensamiento evaluativo para la evaluación transformadora

Según Patton, “La evaluación es una actividad. El pensamiento evaluativo es una forma de hacer negocios. Esta distinción es fundamental. Se deriva de estudios de uso de la evaluación. La evaluación es más útil, y realmente se usa, cuando el programa y la cultura organizacional manifiestan un pensamiento evaluativo «.

Thomas Archibald y su equipo han definido “Pensamiento evaluativo» de la siguiente manera:

(1) aplica el pensamiento crítico en el contexto de la evaluación,

(2) motivado por (a) una actitud de curiosidad y (b) una creencia en el valor de la evidencia, que

(3) implica (a) identificar supuestos, (b) plantear preguntas reflexivas, (c) buscar una comprensión más profunda

(4) por medio de (a) la reflexión y (b) la toma de perspectiva, e (c) informar las decisiones en preparación para la acción». Sigue leyendo →

Estrategias para mejorar el uso y la influencia de la evaluaciones (II)

Posted by

0


preparando el terreno

Fuente

Continuamos con nuestra sección sobre “Uso evaluativo“, con lo presentado por Betterevaluation en su segunda entrega de las «7 estrategias para mejorar el uso y la influencia de la evaluación» sugeridas por Patricia Rogers sobre ¿Qué se puede hacer para apoyar el uso de la evaluación? Ya comenzamos en el post anterior Estrategias para mejorar el uso y la influencia de las evaluaciones (I) y ahora seguimos con la lista de estrategias de Patricia Rogers para antes, durante y después de una evaluación, y acciones que pueden ser tomadas por diferentes personas involucradas en la evaluación:

  1. Seleccionemos formatos de informes de evaluación adecuados, ajustados a cada audiencia y garanticemos su accesibilidad

Hay muchas opciones nuevas para informar los hallazgos de las evaluaciones. Tomar las decisiones correctas puede aumentar la probabilidad de que otros actores conozcan los hallazgos y comprendan lo que significan y por qué son importantes. Es probable que se necesite una variedad de diferentes productos de conocimiento y procesos de informes durante el período de evaluación y después de su finalización formal. Estás muy documentados diferentes formas innovadoras de informar los resultados Sigue leyendo →

Estrategias para mejorar el uso y la influencia de las evaluaciones (I)

Posted by

3


Fuente

Siguiendo con nuestra sección sobre «Uso evaluativo«, traemos lo presentado por Betterevaluation en «Siete estrategias para mejorar el uso y la influencia de la evaluación«, donde Patricia Rogers nos cuenta ¿Qué se puede hacer para apoyar el uso de la evaluación? ¿Cómo pueden l@s evaluador@s, gestor@s de evaluación y otras personas involucradas o  relacionadas con las evaluaciones, apoyar el uso constructivo de los hallazgos y los procesos de evaluación?

Este es un desafío desde hace mucho tiempo: el uso de la evaluación ha sido el centro de discusión durante más de 40 años (y seguirá por algunos más)

Esto es parte de la lista de estrategias de Patricia Rogers para antes, durante y después de una evaluación, y acciones que pueden ser tomadas por diferentes personas involucradas en la evaluación.

1. Identificar l@s usuari@s previst@s y los usos previstos de la evaluación desde el principio

L@s recién llegad@s a la evaluación a menudo pasan directamente a elegir métodos para la recopilación de datos; L@s profesionales experimentad@s y aquell@s familiarizad@s con la extensa investigación sobre el uso de la evaluación saben la importancia de identificar l@s usuari@s y usos previstos desde el principio. Cuando identifique a l@s usuari@s previst@s, seamos lo más específico posible, tengamos claro quiénes son l@s principales usuari@s previst@s y consideremos si se puede utilizar la presentación pública de informes sobre los hallazgos, por ejemplo, para alentar a las organizaciones y equipos «propietarios» de las evaluaciones a responder a los hallazgos. Sigue leyendo →

La evaluación de la incidencia política

Posted by

0


La evaluación de la incidencia política evalúa el progreso hacia los resultados o los propios resultados obtenidos, por ejemplo tales como cambios en la política pública. Esto es diferente de análisis de las políticas públicas, que generalmente se ve en los resultados de la política, o la  evaluación de un programa, que evalúa si los programas o servicios directos han tenido éxito.

Incidencia política se esfuerza por influir en una política o programa, ya sea directamente o indirectamente, por lo tanto, la evaluación de la incidencia puede centrarse tanto en el proceso, como en los resultados de dicha influencia. Los evaluadores de la incidencia  tratan de comprender la medida en que los esfuerzos de la incidencia han contribuido al avance de una meta o la política. Lo hacen con el fin de aprender qué funciona y qué no lo hace, así como lo que funciona mejor con el fin de alcanzar los objetivos de la incidencia y mejorar los futuros esfuerzos de incidencia.

La autoevaluación en las organizaciones

Posted by

0


Fuente

Involucrar a las organizaciones en su propia auto-evaluación tiene grandes beneficios:

  • Promueve el aprendizaje de alta calidad
  • Contribuye al desarrollo de habilidades
  • Fomenta el desarrollo personal
  • Aumenta la confianza de los miembros, reduce el estrés y mejora la motivación de los miembros
  • Fomenta la participación en la organización, por lo que es ideal para las organizaciones que normalmente encuentran un poco incómodas las actividades en grupo o las tareas de organizaciones activas
  • Cuando se usa junto con el trabajo en grupo, puede ser una excelente manera de evaluar el papel personal y la contribución de uno en la experiencia del grupo y el proceso de aprendizaje.

Las autoevaluaciones organizacionales son una herramienta útil para los miembros/equipos/departamentos de la organización y pueden ayudar a los gerentes de la organización a comprender cómo piensan sus miembros/equipos. Pero no es una habilidad con la que nacemos, por lo que es importante establecer las condiciones necesarias para que tenga éxito.

Ser capaces de auto evaluarnos es una habilidad fundamental para aprender, mejorar y avanzar. Sin embargo, existen algunos retos para la autoevaluación que revisaremos, indicando también posibles soluciones o mitigaciones:

1.Subestimar el logro: los miembros tienden a infravalorar lo que han hecho.

2.Sobrestimar el logro: dan más peso a un trabajo de lo que realmente se merece. Sigue leyendo →