Let’s improve the use and influence of evaluations


 We revisit Betterevaluation’s «Seven Strategies for Improving Evaluation Use and Influence» where (the peerless) Patricia Rogers tells us What can we do to support the use of evaluation? How can we support the constructive use of the findings and evaluation processes?

This is a long-standing challenge. Some may object that the use of evaluations has been the focus of discussion for more than 40 years, and it’s not something that is currently fully working. This will continue for a few more years if we are not aware of the challenges and assume the correct mitigation strategies.

That’s what the Patricia Rogers’ list of strategies for improving evaluation use can tell us about:

1. Let’s Identify the intended users and intended uses of the evaluation from the start.

When we identify the intended users, let’s be as specific as possible, and let’s be clear about who the main intended evaluation users are.

2. Let’s anticipate barriers to use. Some examples:

Sigue leyendo

Conscientes de las barreras para el uso evaluativo


Revisamos de nuevo Estrategias para mejorar el uso y la influencia de la evaluaciones (I y II) en torno a lo presentado por Betterevaluation en «Siete estrategias para mejorar el uso y la influencia de la evaluación«, donde (la sin par) Patricia Rogers nos cuenta ¿Qué podemos hacer para apoyar el uso de la evaluación? ¿Cómo podemos apoyar el uso constructivo de los hallazgos y los procesos de evaluación?

Este es un desafío desde hace mucho, demasiado tiempo: el uso de la evaluación ha sido el centro de discusión durante más de 40 años (iii más de 40 iii). Seguirá sin duda por algunos más si no somos más conscientes de los retos para el uso y asumimos estrategias de mitigación.

De eso trata esta lista de estrategias para mejorar el uso de las evaluaciones:

1. Identifiquemos l@s usuari@s previst@s y los usos previstos de la evaluación desde el principio

Cuando identifiquemos a l@s usuari@s previst@s, seamos lo más específicos posibles, tengamos claro quiénes son l@s principales usuari@s previst@s.

Sigue leyendo

La gestión del conocimiento personal de l@s evaluador@s


La gestión del conocimiento personal (en inglés Personal knowledge management /  PKM):

(1) Es un proceso que una persona utiliza (a) para recopilar, clasificar, almacenar, buscar, recuperar, compartir, internalizar e integrar conocimientos en sus actividades diarias,  y (b) la forma en que estos procesos respaldan sus actividades laborales. (Grundspenkis 2007 y Wright 2005)

(2) Es un enfoque de abajo hacia arriba para la gestión del conocimiento (KM) y una respuesta a la idea de que l@s trabajador@s del conocimiento deben ser responsables de su propio crecimiento y aprendizaje. (Pollard 2008)

Sigue leyendo

Una fundamentación del desarrollo de la capacidad de evaluación en la teoría de sistemas


Tras una decada de trabajo en Desarrollo de Capacidades en Evaluacion (ECD) en el Instituto Alemán para la Evaluación del Desarrollo (DEval), algunos de los miembros del proyecto Focelac+ (Sarah D. Klier, Raphael J. Nawrotzki, Nataly Salas-Rodríguez y Sven Harten), con la colaboracion de especialistas en teoría de sistemas (Charles B. Keating y Polinpapilinho F. Katina), han escrito un articulo (abril de 2022) sobre la práctica en ECD, fundamentarla desde la teoría de sistemas. El artículo Fundamentación del desarrollo de la capacidad de evaluación en la teoría de sistemas ilustra cómo aquellos que trabajen en el desarrollo de la capacidad en evaluación pueden utilizar la teoría de sistemas como una herramienta conceptual para obtener una mejor comprensión del funcionamiento y las interrelaciones presentes dentro de un sistema de evaluación determinado. Este post es un extracto de ese artículo.

Si bien el “pensamiento sistémico” es popular en el contexto del desarrollo de capacidades y la evaluación, no hay una comprensión profunda acerca de los beneficios de emplear la teoría de sistemas en el desarrollo de capacidades de evaluación. La teoría de sistemas proporciona una orientación útil para el trabajo relacionado con sistemas complejos (por ejemplo, sistemas de evaluación nacional).

Este artículo ilustra cómo l@s evaluador@s y profesionales del desarrollo de capacidades de evaluación pueden utilizar la teoría de sistemas como una herramienta conceptual para obtener una mejor comprensión de los aspectos funcionales y las interrelaciones presentes dentro de un sistema de evaluación dado. Específicamente, la perspectiva de la teoría de sistemas puede ayudar a dilucidar las razones del éxito o fracaso de un determinado programa o actividad de desarrollo de capacidades de evaluación. Con el objetivo de motivar a l@s evaluador@s y profesionales del desarrollo de capacidades de evaluación a utilizar la teoría de sistemas en su trabajo, este artículo presenta un marco de teoría de sistemas para el desarrollo de capacidades de evaluación y ofrece ejemplos prácticos de cómo se puede adoptar.

Sigue leyendo

El pensamiento evaluativo para transformar la evaluación  y las organizaciones


Uno de los roles de la función de evaluación es el desarrollo de pensamiento evaluativo a todos los niveles posibles.

I.) El pensamiento evaluativo (PE)

(1) es un enfoque disciplinado para la indagación y la práctica reflexiva que nos ayuda a emitir juicios sólidos, basados en evidencias, como un hábito.

(2) no es aplicable sólo en/a la evaluación (o unidades de evaluación) sino en toda la organización y fases de la gestión,

(3) tiene una dimensión de desarrollo de capacidades a nivel individual, organizacional y estructural

Thomas Archibald y su equipo han definido “Pensamiento evaluativo» de la siguiente manera:

(1) aplica el pensamiento crítico en el contexto de la evaluación,

(2) motivado por (a) una actitud de curiosidad y (b) una creencia en el valor de la evidencia, que

(3) implica (a) identificar supuestos, (b) plantear preguntas reflexivas, (c) buscar una comprensión más profunda

(4) por medio de (a) la reflexión y (b) la toma de perspectiva, e (c) informar las decisiones en preparación para la acción». Sigue leyendo

Leon Festinger y la Teoría de la disonancia cognitiva


Leon Festinger (Nueva York, 1919-Nueva York, 1989) fue un psicólogo social estadounidense. Fue autor de la Teoría de la disonancia cognitiva (1957), obra en la que expone su teoría de la disonancia cognitiva, que revolucionó el campo de la psicología social, y que ha tenido múltiples aplicaciones en áreas tales como (a) la motivación, (b) la dinámica de grupos, (c) el estudio del cambio de actitudes y (d) la toma de decisiones.

En psicología, el término disonancia cognitiva hace referencia a la tensión o desarmonía interna del sistema de ideas, creencias y emociones (cogniciones) que percibe una persona que tiene al mismo tiempo dos pensamientos que están en conflicto, o por un comportamiento que entra en conflicto con sus creencias. Es decir, el término se refiere a la percepción de incompatibilidad de dos cogniciones simultáneas, todo lo cual puede impactar sobre sus actitudes. Sigue leyendo

¿Cuándo la gestión del conocimiento genera valor organizacional?


Algunos ejemplos de actividades de Gestión del Conocimiento (GC) que, cuando se realizan de manera óptima, pueden generar el mayor valor para nuestras organizaciones: desarrollo de capacidad, buenas prácticas y lecciones aprendidas,  productos del conocimiento, colaboración y tecnología colaborativa.

1.Desarrollo de capacidad

  • Desarrollar la capacidad de l@s colegas para implementar actividades de  Gestión del Conocimiento

2.Buenas prácticas y lecciones aprendidas

  • Captura de buenas prácticas y lecciones aprendidas
  • Reutilizar y adaptar lecciones y experiencias para nuevas actividades, proyectos o programas

Sigue leyendo

Revisando las implicaciones de la pandemia para l@s evaluador@s


Reviso el post de hace ahora casi dos años de MQPatton del 23 de Marzo de 2020, Implicaciones en la evaluación de la actual pandemia,  MQPAtton nos da su visión sobre la pandemia y las implicaciones que puede tener para la evaluación. Esta era su opinión sobre dónde estabamos y hacia dónde deberíamos ir como evaluador@s:

  1. Adaptemos ahora los planes y diseños de evaluación.
  2. Seamos proactivos: esto no va a pasar rápidamente.
  3. Centrémonos en el uso, no en nosotr@s.
  4. Reglas de datos en tiempo real.
  5. Consideremos el estándar de rigor «suficientemente bueno». Separarse del rigor como un estándar metodológico absoluto.
  6. Todo cambia en una crisis. Abraza el cambio, no te resistas.
  7. Participa en el pensamiento sistémico.
  8. Piensa globalmente, actúa localmente.
  9. Prepárate para defender el valor de la evaluación.
  10. Tengamos conocimiento, seamos un verificadores de hechos.
  11. Modela el pensamiento evaluativo sistemático.
  12. Aboga por mejores datos.
  13. Destaquemos la necesidad de una transformación hacia la sostenibilidad global a más largo plazo.
  14. Sigue aprendiendo.
  15. Apoyarse mutuamente como comunidad de evaluación.

Sigue leyendo

Escucha y activa


Escuchar, argumenta Erich Fromm, “es un arte, como la comprensión de la poesía” y ofrece algunas pautas para dominar el arte de la comprensión desinteresada: (1) la concentración completa del oyente, (2) librarse de ansiedad, (3) imaginación que funcione libremente y que pueda expresarse en palabras y (4) la capacidad de empatía con otra persona para tratar de comprender a otr@.

La escucha activa es una técnica, una forma / estrategia específica comunicación y/o un “arte” que: 

(1) requiere “disponibilidad, interés por la persona, comprensión del mensaje, espíritu crítico y prudencia en los consejos”,

(2) consiste en una forma de comunicación que ofrece disponibilidad y muestra interés por la persona que habla y demuestra que el oyente le ha entendido.

(3) no se limita a oír y dejar hablar al interlocutor sin interrumpir su discurso, sino que necesita de una atención física, psicológica y verbal, estar totalmente concentrados en el mensaje que el otro individuo intenta comunicar.

(4) se refiere a la habilidad de escuchar no sólo (a) lo que la persona está expresando directamente, sino también los (b) sentimientos, ideas o pensamientos que subyacen a lo que se está diciendo. Sigue leyendo

Evaluador/a no hay camino, se hace camino al andar


Quedarse en el camino significa salir de este campo de la evaluación.

En mi carrera profesional en evaluación, quizás como much@s otr@s evaluador@s que no se quedaron en el camino, me he movido en tierra de nadie, y me pregunto si no soy visto como «pragmático» para la academia y un «teórico» en la práctica. Me sigue haciendo gracia que los «profesionales» en el terreno (a l@s que llaman «practitioners») te llamen «teórico» como algo despectivo. Con media sonrisa pienso: «no hay mejor práctica que una buena teoría»…pero tú que me llamas teórico, tú, de tu práctica no saco más teoría que la del caos…y claro ni se nos ocurra hablar a esos practitioners de pacotilla sobre la teoría de la complejidad: si lo hacemos seremos etiquetados «además» de rebuscados, embrollados y confusos…

Por suerte o desgracia he estado en diferentes entornos de trabajo siempre en relación a la evaluación (como investigador, gestor o evaluador externo): universidad, administración pública, organismos internacionales, organizaciones locales, consultoría independiente. Ese «caminante no hay camino, se hace camino al andar» (no sé bien si deseado o impuesto o ambos), me ha convertido en un nómada, ambulante, errante, itinerante, vagabundo…y eso me ha dado la posibilidad de reforzar mi independencia.

Sigue leyendo