El (p)arte del Pensamiento Evaluativo


Retomamos las ideas de Thomas Archibald sobre «Habilidades de pensamiento crítico y evaluativo para la evaluación transformadora». Nos centramos en el «Pensamiento evaluativo para la evaluación transformadora«

Según Patton, “La evaluación es una actividad. El pensamiento evaluativo es una forma de hacer negocios. Esta distinción es fundamental. La evaluación es más útil y realmente se usa cuando el programa y la cultura organizacional manifiestan un pensamiento evaluativo”.

Thomas Archibald y su equipo definen el «Pensamiento evaluativo» como:

  1. Aplicar el pensamiento crítico en el contexto de la evaluación.
  2. Estar motivado por una actitud de curiosidad y una creencia en el valor de la evidencia.
  3. Implicar la identificación de supuestos, plantear preguntas reflexivas y buscar una comprensión más profunda.
  4. Utilizar la reflexión, la toma de perspectiva e informar las decisiones en preparación para la acción.

Sigue leyendo

Algunos retos para la evaluación de programas


Algunos retos para la evaluación de programas en el presente y futuro pasan por adaptarse a un entorno cada vez más complejo y dinámico. Aquí hay algunos aspectos clave de este desafío:

  1. Medición de Impacto a Largo Plazo: Evaluar el impacto sostenible de los programas en contextos cambiantes sigue siendo un desafío significativo.
  2. Integración de Nuevas Tecnologías: La incorporación de tecnologías avanzadas como la inteligencia artificial y el análisis de big data puede mejorar la precisión y eficiencia de las evaluaciones, pero también requiere nuevas habilidades y enfoques.
  3. Relevancia Estratégica: Asegurar que los temas evaluados sean estratégicamente relevantes y alineados con los objetivos a largo plazo de las organizaciones es crucial para maximizar el impacto de las evaluaciones.
  4. Implementación de Recomendaciones: Las recomendaciones de las evaluaciones a menudo no se implementan de manera efectiva, lo que limita su capacidad para generar cambios significativos.
  5. Coordinación y Colaboración: Mejorar la coordinación entre los departamentos de evaluación y otros departamentos dentro de las organizaciones es esencial para evitar duplicidades y asegurar una utilización eficiente de los recursos.

Abordar estos retos requiere un enfoque holístico y adaptativo, que combine la innovación tecnológica con una comprensión profunda de los contextos locales y las necesidades estratégicas de las organizaciones.

 La Importancia de Escribir sobre Evaluación y Aprendizaje en Español en la Era de la IA


Soy un nostálgico, quiero seguir pensando que escribir posts en español sobre evaluación y aprendizaje en el sector de la ayuda internacional sigue teniendo múltiples beneficios, tanto a nivel personal como colectivo:

A Nivel Personal

  1. Gestión del Conocimiento Personal:
    • Reflexión y Aprendizaje: Escribir te permite reflexionar sobre tus experiencias y aprendizajes, consolidando tu conocimiento y mejorando tu práctica profesional.
    • Desarrollo de Habilidades: La escritura regular mejora tus habilidades de comunicación y pensamiento crítico, esenciales para un evaluador.
    • Documentación: Mantener un registro escrito de tus ideas y experiencias facilita la revisión y el análisis a lo largo del tiempo, ayudándote a identificar patrones y áreas de mejora.
  2. Visibilidad y Re-conocimiento:
    • Marca Personal: Publicar contenido te posiciona como un conocedor (no se si «expert@» es una palabra adecuada?) tu campo, aumentando tu visibilidad y tu reconocimiento (no porque te lo vayan a reconocer sino porque – quizas – te «re-conozcan» en algun momento).
    • Red de Contactos: Atraerás a otros profesionales interesados en los temas tratados, ampliando tu red de contactos y oportunidades de colaboración.

A Nivel Colectivo

Sigue leyendo

Liderazgo transformacional o jerarquía


Liderazgo necesario para pasar de jerarquía a una organización equilibrada de trabajo en red:

    • Para un trabajo organizacional en red equilibrado, se necesita un liderazgo transformacional que fomente la colaboración, la innovación y la transparencia. Los líderes deben ser facilitadores en lugar de controladores, promoviendo la autonomía y la auto-gestión dentro de los equipos. Es crucial que estos líderes comuniquen una visión compartida y desarrollen nuevos líderes a través de la capacitación y la mentoría.

    Razones por las que las organizaciones de cooperación al desarrollo tienden a la jerarquía:

      • A pesar de sus principios de participación y horizontalidad, estas organizaciones tienden a la jerarquía debido a la necesidad de control y estabilidad. La jerarquía proporciona una estructura clara y definida, lo que facilita la supervisión y la rendición de cuentas. Además, la planificación rigurosa y a largo plazo es más fácil de implementar en una estructura jerárquica.
      • La baja rendición de cuentas interna puede deberse a la falta de transparencia y confianza dentro de la organización. En una estructura jerárquica, la información tiende a ser confidencial y compartida solo con quienes tienen la necesidad de saber, lo que puede limitar la rendición de cuentas inerna. Además, la resistencia al cambio y la desconfianza hacia los líderes pueden contribuir a esta problemática.

      Cómo conseguir más coherencia y aumentar la rendición de cuentas interna de manera constructiva y empática:

      Sigue leyendo

      De la Jerarquía a la Redarquía: Transformando las Organizaciones


      1. Introducción

      En el mundo organizacional actual, las estructuras tradicionales están siendo desafiadas por nuevos paradigmas que promueven la colaboración y la agilidad. Dos de estos paradigmas son la jerarquía y la redarquía. Mientras que la jerarquía se basa en el control centralizado y la planificación rigurosa, la redarquía fomenta la autonomía, la innovación y la transparencia. Este post explora en estos dos enfoques, sus implicaciones para las organizaciones de desarrollo y cooperación internacional, y cómo las organizaciones pueden transitar de un paradigma a otro.

      2. Descripción y Comparación de Paradigmas

      Las organizaciones pueden operar bajo dos paradigmas principales: la jerarquía y la redarquía. A continuación, se presenta una comparación detallada de ambos paradigmas:

      AspectoJerarquía (1)Redarquía (2)
      EnfoqueIndividuoColectivo
      ControlControl centralizadoAutonomía y auto-gestión
      PlanificaciónRigurosa y a largo plazoAgilidad y adaptabilidad
      InnovaciónLimitada y controladaFomentada y experimental
      InformaciónPrivacidad y confidencialidadTransparencia y apertura

      Sigue leyendo

      Psicología Social vs. Organizacional: Claves del Comportamiento


      En este post, exploraremos cómo la psicología social y la psicología organizacional desentrañan las complejas interacciones que moldean nuestras vidas tanto en la sociedad como en el trabajo. Desde las teorías más influyentes hasta los hitos históricos y los principales autores. Además, analizaremos cómo estas dos disciplinas se influyen mutuamente y las oportunidades de sinergia que ofrecen.

      (a) Definición

      Psicología Social: La psicología social es una rama de la psicología que estudia cómo los pensamientos, sentimientos y comportamientos de los individuos son influenciados por la presencia real, imaginada o implícita de otras personas. Se enfoca en entender las interacciones sociales y cómo estas afectan la conducta humana.

      Psicología Organizacional: La psicología organizacional, también conocida como psicología del trabajo, estudia el comportamiento humano en el contexto de las organizaciones. Se enfoca en mejorar la eficiencia y el bienestar de los empleados y la organización en su conjunto.

      (b) Aspectos Comunes y Diferentes

      Aspectos Comunes:

      • Ambas disciplinas estudian el comportamiento humano en contextos sociales.
      • Utilizan métodos científicos para investigar y entender las interacciones humanas.
      • Se interesan por la influencia de los grupos en el comportamiento individual.

      Aspectos Diferentes:

      • Psicología Social: Se centra en una variedad de contextos sociales, no limitándose a entornos laborales.
      • Psicología Organizacional: Se enfoca específicamente en el comportamiento dentro de las organizaciones y lugares de trabajo.

      (c )  Principales Hitos, Leyes, Teorías y Principios

      Sigue leyendo

      El poder transformador de la Psicología Social en las Organizaciones


      Enfoque de Psicología Social en las Organizaciones

      La psicología social de las organizaciones se centra en cómo las personas interactúan y se comportan en el entorno laboral. Este enfoque estudia las dinámicas grupales, el liderazgo, la motivación, la comunicación y el cambio organizacional. Su objetivo es comprender y mejorar el comportamiento de los individuos dentro de las organizaciones para aumentar la eficacia y el bienestar de los empleados.

      Relación entre Psicología Social y Organizaciones

      La psicología social y la psicología organizacional están estrechamente relacionadas. Ambas disciplinas estudian cómo los comportamientos y las relaciones sociales influyen en el entorno laboral. La psicología social aporta conocimientos sobre la influencia de los grupos y la cultura en el comportamiento individual, lo cual es crucial para entender y mejorar las dinámicas organizacionales.

      (a) Liderazgo, Poder e Influencia Social

      Sigue leyendo

      La Importancia de la Línea de Base en el Propensity Score Matching


      Siguiendo con posts anterios relacionados, el Propensity Score Matching (PSM) es una técnica estadística utilizada para estimar el efecto de una intervención al emparejar grupos de tratamiento y control con características similares. Sin embargo, la ausencia de una línea de base en el grupo de intervención puede afectar significativamente la validez de los resultados.

      Impacto de la Falta de Línea de Base

      1. Comparabilidad Reducida: Sin una línea de base, es difícil garantizar que los grupos de tratamiento y control sean comparables en términos de características iniciales. Esto puede llevar a una mala estimación del efecto del tratamiento.
      2. Sesgo de Selección: La falta de datos de línea de base puede introducir sesgos de selección, ya que no se puede ajustar adecuadamente por las diferencias iniciales entre los grupos.
      3. Validez Interna: La validez interna del estudio puede verse comprometida, ya que las diferencias observadas en los resultados podrían deberse a diferencias iniciales no medidas en lugar del efecto del tratamiento.

      Estrategias para Superar la Falta de Línea de Base

      1. Uso de Variables Proxy: Identificar y utilizar variables proxy que puedan aproximar las características iniciales de los participantes. Estas variables deben estar correlacionadas con las características de línea de base que faltan.
      2. Datos Longitudinales: Si se dispone de datos longitudinales, se pueden utilizar medidas repetidas de las características de los participantes antes y después del tratamiento para inferir las condiciones iniciales.
      3. Modelos de Imputación: Utilizar técnicas de imputación para estimar los valores de las características de línea de base faltantes. Métodos como la imputación múltiple pueden ser útiles en este contexto.
      4. Análisis de Sensibilidad: Realizar análisis de sensibilidad para evaluar cómo diferentes supuestos sobre las características de línea de base afectan los resultados del estudio.
      5. Ajuste por Covariables: Incluir tantas covariables relevantes como sea posible en el modelo de PSM para ajustar por las diferencias iniciales entre los grupos.
      6. Diseño de Estudio Alternativo: Considerar el uso de diseños de estudio alternativos que no dependan tanto de los datos de línea de base, como los estudios de cohortes o los ensayos controlados aleatorios.

      Sigue leyendo

      Impacto Transformador: Evaluaciones de Pareamiento en América Latina


      Tras hacer una presentación general de diseños de evaluación de impacto, vamos a profundizar en la técnica de pareamiento (matching) para la evaluación de impacto

      (a) Conceptos

      Pareamiento (Matching): Es una técnica que empareja participantes del grupo de tratamiento con participantes del grupo de control que tienen características similares. Esto se hace para crear un grupo de comparación que sea lo más parecido posible al grupo de tratamiento, permitiendo así una evaluación más precisa del impacto de la intervención.

      Variables No Observables: Son aquellas características o factores que no se pueden medir o no están disponibles en los datos, pero que pueden influir en los resultados. Por ejemplo, la motivación personal o el apoyo familiar. Estas variables pueden sesgar los resultados si no se controlan adecuadamente.

      (b) Casos de (no) Uso

      Cuándo Usarlo:

      • Disponibilidad de Datos Detallados: Cuando se tiene acceso a datos detallados sobre las características de los participantes.
      • Grupo de Comparación Adecuado: Cuando se puede identificar un grupo de comparación adecuado que sea similar al grupo de tratamiento.

      Cuándo NO Usarlo:

      • Insuficiencia de Coincidencias: Cuando no se pueden encontrar suficientes coincidencias entre los grupos de tratamiento y control.
      • Variables No Observables Importantes: Cuando hay variables no observables que pueden influir significativamente en los resultados y no se pueden controlar

      Sigue leyendo

      Principales Diseños de Evaluación de Impacto: Cuándo y Cómo Usarlos, Ejemplos y Aplicaciones


      Hoy nos adentramos en un arte de medir el cambio: una lista esencial sobre diseños de evaluaciones de impacto. Incluye consejos prácticos sobre cuándo es mejor usarlas, cuándo no, y estudios de caso ilustrativos que demuestran la eficacia de cada método

      1. Diseño Experimental (Aleatorizado)

      Descripción: Asignación aleatoria de participantes en grupos de tratamiento y control.

      Cuándo usarlo: Ideal cuando se puede controlar la asignación de los participantes y se busca obtener resultados robustos y libres de sesgo.

      Cuándo NO usarlo: No es adecuado cuando la asignación aleatoria no es ética o factible.

      Ejemplo 1: Evaluar el impacto de un nuevo programa educativo en el rendimiento académico de los estudiantes. Los estudiantes se asignan aleatoriamente a recibir el programa (grupo de tratamiento) o no (grupo de control).

      Ejemplo 2 : Un estudio en Kenia evaluó el impacto de la distribución de mosquiteros tratados con insecticida en la reducción de la malaria. Los resultados mostraron una disminución significativa en los casos de malaria1.

      2. Diseño Cuasi-Experimental

      Descripción: Métodos como el diseño de regresión discontinua, diferencias en diferencias, y pareamiento.

      Cuándo usarlo: Útil cuando la asignación aleatoria no es posible, pero se pueden identificar grupos comparables.

      Cuándo NO usarlo: No es adecuado cuando no se pueden encontrar grupos comparables o cuando hay cambios simultáneos que afectan los resultados.

      Ejemplo 1: Evaluar el impacto de una política de subsidios en el empleo. Se puede comparar el empleo antes y después de la implementación de la política en regiones con y sin subsidios.

      Ejemplo 2: Un estudio en México utilizó diferencias en diferencias para evaluar el impacto del programa Oportunidades en la educación y salud de los niños. Se encontró que el programa mejoró significativamente la asistencia escolar y la salud infantil2.

      3. Diseño No Experimental

      Descripción: Observación y análisis de datos sin manipulación directa de variables.

      Cuándo usarlo: Adecuado cuando no es posible realizar experimentos o cuasi-experimentos, pero se dispone de datos relevantes para el análisis.

      Cuándo NO usarlo: No es adecuado cuando se requiere establecer una relación causal clara.

      Ejemplo: Un análisis de la campaña de concienciación sobre el reciclaje en una ciudad mostró un aumento en las tasas de reciclaje, aunque no se pudo atribuir directamente a la campaña debido a la falta de un grupo de control3.

      Sigue leyendo