La Importancia de Escribir sobre Evaluación y Aprendizaje en Español en la Era de la IA


Soy un nostálgico, quiero seguir pensando que escribir posts en español sobre evaluación y aprendizaje en el sector de la ayuda internacional sigue teniendo múltiples beneficios, tanto a nivel personal como colectivo:

A Nivel Personal

  1. Gestión del Conocimiento Personal:
    • Reflexión y Aprendizaje: Escribir te permite reflexionar sobre tus experiencias y aprendizajes, consolidando tu conocimiento y mejorando tu práctica profesional.
    • Desarrollo de Habilidades: La escritura regular mejora tus habilidades de comunicación y pensamiento crítico, esenciales para un evaluador.
    • Documentación: Mantener un registro escrito de tus ideas y experiencias facilita la revisión y el análisis a lo largo del tiempo, ayudándote a identificar patrones y áreas de mejora.
  2. Visibilidad y Re-conocimiento:
    • Marca Personal: Publicar contenido te posiciona como un conocedor (no se si «expert@» es una palabra adecuada?) tu campo, aumentando tu visibilidad y tu reconocimiento (no porque te lo vayan a reconocer sino porque – quizas – te «re-conozcan» en algun momento).
    • Red de Contactos: Atraerás a otros profesionales interesados en los temas tratados, ampliando tu red de contactos y oportunidades de colaboración.

A Nivel Colectivo

Sigue leyendo →

Liderazgo transformacional o jerarquía


Liderazgo necesario para pasar de jerarquía a una organización equilibrada de trabajo en red:

    • Para un trabajo organizacional en red equilibrado, se necesita un liderazgo transformacional que fomente la colaboración, la innovación y la transparencia. Los líderes deben ser facilitadores en lugar de controladores, promoviendo la autonomía y la auto-gestión dentro de los equipos. Es crucial que estos líderes comuniquen una visión compartida y desarrollen nuevos líderes a través de la capacitación y la mentoría.

    Razones por las que las organizaciones de cooperación al desarrollo tienden a la jerarquía:

      • A pesar de sus principios de participación y horizontalidad, estas organizaciones tienden a la jerarquía debido a la necesidad de control y estabilidad. La jerarquía proporciona una estructura clara y definida, lo que facilita la supervisión y la rendición de cuentas. Además, la planificación rigurosa y a largo plazo es más fácil de implementar en una estructura jerárquica.
      • La baja rendición de cuentas interna puede deberse a la falta de transparencia y confianza dentro de la organización. En una estructura jerárquica, la información tiende a ser confidencial y compartida solo con quienes tienen la necesidad de saber, lo que puede limitar la rendición de cuentas inerna. Además, la resistencia al cambio y la desconfianza hacia los líderes pueden contribuir a esta problemática.

      Cómo conseguir más coherencia y aumentar la rendición de cuentas interna de manera constructiva y empática:

      Sigue leyendo →

      De la Jerarquía a la Redarquía: Transformando las Organizaciones


      1. Introducción

      En el mundo organizacional actual, las estructuras tradicionales están siendo desafiadas por nuevos paradigmas que promueven la colaboración y la agilidad. Dos de estos paradigmas son la jerarquía y la redarquía. Mientras que la jerarquía se basa en el control centralizado y la planificación rigurosa, la redarquía fomenta la autonomía, la innovación y la transparencia. Este post explora en estos dos enfoques, sus implicaciones para las organizaciones de desarrollo y cooperación internacional, y cómo las organizaciones pueden transitar de un paradigma a otro.

      2. Descripción y Comparación de Paradigmas

      Las organizaciones pueden operar bajo dos paradigmas principales: la jerarquía y la redarquía. A continuación, se presenta una comparación detallada de ambos paradigmas:

      AspectoJerarquía (1)Redarquía (2)
      EnfoqueIndividuoColectivo
      ControlControl centralizadoAutonomía y auto-gestión
      PlanificaciónRigurosa y a largo plazoAgilidad y adaptabilidad
      InnovaciónLimitada y controladaFomentada y experimental
      InformaciónPrivacidad y confidencialidadTransparencia y apertura

      Sigue leyendo →

      Psicología Social vs. Organizacional: Claves del Comportamiento


      En este post, exploraremos cómo la psicología social y la psicología organizacional desentrañan las complejas interacciones que moldean nuestras vidas tanto en la sociedad como en el trabajo. Desde las teorías más influyentes hasta los hitos históricos y los principales autores. Además, analizaremos cómo estas dos disciplinas se influyen mutuamente y las oportunidades de sinergia que ofrecen.

      (a) Definición

      Psicología Social: La psicología social es una rama de la psicología que estudia cómo los pensamientos, sentimientos y comportamientos de los individuos son influenciados por la presencia real, imaginada o implícita de otras personas. Se enfoca en entender las interacciones sociales y cómo estas afectan la conducta humana.

      Psicología Organizacional: La psicología organizacional, también conocida como psicología del trabajo, estudia el comportamiento humano en el contexto de las organizaciones. Se enfoca en mejorar la eficiencia y el bienestar de los empleados y la organización en su conjunto.

      (b) Aspectos Comunes y Diferentes

      Aspectos Comunes:

      • Ambas disciplinas estudian el comportamiento humano en contextos sociales.
      • Utilizan métodos científicos para investigar y entender las interacciones humanas.
      • Se interesan por la influencia de los grupos en el comportamiento individual.

      Aspectos Diferentes:

      • Psicología Social: Se centra en una variedad de contextos sociales, no limitándose a entornos laborales.
      • Psicología Organizacional: Se enfoca específicamente en el comportamiento dentro de las organizaciones y lugares de trabajo.

      (c )  Principales Hitos, Leyes, Teorías y Principios

      Sigue leyendo →

      El poder transformador de la Psicología Social en las Organizaciones


      Enfoque de Psicología Social en las Organizaciones

      La psicología social de las organizaciones se centra en cómo las personas interactúan y se comportan en el entorno laboral. Este enfoque estudia las dinámicas grupales, el liderazgo, la motivación, la comunicación y el cambio organizacional. Su objetivo es comprender y mejorar el comportamiento de los individuos dentro de las organizaciones para aumentar la eficacia y el bienestar de los empleados.

      Relación entre Psicología Social y Organizaciones

      La psicología social y la psicología organizacional están estrechamente relacionadas. Ambas disciplinas estudian cómo los comportamientos y las relaciones sociales influyen en el entorno laboral. La psicología social aporta conocimientos sobre la influencia de los grupos y la cultura en el comportamiento individual, lo cual es crucial para entender y mejorar las dinámicas organizacionales.

      (a) Liderazgo, Poder e Influencia Social

      Sigue leyendo →

      La Importancia de la Línea de Base en el Propensity Score Matching


      Siguiendo con posts anterios relacionados, el Propensity Score Matching (PSM) es una técnica estadística utilizada para estimar el efecto de una intervención al emparejar grupos de tratamiento y control con características similares. Sin embargo, la ausencia de una línea de base en el grupo de intervención puede afectar significativamente la validez de los resultados.

      Impacto de la Falta de Línea de Base

      1. Comparabilidad Reducida: Sin una línea de base, es difícil garantizar que los grupos de tratamiento y control sean comparables en términos de características iniciales. Esto puede llevar a una mala estimación del efecto del tratamiento.
      2. Sesgo de Selección: La falta de datos de línea de base puede introducir sesgos de selección, ya que no se puede ajustar adecuadamente por las diferencias iniciales entre los grupos.
      3. Validez Interna: La validez interna del estudio puede verse comprometida, ya que las diferencias observadas en los resultados podrían deberse a diferencias iniciales no medidas en lugar del efecto del tratamiento.

      Estrategias para Superar la Falta de Línea de Base

      1. Uso de Variables Proxy: Identificar y utilizar variables proxy que puedan aproximar las características iniciales de los participantes. Estas variables deben estar correlacionadas con las características de línea de base que faltan.
      2. Datos Longitudinales: Si se dispone de datos longitudinales, se pueden utilizar medidas repetidas de las características de los participantes antes y después del tratamiento para inferir las condiciones iniciales.
      3. Modelos de Imputación: Utilizar técnicas de imputación para estimar los valores de las características de línea de base faltantes. Métodos como la imputación múltiple pueden ser útiles en este contexto.
      4. Análisis de Sensibilidad: Realizar análisis de sensibilidad para evaluar cómo diferentes supuestos sobre las características de línea de base afectan los resultados del estudio.
      5. Ajuste por Covariables: Incluir tantas covariables relevantes como sea posible en el modelo de PSM para ajustar por las diferencias iniciales entre los grupos.
      6. Diseño de Estudio Alternativo: Considerar el uso de diseños de estudio alternativos que no dependan tanto de los datos de línea de base, como los estudios de cohortes o los ensayos controlados aleatorios.

      Sigue leyendo →

      Impacto Transformador: Evaluaciones de Pareamiento en América Latina


      Tras hacer una presentación general de diseños de evaluación de impacto, vamos a profundizar en la técnica de pareamiento (matching) para la evaluación de impacto

      (a) Conceptos

      Pareamiento (Matching): Es una técnica que empareja participantes del grupo de tratamiento con participantes del grupo de control que tienen características similares. Esto se hace para crear un grupo de comparación que sea lo más parecido posible al grupo de tratamiento, permitiendo así una evaluación más precisa del impacto de la intervención.

      Variables No Observables: Son aquellas características o factores que no se pueden medir o no están disponibles en los datos, pero que pueden influir en los resultados. Por ejemplo, la motivación personal o el apoyo familiar. Estas variables pueden sesgar los resultados si no se controlan adecuadamente.

      (b) Casos de (no) Uso

      Cuándo Usarlo:

      • Disponibilidad de Datos Detallados: Cuando se tiene acceso a datos detallados sobre las características de los participantes.
      • Grupo de Comparación Adecuado: Cuando se puede identificar un grupo de comparación adecuado que sea similar al grupo de tratamiento.

      Cuándo NO Usarlo:

      • Insuficiencia de Coincidencias: Cuando no se pueden encontrar suficientes coincidencias entre los grupos de tratamiento y control.
      • Variables No Observables Importantes: Cuando hay variables no observables que pueden influir significativamente en los resultados y no se pueden controlar

      Sigue leyendo →

      Principales Diseños de Evaluación de Impacto: Cuándo y Cómo Usarlos, Ejemplos y Aplicaciones


      Hoy nos adentramos en un arte de medir el cambio: una lista esencial sobre diseños de evaluaciones de impacto. Incluye consejos prácticos sobre cuándo es mejor usarlas, cuándo no, y estudios de caso ilustrativos que demuestran la eficacia de cada método

      1. Diseño Experimental (Aleatorizado)

      Descripción: Asignación aleatoria de participantes en grupos de tratamiento y control.

      Cuándo usarlo: Ideal cuando se puede controlar la asignación de los participantes y se busca obtener resultados robustos y libres de sesgo.

      Cuándo NO usarlo: No es adecuado cuando la asignación aleatoria no es ética o factible.

      Ejemplo 1: Evaluar el impacto de un nuevo programa educativo en el rendimiento académico de los estudiantes. Los estudiantes se asignan aleatoriamente a recibir el programa (grupo de tratamiento) o no (grupo de control).

      Ejemplo 2 : Un estudio en Kenia evaluó el impacto de la distribución de mosquiteros tratados con insecticida en la reducción de la malaria. Los resultados mostraron una disminución significativa en los casos de malaria1.

      2. Diseño Cuasi-Experimental

      Descripción: Métodos como el diseño de regresión discontinua, diferencias en diferencias, y pareamiento.

      Cuándo usarlo: Útil cuando la asignación aleatoria no es posible, pero se pueden identificar grupos comparables.

      Cuándo NO usarlo: No es adecuado cuando no se pueden encontrar grupos comparables o cuando hay cambios simultáneos que afectan los resultados.

      Ejemplo 1: Evaluar el impacto de una política de subsidios en el empleo. Se puede comparar el empleo antes y después de la implementación de la política en regiones con y sin subsidios.

      Ejemplo 2: Un estudio en México utilizó diferencias en diferencias para evaluar el impacto del programa Oportunidades en la educación y salud de los niños. Se encontró que el programa mejoró significativamente la asistencia escolar y la salud infantil2.

      3. Diseño No Experimental

      Descripción: Observación y análisis de datos sin manipulación directa de variables.

      Cuándo usarlo: Adecuado cuando no es posible realizar experimentos o cuasi-experimentos, pero se dispone de datos relevantes para el análisis.

      Cuándo NO usarlo: No es adecuado cuando se requiere establecer una relación causal clara.

      Ejemplo: Un análisis de la campaña de concienciación sobre el reciclaje en una ciudad mostró un aumento en las tasas de reciclaje, aunque no se pudo atribuir directamente a la campaña debido a la falta de un grupo de control3.

      Sigue leyendo →

      Teorías del Cambio: Perspectivas Críticas para el Futuro de la Evaluación


      El libro recientemente publicado, “Theories of Change in Reality | Strengths, Limitations and Future Directions”, es un análisis profundo de las teorías del cambio y su aplicación en la evaluación y desarrollo de intervenciones. Durante más de medio siglo, los evaluadores han empleado estas teorías para esbozar la lógica causal que subyace en cómo una intervención busca lograr el cambio deseado.

      Desde su concepción en la evaluación de programas, este enfoque se ha adoptado de manera más generalizada para propósitos que abarcan desde el diseño hasta la gestión de programas. Dado que las teorías del cambio siguen siendo utilizadas para múltiples propósitos, es un momento oportuno para que la comunidad de evaluación (donde se originó el enfoque) ofrezca su perspectiva sobre las fortalezas y limitaciones del enfoque, así como sus direcciones futuras.

      Para proporcionar estas perspectivas, se invitó a casi 30 de los principales evaluadores y teóricos de programas del mundo a proporcionar un breve ensayo sobre el pasado, el presente y el futuro de las teorías del cambio. Este libro presenta sus ideas, organizadas en cinco temas principales:

      1. El uso de teorías del cambio en contextos más amplios de políticas públicas.
      2. Utilizar teorías del cambio para establecer la causalidad.
      3. Desarrollar teorías de cambio que reflejen las perspectivas de múltiples partes interesadas.
      4. Utilizar teorías del cambio para comprender procesos de cambio social más amplios.
      5. Aplicar enfoques de teorías del cambio para múltiples propósitos.

      Al compartir estas diversas perspectivas, el libro busca proporcionar a los evaluadores y a los teóricos de programas emergentes, perspectivas críticas para informar la práctica futura.

      Resumen de las ideas principales del libro:

      Sigue leyendo →

      El Pensamiento Evaluativo: Un Faro en la Oscuridad Organizacional


      En las profundidades de la gestión y planificación, el pensamiento evaluativo (PE) se erige como un faro guía para las organizaciones. Como un hilo conductor, atraviesa cada área central de operaciones, tejido en la trama misma de la eficacia y la mejora continua.

      1. Desarrollo y Diseño del Programa:
        • Evaluar el contexto de servicios y programas es como cartografiar un territorio desconocido. Identificamos brechas, redundancias y tendencias, trazando rutas hacia la excelencia.
        • Nuestra capacidad de crecimiento se mide con datos, y los hallazgos de la evaluación se entrelazan en el diseño del programa.
        • Múltiples partes interesadas se sientan alrededor de la mesa, compartiendo visiones y tejiendo modelos de programas que guían la implementación.
        • La evaluabilidad se cultiva desde el inicio, integrando procesos de reflexión y aprendizaje en los ciclos regulares.
      2. Gestión de Programas:
        • Monitoreo constante, como un vigía en la torre, nos permite ajustar el rumbo. Reflexionamos sobre lo que funciona y lo que no, identificando oportunidades de mejora.
        • Datos en tiempo real son brújulas para adaptaciones y correcciones. La calidad del programa se pule en el yunque de la evaluación constante.
      3. Evaluación del Programa:
        • Datos, como piedras preciosas, describen características, actividades y resultados. Múltiples partes interesadas interpretan y usan estos tesoros.
        • Compartimos los hallazgos en formatos útiles, nutriendo el aprendizaje y la mejora continua. Las estrategias y herramientas de evaluación son llaves maestras.
        • La formación y el apoyo son cimientos sólidos para la evaluación significativa.
      4. Interacción con las Poblaciones Objetivo:
        • Las necesidades de las poblaciones objetivo se miden periódicamente. La satisfacción de los beneficiarios y otros indicadores de calidad son estrellas que guían nuestro rumbo.
        • La voz de l@s beneficiari@s se entrelaza con los datos de resultados, creando un tapiz de mejora.
      5. Desarrollo de Capacidades del Personal:
        • Evaluamos anualmente el desarrollo del personal, preparándonos para los cambios y adoptando las mejores prácticas emergentes.
        • El impacto de talleres y seminarios web se mide en capacidades y crecimiento.

      La línea de fondo del pensamiento evaluativo:

      • Amplio Alcance y Arraigo Profundo:
        • Se extiende más allá de las actividades de evaluación, impregnando cada rincón de la organización.
        • No es un islote aislado, sino una corriente que fluye a través de programas, propósitos y personas.
        • Su raíz está en la curiosidad natural y el deseo de aprender y mejorar.
      • Habilidades, Actitudes y Enfoque:
        • Requiere habilidades, recursos y capacidades.
        • Las actitudes y los hábitos son su suelo fértil.
        • Da vida, significado y valor a actividades que podrían ser meras obligaciones.
      • Enfoque Dirigido:
        • Asegura que nuestro trabajo esté enfocado, basado en hechos y orientado a objetivos.
        • Al cultivar una cultura organizacional con este hábito, las consultas valiosas reemplazan las cargas requeridas.

      En esta danza entre datos, atención, reflexión y decisión, el pensamiento evaluativo no es una carga, sino un farol que ilumina el camino hacia la excelencia.  El pensamiento evaluativo no solo ilumina, sino también transforma.