En el vagón central de nuestro Tren de Libros de Evaluación sube hoy una publicación que va a ser una referencia para quienes trabajamos entre proyectos, políticas públicas y el desafío de comprender sus efectos reales. Se trata de “Diseños y Métodos para la Evaluación de Impacto”, un texto escrito con la claridad, el rigor y la calidez intelectual que caracterizan a un querido colega y amigo, Pablo Rodríguez Bilella. Una obra que, más allá de revisar métodos, recupera algo esencial: la evaluación como un acto de aprendizaje, responsabilidad y honestidad intelectual.
A continuación, te propongo un recorrido estructurado por doce ejes de análisis que permiten apreciar la riqueza, actualidad y pertinencia del libro.
1. Resumen general del libro y su objetivo principal
El texto plantea una visión amplia y matizada sobre qué es realmente una evaluación de impacto, alejándose de la rigidez que ha dominado ciertos debates en las últimas dos décadas. El objetivo central es ampliar el marco de comprensión: una evaluación de impacto no es sinónimo de ensayos aleatorizados, sino de cualquier aproximación sistemática y empírica orientada a comprender los efectos —esperados y no esperados— de una intervención.
En nuestro Tren de Libros de Evaluación hacemos parada en un documento clave para el momento actual del multilateralismo: “Doing Better With Less: Unlocking Efficiency in the UN”, primer thematic brief de la serie Multilateral Effectiveness in a Shifting Landscape de MOPAN (2025). El informe nace en plena UN80 —la agenda de reformas del Secretario General para un sistema más ágil y efectivo— y propone algo tan simple como exigente: mejorar la eficiencia sin sacrificar la efectividad. (MOPAN)
1) Resumen general y objetivo principal
El brief sintetiza evidencias de 15 evaluaciones recientes de agencias de la ONU y multilaterales para responder a una pregunta práctica: ¿Cómo “hacer mejor con menos” sin vaciar las funciones esenciales de supervisión, aprendizaje y calidad? La respuesta de MOPAN es nítida: la eficiencia solo es valiosa si protege y potencia la efectividad. El contexto no es menor: presiones presupuestarias y propuestas de reducción del 15–20% en puestos de alto grado en la Secretaría y otras entidades, en línea con la agenda UN80. (MOPAN)
1. Resumen general del libro y su objetivo principal
El libro de Michael Quinn Patton, «Developmental Evaluation: Applying Complexity Concepts to Enhance Innovation and Use» (2011), que lo hemos traducido siempre en este blog por: “Evaluación durante el desarrollo (EDD): aplicar conceptos de complejidad para potenciar la innovación y el uso”, representa una de las obras más influyentes en la evolución contemporánea de la evaluación.
Su objetivo principal es ofrecer un marco conceptual y práctico para evaluar iniciativas en contextos de alta incertidumbre, innovación o cambio continuo, donde los modelos de intervención no están cerrados.
Patton parte de una observación sencilla pero revolucionaria: los modelos clásicos de evaluación —formativa (para mejorar) y sumativa (para juzgar resultados)— no sirven bien en entornos de innovación. Cuando un programa aún está “en construcción”, la evaluación debe estar presente durante su desarrollo, no al margen ni al final.
La EDD, por tanto, se convierte en una herramienta de aprendizaje y adaptación que acompaña la innovación mientras sucede. Es la evaluación que viaja dentro del tren, no la que espera en la estación final para levantar acta.
Dentro de nuestra serie sobre psicología social y deLibros de Evaluación, nos ocupamos hoy del libro de Mark, Donaldson & Campbell (2011) – Psicología social y evaluación de programas: Una mirada fresca, práctica y sorprendentemente humana a la evaluación
💬 “Evaluar bien no es solo medir: es comprender por qué la gente hace lo que hace.”
1️⃣ Resumen general del libro y su objetivo principal
Editado por Melvin M. Mark, Stewart I. Donaldson y Bernadette Campbell, el volumen cruza dos mundos que rara vez conversaban con profundidad: psicología socialy evaluación de programas. Su tesis es directa: entender procesos psicosociales (actitudes, normas, sesgos, influencia) mejora el diseño, la implementación, la interpretación y el uso de las evaluaciones. Traducción al lenguaje de nuestro blog TriPLEAD: menos informes que “duermen en cajones”, más evidencia que la gente acepta, entiende y utiliza.
2️⃣ Análisis de capítulos o secciones principales
La estructura facilita mucho el viaje:
I. Panorama y fundamentos
Cap. 1. The Past, the Present, and Possible Futures… (Mark, Donaldson & Campbell): ubica el puente entre disciplinas y plantea una agenda de cooperación teoría–práctica.
II. Teorías psicosociales como guías para diseño y evaluación
El texto presenta un proceso de seis pasos para integrar la IA generativa (ChatGPT) en análisis temático: (1) familiarización con los datos; (2) selección de palabras clave; (3) codificación; (4) construcción de temas; (5) conceptualización; (6) desarrollo de un modelo conceptual.
Cada paso incluye prompts específicos y criterios de calidad para guiar el trabajo. El objetivo principal es ofrecer una metodología que combine la eficiencia tecnológica de la IA con el rigor académico de la investigación cualitativa.
En esta parada del Tren Libros de Evaluación, el libro Evaluation Theory, Models, and Applications (Stufflebeam & Shinkfield, 2007) es considerado una de las obras más completas en el campo de la evaluación educativa, social y de programas. Su objetivo central es ofrecer un marco sistemático y accesible que integre teorías, modelos y prácticas de evaluación, sirviendo tanto a académicos como a profesionales. A lo largo de sus capítulos, los autores buscan definir la evaluación como disciplina aplicada, ética y orientada a la toma de decisiones.
2. Capítulos y puntos clave
La obra se organiza en cinco grandes bloques:
Historia y evolución de la evaluación: desde Ralph Tyler y la evaluación por objetivos en los años 40, pasando por la crítica de Scriven (evaluación formativa y sumativa), hasta la pluralidad de modelos contemporáneos.
Modelos principales:
Evaluación orientada a objetivos (Tyler).
Evaluación centrada en el consumidor (Stake).
Evaluación por expertos (Scriven).
Modelos de gestión (Alkin, Wholey).
Modelos participativos.
El modelo CIPP (Context, Input, Process, Product): columna vertebral del libro, desarrollado por Stufflebeam desde los años 60. Cada dimensión se presenta con ejemplos prácticos y protocolos de aplicación.
Aplicaciones prácticas: casos en programas educativos, de salud pública y políticas sociales. Se ilustran usos en distintos países y sectores.
Normas profesionales y éticas: discusión sobre el Joint Committee on Standards for Educational Evaluation y la importancia de la ética en la práctica evaluativa.
1. El legado que no caduca: ¿por qué las cinco familias de evaluación sigue siendo su sección más citada?
Mapa integrador y lenguaje común. Antes de 1991, los enfoques convivían como islas (experimentos, modelos de uso, enfoques de valores, etc.). La propuesta de Shadish, Cook y Leviton ofreció un marco taxonómico que ordenó el campo en cinco familias —experimental, descriptiva/cualitativa, centrada en el uso, centrada en valores y centrada en el contexto— y lo convirtió en un idioma compartido para docencia y práctica. Manuales y artículos posteriores lo adoptaron como “paradigma de referencia” para ubicar debates y decisiones metodológicas.
Puente entre teoría y práctica. La clasificación no prescribe “una” forma de evaluar; normaliza la pluralidad y la convierte en elecciones razonadas (qué valoramos, cómo construimos evidencia, para quién y para qué se usa). Esa “neutralidad operativa” explica su alta citación en currículos y en artículos de revisión.
Estandariza preguntas nucleares. El propio Shadish (1998) muestra cómo el campo discute de manera recurrente cinco ejes (valor, conocimiento, uso, cambio del evaluando y práctica), que encajan con la arquitectura del libro de 1991, reforzando su función de marco metateórico.
Resultado: la clasificación facilitó comparabilidad entre teorías, ayudó a estructurar cursos y a “situarse” en diseños complejos. Por eso sigue apareciendo en revisiones y marcos actuales que explican “de dónde venimos” antes de introducir enfoques contemporáneos.
Por tanto y como ya tratamos en nuestro anterior post Fundamentos de la Evaluación de Programas: Un libro esencial, Shadish, Cook y Leviton (1991) revolucionaron la evaluación al proponer cinco familias teóricas (experimental, descriptiva, centrada en el uso, en valores y en contexto). Fue un mapa epistémico común que:
Ordenó un campo fragmentado, funcionando como lenguaje pedagógico y referencia en programas académicos.
Actuó como puente entre diversidad y unidad, validando la pluralidad en lugar de imponer un modelo único.
Se convirtió en un “esqueleto del campo” citado en manuales, cursos universitarios y artículos de revisión.
En esta parada del Tren Libros de Evaluación nos encontramos con un clásico que cambió la forma de entender la disciplina: Foundations of Program Evaluation. Theories of Practice (1991), de William R. Shadish, Thomas D. Cook y Laura C. Leviton. Un libro que buscó organizar el “caos” de teorías que existían hasta ese momento y dar coherencia a la práctica de evaluar programas sociales, educativos y de políticas públicas.
1. Resumen general
El libro propone una visión integradora de la evaluación, sistematizando décadas de debates. Su objetivo principal: conectar teoría y práctica, mostrando que la evaluación no es una técnica única, sino un campo plural con múltiples marcos conceptuales.
2. Análisis de capítulos
La obra está organizada en tres bloques:
Fundamentos: qué es la evaluación, sus propósitos y dilemas.
Revisión de teorías: analiza cinco grandes familias:
Experimentales (con fuerte herencia de Donald T. Campbell).
Descriptivas/cualitativas (inspiradas en Lee Cronbach).
Centradas en el uso (con influencias de Carol Weiss).
Centradas en valores (a la Michael Scriven).
Centradas en el contexto y la toma de decisiones (Daniel Stufflebeam y el modelo CIPP).
Integración y práctica: cómo elegir enfoques adecuados al contexto y cómo los evaluadores deben equilibrar rigor, valores y utilidad.
En el vasto y complejo universo de la evaluación de programas, Evaluation Roots, editado por Marvin C. Alkin, se erige como una obra fundamental. Desde su primera edición en 2004, pasando por su expansión en 2013, hasta su versión más inclusiva y aplicada en 2023, este libro no solo compila teorías evaluativas, sino que traza una genealogía viva del pensamiento evaluativo contemporáneo. Más que un texto, Evaluation Roots es un mapa conceptual, un árbol teórico, un jardín de ideas en evolución constante.
Este post reúne, fusiona y profundiza algunas de las ideas clave de las tres versiones analizadas sobre el libro, integrando los aportes de cada uno:
🌳 1. La metáfora fundacional: El árbol de la evaluación
Desde su concepción, Evaluation Roots propone una visión gráfica y conceptual del campo: un árbol cuyas raíces representan las grandes corrientes teóricas, de las cuales surgen diversas ramas, teorías híbridas y aplicaciones prácticas. Esta metáfora ha sido celebrada por su claridad y utilidad pedagógica.
Las tres raíces principales:
Use Branch (orientada al uso): encabezada por Michael Q. Patton, enfatiza la importancia del uso real de los resultados de evaluación por los tomadores de decisiones.
Methods Branch (orientada a métodos): representada por figuras como Donald Campbell, pone el acento en el rigor científico, la medición precisa y el diseño metodológico.
Valuing Branch (orientada a valores): liderada por Michael Scriven, se centra en el juicio evaluativo basado en criterios explícitos de valor, a menudo independiente del diseño del programa.
Cada raíz está asociada con autores clave, trayectorias intelectuales y debates metodológicos. Esta estructura permite entender que la evaluación no es una práctica neutral ni técnica, sino una disciplina anclada en fundamentos epistemológicos, éticos y políticos.
Este no es un texto para leer pasivamente mientras se toma un café. Es una provocación amable, pero directa, al pensamiento evaluador. En Nada más práctico que una buena teoría, Carol Weiss nos recuerda algo fundamental: toda intervención —por muy técnica o neutral que parezca— está basada en suposiciones sobre cómo debería funcionar el mundo. Es decir, toda acción parte de una teoría del cambio, se reconozca o no.
La trama principal es sencilla pero poderosa: si vas a intervenir para mejorar una situación, más vale que tengas claro qué teoría estás siguiendo, aunque ni siquiera se haya formulado aún.
Análisis del articulo
El artículo está cargado de ideas organizadas con claridad:
Introducción: Weiss plantea la idea principal que da título al texto: que no hay nada más útil que una buena teoría para orientar la acción.
Teoría del cambio: nos invita a mirar detrás de cada programa social y descubrir la teoría que lo sostiene, aunque esté implícita.
El rol del evaluador: redefine su papel, ya no como auditor externo, sino como facilitador de pensamiento estratégico y clarificador de supuestos.
Cada sección está orientada a generar reflexión y debate más que a ofrecer respuestas cerradas.
"TripleAD": Aprendiendo a Aprender para el Desarrollo 