2015-Año internacional de la Evaluación – ¡ Cualquier tiempo pasado fue peor ¡


Son pocos los profesionales de la evaluación que a estas alturas no saben de la importancia del año 2015  –desde hace un año viene como un murmullo que ya se transforma en realidad, he aquí nuestro AÑO INTERNACIONAL DE LA EVALUACION ¡¡¡

Empieza el 2015 y dejamos atrás este año que comenzó un poco torcido…pero en el que también mis hijos menores ya tienen un año, he plantado árboles, he escrito tres publicaciones,- una sobre el uso de evaluaciones, otra sobre la gestión del conocimiento de las evaluaciones y la tercera sobre evaluación cualitativa-, he participado en el Congreso de la EES de Dublín y comenzado 6 evaluaciones…algunas con alegrías y otras con penas, como suele y puede pasar en la evaluación independiente.

Hemos de ver con mucha ilusión este año internacional de la evaluación y comienzo de la agenda post 2015 ¡¡¡

Sí, todos los que nos dedicamos a esto de la evaluación, 1. Como fuente primaria o secundaria de ingresos o 2. Como pasatiempo –sí conozco a alguno,¡¡ qué fuerte ¡¡, sí pero qué suerte también ¡ -, o 3. Como una forma de entender el mundo o a nosotr@s mism@s o, l@s más ambicios@s… 4. Para cambiar el mundo o para que el mundo no nos cambie tanto…o, 5. Como una mezcla de todos ellos, TODOS, hemos de ver con mucha ilusión este año internacional de la evaluación y comienzo del post 2015 ¡¡¡

Esperemos lo mejor de este año 2015…

Un año que acelere la mejor distribución de la riqueza, el desarrollo justo y sostenible y el cumplimiento de los derechos humanos.

Un año en que se aprenda más de los errores que de los aciertos.

Un año para escuchar las voces de las personas que normalmente no son escuchadas

Un año que reduzca la retórica y aumente la acción reflexión

Un año que reduzca la violencia de género, la violencia contra las mujeres y aumente la equidad entre mujeres y hombres.

Un año en el que los Objetivos de Desarrollo sean un medio apropiado para ello

Un año que nos haga mejores profesionales y mejores ciudadanos, mejores técnicos, mejores gestores, mejores políticos…pero sobre todo mejores personas, mejores padres, mejores madres, mejores socios…

Ojalá la evaluación que, como dicen, es una actividad de todos los días, nos ayude a mejorar…Y por supuesto un año para aprender a aprender para el desarrollo personal, comunitario, colectivo, social…institucional…porque hay tanto que aprender y de lo que aprender…para ser mejores ciudadanos, comunidades, colectivos, sociedades…instituciones.

Espero que mi primer gran evento evaluativo en 2015 será en Perú. Reciéntemente ha terminado el plazo para inscribirse en el primer gran evento, el Congreso de la RELAC ¡ …si todo va bien al menos participaré en alguna ponencia y panel.

Son momentos de recordar el 2014, yo no suelo ser dado a ver esos programas  revisionistas, pero aquí traigo dos referencias interesantes para hacer el cierre del año.

PRIMERA. Aquí hago una traducción libre de la carta que  Michele Tarsilla, experto en desarrollo de capacidades en evaluación de forma transformativa,  ha enviado a Santa Claus, y al tiempo aprovecho para reflexionar sobre sus reflexiones…porque no hemos de reinventar la rueda…

  1. Propuestas de evaluaciones publicadas al menos 3 semanas antes de la fecha límite, para poder enviar estrategias de evaluación creíbles…acabo de recibir una oferta que me daba 2 días, en ocasiones he recibido ofertas que ya habían acabado su plazo…
  2. Menos ambigüedad en el lenguaje utilizado durante las interacciones con clientes y socios y en los informes de evaluación…bueno qué decir a estas alturas de nuestro argot tan peculiar en cooperación, y si añadimos el de los freakies de la evaluación
  3. Más desarrollo de capacidades con oportunidad de ponerlas en práctica para jóvenes profesionales de la evaluación
  4. Más voces contribuyendo a la agenda global de evaluación –las asocaiciones de evaluación internacional son buenas en tanto que no desincentivan un pluralismo genuino de voces locales y de opiniones de cómo aumentar la capacidad a varios niveles…un peligro de la globalización, si al final no sirve para enriquecer el discurso sino lo contrario, para mimetizar un discurso único…
  5. Sabiendo que es diferente en cada zona, más gente definiendo el concepto de capacidades en evaluación, para poder medir mejor este constructo
  6. Más modelos lógicos y teorías del cambio capturando una más amplia pluralidad de perspectivas sobre cómo los programas deberían trabajar y/o cómo podrían fallar.
  7. Más planificadores, ejecutores y evaluadores piensan sobre cómo prevenir y dirigir resultados no esperados en su trabajo
  8. Más creatividad e intencionalidad en sus métodos mixtos cuantitativos y cualitativos
  9. Que los nuevos objetivos de desarrollo sostenible de la agenda post 2015 no distraigan demasiado la atención del seguimiento de los resultados de desarrollo identificados por los propios países en respuesta sus necesidades específicas – no necesariamente globales – expresadas por sus respectivos ciudadanos
  10. Menos gente refiriéndose a la dicotomía Norte-Sur o Países desarrollados y no desarrollos, debido a que el mundo está formado por individuos, personas independientemente de sus títulos, poder, ingresos y localización.
  11. Más evaluadores locales contribuyendo al trabajo en equipo en evaluación, no sólo durante la fase de recolección de información sino también durante la fase de gabinete y el análisis.
  12. Más blogs y literatura especializada en otros lenguajes diferentes que el inglés.

SEGUNDA. Inspirado por a la lista de 15 «Dolencias de la Curia» del discurso de Navidad del papa Francisco, Chris Roche, ex jefe de evaluación de Oxfam GB y hasta hace poco jefe de Oxfam Australia, ha recopilado las siguientes 15 Dolencias del Sector de Desarrollo–

1) Sentimiento de inmortalidad, inmunidad o indispensabilidad. «Una organización o institución que no hace autocrítica, que no se actualiza, que no busca mejorarse, es un cuerpo enfermo.»

2) Tomarse uno mismo demasiado en serio. «Tomarse la vida con humor es importante y un arma de los débiles»

3) Endurecerse espiritual y mentalmente. «Es peligroso perder la sensibilidad humana que nos permite llorar con los que sufren, y celebrar con los que están haciendo el cambio.»

4) Demasiada planificación «Es necesario preparar bien las cosas, pero no se ha de caer en la tentación de tratar de cerrar o dirigir la libertad de los activistas o profesionales de primera línea, que son más flexibles y adaptables que cualquier plan estratégico. Esto puede resultar en el trastorno obsesivo de la medición».

5) Trabajar sin coordinación, colaboración y asociación como una orquesta que produce ruido. «Cuando la oficina de campo indica a la oficina central, ‘No te necesito’ o la oficina central le indica a la oficina de campo ‘yo estoy a cargo.'»

6) Tener el ‘Alzheimer del desarrollo. «Lo vemos en las personas que han olvidado su encuentro con los pobres…en aquellos que dependen completamente de su aquí y ahora, en sus pasiones, las modas de desarrollo y manías, en los que construir muros alrededor de sí mismos y convertirse en esclavos de las mejores prácticas o blueprints- en contraposición al ‘buen ajuste’ construido con nuestras propias manos »

7) Ser rivales. «Cuando la apariencia, el color de nuestra marca y el tamaño de nuestros ingresos personales se convierten en los objetivos primordiales de nuestra vida, y la colaboración es algo secundario.»

8) El sufrimiento por ‘esquizofrenia existencial. «Es la enfermedad de los que viven una doble vida, fruto de la hipocresía que es típica de la vacuidad mediocre y progresiva que los marcos lógicos no pueden llenar. Es una enfermedad que suele afectar a las personas que, abandonando la práctica del desarrollo y el activismo, se limitan a tareas burocráticas, perdiendo contacto con la realidad y las personas concretas».

9) Cometer el «terrorismo de los sarcásticos» «Es la enfermedad de las personas que no tienen el valor de hablar directamente, hablando a espaldas de la gente o en Twitter o blogs.»

10) Glorificar a jefes y los donantes. «Es la enfermedad de los que cortejan a sus superiores, y a los donantes, con la esperanza de su benevolente recompensa. Son víctimas de arribismo y el oportunismo, honran a las personas que son poderosas y hacen caso omiso de las que no lo son».

11) Ser indiferente a las otras personas. «Cuando, por celos o por competencia se encuentra gozo en ver otra caída en lugar de ayudar y animar.»

12) Tener un «rostro cínico.» «En realidad, la gravedad de la impostura y del cinismo estéril son a menudo síntomas del miedo y la inseguridad. El activista debe ser sereno, entusiasta y transmitir un sentido de la justicia y la positividad dondequiera que vaya».

13) Querer más y más. «Cuando la organización intenta llenar un vacío existencial por la acumulación de ingresos y renta, no porque se necesite, sino porque se sentirá más seguro organizativamente.»

14) La formación de «círculos y camarillas cerradas» que tratan de ser más fuertes que el todo. «Esta enfermedad comienza siempre con buenas intenciones, pero conforme pasa el tiempo, se esclaviza a sus miembros al convertirse en un cáncer que amenaza la armonía del sector y causa tanta competencia malsana.»

15) La ambición del beneficio constante- «Es la enfermedad de los que insaciablemente tratan de multiplicar su poder y para ello son capaces de la calumnia, la difamación y de desacreditar a los demás, incluso en periódicos y revistas y en particular en línea, naturalmente, para mostrarse como más capaces que otros marcando la diferencia «.

Bueno compañeras, compañeros, necesitamos de todo nuestro arte para seguir haciendo cambiar las cosas…mi arte en este año que viene se lo dedico a ese gran artista que hace casi un año nos dejó.

 

¡¡¡ Feliz año 2015 internacional de la evaluación ¡¡¡

 

Usos y abusos de las evaluaciones: Teoría, Retórica y Práctica


Con la misma editorial que publicó parte de mi tesis sobre la gestión de la información en las organizaciones de desarrollo, estoy en estos momentos completando otra publicación sobre “la gestión del conocimiento y el uso de las evaluaciones”.

Aunque aparece en repetidas ocasiones en el lV plan Director y en el Plan de Evaluaciones de la Cooperación Española, no hay mucha literatura que hable explícitamente sobre la “gestión del conocimiento de las evaluaciones”(os animo a sentir lo frústrante que es googlear “knowledge management of evaluations”). Sin embargo al contactar con algunos colegas a nivel internacional, la mayoría me refieren al concepto de “uso de las evaluaciones”. Sigue leyendo →

Encontrar sin buscar


Hoy no hay tiempo para nada, y menos para tonterías. Pero en el fondo hoy todo es tontería. Hay que llenar el tiempo y la vida con cosas. Y hay que encontrar la forma de hacerlo. Hay veces que tiene sentido y otras pues que no tanto.

Algo que compruebo día a día: no dejes para leer mañana lo que no quieras dejar de leer.

El desorden de mi orden


Ayer vi una CdP en la que una persona comentaba que no quería que le referenciasen libros sino que le resuiesen los libros porque las personas de «la vida real» (no de la academia o las personas pagadas para leer libros) no tienen tiempo para leer libros.

Ayer tuve que pedir a mi hermano un libro electrónico porque yo no lo encontraba entre mis varios discos duros, bueno la verdad es que me daba una pereza enorme buscar entre tantos discos duros.

Hoy más que nunca es necesaria la gestión del conocimiento: para hacer accesible lo que pensamos accesible, pero realmente no lo es…

Un final y un comienzo – An end and a beginning – Une fin et un début


Un final y un comienzo

 

Esto es un comienzo que hace tiempo tenía previsto, aunque llega más tarde de lo que pensé. Este blog quiero dedicarlo a los menesteres que se relacionan más con aquello con lo que me ayuda a pagar la hipoteca cada mes: mi profesión.

 

Y ¿a qué me dedico durante las horas de labor?…sería difícil explicarlo así que trataré de hacerlo en los próximos posts, poco a poco.

 

En este primer post quería también decir que ha terminado una etapa y que por eso ahora es el momento de comenzar aquí. El 24 de febrero de 2009 (POR FIN) defendí mi tesis doctoral.

 

No sé si puede interesar a mucha más gente que a mi familia y a los pobres miembros del tribunal pero trato de resumir en unos párrafos algunas de las conclusiones de la tesis:

 

La investigación giraba en torno a la utilización y la utilidad de la información manejada por una agencia de cooperación para el desarrollo (de países pobres) descentralizada española en base a sus intervenciones en los países socios. Se basaba en tres ejes: Primero, análisis de las intervenciones en su fase de formulación, seguimiento y evaluación, así como de las valoraciones de los técnicos de la agencia donante. Segundo, análisis de percepciones de diversos actores implicados. Tercero, análisis organizacional de la motivación, la capacidad y el entorno institucional de la agencia donante.

 

…no quiero incitar a anti marcologistas a una enmienda a la totalidad, en fin, me considero un pragmático…mientras no haya nada mejor tendremos que tratar de hacerlo lo mejor posible…y dejo a otros más sesudos resolver el mundo.

 

 

Las conclusiones reflejan (cómo no, una vez más) el salto entre la teoría (¿el discurso, la retórica?) y la práctica:

 

1. La lógica de intervención en general permanece inalterada durante el ciclo de las intervenciones, de forma que lo previsto en la identificación y formulación se convierte en realidad. Como reflexión señalo que la falta de modificación del modelo lógico puede, a veces, estar asociado a cierta falta de utilidad o flexibilidad.

 

2. Hay un claro desequilibrio hacia la rendición de cuentas (sobre el aprendizaje) en el uso de todo el proceso. Reconociendo que ambos paradigmas, rendición de cuentas y aprendizaje, son inseparables, se aprecian pocos indicios de toma de decisiones al máximo nivel estratégico en base a aprendizajes del ciclo de las intervenciones: Los indicadores son poco útiles; el seguimiento desde la agencia donante no es analítico y no alimenta resultados organizacionales; en las administraciones públicas españolas prima la planificación en base a presupuesto (a pesar de los deseos “de algunos” de hacerlo con otros enfoques)

 

3. Las demandas de información de la agencia donante no responden a una estrategia de gestión de la información que aclare qué información, para qué y cómo ha de tratarse. Las demandas no son funcionales al no tener una utilidad estratégica.  

 

Algunas recomendaciones que se dieron en su momento a la agencia donante:

 

1. Los sistemas de información en base a la gestión de intervenciones  no tienen una regla universal, sino que cada organización, en función de su motivación, su capacidad y su entorno específico ha de adaptarse. Puede parecer una perogrullada, pero la realidad te demuestra que no lo es. En fin de otra manera no existiría la palabra gestión…pero es que en este sector a cualquier cosas se le llama cualquier cosa  (participación, gestión, ciclo…) sin ningún tipo de pudor o problema…

 

2. Las organizaciones deberían

ü      Tratar la información como un recurso cuya cantidad y calidad hay que planificar, presupuestar y ¡ evaluar ¡

ü      Tratar de fijarse metas organizacionales en las que se pueda atribuir qué departamentos cumplen sus funciones correctamente y cuáles han de mejorar (e incentivar según los casos)

ü      Dotarse de liderazgos fuertes que persigan una gestión interna coherente de la información

 

Como última reflexión, antes de esta primera despedida, la investigación concluye que lo que merece la pena merece la pena hacerlo bien. Y para ello, las organizaciones, los profesionales de este sector deberían reflexionar acerca de la necesidad de estrategias planificadas (no emergentes) de gestión de la información, de la necesidad de considerar la motivación, la capacidad y el entorno específico de cada organización, y de la necesidad de aprender del pasada para evitar la huida (activista) hacia adelante. En fin también concluye que, a falta de que al máximo nivel de decisión se incentive de forma más rápida en esta dirección, la sociedad civil debería pedir resultados de desarrollo a los que nuestra cooperación contribuye y productos atribuibles al buen desempeño organizacional de los actores de desarrollo: (0,7% ¿para qué?)

 

Hasta la próxima

 

PD: Si a alguien le interesa la investigación que me lo indique

 


An end and a beginning

 

This is a beginning that was long expected, but arrived later than I thought. I have another blog more personal and related to literary topics, but otherwise I dedicate this to other duties, related to what these little things that help me to live every months.

And what I do during these working hours? … it would be difficult to explain so I will try to do so in the next few posts, little by little.

In this first post I wanted also to say that it has been completed one important stage and that is why now it is the time to start here: On February 24, 2009, I got my PhD.

I do not know if it can attract far more people than my family and the members of the Phd. tribunal but I will try to summarize in a few paragraphs some of the conclusions of my Phd.:

The research was about the use and usefulness of the information managed by a decentralized Spanish donor agency, based on its interventions in partner countries. It was based on three pillars: First, analysis of interventions in their stage of development, monitoring and evaluation, as well as technical assessments of the donor agency. Second, analysis of perceptions of various stakeholders. Third, organizational analysis of the motivation, capacity and institutional environment of the donor agency.

… I do not want to incite anti frameworkers to an amendment to the full, in order, I consider myself a pragmatist … as far as there is nothing better «in practice» on the field, we will try to do our best … and I let other more clever brains solve the world

 

The findings show (yes, again) the gap between theory (the rhetoric?) and practice:

1. The intervention logic in general remains unchanged during the course of interventions, so that the provisions in the identification and development becomes a reality. Noted, as a reflection, that the lack of change of the logic model can sometimes be associated with a lack of utility or flexibility.

2. There is a clear imbalance toward accountability (on learning) in the use of the entire process. Recognizing that both paradigms, accountability and learning are inseparable, there are few signs of making strategic decisions at the highest level based on learning cycle interventions: Indicators are useless, Monitoring from donor agency is not analytical and they do not feed organizational information needs; in Spanish Public governments mangement is on planning based budget (despite the wishes of some to do it with other approaches)

3. The demands for information from the donor agencies do not respond to an information management to clarify what information for what and how it is treated. The information demands are not functional due to not having strategic utility.

Some recommendations were made to the donor agency:

1. Information systems based on management interventions have not a universal rule, but each organization has to adapt depending on its motivation, its capacity and its specific environment

2. Organizations should
 Treat the information as a resource whose quantity and quality need to be planned, budgeted and evaluated (¡¡)
 Try to set the organizational goals that can be assigned to specific departments performance, so as to incentive them.
 Providing strong leadership to pursue a coherent internal information management

As a final thought the investigation concludes that what is worth is worth doing well. To do this, organizations and professionals in this sector, should consider the necessity of planned strategies (non-emergent) information management, the need to consider the motivation, capabilities and environment of each organization, and the need to learn from the past to prevent the escape (activism) forward. Finally, in the absence of decisions at the highest level related to getting faster incentives to a better information management in the development dector, the (Sapnish and partner countries) civil society should ask to decision makers and politics for development results to which Spanish development cooperation contributes in one side, and in the other which kind of performance have our development (public and NGDO) organizations (0.7% for what?)

Until next time

PS: If anyone is interested in this research, please ask me

 

And thanks for correcting my English if neccesary…

 

 

 

Une fin et un début

 

 

Ceci est un début qui a été longtemps attendu, mais est arrivé plus tard que je pensais. J’ai un autre blog, c’est-personnelle et des thèmes littéraires, mais sinon je vais consacrer ce blog à d’autres fonctions, c’est-à-dire à se que me permet de payer l’hypothèque chaque mois : ma profession.ü ressource dont la quantité et la qualité nécessaire à la planification, de budget et d’évaluer ¡¡
 Essayer de fixer des objectifs de l’organisation
ü
qui peuvent être attribuées ministères exécutent leurs tâches correctement et ce afin d’améliorer (et à encourager, selon le cas)
 Assurer un leadership
ü
fort à poursuivre une stratégie cohérente de gestion interne de l’information

Et ce que je suis pendant les heures de travail … il serait difficile à expliquer, je vais essayer de le faire dans les prochains postes, peu à peu.

Dans ce premier message, ce que je voulais dire aussi est qu’il a terminé une étape pour mois et c’est pourquoi le moment est venu de commencer ici. Le 24 Février, 2009, j´ai soutenu ma thèse de doctorat.

Je ne sais pas si elle peut attirer beaucoup plus de personnes que ma famille et les pauvres membres du tribunal, mais je vais essayer de résumer en quelques points certaines des conclusions de la thèse:

La recherche a porté sur l’utilisation et l’utilité de l’information gérée par une agence donatrice décentralisé, sur la base de leurs interventions dans les pays partenaires. Il est fondé sur trois piliers: Tout d’abord, l’analyse des interventions dans leur stade de développement, de suivi et d’évaluation, ainsi que de l’analysis organisationnel de l’organisme donateur. Deuxièmement, l’analyse des perceptions des différentes parties prenantes. Troisièmement, l’analyse organisationnelle de la motivation, la capacité et de l’environnement institutionnel de l’organisme donateur.

… Je ne veux pas d’inciter à la lutte aux contre-cadrelogistes, à son amendement à l’application intégrale, dans l’ordre, je me considère comme un pragmatique … jusqu’à ce que il n’ya rien de mieux sur le terrain, nous essayerons de faire de notre mieux … et je laisse d´autres à résoudre le monde.

Les résultats montrent (oui, encore) de saut entre la théorie (la rhétorique?) et de la pratique:

1. La logique de l’intervention en général demeure inchangé au cours des interventions, de sorte que les dispositions de l’identification et le développement devienne une réalité. A noter comme le reflet de l’absence de changement du modèle logique peut parfois être associée à un manque d’utilité ou de flexibilité.

2. Il y a un net déséquilibre en direction de la reddition de comptes (sur l’apprentissage) dans l’utilisation de l’ensemble du processus. Reconnaissant que les deux paradigmes, la responsabilisation et l’apprentissage sont indissociables, il ya peu de signes de prendre des décisions stratégiques au plus haut niveau, basée sur l’apprentissage du cycle d’interventions: les indicateurs peu utiles, le suivi depuis le bailleur de fonds n´est pas analytique et la performance de l’organisation n’est pas alimenté de ce montant d´information; et les administrations publiques espagnoles font une planification axée sur le budget (en dépit de la volonté de certains de le faire avec d’autres approches)

3. Les demandes de information émanant d’organismes donateurs ne répondent pas à une gestion de l’information pour clarifier quelle information, pour quoi et comment elle est traitée. Les exigences ne sont pas fonctionnels parce qu´il n´y a pas une utilité stratégique.

Certaines recommandations ont été faites au organisme donateur:

1. Les systèmes d’information fondée sur la gestion des interventions ne sont pas une règle universelle, mais chaque organisation, en fonction de leur motivation, leur capacité et leur environnement spécifique doit s’adapter. (Dans l’ordre ou pas, là … mais le mot est que la gestion de ce secteur est appelé rien rien du tout (la participation, la gestion, le cycle …), sans honte ou de problème …

2. Les organisations doivent
 

Traiter l’information comme une ressource dont la quantité et la qualité nécessaire à la planification, de budget et d’évaluer ¡¡

Essayer de fixer des objectifs de l’organisation qui peuvent être attribuées aux département qui exécutent leurs tâches correctement, afin d’améliorer (et à encourager, selon le cas)

Assurer un leadership fort pour poursuivre une stratégie cohérente de gestion interne de l’information

Comme une dernière pensée, avant le premier renvoi, l’enquête conclut que ce qui vaut la peine vaut bien d´être fait. Pour ce faire, les organisations, les professionnels de ce secteur devraient envisager la nécessité de stratégies planifiées (non émergentes) pour la gestion de l’information ; la nécessité de considérer la motivation, les capacités et l’environnement de chaque organisation ; et la nécessité de tirer les leçons du passé pour empêcher l’évasion (activiste) vers l’avant. Dans le but également de constater que, en l’absence de cette décision au plus haut niveau de l’incitation plus rapide dans cette direction, la société civile espagnole et de pays partenaire devraient demander des résultats du développement à laquelle la coopération (pour le développement), et comme est-ce que c´est la performance des acteurs développement (0,7% pour quoi?)

Jusqu’à la prochaine fois

PS: Si quelqu’un est intéressé dans ce dossier, merci de me demander

 

 

Et merci de corriger mon française en case ou…