You are currently browsing the monthly archive for Mayo 2007.
Una mala (pero libre, al fin y al cabo) traducción del libro de Sabina Alkire, Valuing Freedoms, para introducir uno de los textos que a algunos compañeros y compañeras en la Universidad nos tiene reflexionando. A mi especialmente, por lo que de evaluación tiene, aunque en realidad a lo que estamos dándole vueltas es al Enfoque de las Capacidades de Amartya Sen, fundamento filosófico de su aporte.
Este es otro tema del que hablar largo y tendido, y que espero que abordemos próximamente, para ir haciendo lo que algunos llaman “construcción colectiva de conocimiento”. No pretendo hacer un comentario del libro, aunque para el que le interese le diré que vale la pena echarle un vistazo, especialmente a la primera parte. Vistazo, porque para profundizar, siempre es mejor ir a los originales (Sen, principalmente Development as Freedom). Mi mayor crítica, que espero poder poner en negro sobre blanco en los próximos días: después de un planteamiento de desarrollo como ampliación de las capacidades, de la libertad, con un fuerte arraigo ético, resulta que la propuesta “operativa” de cómo valorar el desarrollo entendido como dicha ampliación se basa en un modelo econométrico
(análisis coste-beneficio). Un poco cojo en la pata evaluativa, a mi gusto.
Sin embargo, no hay hasta el momento más propuestas operativas. Algunos pensamos que el discurso de las Capacidades es muy interesante como marco para desarrollar nuevos instrumentos que sirvan de contrapunto en la gestión de intervenciones, y en especial de la evaluación. Pero hay que ponerse a ello.
Se admiten voluntarios 
Hoy he comrorbado una máxima de un buen amigo y maestro, aplicable a casi todo, pero especialmente a la ciencia: “cuando piensas en una buena idea, casi seguro alguien en el mundo ya la había pensado antes“. Esto tiene buenas y malas lecturas: el vaso medio vacío nos dice que no somos originales. Yo prefiero verlo medio lleno: no estábamos tan mal encaminados
Los que me conocen saben de mi pasión por la numeritis, las matemáticas, los calculitos, las gráficas…y su uso en la gestión de proyectos, y en especial, en la evaluación. Creo sinceramente que pueden ser de gran utilidad, bien empleadas (aunque esto de “emplear bien o no, en sentido ético, lo discutimos en otro post…que da para rato). Y en este pack es donde ubico las Técnicas Multicriterio Discretas, toda una batería de m´todos y técnicas, con soporte matemático, para ayudarnos en situaciones en las que es bueno (e incluso higiénico) explicitar y sitematizar lo más posible el proceso de toma de decisiones. Esto es algo realmente importante en el uso de resultados o recomendaciones de evaluación.
Curioseando por la revista “Evaluation” del Instituto Tavistock (Londres) me he encontrado con una publicación de Jos Vaessen (Universidad de Atwerp, Bélgica), titulada “Programme Theory Evaluation, Multicriteria Decision Aid and Stakeholder Values: A Methodological Framework“. Se trata de un artículo bastante generalista, pero muestra en un caso de estudio (programa de Desarrollo Rural en el Altiplano de Guatemala) las posibilidades de este enfoque.
Interesante echar un vistazo, con recomendables citas sobre Multicriterio para los evaluadores que se inician en el tema.
ACTUALIZACIÓN 23/05/07
El irónico y (casi) siempre acertado Dilbert me hace recapacitar, una vez más, sobre mi fe en los programitas que calculan y nos hacen la vida más fácil en la evaluación y la toma de decisiones
Cuando cualquiera en España siente la tentación de adentrarse en el mundo de la evaluación, siempre se topa con el mismo problema: ¿dónde encontrar un buen manual de evaluación? A estas alturas, como en casi todo en la red, lo que sobra es material. En estos momentos, uno puede descargarse muy buenos materiales en formato electrónico, y no es demasiado difícil encontrarlos.
Sin embargo, al contrario que en el caso anglosajón, o incluso en los materiales en español generados por autores latinoamericanos, en España no tenemos mucho “Producto Nacional”. No deja de ser curioso que haya más manuales en español que son traducción de otros (normalmente en inglés) que producciones realizadas directamente por expertos de nuestro país.
No es que quiera a estas alturas enarbolar la bandera de “lo nuestro” por encima de todo, pero si hasta la fecha en nuestro país no tenemos apenas producción sobre temas de evaluación, por algo será. Valdría la pena revisarnos y ver por qué. Y, por supuesto, lanzarnos más a escribir y a publicar, ahora más que nunca que tenemos tantos medios al alcance para dar difusión a nuestras propuestas. Entono el mea culpa por la parte que me toca, y a ver si posteamos menos y publicamos más
De todos modos, para que no se diga que no tenemos nada de nada, dejo una recomendación para que la bajéis y la guardéis en vuestros archivos, por si en algún momento os puede ser de utilidad. Se trata del manual “Evaluación en la gestión de proyectos y programas de desarrollo: una propuesta integradora“, el quinto de los manuales de la serie de Cuadernos de Desarrollo de la Cooperación Vasca. Viene firmado por Lara González, consultora en estos temas, y creo que es un texto que a muchos os puede servir en las organizaciones para introduciros en el tema y perder el miedo a llevar a cabo procesos de evaluación en vuestras intervenciones. Eso sí, también os recomiendo que consultéis la bibliografía si queréis aplicar alguna cuestión en concreto, puesto que como en casi todos los manuales, se sacrifica la claridad y la facilidad de lectura por la precisión metodológica.
Estamos en plena efervescencia. Gran despliegue de medios. Programas electorales repletos de promesas. La Cooperación al Desarrollo no pasa desapercibida ya para ningún partido. Y se visibiliza.
Hemos visto cómo la llamada Cooperación Descentralizada ha sufrido un enorme incremento en los últimos años. Sin entrar en lo que debería ser y no es, lo cierto es que este sector de cooperación tan nuestro (en pocos países aparece este fenómeno con tal presencia) ha ido cobrando fuerza. No es casual que la Cooperación Española, con un tradicional desinterés por las iniciativas de las administraciones locales en esta materia, con el tiempo las va tomando como un agente potencialmente relevante, al menos por ahora en lo que a capacidad de cofinanciación se refiere. Sugiero a quien interese profundizar algo más, un cuaderno Bakeaz del siempre sorprendente Carlos Gómez Gil (“La cooperación descentralizada en España: ¿motor de cambio o espacio de incertidumbre?. Cuadernos Bakeaz, 46, 2001).
El proceso electoral no es ajeno. Revisando algunos programas electorales de la Comunidad Valenciana, he visto cómo se llenan páginas de propuestas, la mayoría imposibles de monitorear en el caso en el que sean una realidad. Y entre toda la maraña, cómo no, la evaluación. Que si el impacto, que si el control…¿conseguiremos algún día que, al menos como discurso, también aparezcan, al lado de la evaluación, términos como utilidad, participativa, aprendizaje?
Por de pronto, en mi Comunidad, tendremos un debate con representantes políticos (PP, PSPV, EU) el próximo lunes día 7 de mayo. Será a las 19h en el Aula de los Caballeros de la Universidad Internacional Menéndez Pelayo en Valencia (Plaza del Carmen, 4). La Coordinadora Valenciana de ONGD ha organizado el evento, a raíz de los actos diseñados para extender la campaña Pobreza Cero a las fechas próximas a las elecciones de ese mes.
Yo pienso ir. Y, si me dejan, pienso preguntar. Sobre evaluación, claro y otros asuntos. Aviso a navegantes (léase políticos): me he bajado y subrayado los programas electorales…
ACTUALIZACIÓN 22/05/2007
Al final fui. Pero como si no hubiera ido. O mejor dicho, valdría la pena no haber ido. Salí muy decepcionado de la actividad, y creo que no fui el único. Aplaudo la iniciativa de la CVONGD (aunque en mi humilde opinión, el formato pecó de protagonismo de la Coordinadora y sus propuestas frente al debate en sí), y quizá si vamos haciendo más cosas así, poco a poco vayamos creando cierta conciencia crítica. Pero nos queda mucho, mucho por recorrer.
Los políticos: como cabía esperar, correctos, prometedores, pero sin el manejo de la temática que cabría esperar. Destacable la ausencia de representantes del PP con actuales reponsabilidades en Cooperación al Desarrollo.
Los presentes: muchas preguntas que dejan un mal sabor de boca. ¿Qué le pasa al sector?
Muchos notamos un cierto grado de ombliguismo en el discurso. Si el mayor problema de la cooperación valenciana actual es que se hacen más convenios directos que subvenciones por parte de la Generalitat, no tenemos más remedio que terminar con la manida sentencia “apaga, y vámonos”.
Ayer charlaba con mi querida amiga Dina Mabel López, del Programa Especial para la Seguridad Alimentaria (PESA-Centroamérica), y me recordaba la importancia de la participación de la ciudadanía en los procesos de desarrollo municipal. La participación, como la libertad, es un concepto que nadie acaba de definir con exactitud pero que todo el mundo entiende. Nuestro problema como sociedad, en muchas ocasiones, reside en no saber muy bien cómo organizar eficientemente el modo en el que todos, o una gran mayoría, podemos tomar parte en el proceso, en las decisiones, en la construcción.
Hace tiempo descubrí una iniciativa en Cataluña que me parece muy interesante en este sentido. Delibera es un modelo de participación que conjuga muy bien el uso de nuevas tecnologías con un un proceso sencillo y accesible a la mayoría. Mediante un sistema de consulta y voto codificado en colores, Delibera permite a un gran número de personas de diferentes grupos sociales, colectivos, etc. tomar parte en un proceso público deliberativo. Como reza su página “hi ha molta gent, poc temps y molts temes a tractar” (hay mucha gente, poco tiempo y muchos temas que tratar). Internet juega en este modelo un papel de gran relevancia. Mediante el sistema Delibera, es posible crear y gestionar foros de consulta con gran facilidad. El sistema de “votación” es sencillo y puede hacerse también vía Internet.
A pesar de que pueda parecer que no hay nada de novedad en ello (tirando de biliografía, los colorines me recuerdan algo al Ábaco de Régnier), creo que la gente de Delibera ha logrado desarrollar un modelo que conjuga sencillez, versatilidad y eficiencia sin pecar de falta rigor. Algo poco usual. Y a las pruebas me remito: mirad su amplísima lista de clientes, principalmente (y de ahí este post) adminsitraciones públicas locales.
¿Y qué hay de la evaluación? He intentado ver ejemplos pero no encuentro demasiado. Entiendo que el sistema de votación podría facilitar mucho las cosas en cuestiones de diseño, desde lo más macro (políticas) hasta lo más micro(proyectos), por ejemplo en la selección o priorización de alternativas.
Resumiendo: una buena herramienta que poner en nuestra chistera. Sería fantástico que esta gente “liberara” su sistema, y en un símil Microsoft vs. Linux, socializara su desarrollo. Sería muy buenopara todos, y estoy convencido de que incluso sería aún más rentable para la empresa. Pero quizá eso es cosa de la economía del futuro y, lamentablemente, demasiadas empresas españolas todavía juegan en el tablero del siglo pasado.
Creo que no hay palabra que guste más a propios y extraños alrededor de la Evaluación (y más cosas) que “impacto”. Probablemente, será el ímpetu que sugiere la cosa, que uno no puede pasar sin ella.
Mucho nos queda por hablar del tema, pero creo que vale la pena hacer mención de un tema, de impacto , sobre el que se ha posteado, y mucho, en los círculos de evaluadores (mayoritariamente de habla inglesa). Se trata de un informe elaborado por una entidad llamada Center for Global Development, una entidad privada patrocinada nada más y nada menos que por la Fundación Gates. El informe en cuestión, elaborado por un grupo de trabajo llamado Evaluation Gap, lleva por desafortunado título “When will we ever learn?“, algo así como “¿Cuándo aprenderemos de una vez?”.
El tema del informe viene a decirnos que se hace mucha evaluación pero con poco rigor. Supongo que lo de “mucha evaluación” no se refiere a nuestro país. La polémica ha saltado, no tanto por las críticas a la práctica profesional de la evaluacion (que también, dado que los autores parece que no son grandes conocidos del sector) sino por la sospecha de propuesta que viene detrás. Cuando el informe habla de “rigor”, y alude a la validez de los resultados de las evaluaciones, lo hace desde la óptica de un enfoque muy particular de evaluación: enfoques experimentales. Sí, sí, los del grupo de control, el tema aleatorio, etc.
Animo a los presentes a echarle un vistazo al informe ejecutivo, para hacerse una idea de lo que comento. Por aquí por la Península no tenemos el tema demasiado hablado, y sería bueno que lo hiciéramos, porque de ese modo, venga lo que venga (modas, estándares, imposiciones incluso) por lo menos sabemos de qué hablamos y a qué atenernos.
Por si alguien no lo ha notado, yo no lo tengo ni medio claro (lo del “impacto”). Será que últimamente sólo leo propuestas transgresoras. Pero eso es otra historia, y como dice Michael Ende “…será contada en otra ocasión”.
Los que somos de la época de la Bruja Avería y Cía. se ve que tenemos estas premisas de la Bola del Cristal marcadas a fuego. Realmente, aunque uno no de daba cuenta entonces, era un excelente programa.
Viene al caso la frase para hablar un poquito de las organizaciones de evaluación. Quizá en España no tenemos demasiada tradición (ni de organizaciones de evaluación…ni de evaluación tampoco, claro), pero se van abriendo espacios. Hace unos seis años surgió la Sociedad Española de la Evaluación, en un modelo similar al que existe en un buen número de países: me refiero a las organizaciones nacionales/estatales de evaluadores/as. La verdad, no acabo de entender porqué fue subtitulada “…de Evaluación de Políticas Públicas”. Lamentablemente me perdí el arranque y no se si lo de públicas es una concepción centrada en la acción (las actividades evaluadas) o en el agente (vaya, administración pública). Será cuestión de preguntar.
Las asociaciones profesionales son espacios privilegiados para cualquiera interesado en una determinada rama. La evaluación es también una profesión y las asociaciones vienen desarrollando una extraordinaria labor de dinamización de la profesión. Como puede observarse, soy creyente fervoroso. Y es que, contra todo pronóstico, mi primera conexión con este mundo fue en la Asociación Americana de la Evaluación (AEA, Estados Unidos), en su fantástica macro-Conferencia Anual del 2001. Una experiencia que recomiendo a todo forofo del tema, al menos una vez en la vida.
Comento estas cosas, porque tengo la sensación de que, como en otros espacios, hay poderes a los que interesa que la gente de la Evaluación no se organice. Divide y vencerás. Animo pues a la participación colectiva. Los que somos de la Península Ibérica tenemos una oportunidad en la SEE. Yo haré lo propio y me apuntaré de socio, que siempre lo pienso y siempre se me olvida. Ah, y de paso, echad un vistazo a la propuesta de Conferencia de este año (son bienales, así que no os la perdáis o tendréis que esperar hasta 2009). Yo seguro voy, y además me viene de maravilla, pues empalma perfectamente con el Congreso Anual de Proyectos de Ingeniería, mi área docente de referencia, donde también se está abriendo en los últimos años un espacio para hablar de temas de Cooperación y Desarrollo.
No es un mal día para empezar algo así: Primero de Mayo. Bueno, realmente esta historia ya ha comenzado hace tiempo, pero ahora toma la forma de cuaderno electrónico. Materiales, experiencias, reflexiones, acerca del fantástico mundo de la Evaluación, y sus alrededores. Espero que entre todas, entre todos, lo vayamos desenmarañando.
Espero veros pronto merodeando por aquí…
