evaluación sin objetivos

Evaluación Libre de Metas (Goal-Free Evaluation)

Campo(s) Disciplinario(s) Primario(s): Evaluación de Programas, Metodología de la Investigación, Ciencias de la Educación, Políticas Públicas.

1. Definición Central

La evaluación libre de metas (conocida en inglés como Goal-Free Evaluation o GFE) es un modelo de investigación evaluativa en el que el evaluador lleva a cabo su análisis sin tener conocimiento previo de los objetivos o metas declaradas del programa o proyecto en cuestión. A diferencia de los modelos tradicionales centrados en objetivos, este enfoque se orienta exclusivamente hacia la identificación y medición de los resultados reales y los efectos efectivos que el programa produce en sus destinatarios, independientemente de si estos fueron previstos por los diseñadores de la intervención.

El propósito fundamental de esta metodología es reducir el sesgo del evaluador, quien, al desconocer las intenciones de los administradores del programa, puede observar con mayor objetividad tanto los efectos secundarios positivos como los negativos. Este paradigma sostiene que la verdadera calidad de un programa no debe medirse por su capacidad para alcanzar metas preestablecidas, sino por su capacidad para satisfacer las necesidades reales de los usuarios finales y de la sociedad en general. Al ignorar las metas, el evaluador se convierte en un observador imparcial de la realidad empírica.

Este enfoque conceptualiza el programa como una “caja negra” donde lo primordial no es lo que se pretendía inyectar como propósito, sino el impacto tangible que emerge tras la ejecución. La evaluación libre de metas se fundamenta en la premisa de que los objetivos declarados a menudo actúan como “anteojeras” que limitan la visión del investigador, impidiéndole notar cambios significativos que ocurren fuera del estrecho margen de la planificación original. Por tanto, busca una comprensión holística y fenomenológica de la intervención social o educativa.

2. Etimología y Desarrollo Histórico

El concepto de evaluación libre de metas fue introducido formalmente por el filósofo y evaluador Michael Scriven a principios de la década de 1970. Scriven, una figura central en la profesionalización de la evaluación, propuso este modelo como una respuesta crítica a la dominancia de la evaluación basada en objetivos (o modelo de Tyler), la cual consideraba restrictiva y potencialmente engañosa. Durante esta época, la disciplina de la evaluación estaba en plena expansión, impulsada por la necesidad de rendición de cuentas en los grandes programas sociales de los Estados Unidos.

Scriven argumentó que la fijación en las metas permitía que programas ineficaces o perjudiciales fueran calificados como “exitosos” simplemente porque cumplían con objetivos mal planteados o irrelevantes. La evolución histórica de este concepto marcó un cambio de paradigma desde una visión burocrática de la evaluación hacia una visión ética y socialmente responsable. En sus escritos originales de 1972, Scriven enfatizó que el evaluador debe actuar como un “sustituto del consumidor”, priorizando el bienestar del usuario sobre las aspiraciones de los gestores del proyecto.

A lo largo de las décadas de 1980 y 1990, la evaluación libre de metas se integró en el arsenal de las metodologías cualitativas y mixtas, ganando terreno en campos como la salud pública y el desarrollo internacional. Aunque inicialmente fue recibida con escepticismo por los defensores del rigor cuantitativo, la historia de este concepto demuestra una maduración hacia la complementariedad, donde se reconoce que la GFE ofrece una profundidad de análisis sobre las consecuencias no deseadas que los modelos lineales simplemente no pueden capturar.

3. Características Clave

• Independencia de los Objetivos Declarados: El evaluador evita deliberadamente leer documentos de planificación o propuestas de subvención que detallen las metas del programa para mantener su objetividad.
• Enfoque en los Resultados Reales: Se prioriza la observación de lo que realmente sucede en el terreno y los cambios tangibles en la población objetivo.
• Detección de Efectos Secundarios: Posee una alta sensibilidad para identificar impactos colaterales, ya sean beneficiosos o perjudiciales, que no estaban contemplados en el diseño original.
• Orientación a las Necesidades: La métrica de éxito no es el cumplimiento del plan, sino la satisfacción de las necesidades humanas y sociales básicas.
• Reducción de Sesgos de Confirmación: Al no buscar evidencias de éxito predefinidas, el evaluador es menos propenso a filtrar información que contradiga las expectativas de los patrocinadores.
• Metodología Inductiva: A menudo emplea técnicas de recolección de datos abiertas, como entrevistas en profundidad y observación participante, para descubrir patrones emergentes.

4. El Rol del Evaluador Independiente

En el marco de la evaluación libre de metas, el profesional debe poseer un alto grado de integridad ética y competencia técnica. Su función no es validar el trabajo de los administradores, sino actuar como un testigo imparcial de la realidad. Para lograr esto, el evaluador a menudo requiere un “intermediario” o coordinador que gestione el acceso a los datos y participantes sin revelar las metas del programa, manteniendo así la “ceguera” metodológica necesaria para el proceso.

Este rol exige una capacidad analítica superior para sintetizar grandes volúmenes de información diversa y determinar qué resultados son significativos. El evaluador debe ser capaz de discernir entre cambios triviales y transformaciones sustantivas en el entorno evaluado. A diferencia de un auditor tradicional, el evaluador libre de metas debe ser creativo en su búsqueda de evidencia, explorando rincones del programa que otros ignorarían por no estar vinculados a los indicadores clave de desempeño (KPIs).

Finalmente, el evaluador asume una responsabilidad social considerable, ya que sus hallazgos pueden revelar que un programa popular es, en realidad, ineficaz o que un programa con metas modestas está generando beneficios extraordinarios en áreas imprevistas. Esta posición requiere una comunicación asertiva para presentar resultados que pueden desafiar las narrativas oficiales de las organizaciones, manteniendo siempre un enfoque en la mejora continua y la transparencia.

5. Metodología y Proceso de Implementación

La implementación de una evaluación libre de metas comienza con el establecimiento de un protocolo de aislamiento de información. El equipo evaluador acuerda con la organización cliente que no se les proporcionará acceso a los marcos lógicos, planes estratégicos o declaraciones de misión. En su lugar, el equipo se sumerge en el entorno del programa para observar las actividades diarias, entrevistar a los beneficiarios y analizar los productos o servicios finales entregados, buscando responder a la pregunta: “¿Qué está ocurriendo realmente aquí?”.

Durante la fase de recolección de datos, se utilizan múltiples fuentes de evidencia para asegurar la triangulación. Esto incluye el análisis de documentos operativos (sin metas), registros de asistencia, encuestas de satisfacción de usuarios y observaciones directas. El proceso es altamente iterativo; a medida que surgen nuevos hallazgos sobre los efectos del programa, el evaluador ajusta sus herramientas de recolección para profundizar en esas áreas específicas, permitiendo que la realidad del programa guíe la investigación.

Una vez recolectada la información, se realiza una síntesis donde se comparan los resultados observados con estándares externos de necesidad o calidad. Solo en la fase final del informe, el evaluador puede comparar sus hallazgos con las metas originales del programa (si así se requiere) para ofrecer una visión completa. Este contraste permite identificar brechas críticas entre la retórica institucional y la práctica operativa, proporcionando una base sólida para la toma de decisiones estratégicas.

6. Significado e Impacto

La importancia de la evaluación libre de metas radica en su capacidad para actuar como un mecanismo de control de calidad radical y honesto. En un entorno donde las organizaciones a menudo sufren de “visión de túnel” debido a la presión por cumplir métricas específicas, la GFE ofrece una perspectiva externa refrescante que puede salvar proyectos al identificar problemas graves antes de que se vuelvan sistémicos. Su impacto se extiende a la formulación de políticas, donde ayuda a los legisladores a comprender las consecuencias sociales reales de sus decisiones.

Además, este concepto ha transformado la manera en que entendemos el éxito institucional. Ha fomentado una cultura de responsabilidad que va más allá del simple cumplimiento de tareas (compliance) para centrarse en el valor público generado. Al validar la importancia de los resultados imprevistos, la GFE ha permitido que muchas innovaciones accidentales sean reconocidas y escaladas, convirtiendo lo que originalmente se consideraba un “error” de implementación en una nueva mejor práctica.

En el ámbito académico, el modelo de Scriven ha servido como base para el desarrollo de otras teorías de evaluación centradas en el valor y la ética. Ha provocado debates fundamentales sobre la naturaleza de la objetividad en las ciencias sociales y ha impulsado el uso de métodos cualitativos rigurosos. El impacto duradero de la GFE es la democratización de la evaluación, al dar voz a los resultados que importan a los usuarios, no solo a los que importan a los directivos.

7. Comparación con la Evaluación Basada en Objetivos

Mientras que la evaluación basada en objetivos es deductiva y busca confirmar si se alcanzaron las metas predefinidas, la evaluación libre de metas es inductiva y exploratoria. La evaluación tradicional es excelente para la rendición de cuentas contractual, pero a menudo falla en detectar si las metas mismas eran las correctas o si el proceso para alcanzarlas causó daños colaterales. En contraste, la GFE no asume que las metas son valiosas *per se*, sino que somete la utilidad del programa a un escrutinio independiente.

Otra diferencia crítica reside en la relación con los gestores del programa. En la evaluación por objetivos, los gestores y evaluadores suelen colaborar estrechamente para definir indicadores, lo que puede llevar a una cooptación del evaluador. En la GFE, se mantiene una distancia profesional necesaria para preservar la integridad del juicio evaluativo. Esta separación garantiza que el informe final sea una representación fiel de la realidad y no una validación complaciente de los deseos de la gerencia.

No obstante, ambos modelos pueden ser complementarios. Muchos expertos sugieren un enfoque de evaluación mixta, donde un equipo evalúa el cumplimiento de metas mientras que otro equipo independiente realiza un análisis libre de metas. Esta combinación permite obtener lo mejor de ambos mundos: datos precisos sobre la eficiencia operativa y una comprensión profunda del impacto social holístico y las dinámicas imprevistas del programa.

8. Debates y Críticas

A pesar de sus beneficios, la evaluación libre de metas no está exenta de controversias. Una de las críticas más comunes es la dificultad logística de mantener al evaluador verdaderamente “ciego” ante las metas del programa, especialmente en organizaciones pequeñas o proyectos muy conocidos donde los objetivos son de dominio público. Los críticos argumentan que la ignorancia total es un ideal difícil de alcanzar en la práctica profesional contemporánea, lo que podría comprometer la premisa básica del modelo.

Asimismo, algunos teóricos sostienen que ignorar las metas puede llevar a una evaluación ineficiente, ya que el investigador podría gastar recursos considerables analizando aspectos del programa que son irrelevantes para su propósito fundamental. Existe la preocupación de que, sin el mapa que proporcionan los objetivos, el evaluador pueda perderse en una montaña de datos anecdóticos, careciendo de un marco de referencia claro para juzgar el éxito o el fracaso de la intervención.

Finalmente, se ha debatido sobre la utilidad de los informes de GFE para los gestores de programas. Dado que los administradores son evaluados a menudo por su capacidad para alcanzar objetivos específicos, un informe que ignore estos objetivos puede ser percibido como poco práctico o difícil de traducir en acciones correctivas inmediatas. Esta tensión entre la pureza metodológica y la utilidad administrativa sigue siendo un punto de discusión central en los simposios internacionales de evaluación.

9. Relevancia Contemporánea

En la actualidad, la evaluación libre de metas está experimentando un resurgimiento en el contexto de la complejidad social y los sistemas adaptativos. En un mundo interconectado, las intervenciones rara vez producen resultados lineales; por el contrario, generan ondas de impacto en múltiples direcciones. La GFE se presenta como una herramienta indispensable para evaluar la sostenibilidad y la resiliencia, donde los resultados inesperados son a menudo más importantes que los planificados.

Con el auge del Big Data y la inteligencia artificial, la capacidad de procesar grandes volúmenes de datos sin sesgos predefinidos ha dado un nuevo aire a los principios de Scriven. Los algoritmos de aprendizaje no supervisado, por ejemplo, operan bajo una lógica similar a la GFE, identificando patrones y resultados en los datos sin ser dirigidos por hipótesis previas. Esto demuestra que la intuición de Scriven sobre la necesidad de una observación libre de prejuicios es más relevante que nunca en la era de la información.

Además, en sectores como el emprendimiento social y la innovación tecnológica, donde el “pivotar” es la norma, la evaluación basada en metas fijas resulta obsoleta rápidamente. La evaluación libre de metas ofrece la flexibilidad necesaria para capturar el valor de proyectos que cambian de dirección frecuentemente, asegurando que el aprendizaje organizacional se base en lo que realmente funciona y no en planes estáticos que ya no responden a la realidad del mercado o la sociedad.

10. Lectura Adicional

• BetterEvaluation: Goal-Free Evaluation Approach
• Wikipedia: Program Evaluation Models
• Evaluation Journal: Theoretical Foundations of Michael Scriven
• ScienceDirect: Goal-Free Evaluation in Social Sciences
• Caja de Herramientas Comunitarias: Introducción a la Evaluación de Programas