Evaluación sin objetivos

La evaluación sin objetivos ( GFE , por sus siglas en inglés) es cualquier evaluación en la que el evaluador lleva a cabo la evaluación sin conocimiento particular ni referencia a los objetivos y metas declarados o predeterminados. ^{[ 1 ] [ 2 ] [ 3 ]} Este modelo de evaluación externa generalmente consiste en un evaluador independiente que es intencionalmente excluido de los objetivos y metas declarados del programa con la esperanza de reducir la posible visión de túnel relacionada con los objetivos . ^{[ 3 ] [ 4 ]} Según Scriven, ^{[ 3 ] : 180} la lógica detrás de evitar los objetivos y metas declarados tiene que ver con "averiguar qué está haciendo realmente el programa sin que se le indique lo que está tratando de hacer. Si el programa está logrando sus objetivos y metas declarados, entonces estos logros deberían aparecer; de lo contrario, se argumenta, son irrelevantes". El evaluador sin objetivos intenta observar y medir todos los resultados, efectos o impactos reales, intencionados o no intencionados, todo sin que se le indiquen las intenciones del programa. Como lo ilustra Popham, "Como se puede aprender de cualquier lanzador de béisbol que se haya propuesto en la primera entrada lograr una blanqueada , lo que cuenta es el marcador final del juego, no las buenas intenciones". ^{[ 5 ]}

La evaluación sin objetivos no es un modelo de evaluación integral e independiente; más bien, se considera una perspectiva o postura sobre la orientación hacia los objetivos del evaluador a lo largo de la evaluación, o una técnica o herramienta para evaluar sin hacer referencia a los objetivos. Scriven afirma que la evaluación sin objetivos es metodológicamente neutral, lo que significa que puede utilizarse o adaptarse para su uso con otros enfoques, modelos y métodos de evaluación, siempre que estos no exijan la orientación hacia los objetivos. ^{[ 3 ]}

Youker e Ingraham resumen los beneficios de GFE como: ^{[ 1 ] [ 4 ]}

• Objetivo de control
• Descubriendo los efectos secundarios
• Evitar la retórica de los objetivos "verdaderos"
• Adaptación a los cambios contextuales/ambientales
• Alinear los objetivos con las actividades y los resultados reales del programa.
• Complementar la evaluación basada en objetivos (también conocida como evaluación basada en metas)

En realidad, solo hay dos requisitos metodológicos de GFE. El primero es que el evaluador independiente de objetivos sea externo e independiente del programa y sus partes interesadas (financiadores, diseñadores, administradores, gerentes, personal, voluntarios, proveedores, etc.); ^{[ 6 ]} el segundo es que se designe a alguien para filtrar los objetivos. Un filtrador es una parte imparcial (es decir, alguien que no está asignado al diseño de GFE ni a la recopilación de datos), como un asistente administrativo , un tercero o incluso el cliente de la evaluación. ^{[ 7 ]} El filtrador interviene entre el evaluador y el personal del programa para eliminar las comunicaciones y los documentos orientados a objetivos antes de que lleguen al evaluador independiente de objetivos. El filtrador no requiere una formación extensa; sin embargo, debe tener una comprensión básica del propósito y la metodología de GFE y estar relativamente familiarizado con la organización y su programa para poder identificar los objetivos del programa.

Existen dos tipos de evaluaciones GFE. El primer tipo se da cuando un evaluador evita intencionalmente los objetivos establecidos tomando precauciones especiales. Por ejemplo, la evaluación puede contratar a personas que actúen como enlace entre el evaluador y el cliente. Esto ayuda a reducir el sesgo, ya que permite que los resultados hablen por sí mismos. El segundo tipo es el de desestimación de objetivos. Un evaluador que desestima los objetivos simplemente los ignora, en lugar de tomar precauciones especiales para evitarlos. ^{[ 3 ]}

En un intento reciente de articular aún más los principios generales para guiar al evaluador sin objetivos, Youker propuso los siguientes principios: ^{[ 2 ]}

1. Identificar los efectos relevantes que se deben examinar sin hacer referencia a las metas y los objetivos.
2. Identificar lo que ocurrió sin que se establecieran metas ni objetivos.
3. Determinar qué ocurrió puede atribuirse lógicamente al programa o intervención .
4. Determinar en qué medida los efectos son positivos, negativos o neutros.

Michael Scriven introdujo por primera vez el concepto de GFE en la década de 1970. ^{[ 3 ]} Según Youker, Ford y Bayer, tras la introducción de la GFE, hubo un interés moderado en el uso de la técnica. ^{[ 8 ]} Después de su introducción, la adopción se ha ralentizado; el interés ha disminuido, dejando pocos profesionales. En la década de 2000, hubo un pequeño resurgimiento del interés en la GFE. En una búsqueda bibliográfica sobre la GFE desde 1972 hasta 2012, Youker e Ingraham (2013) descubrieron aproximadamente una veintena de evaluadores que afirman haber realizado una GFE o que otros los identificaron como tales. ^{[ 1 ] [ 9 ]}

La GFE ha identificado limitaciones. Primero, la GFE no es apropiada en todas las circunstancias. Por ejemplo, cuando un cliente solo está interesado en examinar el logro de objetivos. Segundo, no se recomienda como un enfoque de evaluación independiente. La GFE se utiliza como complemento de las estrategias de evaluación basadas en objetivos. Tercero, la GFE puede ser eficiente para evaluar resultados, ya que el evaluador abarca un amplio espectro en la búsqueda de resultados. Cuarto, la GFE ignora las opiniones y objetivos de ciertos grupos de interés, por ejemplo, los administradores, diseñadores y financiadores. ^{[ 3 ]} Dado que no existe una metodología estandarizada o manualizada para el uso de la GFE, la evaluación de la calidad de su administración es difícil. ^{[ 4 ]}