Evaluación realista

La evaluación realista o revisión realista (también síntesis realista ) es un tipo de evaluación basada en la teoría que se utiliza para evaluar programas sociales . ^{[ 1 ]}

Originalmente se basaba en los fundamentos epistemológicos del realismo crítico . Ray Pawson, uno de los precursores de la evaluación realista, quedó inicialmente impresionado por cómo el realismo crítico explica la causalidad generativa en la ciencia experimental; sin embargo, más tarde criticó su «pretenciosidad filosófica» y su «marxismo que lo explica todo». ^{[ 2 ]}

Basándose en teorías específicas , la evaluación realista ofrece una perspectiva alternativa a las técnicas de evaluación empiristas para el estudio y la comprensión de programas y políticas . Algunos autores sobre evaluación realista sostienen que las intervenciones son teorías. ^{[ 3 ]} Esta técnica parte de la premisa de que el conocimiento es un producto social e histórico; por lo tanto, el contexto social y político, así como los mecanismos teóricos, deben considerarse en el análisis de la eficacia de programas o políticas. ^{[ 4 ] [ 5 ] [ 6 ]}

Las técnicas de evaluación realistas reconocen que existen muchas variables interrelacionadas que operan en diferentes niveles de la sociedad; por lo tanto, este método de evaluación se adapta mejor a las intervenciones sociales complejas que los métodos de análisis tradicionales de causa-efecto, que no tienen en cuenta el contexto. Esta técnica realista reconoce que los programas de intervención y los cambios de política no necesariamente funcionan para todos, ya que las personas son diferentes y están inmersas en contextos distintos. ^{[ 7 ]}

La evaluación realista fue popularizada por el trabajo de Ray Pawson y Nick Tilley en 1997. ^{[ 8 ]} Describieron el procedimiento seguido en la implementación de técnicas de evaluación realista en la evaluación de programas y enfatizaron que, una vez generadas las hipótesis y recopilados los datos, se exploran los resultados del programa, centrándose en los grupos que se beneficiaron del programa y aquellos que no se beneficiaron. Por lo tanto, la efectividad de un programa no depende únicamente de los resultados (causa-efecto), sino que se consideran los mecanismos teóricos que se aplican y el contexto sociohistórico en el que se implementaron los programas. Así, la explicación final de un programa considera el contexto, el mecanismo y el resultado. ^{[ 9 ]}

Según Pawson y Tilley (1997), todos los métodos de investigación son aplicables en las evaluaciones realistas: ^{[ 10 ]}

"...es perfectamente posible llevar a cabo una evaluación realista utilizando: estrategias, cuantitativas y cualitativas; escalas temporales, contemporáneas o históricas; puntos de vista, transversales o longitudinales; muestras, grandes o pequeñas; objetivos, orientados a la acción o centrados en la auditoría; y así sucesivamente."

Trabajos posteriores enfatizaron que el enfoque de evaluación realista fue un intento de introducir ideas básicas de las ciencias sociales a la evaluación. Por ejemplo (Pawson y Tilley, 2001, p.  324): ^{[ 11 ]}

Hemos sostenido que una buena evaluación es sinónimo de buena ciencia social. Para nosotros, esto abarca los nobles objetivos de precisión en la formulación de la teoría, rigor en la verificación empírica, coherencia en las líneas de investigación y acumulación en el conjunto de los hallazgos. El «movimiento realista», del que formamos parte, suele considerarse el audaz advenedizo de las escuelas de evaluación. De hecho, se basa en estas ideas bastante venerables. El futuro, por lo tanto, reside en mantenernos fieles a algunos de los grandes principios de la ciencia social y en no olvidar las valiosas lecciones aprendidas de los estudios clásicos.

Aunque las configuraciones de contexto-mecanismo-resultado se consideran a menudo el sello distintivo de las evaluaciones realistas, también se argumenta que esto es generalizado en las ciencias sociales y otras (Pawson, 2024, p.  42): ^{[ 12 ]}

Toda investigación científica utiliza explicaciones que relacionan mecanismos y contextos con patrones empíricos.

Un libro de 2024 argumenta que es posible realizar ensayos controlados aleatorios realistas ^{[ 13 ]} y Gill Westhorp y Simon Feeny (2024) explican la relevancia de las encuestas y los modelos de regresión (incluidos los términos de interacción y el ajuste de covariables) para probar configuraciones Contexto-Mecanismo-Resultado. ^{[ 14 ]} Esta forma de evaluación basada en la teoría se ha utilizado cada vez más en una variedad de diferentes entornos y agendas de investigación, incluidos los sistemas de salud y la política social. ^{[ 15 ] [ 16 ] [ 17 ]} Las directrices y los recursos metodológicos sobre evaluación realista se han traducido y puesto a disposición en español a través de la iniciativa RAÍCES. ^{[ 18 ]}