Articulo de referencia

Pruebas de progreso

Las pruebas de progreso son herramientas de evaluación educativa longitudinales, orientadas a la retroalimentación, para evaluar el desarrollo y la sostenibilidad del conocimien...

Las pruebas de progreso son herramientas de evaluación educativa longitudinales, orientadas a la retroalimentación, para evaluar el desarrollo y la sostenibilidad del conocimiento cognitivo durante un proceso de aprendizaje. Una prueba de progreso es un examen escrito de conocimientos (generalmente con preguntas de opción múltiple) que se administra a todos los estudiantes del programa "A" al mismo tiempo y a intervalos regulares (generalmente de dos a cuatro veces al año) a lo largo de todo el programa académico. La prueba abarca el dominio completo del conocimiento que se espera de los nuevos graduados al finalizar sus cursos, independientemente del año académico del estudiante. Las diferencias entre los niveles de conocimiento de los estudiantes se reflejan en las puntuaciones de la prueba; cuanto más avanzado esté un estudiante en el plan de estudios, mayor será su puntuación. Como resultado, estas puntuaciones proporcionan una evaluación longitudinal, de medidas repetidas e independiente del plan de estudios, de los objetivos (de conocimiento) de todo el programa. [ 1 ]

Historia

Desde su creación a finales de la década de 1970 en la Universidad de Maastricht [ 1 ] y en la Universidad de Missouri-Kansas City [ 2 ] de forma independiente, la prueba de progreso de conocimientos aplicados se ha utilizado cada vez más en programas de medicina y ciencias de la salud en todo el mundo. Están bien establecidas y se utilizan cada vez más en la educación médica, tanto a nivel de pregrado como de posgrado. Se utilizan de forma formativa y sumativa.

Uso en programas académicos

La prueba de progreso se utiliza actualmente por consorcios nacionales de pruebas de progreso en el Reino Unido, [ 3 ] Italia, Países Bajos, [ 4 ] en Alemania (incluida Austria), [ 5 ] y en escuelas individuales en África, [ 6 ] Arabia Saudita, [ 7 ] Sudeste Asiático, [ 8 ] el Caribe, Australia, Nueva Zelanda, Suecia, Finlandia, Reino Unido y Estados Unidos. [ 9 ] La Junta Nacional de Examinadores Médicos en Estados Unidos también proporciona pruebas de progreso en varios países [ 10 ] [ 11 ] La viabilidad de un enfoque internacional para las pruebas de progreso se ha reconocido recientemente [ 12 ] y fue demostrada por primera vez por Albano et al. [ 13 ] en 1996, quienes compararon las puntuaciones de las pruebas entre escuelas de medicina alemanas, holandesas e italianas. Se ha establecido un consorcio internacional en Canadá [ 12 ] [ 14 ] que involucra facultades en Irlanda, Australia, Canadá, Portugal y las Indias Occidentales.

La prueba de progreso cumple varias funciones importantes en los programas académicos. Numerosas evidencias empíricas de facultades de medicina en los Países Bajos, Canadá, Reino Unido e Irlanda, así como de estudios médicos de posgrado y facultades de odontología y psicología, han demostrado que la naturaleza longitudinal de la prueba de progreso proporciona una medición única y demostrable del crecimiento y la efectividad de la adquisición de conocimientos de los estudiantes a lo largo de su curso de estudio [ 1 ] [ 12 ] [ 15 ] [ 16 ] [ 17 ] [ 18 ] [ 19 ] [ 20 ] [ 21 ] . [ 22 ] [ 23 ]

Como resultado, esta información puede utilizarse de forma consistente para intervenciones de enseñanza y aprendizaje con fines diagnósticos, correctivos y pronósticos. En los Países Bajos, estas intervenciones se han visto facilitadas por un sistema de retroalimentación de resultados en línea conocido como ProF [ 24 ], en el que los estudiantes pueden comparar sus resultados con los de sus compañeros desde diferentes perspectivas de puntuación total y parcial, tanto entre universidades como dentro de ellas.

Además, los datos longitudinales pueden servir como una medida transparente de garantía de calidad para las revisiones de programas al proporcionar una evaluación del grado en que una escuela está cumpliendo sus objetivos curriculares. [ 1 ] [ 10 ] [ 25 ] La prueba también proporciona datos más fiables para decisiones de evaluación de alto impacto al utilizar medidas de aprendizaje continuo en lugar de un método de una sola vez (Schuwirth, 2007). Las colaboraciones de pruebas de progreso interuniversitarias proporcionan un medio para mejorar la rentabilidad de las evaluaciones al compartir un conjunto más amplio de ítems, autores de ítems, revisores y administradores. El enfoque colaborativo adoptado por los consorcios holandeses y otros ha permitido que la prueba de progreso se convierta en un instrumento de referencia para medir la calidad de los resultados educativos en conocimiento. El éxito de la prueba de progreso de estas maneras ha llevado a considerar el desarrollo de una prueba de progreso internacional. [ 25 ] [ 26 ]

Los beneficios que ofrece la prueba de progreso a todos los actores clave de un programa de medicina o ciencias de la salud la convierten en una herramienta atractiva para invertir recursos y tiempo en su inclusión en un sistema de evaluación. Este atractivo se evidencia en su uso cada vez más extendido en instituciones de educación médica y consorcios interfacultades de todo el mundo, así como en su aplicación para la evaluación comparativa a nivel nacional e internacional.

Ventajas

Las pruebas de progreso proporcionan información derivada de su alcance integral y su diseño combinado transversal y longitudinal, que puede utilizarse para monitorear el desarrollo individual del alumno y para apoyar la evaluación del currículo. [ 1 ]

Las pruebas de progreso fomentan la retención del conocimiento: la evaluación repetida del mismo dominio integral del conocimiento elimina la necesidad de evaluar datos que podrían recordarse con un estudio previo. Se promueve el conocimiento a largo plazo y su retención, ya que el contenido de los ítems sigue siendo relevante mucho después de haber sido aprendido. Las pruebas de progreso eliminan la necesidad de exámenes de recuperación: cada nueva oportunidad de evaluación permite demostrar el crecimiento del conocimiento.

Las pruebas de progreso permiten la detección temprana de alumnos con alto rendimiento: algunos alumnos superan con creces el nivel esperado para su fase de formación (por ejemplo, podrían haber recibido formación previa relevante) y, dependiendo de su rendimiento, se les podrían ofrecer itinerarios individuales y más acelerados a través del plan de estudios.

Las pruebas de progreso aportan estabilidad a los procedimientos de evaluación: los cambios en el plan de estudios y en el contenido no tienen consecuencias para la prueba de progreso, siempre que los resultados finales no cambien.

Las pruebas de progreso ofrecen excelentes oportunidades de evaluación comparativa: estas pruebas no se limitan a una sola escuela ni a los planes de estudio basados ​​en el aprendizaje basado en problemas (ABP), y las evaluaciones pueden realizarse fácilmente para comparar a los graduados y la eficacia de diferentes enfoques curriculares.

Desventajas

Naturalmente, existen desventajas. Los recursos necesarios para el desarrollo y la calificación de las pruebas, así como la necesidad de una organización centralizada, son dos de las más importantes.

La puntuación, [ 27 ] los procedimientos psicométricos [ 28 ] para reducir la variación de la dificultad de la prueba y los procedimientos de establecimiento de estándares [ 29 ] son ​​más complejos en las pruebas de progreso.

Por último, las pruebas de progreso no funcionan en programas heterogéneos con especialización temprana (como en muchos programas de ciencias de la salud).

Programas internacionales que utilizan pruebas de progreso

Información desde 2010 en adelante (esta lista puede no estar completa o actualizada; por favor, agregue cualquier otra administración conocida de pruebas de progreso).

Universidad de Minho , Facultad de Medicina, Portugal

Grupo de los Países Bajos: cinco facultades de medicina en los Países Bajos (Groningen, Leiden, Maastricht, Nijmegen y VU Amsterdam) y, además, la Universidad de Gante en Bélgica utilizan la prueba.

Asociación Internacional para la Evaluación del Progreso (IPPT, por sus siglas en inglés): programas de medicina de pregrado en la Facultad de Medicina de la Universidad McMaster , Canadá; Universidad de Limerick , Irlanda; Universidad del Algarve, Portugal; Universidad de Western Sydney, Australia.

Progress Test Medizin (PTM), Charité-Universitätsmedizin Berlin, Alemania (Alemania – Berlín, Aachen, Colonia, Münster, Witten, Duisburg-Essen, Oldenburg, Hamburgo, Neuruppin, Düsseldorf, Augsburg, Bielefeld; Austria – Graz, Innsbruck, Viena, Linz)

NBME 1 (Barts, St. George's London, Leeds y Queens University, Belfast, Reino Unido)

NBME 2 ( Universidad del Sur de Florida y Universidad Case Western Reserve )

Universidad del Sur de Illinois, Vanderbilt, Universidad de Nuevo México, Penn State, Texas Tech, Facultad de Medicina de Georgia, Universidad de Minnesota

Facultad de Medicina de la Universidad de Manchester, Reino Unido

Facultad de Medicina y Odontología de la Península, Reino Unido

Facultad de Medicina de la Universidad de Cardiff, Gales, Reino Unido

Facultad de Medicina de la Universidad de Swansea, Gales, Reino Unido

Universidad de Tampere, Finlandia

Universidad de Helsinki, Finlandia

Universidad Médica Estatal de Karaganda, Kazajstán

Facultad de Medicina de Otago, Nueva Zelanda

Facultad de Medicina de Auckland, Nueva Zelanda

Facultad de Medicina de la Ciudad de São Paulo (UNICID), Brasil

Universidad de Indonesia, Facultad de Medicina

Universidad Católica de Mozambique

Pretoria, Sudáfrica

Programa CMIRA, Instituto Hospitalario Sirio-Libanés para la Educación y la Investigación, Brasil

Universidad Alfaisal - Facultad de Medicina, Arabia Saudita

Facultad de Medicina de la Universidad Rey Saud bin Abdulaziz para las Ciencias de la Salud (KSAU-HS), Arabia Saudita

Facultad de Medicina Batterjee para la Senescencia y la Tecnología, Yeda, Arabia Saudita

Colegios Sulaiman Alrajhi - Facultad de Medicina, ciudad de Albukairiyah, región de Qassim - Arabia Saudita Fuente: [ 9 ]

Universidad King Fisal KFU - Facultad de Medicina, Al-Ahsaa, Arabia Saudita

Facultad de Odontología de la Universidad Rey Saud bin Abdulaziz para las Ciencias de la Salud (KSAU-HS), Arabia Saudita

Universidad Flinders - Facultad de Medicina (posgrado), Adelaida, Australia

Real Colegio de Cirujanos de Irlanda - Dublín, Irlanda

Real Colegio de Cirujanos de Irlanda - Universidad Médica de Baréin

Véase también

Universidad Alfaisal

Referencias

  1. ^ van der Vleuten CPM, Verwijnen GM , Wijnen WHFW . 1996. Quince años de experiencia con pruebas de progreso en un plan de estudios de aprendizaje basado en problemas. Profesor de medicina 18(2):103–110.
  2. Arnold L, Willoughby TL. 1990. El examen trimestral de perfil. Academic Medicine 65(8):515–516.
  3. Swanson, DB, Holtzman, KZ, Butler, A., Langer, MM, Nelson, MV, Chow, JWM, et al. (2010). Colaboración transatlántica: El proyecto de evaluación del progreso en múltiples escuelas. Medical Teacher, 32, 480-485.
  4. Schuwirth, L., Bosman, G., Henning, RH, Rinkel, R., & Wenink, ACG (2010). Colaboración en pruebas de progreso en facultades de medicina de los Países Bajos. Medical Teacher, 32, 476-479.
  5. Sustantivos, ZM y Georg, W. (2010). Pruebas de progreso en países de habla alemana. Medical Teacher, 32, 467-470.
  6. ^ Aarts, R., Steidel, K., Manuel, BAF y Driessen, EW (2010). Pruebas de progreso en países de escasos recursos: un caso de Mozambique. Profesor de Medicina, 32, 461-463.
  7. Al Alwan, I., Al-Moamary, M., Al-Attas, N., Al Kushi, A., ALBanyan, E., Zamakhshary, M., et al. (2011). La prueba de progreso como herramienta de diagnóstico para un nuevo currículo de ABP. Educación para la Salud (diciembre, artículo n.° 493).
  8. Mardiastuti, HW, & Werdhani, RA (2011). El promedio de calificaciones, la prueba de progreso y la prueba de selección como herramientas para la evaluación curricular y la predicción del desempeño de los graduados en el examen nacional de certificación. Journal of Medicine and Medical Sciences, 2(12), 1302-1305.
  9. 1 2 Freeman, A., van der Vleuten, C., Nouns, Z., & Ricketts, C. (2010). Pruebas de progreso a nivel internacional. Medical Teacher, 32, 451-455.
  10. 1 2 De Champlain, A., Cuddy, MM, Scoles, PV, Brown, M., Swanson, DB, Holtzman, K., et al. (2010). Pruebas de progreso en la educación en ciencias clínicas: Resultados de un proyecto piloto entre la Junta Nacional de Examinadores Médicos y una facultad de medicina de EE. UU. Medical Teacher, 32, 503-508.
  11. Fundamentos Internacionales de Medicina (2011). Recuperado el 20 de julio de 2011 de http://www.nbme.org/Schools/iFoM/index.html
  12. 1 2 3 Finucane, P., Flannery, D., Keane, D., & Norman, G. (2010). Pruebas de progreso interinstitucionales: viabilidad y valor para una nueva facultad de medicina. Educación Médica, 44, 184-186.
  13. ^ Albano, MG, Cavallo, F., Hoogenboom, R., Magni, F., Majoor, G., Manenti, F., et al. (1996). Una comparación internacional de los niveles de conocimiento de los estudiantes de medicina: la prueba de progreso de Maastricht. Educación Médica, 30, 239-245.
  14. Asociación Internacional para las Pruebas de Progreso (2011). Recuperado el 18 de julio de 2011, de http://ipptx.org/
  15. Bennett, J., Freeman, A., Coombes, L., Kay, L., & Ricketts, C. (2010). Adaptación de las pruebas de progreso médico a un entorno dental. Medical Teacher, 32, 500-502.
  16. ^ Boshuizen, HPA, van der Vleuten, CPM, Schmidt, H. y Machiels-Bongaerts, M. (1997). Medición de conocimientos y habilidades de razonamiento clínico en un plan de estudios basado en problemas. Educación Médica, 31, 115-121.
  17. Coombes, L., Ricketts, C., Freeman, A., & Stratford, J. (2010). Más allá de la evaluación: retroalimentación para individuos e instituciones basada en la prueba de progreso. Medical Teacher, 32, 486-490.
  18. ^ Dijksterhuis, MGK, Scheele, F., Schuwirth, LWT, Essed, GGM y Nijhuis, JG (2009). Pruebas de progreso en la educación médica de posgrado. Profesor de Medicina, 31, e464-e468.
  19. Freeman, A., & Ricketts, C. (2010). Selección y diseño de evaluaciones de conocimientos: Experiencia en una nueva facultad de medicina. Medical Teacher, 32, 578-581.
  20. Schaap, L., Schmidt, H., & Verkoeijen, PJL (2011). Evaluación del crecimiento del conocimiento en un plan de estudios de psicología: ¿qué estudiantes mejoran más? Assessment & Evaluation in Higher Education, 1-13.
  21. ^ van der Vleuten, CPM, Verwijnen, GM y Wijnen, WHFW (1996). Quince años de experiencia con pruebas de progreso en un plan de estudios de aprendizaje basado en problemas. Profesor de Medicina, 18(2), 103-109.
  22. ^ van Diest, R., van Dalen, J., Bak, M., Schruers, K., van der Vleuten, C., Muijtjens, AMM, et al. (2004). Crecimiento del conocimiento en psiquiatría y ciencias del comportamiento en un plan de estudios de aprendizaje basado en problemas. Educación Médica, 38, 1295-1301.
  23. ^ Verhoeven, BH, Verwijnen, GM, Scherpbier, AJJA y van der Vleuten, CPM (2002). Crecimiento del conocimiento médico. Educación Médica, 36, 711-717.
  24. Muijtjens, AMM, Timmermans, I., Donkers, J., Peperkamp, ​​R., Medema, H., Cohen-Schotanus, J., et al. (2010). Retroalimentación electrónica flexible utilizando las virtudes de las pruebas de progreso. Medical Teacher, 32, 491-495.
  25. 1 2 Verhoeven, BH, Snellen-Balendong, HAM, Hay, IT, Boon, JM, Van Der Linde, MJ, Blitz-Lindeque, JJ, et al. (2005). La versatilidad de las pruebas de progreso evaluadas en un contexto internacional: ¿un comienzo para la estandarización global de referencia? Medical Teacher, 27(6), 514-520.
  26. Schauber, S., & Nouns, ZB (2010). Uso del método de desviación acumulativa para la evaluación comparativa interinstitucional en la prueba de progreso de Berlín. Medical Teacher, 32, 471-475.
  27. Muijtjens AM, Mameren HV, Hoogenboom RJ, Evers JL, van der Vleuten CP. 1999. El efecto de la opción "no sé" en las puntuaciones de los exámenes: comparación entre la puntuación numérica correcta y la puntuación mediante fórmula. Medical Education 33(4):267–275.
  28. Shen L. 2000. Pruebas de progreso para la formación médica de posgrado: Un experimento de cuatro años de los exámenes de residentes del Colegio Americano de Cirujanos Osteópatas. Avances en la educación en ciencias de la salud: Teoría y práctica 5(2):117–129
  29. ^ Verhoeven BH, Snellen-Balendong HA, Hay IT, Boon JM, van der Linde MJ, Blitz-Lindeque JJ, Hoogenboom RJI, Verwijnen GM, Wijnen WHFW, Scherpbier AJJA, et al. 2005. La versatilidad de las pruebas de progreso evaluadas en un contexto internacional: ¿un comienzo para evaluar la estandarización global? Profesor de medicina 27(6):514–520
  • Prueba de progreso Medizin, Charité-Universitätsmedizin Berlín
  • Prueba de progreso en Arabia Saudita en el Colegio de Medicina de Qassim
  • Prueba de progreso interuniversitaria en medicina, Países Bajos