Download Diapositiva 1 - CODEIC

Los Exámenes de
Altas Consecuencias:
Implicaciones Educativas
Dr. Melchor Sánchez Mendiola
UNAM
“Y los galaaditas tomaron los vados del Jordán a
los de Efraín; y aconteció que cuando decían los
fugitivos de Efraín: Quiero pasar, los de Galaad
les preguntaban: ¿Eres tú efrateo? Si él
respondía: No, entonces le decían: Ahora, pues,
di Shibolet. Y él decía Sibolet; porque
no podía pronunciarlo correctamente.
Entonces le echaban mano, y le degollaban junto
a los vados del Jordán. Y murieron entonces de
los de Efraín cuarenta y dos mil”.
Jueces 12:5-6
Exámenes de Altas Consecuencias
Pruebas o exámenes cuyos resultados
tienen consecuencias importantes y
directas para los individuos,
programas o instituciones
involucrados en el examen.
AERA, APA, NCME. Standards for Educational
and Psychological Testing. 2014
Exámenes de Altas Consecuencias
Graduación (Examen Profesional)
Selección (ENARM, ingreso UNAM)
Promoción (exámenes finales de
cursos de licenciatura o posgrado)
Certificación (exámenes de Consejos)
www.nap.edu
Exámenes de Altas Consecuencias y
sus efectos: Calle de dos sentidos
Políticos
Examen de
Altas Consecuencias
Económicos
Sociales
Humanos
Educativos
Consecuencias de un Examen
Intencionales No intencionales
Positivas
I-P
NI - P
Negativas
I-N
NI - N
Brennan RL, Ed. Educational Measurement.
National Council on Measurement in Education
4th Ed. 2006
Efectos educativos de un EAC
 Positivos
 Motivación al estudio
 Estandarización de la evaluación
 Puede elevar la calidad
 Unifica criterios - si se hace bien (alineado con el currículo)
Koretz DM, Linn RL. Effects of high-stakes
educational testing on instruction and achievement.
AERA & NCME, Chicago. 1991
Efectos educativos de un EAC
 Negativos
 “Enseñando a la prueba” (“teaching
to the test”) explícito e implícito
 Cursos de preparación (leyes de mercado)
 Efectos en currículo formal y oculto
 Inferencias inapropiadas de resultados
Madaus G. The influence of testing on the curriculum.
NSSE Yearbook. University of Chicago Press. 1988
Efectos educativos de un EAC
EAC generan controversia por convicciones
filosóficas, políticas o sesgos personales/grupales.
Intensa retórica que nubla la discusión.
Escasez de evidencia publicada convincente
positiva y negativa.
Necesidad inescapable de tomar decisiones.
Cizek GJ. More unintended consequences of
high-stakes testing. Educational Measurement:
Issues and Practice. 2001; 20:19-27
“…el uso de la puntuación de un
examen definitivamente
implica consecuencias; de otra
manera uso es sólo una
abstracción”.
Brennan RL, Ed. Educational Measurement.
National Council on Measurement in Education
4th Ed. 2006
“Los desarrolladores del examen
son los candidatos obvios para
validar las afirmaciones que
hacen sobre la interpretación de
los resultados de un examen…”
Brennan RL, Ed. Educational Measurement.
National Council on Measurement in Education
4th Ed. 2006
“ El poder de
examinar es el
poder de
destruir…”
Abraham Flexner. Medical education
in the United States and Canada.
1910. p. 169
www.carnegiefoundation.org
¿Qué es evaluación?
“…cuando una persona, con algún
tipo de interacción directa o
indirecta con otra, obtiene e
interpreta información de
manera consciente sobre el
conocimiento y la comprensión,
habilidades y actitudes de la
otra persona. Hasta cierto punto
evaluación es un intento de
conocer a esa persona”.
www.psy.gla.ac.uk/~steve/best/rowntree.html
“Colectar datos de
evaluación es como
recoger la basura, es
mejor que sepas qué
vas a hacer con ella
antes de recogerla”
Mark Twain
El largo camino educativo del médico
Mantenimiento
Médico Especialista
de la competencia
EMP
EMP
EMC…DPC
Lo que pasa realmente en la práctica diaria
HACE (evaluación de 360o, portafolios)
DEMUESTRA
CÓMO
Habilidad para demostrar habilidades clínicas
específicas (ECOE, pacientes estandarizados)
SABE CÓMO
Habilidad para aplicar conocimiento
factual (preguntas de opción múltiple)
SABE
Habilidad para citar conocimiento
factual (preguntas de opción múltiple)
Pirámide de Miller
Acad Med 1990; 65:S63-67
“No todo lo que
puede ser
contado cuenta,
y no todo lo que
cuenta puede ser
contado”
Albert Einstein
EDUCACIÓN MÉDICA BASADA EN EVIDENCIA
EDUCACIÓN BASADA
EN OPINIÓN
EDUCACIÓN BASADA
EN EVIDENCIA
Educación Médica Basada en Evidencias: ¿Ser o no ser?
Sánchez Mendiola M. Inv Ed Med 2012;1(2):82-89.
http://evidencelibrary.abms.org
http://riem.facmed.unam.mx
http://onlinelibrary.wiley.com/doi/10.1111/jedm.12000/abstract
http://ncme.org/publications/items/
www.aera.net/Publications/tabid/10067/Default.aspx
www.ceneval.edu.mx/ceneval-web/content.do?page=7344
www.inee.edu.mx
www.facmed.unam.mx
Lo bueno…
Recurso imprescindible para la calidad.
¡Llegó para quedarse!
Se puede mejorar.
Rendición de cuentas.
Evaluación formativa.
Fuente de motivación para aprender.
Del aprendizaje y para el aprendizaje.
Lo malo…
Puede profundizar la desigualdad.
Refuerza cultura de fiscalización, control y
castigo.
Prioriza funciones administrativas.
Mucha evaluación pero con pocos cambios.
Implementación de programas que después
no se evalúan.
Lo feo…
Homogeneidad que niega la diversidad.
Usos sesgados de los resultados de la
evaluación…cuando se usan.
Fomenta la cultura de la simulación.
Conducida por personal improvisado.
“Todo lo que
merece ser hecho,
merece también
ser bien hecho”
Andre Maurois