Autenticidad en evaluación

Pirámide de Miller

1. Introducción La pirámide de Miller

Modelo sencillo de evaluación de competencias

Au

ten

tici

dad

pro

fesi

on

al

Hace(does

performance)

demuestra como haría

(shows how competency)

Conoce como hacer(knows how)

Conoce(knows)

Comportamiento

Cognición

Miller GE. The assessment of clinical skills/competence/performance.Academic Medicine (Supplement) 1990; 65: S63-87.

Cuidado diario del paciente: evaluado por observación directa del desempeño en

situaciones clínicas reales

Demostración de habilidades clínicas: Puesto a prueba con simulación

pacientes simulados estandarizados(Incognito, ECOE/OSCE)

Exámenes habilidades clínicasAplica conocimiento: resolución

de problemas clínicos

conocimiento es puesto a prueba en exámenes orales y

escritos

2

Instrumentos de evaluaciónFormato de Estimulo vs. respuesta

• Formato del estímulo. Algunos equipos de futbol han ganado más copas de Europa que otros. ¿Cuál de los siguientes equipos ha ganado más copas de Europa?

• Formato de la Respuesta A. Real Madrid

B. Bayern de Munich

C. FC Barcelona

D. Manchester United

E. Milan3

Formatos de estímulo y respuesta en evaluación del aprendizaje

Hace(contexto real)

demuestra como haría

(contexto simulado)

Conoce como hacer

(contexto descrito)

Conoce(factual sin contexto)

menú, escrito,abierto,

oral, basado enordenador

menú, escrito, abierto, oral, basado en ordenador

observación directa, lista de comprobación, escalas de calificación,

rúbricas

Formato de respuesta observación,

lista de comprobación,escalas de calificación,

rúbricas, narrativas

4

Formato de Estímulo Ejecución, práctica habitual(paciente real)

Escenario práctico de simulación

(paciente simulado)

escenario con contexto(paciente)

Caso prueba

Orientado a conocer hechos

Estandarización de la evaluación del aprendizaje a distintos niveles

Au

ten

tici

dad

pro

fesi

on

al

Haceen contexto real

demuestra como haría

Demostración en contexto simulado

Conoce como hacerContexto descrito o ilustrado

donde hay que explicar como se hace

Conoce-Sin contexto,

-No hay nada que hacer

Evaluaciónde desempeñoNo estandarizada

Evaluación de aprendizaje Estandarizada(administrada de la misma manera a todos los examinandos)

Juicio experto subjetivo, compensación de sesgos, escalas

ECOETribunalesrúbricas

MCQTest de progreso

Objetividad del método de evaluación

Nivel de estandarización

Evaluando los 3 niveles inferiores de la pirámide:¿Conoce, conoce cómo hacer y demuestra cómo lo haría?

• Los seis principios de evaluación estandarizada del aprendizaje

1. La competencia es especifica (de ciertos contextos), no genérica

2. La objetividad no es lo mismo que la fiabilidad

3. El formato del estímulo determina más lo que se mide que el

formato de la respuesta que se recoge.

4. La validez puede ser construida e incorporada a nuestro sistema.

5. La evaluación conduce el aprendizaje.

6. Ningún método único puede hacerlo todo.

7

Evaluando el nivel superior (el desempeño): ¿hace?

• Los seis principios de evaluación del aprendizaje de manera no estandarizada.

1. Para lograr inferencias fiables se requiere una muestra lo más amplia

que sea factible.

2. El sesgo es una característica inherente del juicio experto subjetivo.

3. La validez se debe más a los que usan los instrumentos que a los

propios instrumentos.

4. Las funciones formativa y sumativa se combinan.

5. La información narrativa y cualitativa tiene un enorme peso.

6. Decisiones sumativas pueden ser rigurosas usando procedimientos no

psicométricos de investigación cualitativa.8

Más pirámides