Download Cas 4 modelos

Principios de los Modelos de Evaluación (I)
1.
2.
3.
4.
5.
La evaluación juzgará que un programa es válido si y sólo
si sus objetivos son alcanzados.
La evaluación juzgará que un programa es bueno si, y
sólo si, el programa causa la consecuencia de sus
objetivos.
La evaluación juzgará que un programa X es mejor que
un programa Y si siendo iguales otros aspectos, los
programas X e Y cumplen los objetivos pretendidos, pero
el X cumple también otros.
La evaluación juzgará que el programa X es mejor, si
manteniéndose otros aspectos iguales, el X es más
efectivo respecto a los objetivos que el Y.
La evaluación juzgará que el programa X es mejor que el
programa Y si manteniéndose iguales otros aspectos, los
objetivos de X son mejores o más valiosos que los de Y.
Principios de los Modelos de Evaluación (II)
6.
7.
8.
9.
La evaluación juzgará que el programa X es mejor que el
programa Y si manteniéndose iguales otros aspectos, las
consecuencias totales del programa X son en balance
mejores que las consecuencias de las del Y.
La evaluación juzgará que el programa X es mejor que el
programa Y si manteniéndose iguales otros aspectos, el
programa X es menos costoso que el Y.
La evaluación juzgará que el programa X es mejor que el
programa Y si después de considerar los aspectos
financieros y las consecuencias totales sobre el balance
de los dos programas, el programa X supera, es más
valioso que el Y.
La evaluación juzgará programas basados en la
información de necesidades de las audiencias concretas.
Modelo de Evaluación de Tyler (I)
“El proceso de evaluación, es sobretodo comprobar hasta qué punto los objetivos
educativos han sido alcanzados a través del currículo y de la enseñanza.”
•
•
•
Objetivos operativos
Instrumentos para la recogida de datos
Fases de la evaluación
1. Establecer unos objetivos.
2. Ordenar los objetivos en clasificaciones amplias.
3. Definir los objetivos en comportamientos de los alumnos.
4. Concretar las situaciones o condiciones en las que el logro
de los objetivos puede comprobarse.
5. Explicar las intenciones de la estrategia a las personas
involucradas.
6. Seleccionar o desarrollar las medidas técnicas adecuadas.
7. Recoger datos del trabajo (trabajo realizado por los
alumnos.
8. Comparar esos datos con los objetivos de comportamiento
Modelo de Evaluación de Tyler (II)
•
Ventajas del Modelo de Tyler
– Además del alumno se tienen en cuenta
otros aspectos.
– Orientación hacia la mejora.
•
Críticas realizadas al Modelo de Tyler
– Última fase del proceso.
– Limitaciones técnicas.
– El rendimiento como último criterio.
– Efectos secundarios.
Modelo de Evaluación de Scriven
• Características de la evaluación:
– La evaluación es comparativa (se compara con
otros objetos).
– Tiene en cuenta los costos y los beneficios.
– Trata de satisfacer las necesidades de los
consumidores.
– Tiene que ser lo más objetiva posible y debe
proporcionar juicios y recomendaciones.
• Meta de la evaluación: enjuiciar el valor
• Funciones de la evaluación:
– Función sumativa
– Función formativa
Modelo de Evaluación Libre de Objetivos de Scriven
EFECTOS
A
INTERVENCIÓN
PERFIL DE NECESIDADES
1ª
B
B
2ª
C
C
3ª
A
D
4ª
D
No
buscados
Buscados
No
logrados
E
5ª
E
F
6ª
F
Qué cambios?
VALORACIÓN
Se cubren todas las
necesidades?
Los efectos no
esperados son
deseables?
Los efectos no
esperados cubren
alguna necesidad?
Implicaciones para el
centro?
Scrivenen Helmugarik Gabeko Ebaluazio Eredua
Lista de Indicadores de Control (I)
•
•
•
•
Descripción. ¿Qué hay que evaluar? Describirlo de la
manera más objetiva posible. ¿Cuáles son sus
componentes? ¿Cuáles son sus relaciones?
Cliente. ¿Quién ha encargado la evaluación? Él puede ser
el más interesado o quizás puede estar enviado por otras
personas.
Antecedentes y contexto. Del evaluado y de la
evaluación. Identificación de las audiencias, expectativas
de la evaluación, el tipo de evaluación requerido (formativa
o sumativo). Ha habido evaluaciones previas. Se ha puesto
en práctica el mismo programa previamente.
Recursos. Todos los medios o recursos disponibles tanto
para que los utilice el evaluado como para el evaluador.
Los utilizados y los que se podían haber utilizado tanto en
lo que se refiere a los materiales como al personal
disponible.
Lista de Indicadores de Control (II)
•
•
•
•
Función. ¿Qué hace el evaluado? Distinguir entre lo
que se supone que hace y lo que realmente hace.
Sistema de distribución. Conocer cómo llega al
mercado el evaluado (el programa), cómo se
mantiene, cómo se mejora, cómo son sus clientes,
cómo es su control y quién hace todo eso.
El consumidor. ¿Quién recibe las influencias del
evaluado (del programa)? Diferenciar entre los
consumidores seleccionados y el verdadero mercado.
Hay que tener en cuenta que los propios clientes
pueden estar influenciados por el programa.
Necesidades y valores de los afectados. Se tiene
en cuenta los deseos y las necesidades y de la misma
manera las normas del valor y el mérito y los ideales
enjuiciados o supuestos.
Lista de Indicadores de Control (III)
•
•
•
•
•
Normas. ¿Existen normas valoradas objetivamente para
aplicarse en el juicio del mérito y valor? ¿De dónde han surgido
esas normas? ¿Del cliente? ¿Del consumidor? ¿De las funciones?
¿De las necesidades y/o de los valores?
Proceso. Los límites, costos y beneficios que se aplican en las
operaciones normales del evaluado (del programa).
Resultados. Efectos, tanto esperados como no esperados, que
ha generado el evaluado (el programa).
Posibilidades de generalización. A otras personas, sitios,
tiempos, versiones, ...
Costos. El del comienzo y las repreticiones (teniendo en cuenta
la preparación, el mantenimiento y la mejora). Hay que tener en
cuenta tanto en dinero como psicológicamente.
Lista de Indicadores de Control (IV)
•
•
•
•
•
Comparaciones. Con el resto de alternativas existentes,
tanto las que están en funcionamiento como con las que
podrían ponerse. Normalmente deberían tenerse en cuenta
aquellas que producen los mismos efectos, pero que
resultan más baratas.
Significado. Resumen de todo lo anterior. El
procedimiento de la valoración sintética es a menudo el
trabajo más complejo de la evaluación.
Recomendaciones. Siempre que sea posible, dado que a
veces no las solicitan o no son factibles.
Informe. Hay que analizar el vocabulario, longitud,
diseño, medio, localización, personal y presentación.
También hay que tener en cuenta la confidencialida de los
evaluados.
Metaevaluación. Hay que evaluar la evaluación, antes de
realizar la evaluación y antes de publicar el último informe.
Modelo de Evaluación de Stake. EJEMPLO
1.
2.
3.
4.
5.
6.
ANTECEDENTE PROPUESTO: El profesor señala que los alumnos se
matriculan en el curso de apreciación musical por su deseo.
ANTECEDENTE OBSERVADO: No obstante, el 40% del alumnado se
queja de haberse inscrito en el curso obligado por sus padres.
TRANSACCIÓN PROPUESTA: El currículum de apreciación musical
concreta que, semanalmente, los alumnos deben escuchar música
durante 40 minutos y discutir durante 20 minutos.
TRANSACIÓN OBSERVADA: Según lo que dicen los alumnos por el
contrarios, normalmente, semanalmente, pasan 19 minutos
escuchando música, 3 minutos discutiendo, 20 minutos estudiando y
el resto del tiempo realizando otro tipo de actividades.
RESULTADO PROPUESTO: Para final del curso los alumnos deben ser
capaces de reconocer el nombre del compositor de la obra musical
escuchada.
RESULTADO OBSERVADO: Normalmente, de 10 obras escuchadas
sólo conocen el nombre de dos compositores. De la misma manera y
sin que nadie lo esperara, el padre de un alumno ha donado gran
cantidad de dinero para completar la biblioteca musical del centro.
Modelo de Evaluación de Stake
Esquema de Stake para la recogida de datos en la evaluación de un
programa educativo
NORMAS
INTENCIONES OBSERVACIÓN
Lo que la gente
quiere
Lo que la gente
normalmente
acepta
Lo que la gente
recibe
JUICIOS
Lo que la gente cree
que debe ser el
programa principal
Antecedentes
Transacciones
Resultados
Matriz descriptiva
Matriz de los
juicios
Esquema de Stake para el análisis de los datos descriptivos
INTENCIONES
OBSERVACIÓN
Lo que la gente
quiere
Lo que la gente percibe
Congruencia
Contingencia
empírica
Contingencia
lógica
Congruencia
Contingencia
lógica
Contingencia
empírica
Congruencia
Esquema de Stake para el proceso del juicio del mérito
Antecedent
es
Datos
descriptivos
Transaccion del programa
es
Comparación
absoluta
Normas de
calidad
Resultados
Comparación
relativa
Datos descriptivos
de los otros
programas
J
U
I
C
I
O
S
Cálculo de tiempo según Stake del evaluador
preordenado y del evaluador respondente
Tarea
Evaluación
Preordenada
Evaluación
Respondente
Identificación del problema y del objetivo
10%
10 %
Preparación de instrumentos
30 %
15 %
Observación del programa
5%
30 %
Administración de tests, etc.
10 %
-
Recogida de juicios
-
15 %
Identificación de las necesidades de los clientes
-
5%
25 %
5%
-
10 %
20 %
10 %
100 %
100 %
Proceso de los datos formales
Preparación de informes informales
Preparación de informes formales
TOTAL
Ebaluazio ihardeslearen egitura funtzionala: Erloju ebaluaketa
12
Bezeroekin, programaren
pertsonalarekin eta
Audientziekin hitzegin
11
Baldin badaude, txosten
formalak bildu
10
Audientziak erabiltzeko
eskema
1
Programaren mugak
identifikatu
2
Programaren aktibitateen
panorama
9
Balidazioa: konfirmazioa,
ez konfirmazioaren
ebidentziak bilatu
3
Asmoak eta interesak
antzeman
8
Gaiak garatu, deskripzioak
prestatu eta kasu zehatzak
aztertu
7
Proposatutako aurretiko,
transakzio eta emaitzak
behatu
4
Solasgaiak eta arazoak
kontzeptualizatu
5
Arazoak ikertzeko
beharrezkoak diren datuak
identifikatu
6
Baldin badaude, behatzaileak,
epaileak eta tresnak selekzionatu
Estructura funcional de la evaluación respondente: Evaluación
del reloj
12
Hablar con los clientes, con el
personal del programa y con las
audiencias
11
Recoger los informes formales si
existen.
1
Identificar las limitaciones del
programa
10
Esquema para la utilización de las
audiencias
2
Panorama de las actividades del
programa
9
Validación: buscar las evidencias de
la confirmación
3
Identificar las intenciones y los
intereses
4
Conceptualizar los ámbitos de diálogo
y los problemas
8
Desarrollar los temas, preparar las
descripciones y estudiar casos
concretos
7
Observar los antecedentes,
transacciones y resultados
propuestos
5
Identificar los datos necesarios para
investigar los problemas
6
Seleccionar, si existen, los
observadores, los jueces y los
instrumentos