BIENVENIDOS

El presente Blog, contiene la recopilación de aportes del grupo de III semestre de la Maestría en Informática Educativa de la Universidad de la Sabana. Durante el desarrollo de la materia "Evaluación para la Integración de Recursos para el Aprendizaje" y en especial el tema de Evaluación de procesos según Lee Cronbach.

LEE CRONBACH

Psicólogo estadounidense. Profesor en la Universidad de Stanford, ha llevado a cabo investigaciones sobre los métodos de tests, la teoría de la medida y las nociones de fidelidad y validez.

Entre sus obras destacan Fundamentos de la exploración psicológica (1949), The dependability of behavioral measurements (1972) y Toward reform of program evaluation (1980). Hizo importantes contribuciones en los campos de la psicología educativa, pruebas psicológicas y la evaluación de programas.

referencia: http://www.biografiasyvidas.com/biografia/c/cronbach.htm

ANTECEDENTES

Como consecuencia de múltiples reflexiones, se amplió considerablemente el fenómeno de la evaluación educativa. El sujeto directo de la evaluación siguió siendo el alumno, pero también todos aquellos factores que confluyen en el proceso educativo (el programa educativo en un sentido amplio, profesor, medios, contenidos, experiencias de aprendizaje, organización, etc.), así como el propio producto educativo.

Como resultado de estas nuevas necesidades de la evaluación, se inicia durante esta época un periodo de reflexión y de ensayos teóricos con ánimo de clarificar la multidimensionalidad del proceso evaluativo. Estas reflexiones teóricas enriquecerán decisivamente el ámbito conceptual y metodológico de la evaluación, lo que unido a la tremenda expansión de la evaluación de programas ocurrida durante estos años, dará lugar al nacimiento de esa nueva modalidad de investigación aplicada que hoy denominamos como investigación evaluativa.

Esta evaluación ya no es una simple medición, porque supone un juicio de valor sobre la información recogida. Se alude, aunque sin desarrollar, a la toma de decisiones sobre los aciertos o fracasos de la programación, en función de los resultados de los alumnos, algo que retomarán otros importantes evaluadores como Cronbach y Sufflebeam unos años después.

Referencia: Escudero, Tomás (2003). Desde los tests hasta la investigación evaluativa actual. Un siglo, el XX, de intenso desarrollo de la evaluación en educación. Revista ELectrónica de Investigación y EValuación Educativa, v. 9, n

http://www.uv.es/RELIEVE/v9n1/RELIEVEv9n1_1.htm. Consultado el 20 de marzo de 2011.

EN QUÉ CONSISTE EL MODELO?

Planificación Evaluativa. Propuesta por LeeCronbach, quien describe dos fases para su enfoque: la divergente y la convergente. La fase divergente implica desarrollar una lista de posibles cuestiones a evaluar, mientras que la fase convergente determina prioridades entre ellas. Cronbach afirma que la información se pierde y se distorsiona cuando se informa lo observado. Es decir, que el tránsito entre la ejecución y el informe de logros es a veces subjetivo, por lo cual, debe hacerse al mismo tiempo.

CUÁL ES SU INTENCIÓN?

La evaluación debe proveer la comprensión, la planificación y la mejora de los programas sociales a los que sirve. La visión del proceso social (Visión E). Cronbach (1982) ve la evaluación como el proceso de determinar, obtener y proporcionar información relevante para juzgar decisiones alternativas en si para la toma de decisiones.

Referencia: Escudero, Tomás (2003). Desde los tests hasta la investigación evaluativa actual. Un siglo, el XX, de intenso desarrollo de la evaluación en educación. Revista ELectrónica de Investigación y EValuación Educativa, v. 9, n

http://www.uv.es/RELIEVE/v9n1/RELIEVEv9n1_1.htm. Consultado el 20 de marzo de 2011.

PASOS Y ELEMENTOS A TENER EN CUENTA EN LA EVALUACIÓN

Del análisis que Cronbach del concepto, funciones y metodología de la evaluación, entresacamos las sugerencias siguientes:

a) Asociar el concepto de evaluación a la toma de decisiones. Distingue el autor tres tipos de decisiones educativas a las cuales la evaluación sirve:

· sobre el perfeccionamiento del programa y de la instrucción,

· sobre los alumnos (necesidades y méritos finales) y

· acerca de la regulación administrativa sobre la calidad del sistema, profesores, organización, etc.

De esta forma, Cronbach abre el campo conceptual y funcional de la evaluación educativa mucho más allá del marco conceptual dado por Tyler, aunque en su línea de sugerencias.

b) La evaluación que se usa para mejorar un programa mientras éste se está aplicando, contribuye más al desarrollo de la educación que la evaluación usada para esti­mar el valor del producto de un programa ya concluido.

c) Poner en cuestión la necesidad de que los estudios evaluativos sean de tipo comparativo. Entre las objeciones a este tipo de estudios, el autor destaca el hecho de que, con frecuencia, las diferencias entre las puntuaciones promedio entre-grupos son menores que las intra-grupos, así como otras referentes a las dificultades técnicas que en el marco educativo presentan los diseños comparativos. Cronbach aboga por unos criterios de comparación de tipo absoluto, recla­mando la necesidad de una evaluación con referencia al criterio, al defender la valoración con relación a unos objetivos bien definidos y no la comparación con otros grupos.

d) Se ponen en cuestión los estudios a gran escala, puesto que las diferencias entre los tratamientos pueden ser muy grandes e impedir discernir con claridad las causas de los resultados. Se defienden los estudios más analíticos, bien controla­dos, que pueden usarse para comparar versiones alternativas de un programa.

e) Metodológicamente Cronbach propone que la evaluación debe incluir:

· estudios de proceso –hechos que tienen lugar en el aula.

· medidas de rendimiento y actitudes –cambios observados en los alumnos

· estudios de se­guimientos, esto es, el camino posterior seguido por los estudiantes que han participado en el programa.

Referencia: Escudero, Tomás (2003). Desde los tests hasta la investigación evaluativa actual. Un siglo, el XX, de intenso desarrollo de la evaluación en educación. Revista ELectrónica de Investigación y EValuación Educativa, v. 9, n

http://www.uv.es/RELIEVE/v9n1/RELIEVEv9n1_1.htm. Consultado el 20 de marzo de 2011.

¿QUÉ SE EVALÚA?

Desde el mismo concepto de Evaluación, se podría decir que lo se evalúa es el Programa Educativo. entendiendo que lo que él concibe como Programa Educativo es bastante amplio.

Se percibe que el núcleo conceptual de la evaluación lo constituye la valoración del cambio ocurrido en el alumno como efecto de una situación educativa sistemática, siendo unos objetivos bien formulados el mejor criterio para valorar este cambio. Así mismo, se comienza a prestar atención no sólo a los resultados pretendidos, sino también a los efectos laterales o no pretendidos, e incluso a resultados o efectos a largo plazo.

La visión del proceso social (Visión E) resta importancia a la orientación sumativa de la evaluación (decisiones externas sobre los programas y rendición de cuentas), enfatizando la comprensión, la planificación y la mejora de los programas sociales a los que sirve.

En cuanto a los contenidos de la evaluación, Cronbach (1983) propone que se pla­nifiquen y controlen los siguientes elementos:

Unidades (U) que son sometidas a evaluación, individuos o grupos participantes.

Tratamiento (T) de la evaluación.

Operaciones (O) que lleva a cabo el evaluador para la recogida y análisis de datos, así como para la elaboración de conclusiones.

Contexto en el que tiene lugar el programa y su evaluación.

En una investigación evaluativa concreta se pueden dar varias unidades, varios tratamientos y varias operaciones, en definitiva varios (uto), dentro de un universo UTO de situaciones admisibles.

Referencia: Escudero, Tomás (2003). Desde los tests hasta la investigación evaluativa actual. Un siglo, el XX, de intenso desarrollo de la evaluación en educación. Revista ELectrónica de Investigación y EValuación Educativa, v. 9, n

http://www.uv.es/RELIEVE/v9n1/RELIEVEv9n1_1.htm. Consultado el 20 de marzo de 2011.

¿QUIÉNES PARTICIPAN O INTERVIENEN?

1. El evaluador: como científico público

El investigador debe juzgar su trabajo por el impacto en el sistema, por lo tanto debe planear las actividades que le puedan servir a los intereses del público dentro de los términos que su contrato lo permite.

El evaluador debe consultar a los actuales y futuros clientes del programa y a todos aquellos que tengan conocimiento del problema; esto genera una lista de esperanzas y temores que le permitirán determinar variables y lugares de observación.

El interés personal y profesional del evaluador es aportar información que se toma en serio y se traduzca en un mejor servicio público.

Como investigador su tarea es trasladar con sensibilidad y precisión el plan de investigación (en Toward reform of program evaluation pag 207)

Roles del evaluador:

Que no intente evaluar un programa con cuyos objetivos básicos no esté en sintonía (de acuerdo').

En la etapa de recolección de los datos, debe esforzarce por lograr la apertura y la neutralidad, configurando sus técnicas para traer buenas y malas noticias a la luz.

Haciendo su trabajo profesionalmente. (en Toward reform of program evaluation pag 208).

2. patrocinadores

El evaluador no es libre para escoger las preguntas a investigar, porque el patrocinador puede estar interesado en ciertos aspectos y no en otros.

Tomado de Designing evaluations of educational and social progress by Lee Cronbach.

3. Responsables de la toma de decisiones:

administración, padres, estudiantes y profesores.

¿CUÁNDO SE EVALÚA?

Durante el proceso, ya que este tipo de evaluación es propuesta para mejorar un programa durante su ejecución.

La evaluación usada para mejorar un programa mientras está en proceso, contribuye más a mejorar la educación, que la evaluación que se hace a un producto terminado.

¿CÓMO SE EVALÚA?

Se encuentra dentro del modelo conductivista-eficientistas Método: Planificación educativa Finalidad Educativa: Valoración proceso y producto.

Planificación de la evaluación.

a. Identificar los problemas más importantes.

b. Planificación de los interrogantes

ü Divergente: En esta etapa o fase, se hace una lista de interrogantes y se designa qué es lo que tiene valor para una evaluación.

ü Convergente: Convergente: se asignan las prioridades entre los interrogantes y se dedica a definir que resulta ser más aceptable para ser evaluado.

Desde esta óptica, las técnicas de evaluación no pueden limitarse a los test de rendimiento. Los cuestionarios, las entrevistas, la observación sistemática y no sistemática, las pruebas de ensayo, según el autor, ocupan un lugar importante en la evaluación, en contraste al casi exclusivo uso que se hacía de los test como técnicas de recogida de información.

FORTALEZAS Y DEBILIDADES

Fortalezas Según Stufflebean (1983)

ü Tiene en cuenta las necesidades informativas del publico

ü Ayuda a formular metas

ü El proceso es flexible e interactivo

ü Los informes son oportunos

ü Promueve la eficiencia

ü Enfatiza la comunicación de los resultados

ü Analiza el contexto del programa

ü Busca y estima planes alternativos

ü Describe el programa real

ü El alcance de la información es amplio

ü Considera tanto la consistencia como la fragilidad

ü Investiga efectos laterales

ü La apreciación final del valor es extensamente documentada

ü Promueve la objetividad por medio de la meta de evaluación

ü Implementado a gran escala en las escuelas

ü Tiene una fuerte viabilidad política

Debilidades: segun Stufflebean (1983)

ü Depende del compromiso de la audiencia ente la evaluación

ü El administrador principal puede controlar la divulgación de la información.

ü Puede descuidar el papel sumativo de la evaluación

ü El público puede confiar excesivamente en la información

ü Son difíciles de establecer la confiabilidad y la validez

ü Las medidas de seguridad frente a la parcialidad son en general insuficientes

RESULTADOS ESPERADOS DE LA EVALUACIÓN

Para Cronbach el reporte final de la evaluación es una tarea diferente al de un investigador porque el reporte científico a una determinada audiencia que comparte un lenguaje y un estilo de pensamiento, mientras que el reporte del evaluador tiene que hablar a diferentes audiencias, el evaluador debe encontrar la forma que su reporte sea entendido correctamente a pesar de esta dificultad, para esto es necesario responder a las siguientes preguntas:

¿Qué es lo que se debería incluir para facilitar la comprensión del usuario?

¿Qué supone esto para primeras las operaciones de la evaluación?

El autor considera, que el evaluador tiene un papel más de periodista que investiga los intereses públicos, evaluando lo que merece la atención del público y la forma de presentarlo para atraer su atención.

Tomado de Designing evaluations of educational and social progress by Lee Cronbach.

PREGUNTAS DE REFLEXIÓN:

1. ¿Qué aporte significativo da el modelo de Cronbach a la evaluación?

2. El modelo de evaluación propuesto por Cronbach, se aplica de forma más adecuada a un recurso educativo en proceso de elaboración o a uno en proceso de aplicación. ¿Por qué?

3. Establezca una crítica a este modelo.

4. Seleccione un recurso educativo y Evalúelo desde la perspectiva asignada, según los postulados de la evaluación propuestos por Cronbach.