Evaluando los resultados de la reforma escolar total


ERIC Identifier: ED469314
Publication Date: 2000-09-00
Author: Hertling, Elizabeth
Source: ERIC Clearinghouse on Educational Management Eugene OR.

Evaluando los resultados de la reforma escolar total (Evaluating the Results of Whole-School Reform). ERIC Digest.

La reforma escolar total (conocida tambien como reforma escolar global), es un proceso mediante el cual se busca cambiar simultaneamente todos los elementos del ambiente operacional del colegio, de tal manera que esos elementos se alinien con una vision orientadora central (Keltner 1998). El objetivo final, por supuesto, es mejorar el rendimiento de los alumnos.

Frustrados por el poco exito de las reformas fragmentarias y espoloneados por los incentivos financieros del programa federal de Demostracion de Reforma Escolar Global (DREG) (Comprehensive School Reform Demostration) (CSRD), el que otorga $50.000 en becas anuales para los colegios que reunen las condiciones de calificacion. Existe un aumento de los educadores que estan considerando una reforma global escolar para mejorar el rendimiento de los colegios.

Funciona realmente la reforma global escolar? Hasta aqui los resultados son modestamente positivos. Un estudio de 1999 hecho por el Instituto Americano para Investigacion (American Institute for Research) encontro que solamente 3 de los 24 modelos de reforma global estudiados, mostraban una fuerte evidencia de que el resultado de los estudiantes habia sido elevado (AIR 1999). La organizacion Nuevos Colegios Americanos (New American Schools) [NAS] sostiene que cada uno de sus disenos, cuando se han implementado completamente, mejora las tasas de asistencia, el involucramiento de los padres y el rendimiento de los alumnos. NAS agrega, ' Algunos colegios no han alcanzado los resultados que esperaban, y algunos no han experimentado ninguna mejora luego de adoptar el diseno' (NAS 1999). Para determinar si sus programas de reforma estan alcanzando los resultados proyectados, el colegio debe poder conducir una evaluacion efectiva de las practicas de reforma. 'Los colegios que carecen de la habilidad para analizar sus propios resultados...estaran siempre en desventaja,'' dice el presidente de NAS, John Anderson (1999).

Los colegios que no evaluan sus resultados cuentan ademas con otra desventaja: Para renovar el programa de financiamiento DREG, a los colegios se les exige programas de reformas globales. Este Digest examina que aspectos estan envueltos en tal evaluacion, de tal modo que los colegios puedan determinar que esta funcionando con los programas y que necesita ser cambiado.

QUE REQUIERE EL DREG PARA RENOVAR EL FINANCIAMIENTO?

Crear un diseno flexible y mantenerlo en forma realista son los dos objetivos primordiales de la evaluacion DREG (Clark y Dean 2000). Las Agencias de Educacion Estatal y Local (State and Local Education Agencies) (SEA y LEA) [AEE y AEL] deben evaluar la implementacion de los programas DREG, ademas de medir sus resultados. El Departamento de Educacion de los Estados Unidos (1999) (The US Department of Education) aconseja a las AEE y AEL considerar dos fuentes principales de datos en la evaluacion de los programas DREG: rendimiento de los estudiantes e implementacion del programa.

Las medidas de rendimiento debieran ser relacionadas con los resultados esperados de los programas de reforma global implementados en el Estado y debieran producir datos tanto de tipo cuantitativo como cualitativo. La evaluacion debiera establecerse sobre el mismo tipo de metodo utilizado para evaluar a todos los estudiantes en relacion con los estandares del Estado y puede ser complementada mediante las evaluaciones de rendimiento estudiantil desarrolladas a nivel local o de colegio. Es posible que los colegios tambien quieran examinar otros aspectos del rendimiento escolar tales como asistencia e involucramiento de los padres.

La necesidad de conseguir informacion de los programas de implementacion nace de la pletora de investigaciones que demuestran la importancia del papel de la implementacion para el exito de una reforma escolar global. El Departamento de Educacion requiere que los colegios hagan un seguimiento del apoyo de quienes la impulsan, de la participacion de los padres, un continuo desarrollo profesional del personal, y la realizacion de un seguimiento de la implementacion. Otros datos debieran incluir la utilizacion de asistencia externa en la implementacion del programa, la fuente y la efectividad de la asistencia tecnica (Departamento de Educacion de EEUU) [U.S. Department of Education].

COMO PUEDEN PLANEAR LOS COLEGIOS UNA EVALUACION GLOBAL?

El secreto de este proceso es poder realizar preguntas claves tempranamente en el programa, de tal manera que el proceso de evaluacion pueda reflejar las necesidades, los intereses, los problemas y los recursos unicos del colegio. 'Las evaluaciones verdaderamente efectivas que entregan informacion util a quienes toman las decisiones, no son ideas posteriores, son partes integrales de la planificacion del programa y de los procesos de implementacion desde el principio,' aconceja Cicchinelli y colegas (1999).

Yap y colegas sugieren que los colegios se hagan varias preguntas al planear su reforma global (1999). Que quiere alcanzar el colegio en terminos generales? Que debe hacerse para alcanzar estos objetivos? Como seran medidos los progresos hacia los objetivos? Como sera recopilada la evidencia para demostrar el progreso hacia los objetivos del colegio? Como se utilizaran los resultados de la evaluacion?

Los principales participantes pueden reunirse como grupo para acordar las respuestas a cada pregunta, o pueden responder la pregunta separadamente antes de reunirse para tabular los resultados. Es importante que cada diferencia de opinion sea expresada y considerada, aconseja Hassel (1998).

De acuerdo a Cicchinelli y colegas, el proceso de evaluacion debiera permanecer flexible y realista en su alcance. Los estandares de evaluacion, tales como los Programas Estandares de Evaluacion (Program Evaluation Standards) establecidos por el Comite Conjunto sobre Estandares para Evaluacion de la Educacion (Joint Committee on Standards for Education) de Estados Unidos o los Principios Guias para Evaluacion desarrollados por la Asociacion Americana de Evaluacion (American Evaluation Association) pueden ser utiles.

Es crucial el involucramiento de los interesados claves en el proceso de evaluacion. Pueden ser incluidos como participantes los padres, los miembros de la comunidad, profesores, administradores, consejos de educacion, administradores, estudiantes y otros (Departamento de Educacion de Colorado 1998) [Colorado Department of Education].

Mientras se desarrolla la lista preliminar de las tareas de evaluacion, los administradores debieran ademas estimar el tiempo del personal requerido y la experiencia necesaria, tanto como otros recursos indispensables.

Estos gastos debieran ser sopesados en relacion con el monto de recursos disponibles para determinar si los colegios necesitaran colaborar con otras agencias para obtener tiempo del personal y/o los recursos necesarios. (Cicchinelli y colegas).

COMO DEBIERA DISENARSE LA EVALUACION?

La manera en que la reforma global del colegio es implementada determina en gran parte sus posibles resultados. Por lo tanto, el diseno de evaluacion debera considerar estos dos componenetes: Que tan bien la implementacion del programa esta funcionando, y que resultados concretos ha logrado? (Yap y colegas). Una evaluacion efectiva no puede confiarse en una sola herramienta o un solo dato recolectado.

'Ningun encuestador individual o herramienta general de recoleccion de datos puede alcanzar las necesidades de informacion total que se requieren,' advierten los Asociados de Estudios de Politicas (Policy Studies Associates) (1998). Los colegios debieran combinar pruebas estandarizadas y encuestas con metodos cualitativos tales como entrevistas personales y grupos especificos.

Para evaluar la implementacion de programas, los colegios pueden revisar material de archivo tales como anotaciones de los estudiantes, planes de programas y vitacoras de implementacion. Puede que los educadores tambien deseen realizar encuestas o entrevistas con participantes claves tanto como realizar observaciones en las clases para monitorear cambios en las practicas de instruccion (Cicchinelli y colegas).

Para evaluar los resultados concretos del programa, los colegios a menudo se concentran en los logros de los alumnos y su rendimiento. La cotejabilidad cumple aqui una funcion importante. El Departamento de Educacion de Colorado (Colorado Department of Education) sugiere incluir evaluaciones que cuenten con un sistema comun de puntaje (notas) para que permitan la comparacion entre colegios, distritos y Estados como por ejemplo el CSAP, la Evaluacion Nacional sobre Progresos en Educacion (National Assessment of Education Progress), el Test de Habilidades Basicas de Iowa (The Iowa Test of Basic Skills), y otros. Los Asociados de Estudios de Politicas informan que muchos colegios relacionan sus objetivos con metas mayores del Estado que son medidos periodicamente por los programas de evaluacion de sus Estados. De esta manera, los colegios pueden examinar sus resultados para proposistos diversos.

Los colegios no debieran confiar solamente sobre pruebas estandarizadas para evaluar el logro de los estudiantes, advierte el Departamento de Educacion de Colorado. Los colegios debieran incluir evaluaciones de salas de clase que provean informacion adicional como muestras de trabajos escritos, proyectos, experimentos, discursos, demostraciones y demas.

CUALES SON LOS OBSTACULOS DE UNA EVALUACION EXITOSA?

Muchos elementos pueden descarrilar un plan de evaluacion. El problema mas comun, de acuerdo con Yap y colegas, es la falta de tiempo: 'Muchos profesores se sienten ya agobiados y la idea de tener que hacer otra cosa mas puede ser intimidadora' Los distritos que carecen de recursos para la evaluacion pueden desear buscar ayuda de quien desarrolla el programa o de la fuente de financiamiento.

Ademas, puede que los participantes claves no tengan las habilidades o la experiencia necesaria para trabajar juntos cooperativamente, o puede ser posible que trabajen juntos pero pueden adolecer de entrenamiento en la evaluacion practica de programas, concluyendo en la falta de comprension en la utilizacion de los datos para decisiones dirigidas (Yap y colegas).

La falta de conocimiento no es la unica barrera para una evaluacion exitosa. Muchos educadores temen las evaluaciones, ya que piensan que la informacion sera utilizada en contra de sus colegios para exponer problemas y danar el financiamiento.

COMO DEBIERAN UTILIZARSE LOS DATOS DE EVALUACION?

'Una vez que se ha terminado el duro trabajo de recoleccion de datos, comienza el verdadero trabajo duro', dicen Cicchinelli y colegas. Obviamente los resultados de evaluacion deben ser reportados. Pero para crear un informe util, los evaluadores deberan ajustar los datos a la audiencia, elegir el medio mas adecuado para entregar los resultados y entregar los hallazgos oportunamente.

Cicchinelli aconseja a los administradores formatear los resultados de evaluacion para facilitar el uso de los participantes. Los directores podran beneficiarse con un informe computacional resumido de las evaluaciones desagregadas por grupos de estudiantes que reciben diferentes tipos de instruccion. Los consejos de los colegios de funcionarios estatales, sin embargo, podrian estar mas interesados en los informes de progreso estadistico con graficos y cuadros en los cuales se compara el rendimiento estudiantil a traves de los anos.

El compartir los resultados no es necesariamente un evento que se realice de una sola vez. Yap y colegas sugieren que los colegios deben establecer un proceso continuo para comunicar los resultados de evaluacion y asi mantener a la comunidad escolar informada acerca del progreso y calidad del programa. Los Asociados de Estudios de Politicas recomiendan hacer una evaluacion al menos cuatro veces al ano.

Los educadores no debieran olvidar el uso mas importante de los datos, es decir: mejorar el programa. Puede ser util separar los datos en categorias como genero, etnicidad, tipo de estudiante y grado, de este modo los colegios pueden enfocarse en sus fortalezas y debilidades (Yap y colegas). Basado en los resultados de evaluacion, los educadores pueden determinar si los cambios en el programa son necesarios, si los resultados basados en hitos y objetivos necesitan ser refinados o si las estrategias de accion necesitan ser redisenadas, reemplazadas o mantenidas (Colorado Department of Education).

REFERENCIAS

American Institutes for Research. An Educator's Guide to Schoolwide Reform. Arlington, Virginia: Educational Research Service, 1999. 141 pages.

Anderson, John. "Is It Working Yet?" Education Week (June 2, 1999): 30, 33.

Cicchinelli, Louis F., and colleagues. "Evaluating Comprehensive School Reform Initiatives." Noteworthy Perspectives on Comprehensive School Reform. Aurora, Colorado: McREL, 1999. Pages 41-47. ED 433 588.

Clark, Gail, and Ceri Dean. Comprehensive School Reform Demonstration: A Summary of LEA Roundtables. Aurora, Colorado: McREL, 2000.

Colorado Department of Education. Schoolwide Programs: Preparing for School Reform. Denver: Colorado Department of Education, 1998. 195 pages. http://www.cde.state.co.us/

Hassel, Bryan. Comprehensive Reform: Making Good Choices. Oak Brook, Illinois: North Central Regional Educational Laboratory, 1998. 63 pages. Full text: http://www.ncrel.org/csri/tools/makegood.pdf

Keltner, Brent R. Funding Comprehensive School Reform. Rand Issue Paper. Santa Monica, California: Rand Corporation, 1998. 9 pages. ED 424 669.

New American Schools. Working Toward Excellence: Examining the Effectiveness of New American Schools Designs. New American Schools, 1999. 55 pages. ED 420 896. Full text: http://www.naschools.org/respub/99results.pdf

Policy Studies Associates. Implementing Schoolwide Programs: Vol. 1, An Idea Book on Planning. Washington D.C.: Policy Studies Associates, 1998. 220 pages. ED 423 615. http://www.edrs.com/default.cfm

U.S. Department of Education. Guidance on the Comprehensive School Reform Demonstration Program. Washington, D.C.: U.S. Department of Education, 1999. http://www.ed.gov/offices/OESE/compreform/csrdgui.html

Yap, Kim, and colleagues. Evaluating Whole-School Reform Efforts: A Guide for District and School Staff. Portland, Oregon: Northwest Regional Educational Laboratory, 1999. 178 pages.


Library Reference Search
 

Please note that this site is privately owned and is in no way related to any Federal agency or ERIC unit.  Further, this site is using a privately owned and located server. This is NOT a government sponsored or government sanctioned site. ERIC is a Service Mark of the U.S. Government. This site exists to provide the text of the public domain ERIC Documents previously produced by ERIC.  No new content will ever appear here that would in any way challenge the ERIC Service Mark of the U.S. Government.

More To Explore