You are on page 1of 17

Revista de la Asociacin de Inspectores de Educacin de Espaa

Monogrfico

LA EVALUACIN DE CENTROS DOCENTES:


UN ENFOQUE INTEGRADO
Escrito por Salvador Pallars y Ramir Buch

Resumen
En el presente artculo se analizan los principales factores que inciden en la evaluacin
y el cambio. Se propone un marco conceptual de la evaluacin y en concreto de la
evaluacin de centros educativos en el que se plantea un enfoque integrado de la
evaluacin.
De acuerdo con estos referentes tericos se explicita una propuesta de evaluacin que
se lleva a cabo en el marco del "Plan de Evaluacin de Catalunya 2005-09". Se
describen las herramientas (estrategias y tecnologa) y el "ciclo evaluativo" en el cual
se integran distintas acciones evaluativas que se llevan a cabo con la participacin de
agentes internos y externos.

Abstract
The present article analyses the main factors that affects evaluation and resulting
change. It also sets a proposal for a new framework for schools' performance
evaluation and sets for an integrated approach in evaluation.
In accordance with these theoretical principles, it develops a proposal for evaluation as
it is carried out by following the "2005-2009 Evaluation Plan for Catalonia". It provides a
description of tools -strategies and technological support- as well as the evaluation
process in which all evaluating agents both external and internal are integrated.
I. LA EVALUACIN Y EL CAMBIO
"El problema de desarrollar una cultura de la evaluacin en las organizaciones no deja
de ser desconcertante. Las organizaciones hablan de evaluar y dicen que quieren que
se haga, pero la evaluacin acaba convirtindose habitualmente en una actividad
secundaria, que slo aparece cuando existe algn tipo de presin, problemas u
rdenes explcitas" (James Sanders 2002)
Siendo la evaluacin una estrategia tan necesaria, por qu no es una prioridad para
los centros y para los agentes de la educacin a la hora de exponer sus necesidades a
los responsables de la Administracin?
Por qu los agentes de la educacin no priorizan la evaluacin, o no la reivindican?
Por qu no pasa nada si no se llevan a cabo las evaluaciones planificadas?
As pues, dnde est el problema?
Por qu centros y profesores, aun viendo la necesidad de la evaluacin, no la
incorporan como una actividad bsica para facilitar el crecimiento de la institucin y la
mejora del servicio educativo?
En el trasfondo de estas preguntas subyacen diversos factores relacionados con la
estructura del sistema poltico-administrativo, con la idiosincrasia de las instituciones
educativas (variables internas) y con el enfoque que se da a la evaluacin.

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

Tanto la evaluacin como la innovacin implican


actuaciones y procesos sistemticos que se llevan a cabo en las "clulas" de
produccin del sistema educativo (centros educativos). Cada una de estas clulas
ejerce las funciones propias de un sistema y su desarrollo como sistema depende de
los procesos internos y de las relaciones con el entorno. La naturaleza de la educacin
es interactiva y pluridimensional. "El hecho educativo sucede por medio de un conjunto
de interacciones entre la accin educativa sistemtica y el medio externo" (Rul, 2004)
As pues, si analizamos las instituciones educativas podemos destacar tres tipos de
factores que inciden en la evaluacin y en la innovacin: la dependencia y las
relaciones que la institucin mantiene con el sistema poltico-administrativo, las
variables internas que caracterizan la propia institucin educativa y el enfoque que se
d a la evaluacin. El siguiente cuadro trata de visualizar estos factores:

1. Estructura del sistema educativo


Un sistema educativo con una concepcin burocrtica no confa en los profesores y
tampoco les confa evaluar su calidad.
Un sistema educativo con una concepcin ms profesional esperar que sus
profesores planeen, diseen, lleven a cabo y evalen su trabajo, se esfuercen en llevar
a cabo metas definidas y alcancen excelentes estndares definidos. (D.Nebo 1996)
La estructura del sistema, o estructura poltico-administrativa, tiende a dotarse de una
organizacin estable con independencia de los cambios en su composicin (equipos
directivos, profesores, alumnos,...). Por una parte, este hecho es una condicin que
preserva la identidad de la institucin educativa y le facilita orientarse a sus finalidades,
y, por otra, tambin puede resultar (y en la prctica resulta) que la preocupacin por la
estabilidad sea un freno para el cambio y la innovacin. Con frecuencia la estructura
responde ms a la lgica de la propia organizacin (sistema poltico-administrativo)
que a las necesidades de los usuarios del sistema.
Normalmente la evaluacin tiene poca incidencia en la estructura. Por el contrario, la
estructura puede dificultar la evaluacin y la mejora. Si analizamos algunas variables
que caracterizan la estructura de los sistemas educativos: centralizacin
descentralizacin, autonoma - dependencia, profesionalidad - funcionariado, etc.,
fcilmente comprenderemos cmo stas condicionan la evaluacin, y cmo la

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

evaluacin juega un papel diferente en cada caso


segn sea la estructura del sistema. Por tanto, los factores estructurales tienen una
incidencia determinante en la mejora de la calidad de la educacin.
Se puede imaginar un escenario en el que una administracin o una institucin privada
realiza un concurso pblico para seleccionar director o directora para uno de sus
centros. Los aspirantes tienen que presentar su currculum y un proyecto para
gestionar y mejorar el centro donde posteriormente ejercern el cargo. Una vez
realizada la seleccin, la administracin o institucin proporcionar los recursos
necesarios para llevar a cabo el proyecto aceptado. El director podr elegir su propio
equipo para realizar las tareas de gestin e incidir en la poltica de contratacin de
profesorado. El director, por su parte, estar obligado a rendir cuentas peridicamente
sobre la ejecucin del proyecto y sobre los resultados obtenidos. Esta informacin ser
considerada en la evaluacin del director y de su equipo.
El escenario que acabamos de dibujar corresponde a un sistema educativo
descentralizado, con centros autnomos que necesariamente deben rendir cuentas, en
donde los equipos directivos tienden a ejercer un fuerte liderazgo. La evaluacin se
convierte en una estrategia fundamental e indispensable para el desarrollo y el
crecimiento de la institucin y para la mejora del servicio que ofrece a la sociedad. En
este escenario el director del centro y las polticas internas orientadas a la calidad y al
rendimiento de cuentas son los principales impulsores de una cultura planificativa y
evaluativa.
Podemos imaginar otro escenario, el ms parecido a nuestro sistema educativo: "... la
Administracin... los centros docentes... los directores... el profesorado...", y luego
reflexionar sobre las motivaciones que, en esta situacin, pueden inducir a los centros
docentes a llevar a cabo la evaluacin.
En los sistemas educativos ms centralizados, donde los centros tienen escasa
autonoma, liderazgo dbil, predominio de la cultura funcionarial, poca estabilidad de
las plantillas,... la evaluacin est muy condicionada.
Cmo se articulan los procesos de cambio en este contexto? Cmo toman sus
decisiones los gestores de la Administracin? Qu incidencia puede tener la
evaluacin?
Qu necesidad tiene el centro de evaluarse? Se hace patente esta necesidad?
Resulta til la evaluacin? Qu uso hacen los centros de la evaluacin?
Es aceptable el esfuerzo que el centro invierte en evaluacin? Se ve compensado
por el uso que de ella hacen los profesionales y el propio centro?
Es en los sistemas ms centralizados y con poco margen de autonoma donde resulta
ms necesario motivar a los centros, acompaarlos y dotarlos de los recursos
necesarios. As, la cultura evaluativa slo avanzar si este esfuerzo se mantiene en el
tiempo.

2. Variables internas
"La institucin tiene un papel determinante en la suerte que corrern los proyectos de
cambio, porque en ella trabajan los profesores y es en ella donde se construye el
sentido de sus prcticas profesionales." (M Gather 2004)
La experiencia de las sucesivas reformas educativas ha puesto de manifiesto la
complejidad de la realidad educativa y la fuerte incidencia de la cultura de las
instituciones educativas en los procesos de innovacin.

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

La evaluacin puede incidir en el funcionamiento


de las instituciones y como consecuencia en sus resultados. Pero en todo caso la
eficacia de la evaluacin est condicionada por la idiosincrasia de las mismas
instituciones.
Las instituciones dotadas de una organizacin burocrtica aseguran la estabilidad, pero
las organizaciones que mejor pueden propiciar el cambio son las que responden a una
lgica profesional, donde se da una cultura de cooperacin basada en valores
compartidos, y donde la reflexin y el consenso son estrategias bsicas para la
construccin del conocimiento y la toma de decisiones.
Pero es posible iniciar este camino cuando en muchos casos los directivos de las
instituciones se ocupan casi exclusivamente de tareas de gestin administrativa y de
representacin institucional?
La evaluacin encuentra un terreno abonado en los centros con slidas relaciones
profesionales entre sus miembros, con una conciencia de identidad colectiva y con una
capacidad de proyeccin hacia el futuro. Pero todo ello no es posible sin un liderazgo
innovador y eficaz que implique a los profesionales en un proyecto comn con una
orientacin de la institucin como organizacin que aprende.
Las organizaciones que aprenden estn en el camino de sacar el mximo provecho de
la evaluacin dado que en ellas se habla de forma abierta de los problemas complejos.
A partir del aprendizaje en equipo se comprende la cultura y se sita la dinmica del
centro en el marco del sistema educativo mediante el pensamiento sistmico.
As pues en los centros donde se dan las caractersticas de una cultura innovadora, la
evaluacin se implanta sin mayores dificultades. Por el contrario, en los centros con
una cultura ms burocrtica, resulta especialmente necesaria la ayuda de la
Administracin para preparar minuciosamente los procesos de evaluacin y cambio, y
procurar la dotacin de los recursos necesarios para llevarlos a cabo.
Las administraciones educativas deben potenciar la autonoma de los centros, la cual
es el marco donde la evaluacin encuentra las condiciones favorables para
desarrollarse e insertarse en su cultura. Es entonces cuando la evaluacin se convierte
en una herramienta til para definir y orientar planes de mejora asumidos por sus
actores. Cuando la evaluacin forma parte del proyecto institucional sus resultados se
hacen ms tangibles. La evaluacin permite que los propios agentes compartan los
significados de la informacin aportada y facilita avanzar hacia nuevos planteamientos.
Igualmente, en un escenario donde los centros educativos son ms autnomos, es
muy necesario que desde la administracin se potencie el trabajo en red. A travs del
intercambio se facilita la comprensin de las realidades complejas, el anlisis de las
nuevas propuestas y la resolucin de problemas comunes y reales.

3. Enfoque
Los actores principales poseen informacin importante para la evaluacin, no slo
como fuente de datos sino como intrpretes de los mritos y deficiencias que podemos
hallar. Stake 2006
Las posibilidades de realizar con xito la evaluacin estn muy relacionadas con el
planteamiento que de ella se hace. Existe un conjunto de elementos relacionados con
su enfoque. La evaluacin puede ser solicitada o impuesta, burocrtica o funcional, sin
consecuencias o discriminativa, simblica, til, etc. De la priorizacin de estas
opciones depender el xito de la evaluacin o, lo que es lo mismo, que sta sea
realmente til, que sus resultados se utilicen en la prctica. El enfoque que se d a la
evaluacin es determinante para que sta sea aceptada y se internalize en el
funcionamiento de las instituciones.
Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

La evaluacin es un proceso eminentemente


comunicativo y colegiado que incide en la cultura de las personas y de las
instituciones. Como ya se ha mencionado, este proceso est condicionado por muchos
factores de tipo social: las creencias y las experiencias de los profesores, las
expectativas, la cultura de las instituciones, el clima relacional, etc.
Desde la perspectiva interna, las organizaciones tienen dificultades para evaluar e
innovar. Las innovaciones encuentran resistencias en la cultura de los centros. Los
profesionales se sienten inseguros fuera de sus rutinas y formas de proceder por lo
que ofrecen resistencias. Por tanto, para facilitar la evaluacin se debe considerar la
cultura, identificar la manera cmo los actores perciben y describen la realidad y a qu
cosas reaccionan oponindose a la organizacin.
Cmo podemos incidir en la utilidad y el uso de la evaluacin a partir de su enfoque?
La evaluacin ha de ser til, rigurosa, comprensiva y deseada por los actores que la
han de utilizar.
Michael Patton afirma que "la participacin fomenta el uso". Sus ideas estn bajo el
paraguas de la de la evaluacin centrada en la utilizacin. El criterio para determinar si
una evaluacin es buena es ver si se usan sus resultados.
La evaluacin participativa reivindica su capacidad para maximizar los beneficios que
obtiene una organizacin. Los actores internos seleccionan mejor los contenidos de la
evaluacin por lo que sus resultados estn ms relacionados con la solucin de los
problemas. En cambio, los evaluadores externos suelen tener ms habilidades
tcnicas, conocimientos de estrategia y mayor competencia a la hora de elaborar
informes. Ambas aportaciones deben ser tomadas en consideracin.
La evaluacin participativa puede ser el mejor modo de adquirir una buena
comprensin de los puntos fuertes y dbiles, y de avanzar hacia la mejora. Ahora bien,
resulta casi imprescindible contar con facilitadores. En este escenario, la Inspeccin
educativa puede asumir un papel importante.
"A medida que los actores implicados se van responsabilizando ms de la marcha del
estudio, el evaluador profesional pasa a ser ms un asesor y un facilitador del
desarrollo organizativo" (Bickman y Rog 1998)

II. EL MARCO CONCEPTUAL DE LA EVALUACIN


Una vez presentados los factores que inciden en la evaluacin, pasamos a analizar su
aspecto conceptual. Solamente desde un conocimiento profundo de la evaluacin
estaremos en disposicin de incidir en un enfoque adecuado.
Nuestra experiencia nos dice que en un contexto donde la cultura evaluativa es dbil
frecuentemente los profesionales de un centro o los evaluadores de un organismo o
institucin externa no siempre comparten el mismo concepto de evaluacin ni le
atribuyen las mismas finalidades.
Por eso, antes de iniciar un plan de evaluacin, un programa de evaluacin o una
accin evaluativa concreta, hay que preguntarse: de qu evaluacin estamos
hablando?, cul es su finalidad?, de qu caractersticas hemos de dotarla para
alcanzar las finalidades propuestas?, etc.

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

1.
Concepto de la evaluacin
Algunas precisiones entorno al concepto evaluacin
Conviene distinguir entre evaluacin propiamente dicha y lo que podramos denominar
aproximaciones a la evaluacin o pseudo - evaluaciones.
El trmino evaluacin implica un procedimiento deliberativo y formal. La evaluacin de
la educacin debe estar fundamentada en informaciones obtenidas a partir de un
proceso tcnico que garantice el rigor de la informacin obtenida y que permita
elaborar juicios de valor con referentes criteriales o expienciales (evaluacin criterial o
evaluacin comprensiva).
Debe destacarse la concepcin de la evaluacin como el conocimiento del valor de
algo. Buena parte de dicho conocimiento proviene de la experiencia personal de los
que participan y a menudo de nuestra propia conciencia. Por tanto, se trata de
construir conocimiento desde las vivencias personales y colectivas situadas en un
contexto concreto, ampliando la conciencia y la mirada sobre los propios hechos y
actividades.
El cuadro siguiente muestra algunas tipologas de actividades de evaluacin que
pueden ayudar a comprender las diferencias y los matices entre acciones pseudo
evaluativas y la evaluacin propiamente dicha.

2. Finalidades
La mejora y la responsabilidad (el rendimiento de cuentas) son dos finalidades bsicas
en la evaluacin educativa. No obstante, la evaluacin puede utilizarse tambin con
otros propsitos como el conocimiento, el control, la acreditacin, la motivacin, las
relaciones pblicas, el ejercicio de autoridad, etc.
Un centro puede evaluarse, por ejemplo, para acreditarse respecto a una norma o para
ganarse el apoyo pblico y para "venderse" a los padres en sistemas educativos donde
stos tienen el derecho de elegir centro. Los profesores, por su parte, pueden utilizar la
evaluacin para motivar a los estudiantes, etc.
Las finalidades de la evaluacin tienen que estar bien delimitadas, tienen que ser
conocidas por todos los agentes implicados y ser fruto del mximo consenso por parte
de stos. Las Administraciones pblicas y las instituciones, considerando el marco
social y poltico, tienen que definir y priorizar las finalidades de la evaluacin.
Por ejemplo, en el sistema educativo de Catalunya el Departament d'Educaci ha fijado
para el plan de evaluacin 2005-2009 que la evaluacin tiene que contribuir a:

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

Conocer la realidad educativa tanto a nivel


de centro como a nivel de Sistema Educativo para incidir en la calidad
educativa que reciben los alumnos.

Rendir cuentas a la sociedad sobre el resultado de las inversiones en


educacin.

Informar a los centros, la Administracin y la sociedad sobre los procesos y


resultados de la accin educativa que se lleva a cabo en los centros educativos
haciendo pblicas las conclusiones de inters general.

Facilitar estudios de investigacin con la participacin de otros organismos de


la Administracin, las universidades e instituciones especializadas en
educacin, en evaluacin o en polticas sociales.

Promover la mejora de la competencia profesional e incentivar a los


profesionales de la educacin en el ejercicio de las funciones que tienen
atribuidas.

La evaluacin de la educacin ha de incidir fundamentalmente en la mejora de la


calidad de la educacin que reciben los alumnos. Es decir, si incide en la mejora de
diferentes aspectos del funcionamiento del centro o de las personas, pero no incide en
la mejora de la calidad que reciben los alumnos, entonces la evaluacin no est
cumpliendo su finalidad prioritaria.
La evaluacin es tambin una estrategia poderosa de aprendizaje que nos permite
mejorar nuestra competencia profesional. Es una actividad eminentemente humana y
comunicativa, una estrategia de reflexin que requiere preguntas como: "qu
hago/hacemos"?, "por qu"?, "qu resultados obtenemos"?, "qu podramos hacer
para mejorar"?, etctera. En definitiva, una herramienta de aprendizaje.

3. Caractersticas de la evaluacin
Una vez compartido el concepto de evaluacin y concretadas las finalidades hace falta
definir sus caractersticas. Las caractersticas de la evaluacin son "orientaciones" o
"predisposiciones" que adoptamos para configurar un determinado estilo o enfoque de
la evaluacin.
Queremos evitar utilizar el trmino "modelo". La idea de definir un modelo que d
respuesta tanto al diseo como a la aplicacin de la evaluacin es una tarea que
responde ms a los deseos de facilitar la evaluacin que a las posibilidades que
permite la propia realidad. El nivel de complejidad de la realidad educativa y
concretamente la de los centros educativos hace que sea prcticamente imposible la
construccin de un modelo que d respuesta a las caractersticas de las distintas
acciones evaluativas que pueden llevarse a cabo.
Por lo tanto a nuestro juicio entendemos que existen determinadas orientaciones,
"estilos" o "predisposiciones" generales, que configuran un determinado enfoque de la
evaluacin.
Cuando realizamos una evaluacin concreta elegimos y priorizamos algunas de estas
predisposiciones. Es imposible que una determinada accin evaluativa considere todas
las predisposiciones al mismo tiempo y, posiblemente, ni siquiera es necesario. Pero,
eso s, la mayora de las evaluaciones han de considerar varias de estas
predisposiciones, las cuales marcan un estilo.
As pues, para facilitar el xito de la evaluacin, es preciso seguir un estilo atento a los
propsitos de la evaluacin y al contexto en el que se han de producir los procesos de
evaluacin y cambio. En nuestro contexto educativo creemos que la evaluacin de
Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

centros ha de
predisposiciones:

considerar

las

siguientes

Compresiva - criterial
Un estilo til a las finalidades de la evaluacin de la educacin debe considerar dos
maneras de abordar el trabajo de la evaluacin: una orientada a las mediciones y otra
orientada a la experiencia. Cada una enriquece la investigacin de forma distinta y
ambas merecen ser incluidas en la mayora de estudios.
Ambas orientaciones son necesarias porque la evaluacin consiste en el conocimiento
del valor de algo, y buena parte de dicho conocimiento proviene de la experiencia
personal y de nuestra propia conciencia. Las respuestas de los implicados, los
contrastes de opinin e informacin, los juicios emitidos desde los contextos ms
cercanos son un material bsico para esta perspectiva. Se trata del concepto
experiencial de la calidad para abordar la vala por encima del mrito de los resultados.
Los estndares expresan una cantidad, un nivel o una manifestacin de un criterio
determinado que indica la diferencia entre dos niveles de mrito; es una puntuacin de
corte. Son tiles ya que nos permiten realizar estudios comparativos ya sea entre
realidades educativas o de una misma realidad a lo largo del tiempo.

Global y focalizada
La evaluacin de centros ha de incluir tanto evaluaciones de tipo global que tienen un
enfoque holstico, como evaluaciones focalizadas de carcter parcial.
Teniendo en cuenta que los centros educativos son organizaciones sistmicas y
complejas, se debe armonizar una perspectiva holstica de la realidad educativa con la
posibilidad de profundizar en temas concretos, focalizacin de la evaluacin.
La pretensin de evaluar el centro en su totalidad y con un nivel de detalle exhaustivo
es ingenua e innecesaria. Igualmente, inferir hiptesis sobre la calidad de un centro a
partir de un tema concreto es poco riguroso si no imposible.
Atendiendo a los propsitos de la evaluacin es necesario determinar cual es el nivel
de focalizacin ms adecuado en cada caso. As pues, para facilitar la posicin de los
evaluadores respecto a la extensin en la evaluacin de centros, proponemos tres
niveles bsicos de focalizacin:

Evaluaciones globales (Evaluacin Global Diagnstica de Centro, Sistema de


Indicadores de centro,...).

Evaluacin de una rea curricular o de un aspecto general (gestin y


organizacin, ...)

Evaluacin de temas concretos curriculares o de procesos de centro


(comprensin oral, resolucin de problemas, tutora, clima escolar...).

Adems, el centro puede evaluar su planes, proyectos,...


El conjunto de acciones evaluativas previstas en un plan de evaluacin y que se
realizan de forma articulada en un "ciclo evaluativo", tal y como explicaremos en el
apartado III, constituyen la evaluacin de centro. Esto es: "diversas acciones
evaluativas constituyen una sola evaluacin de centro".

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

Integrada
Se trata de hacer un planteamiento que integre las perspectivas interna y externa de
manera que la evaluacin sea realizada por agentes internos y agentes externos de
acuerdo con un mismo plan de evaluacin. Es necesario integrar tambin los mbitos
de evaluacin (sistema educativo, centros, funcin docente,...) de modo que se
comparta parte de la informacin evaluativa obtenida para realizar diferentes estudios.
Convendra integrar la autoevaluacin en un programa de desarrollo a medio y largo
plazo, que permitiera crear un vnculo ms estrecho entre la autoevaluacin y la
problemtica de la renovacin del sistema escolar en su conjunto. (Rolff 1993)
El anlisis de las prcticas evaluativas en las diferentes comunidades autnomas y en
el contexto europeo pone de manifiesto que en algunos casos se ha priorizado la
evaluacin externa mientras que en otros se ha dado mayor importancia a la
evaluacin interna, o a ambas. Por ejemplo, en Catalunya, la Orden de 20 de octubre
de 1997, por la que se regula la evaluacin de los centros docentes financiados con
fondos pblicos, establece una evaluacin "bimodal" de tipo interno y externo:

La evaluacin interna corresponde a los propios centros y comporta la


participacin de los rganos de gobierno y de coordinacin y de los diferentes
sectores de la comunidad educativa. Cada centro ha de determinar sus
prioridades y disear el propio plan de evaluacin de acuerdo con sus
necesidades y su capacidad de gestin.

La evaluacin externa es responsabilidad de la Inspeccin educativa y con la


colaboracin de los rganos de gobierno de los centros y los miembros de la
comunidad escolar. Corresponde a la Subdireccin General de la Inspeccin
planificar su realizacin.

Tanto la evaluacin interna como la evaluacin externa haban de contribuir a la


permanente adecuacin de la accin educativa a las demandas sociales escolares y a
las necesidades educativas de los alumnos.
Pero este enfoque "bimodal" no se integr en un marco o dispositivo estructurador que
permitiera optimizar la relacin entre evaluacin y mejora, y una mayor integracin de
mbitos y perspectivas. As pues, cada evaluacin tiende a obedecer a la lgica de sus
agentes que es fruto de sus valores y creencias y, en definitiva, de los valores de la
institucin a la cual pertenecen.
En la realizacin de una evaluacin, sea "interna" o "externa", se sigue un proceso que
se inicia con la decisin de llevarla a cabo y contina con el diseo de la evaluacin, su
aplicacin, la produccin de informacin y la elaboracin de un informe. Cuando en un
mismo centro se aplican dos evaluaciones, una externa y otra interna, se siguen dos
procesos paralelos, cada uno con su propia lgica y, al final, se intentan relacionar los
resultados de ambas evaluaciones.
La situacin es similar a la que se producira cuando dos comunidades, cada una
desde su vertiente de montaa y atendiendo a sus objetivos, deciden construir un tnel
de encuentro. Acaban teniendo dos tneles y el problema de crear los accesos del uno
al otro. Al final, el coste y el impacto ambiental se disparan.
Frecuentemente la complementariedad entre la evaluacin interna y la evaluacin
externa es prcticamente inexistente. Por otra parte, se debe considerar la posibilidad
de que el centro crea que la evaluacin externa no responde a sus necesidades. "Es
ilusorio esperar que un centro mantenga un dilogo con una evaluacin externa si
llega a la conclusin de que est siendo explotado para propsitos que no satisfacen
directamente sus necesidades" (D. Nevo, 1996)

Revista n 5 - enero 2007 - Monogrfico

Revista de la Asociacin de Inspectores de Educacin de Espaa

Dado que esta complementariedad es muy


necesaria para la optimizacin de los recursos y del resultado de la evaluacin, se
debe avanzar hacia una evaluacin integrada (interna, externa / externa, interna) en la
que los actores internos y los actores externos centren la mirada sobre los mismos
contenidos de evaluacin en un marco o dispositivo estructurador que facilite su
integracin.
"... la amplia gama de usos de la evaluacin requiere una perspectiva general de la
evaluacin que satisfaga las diferentes necesidades, que emplee mtodos mltiples, y
utilice tanto la evaluacin interna como la externa..." "... para crear un dilogo
constructivo entre la evaluacin interna y la evaluacin externa se requiere una
perspectiva terica y un proceso de desarrollo de la evaluacin basada en el centro
como una combinacin de la evaluacin interna y la evaluacin externa"... (D. Nevo
1996)

Sistmica
Considera las relaciones integradas y evolutivas de un conjunto de variables (internas
y externas). El fenmeno educativo es una realidad sistmica, es decir, interactiva,
interrelacionada y pluridimensional.
En la medida en que en el Sistema Educativo intervienen variables internas y externas
del entorno socioeconmico, cultural y administrativo, la funcionalidad de la evaluacin
depende en gran medida de la consideracin de ambos tipos de variables. Determinar
el valor o la calidad de la educacin del Sistema Educativo, de un centro educativo o
de un alumno concreto tiene que hacerse considerando esta realidad.

Cclica
Las evaluaciones de centro ms significativas se tienen que repetir peridicamente con
el fin de poder conocer y valorar las tendencias y los cambios obtenidos mediante la
comparacin de resultados despus de haber introducido medidas para la mejora.
Por ejemplo, en el enfoque que en Catalunya se da a la evaluacin de centros, la
Evaluacin Global Diagnstica de centro y el sistema de indicadores de centro se
aplican peridicamente para obtener informacin del proceso que sigue el centro.

Cultural, participativa y democrtica


Este enfoque requiere la consideracin de los valores culturales de los profesionales
de la educacin, la participacin de la comunidad educativa y un planteamiento de la
evaluacin tico, transparente y creble.
Los aspectos conceptuales y tcnicos de la evaluacin son importantes, son los
elementos que facilitan la evaluacin, pero las dificultades y los profundos cambios que
promueve la evaluacin estn relacionados con los aspectos sociales.
La experiencia prctica constata que algunos profesionales, al inicio de un proceso de
implementacin o mejora de la evaluacin de centros, consideran sta como una
nueva obligacin apremiante y preocupante. Perciben que a la falta de tiempo se
aade una nueva tarea compleja para la cual no se sienten preparados y necesitan
formacin, una tarea que adems se percibe como una valoracin de su trabajo y, por
lo tanto, crea sentimientos de inseguridad.
As pues, hay que establecer unas reglas de juego transparentes que destierren los
miedos y favorezcan la participacin y la implicacin responsable. Los estamentos que
representan la organizacin de la institucin tienen que tener cuidado de no caer en la
tentacin de utilizar la evaluacin para promover ideas o personas.
Revista n 5 - enero 2007 - Monogrfico

10

Revista de la Asociacin de Inspectores de Educacin de Espaa

Hace falta un enfoque democrtico y participativo


que sirva a los profesionales y les implique y comprometa al cambio. La participacin
tiene que realizarse desde el inicio del proceso: en la caracterizacin de la evaluacin,
en la elaboracin del plan de evaluacin, en el diseo y la realizacin de evaluaciones
y, sobre todo, en la interpretacin de los resultados, profundizando, en las causas que
los explican, a partir de sesiones de evaluacin en las que se ponga en juego la
autoreflexin colectiva, los procesos deliberativos y las estrategias para llegar al
consenso, actividades propias del trabajo en equipo. Solamente desde este enfoque
cultural y participativo es posible promover e implicar a los profesionales en el cambio
(en los planes de mejora).
Sin embargo, en la prctica no es tan fcil y por lo tanto hay que estar atentos para
favorecer este proceso. Hay cuatro condiciones que consideramos bsicas para
facilitarlo:
a) La conviccin inequvoca de querer favorecer una participacin sin condiciones.
b) El tiempo necesario para poder participar, siendo conscientes de que
repercutirseguramente en el hecho que otras tareas no se llevarn a cabo o no se
llevarn a cabo con la misma dedicacin.
c) Las estrategias para que la participacin d los resultados deseados. La
participacin tiene que estar esmeradamente planificada (mimada). Se debe facilitar
informacin, tcnicas de trabajo en grupo, estrategias para llegar a acuerdos, etc.,
para dinamizar el proceso.
d) El intercambio con el exterior (expertos, otros centros y servicios, etc.) para
favorecer el enriquecimiento mutuo y tambin para remover las relaciones del
grupo. Salir de nuestro pequeo mundo a veces es una buena solucin para salvar
escollos que desde dentro, desde nuestra propia cultura, parecen imposibles.

III. LA PRCTICA DE LA EVALUACIN DE CENTROS


Cmo podemos estimular esta necesidad? Cmo podemos favorecer la reflexin en
nuestros centros?
Es necesario considerar dos planteamientos:
Uno que transfiere la capacidad de decisin a los centros educativos para potenciar
una respuesta educativa ms ajustada a la singularidad de cada contexto. Se trata de
un discurso que promueve la autonoma de centros como un recurso para mejorar la
calidad de la educacin y la evaluacin como herramienta para hacer posible el
mantenimiento y el crecimiento de esta autonoma.
El otro es un discurso ascendente que parte del anlisis de las necesidades de los
profesionales de la educacin y que se apoya en la racionalidad y responsabilidad, y
que potencia el trabajo en equipo y el aprendizaje social como estrategia para mejorar
la competencia y la prctica profesional (M. A. Santos Guerra). La evaluacin consiste
en poner sobre la mesa, y de forma colegiada, informacin relativa a cmo pensamos,
qu pretendemos y cmo actuamos (ideas, propsitos y prcticas), utilizando una
estrategia tcnica que da rigor a la informacin y que la presenta adecuadamente para
ser interpretada y transformada en conocimiento til para la mejora (S. Pallars, 1998).
Ambos planteamientos son complementarios, ambos justifican la evaluacin e inducen
en los profesionales de los centros docentes la necesidad de la prctica de la
evaluacin.
En todo caso, las iniciativas que emanan de los centros, siendo las ms eficaces desde
el punto de vista del cambio, no arraigan a menos que la Administracin educativa

Revista n 5 - enero 2007 - Monogrfico

11

Revista de la Asociacin de Inspectores de Educacin de Espaa

disponga de un proyecto que las apoye, dinamice


e impulse. Junto a un proyecto de mbito de centro es necesario un proyecto de
mbito de zona o distrito (trabajo en red) y un proyecto de mbito nacional.
La actividad evaluativa es un proceso sistemtico que conlleva un conjunto de
acciones bien organizadas que movilizan recursos materiales, formales y personales.
Cualquier proceso de estas caractersticas requiere una minuciosa planificacin.
Tomando como ejemplo el plan de evaluacin de centros en Catalunya, y de acuerdo
con el planteamiento terico expuesto en el apartado "II marco conceptual de la
evaluacin", consideramos que para favorecer la planificacin y el desarrollo de las
prcticas evaluativas debe disponerse de diferentes elementos facilitadores, poniendo
especial atencin en: las herramientas, en los procedimientos y en las habilidades de
los profesionales.

1. Herramientas: estrategias y tecnologa


El Plan de Evaluacin de Catalunya 2005-09 dispone de un conjunto de herramientas
para facilitar la evaluacin, como se muestra en el siguiente esquema. Estas
herramientas proporcionan diferentes opciones para realizar la evaluacin de centro.
En funcin de las finalidades de cada evaluacin es preciso utilizar la herramienta o las
herramientas adecuadas.

La base de datos de referentes de calidad (BDRQ) es un registro del


contenido evaluativo de los diferentes mbitos de evaluacin (sistema
Revista n 5 - enero 2007 - Monogrfico

12

Revista de la Asociacin de Inspectores de Educacin de Espaa

educativo, centro educativo, funcin


directiva...) La finalidad de la base de datos, en lo que concierne a la evaluacin
de centros, es proporcionar a los agentes internos y externos contenidos para
facilitar el diseo de las evaluaciones.

El sistema para gestionar la informacin es una herramienta que facilita la


seleccin de contenidos, el diseo de evaluaciones, la recogida de informacin
y el tratamiento de la informacin. Proporciona un procedimiento para la gestin
evaluativa; simplifica las tareas evaluativas mecnicas, evitando el trabajo
repetitivo y los errores cuando se traslada informacin a diferentes ubicaciones;
realiza el tratamiento de la informacin, presentando los resultados de forma
sinttica e interpretable; y facilita la elaboracin de los informes de tendencias
dirigidos a la Administracin, sin que sea preciso realizar otras actuaciones
especficas ni implicar a los centros.

La Evaluacin Global Diagnstica (AGD) sirve para evaluar al centro en su


conjunto y tiene un enfoque holstico, aunque no implica la evaluacin detallada
de todos los aspectos del centro. Esta evaluacin proporciona una "fotografa"
panormica del centro.

La evaluacin focalizada de nivel 1 se refiere a la evaluacin de una rea


curricular. Es la evaluacin del conjunto de aspectos ms relevantes de una
rea determinada para conocer su adecuacin al contexto del centro, los
resultados obtenidos, las metodologas usadas,...

La evaluacin focalizada de nivel 2 se refiere a aspectos concretos de la


gestin organizativa del centro y de la gestin del currculum, por ejemplo, "la
tutora", la "resolucin de problemas de matemticas" o el "clima escolar". Tanto
la evaluacin focalizada de nivel 1 como la de nivel 2 pueden realizarse como
consecuencia o continuidad de la Evaluacin Global Diagnstica para
profundizar en la comprensin y mejora de algn aspecto concreto del centro.

El sistema de indicadores permite obtener informacin medible de un


conjunto acotado de variables evaluativas que ofrecen una perspectiva del
funcionamiento y de los resultados del centro. Estos indicadores, coherentes
con el "Sistema d'Indicadors d'Ensenyament de Catalunya", incluyen
informaciones de contexto, de resultados, de procesos y de recursos. La
informacin referida a este conjunto de variables se actualiza cada curso
escolar y sirve para analizar la evolucin del centro y para realizar estudios de
comparacin.

La evaluacin de planes, programas y proyectos pretende comprobar el


progreso en la consecucin de los objetivos propuestos y realizar, si procede,
ajustes al plan, programa o proyecto segn las necesidades del centro.

Las pruebas de competencias bsicas (Cb) y de rendimiento proporcionan


al centro informacin sobre el nivel de conocimiento o de competencia de su
alumnado. El anlisis de esta informacin aporta elementos para mejorar los
procesos de aprendizaje y tambin proporciona alertas para profundizar en las
causas de los resultados a partir de la aplicacin de evaluaciones focalizadas.

Las auditoras externas que se aplican a los centros con dos o ms ciclos
formativos de formacin profesional tienen como a finalidad garantizar:

La adecuacin del sistema de calidad (documentos) a una norma de referencia


predeterminada.

La comprobacin de la efectividad del sistema y de la conformidad de las


actividades realizadas con los acuerdos registrados en los documentos.
Revista n 5 - enero 2007 - Monogrfico

13

Revista de la Asociacin de Inspectores de Educacin de Espaa

2. Los procedimientos: "el ciclo


evaluativo y el proceso de mejora continua",
El ciclo evaluativo, como dispositivo que permite integrar las acciones evaluativas que
llevan a cabo los agentes internos y los agentes externos. "Varias acciones evaluativas
y una nica evaluacin de centro".
Tal y como ya habamos comentado anteriormente, segn nuestro enfoque al hablar de
la evaluacin de centro nos referimos a diferentes estrategias: Evaluacin Global
Diagnstica, evaluacin focalizada, sistema de indicadores, etc. Podemos pensar
entonces que estas acciones evaluativas son independientes entre s?, no
constituyen en realidad un proceso continuo?
La evaluacin y la planificacin son dos caras de una misma realidad: el proceso de
mejora continua. Cada accin evaluativa tiene un propsito concreto en el ciclo de
evaluacin y mejora continua y el conjunto de todas estas acciones constituye la
"evaluacin de centro".
Un ciclo evaluativo que se desarrolla durante cuatro cursos escolares es el proceso
que se inicia con una Evaluacin Global Diagnstica, el punto de partida para elaborar
un plan de mejora. Al finalizar el plan de mejora se aplica de nuevo la Evaluacin
Global Diagnstica. Si se compara la informacin obtenida en esta segunda aplicacin
("segunda fotografa") con la informacin de la primera, permite analizar la evolucin
del centro. Tambin sirve de punto de partida para la planificacin de un nuevo ciclo.
En el transcurso del ciclo evaluativo y con la finalidad de alcanzar los objetivos
estratgicos formulados, el centro tiene la posibilidad de aplicar evaluaciones
focalizadas que le permitan profundizar en el conocimiento de temas concretos
relacionados con el plan de mejora. As mismo, para hacer el seguimiento de la
aplicacin del plan y la valoracin de sus resultados, el centro dispone de un sistema
de indicadores de centro y de los indicadores del plan de mejora. De esta manera,
diferentes estrategias evaluativas aplicadas desde la perspectiva interna y externa se
articulan en un dispositivo que las organiza e integra.
Los centros educativos y la Inspeccin de Educacin colaboran en el desarrollo de la
accin evaluativa. La comunidad educativa, y especialmente el profesorado, es el actor
principal de la evaluacin de centro. La Inspeccin de Educacin les da apoyo en el
proceso y desde su visin externa aporta contraste a los resultados.
La objetividad y credibilidad de los evaluadores internos puede ser menor que la de los
externos. Sin embargo, incluso Scriven, un gran defensor de la evaluacin externa, ha
sealado que ciertos evaluadores externos podran estar predispuestos hacia
resultados favorables. Sobre este extremo D. Nevo se pregunta: "Hablando de
evaluadores externos, qu agrada ms a los clientes: buenas o malas noticias?"

Revista n 5 - enero 2007 - Monogrfico

14

Revista de la Asociacin de Inspectores de Educacin de Espaa

En el caso de la Evaluacin Global Diagnstica el peso de su diseo y aplicacin


queda en manos de la Inspeccin de educacin. sta, con la participacin de la
comunidad educativa, aplica las tcnicas y los instrumentos que recogen la
informacin, realiza el tratamiento de la misma y redacta el informe final de evaluacin.
El conjunto de estrategias de evaluacin que se ponen en juego de forma articulada en
un ciclo evaluativo para incidir en el proceso de mejora continua que sigue un centro, y
tambin en la mejora del sistema educativo, pone de manifiesto la relacin entre las
prcticas evaluativas y los referentes conceptuales que la sustentan. Las diferentes
acciones evaluativas se integran en un mismo dispositivo y los agentes internos y
externos colaboran en el desarrollo de la accin educativa.

3. Las personas: el papel de los agentes en la evaluacin de


centro
Los actores de la evaluacin de centro, inspectores y comunidad educativa, estn
inmersos en su cultura. Por ello es imprescindible que la cultura del cambio tambin
forme parte de su cultura. De no ser as, todas las acciones que se pretendan llevar a
cabo no sern asumidas y con el tiempo irn decayendo.
Es preciso que los inspectores evaluadores respeten la autonoma de la comunidad
escolar e intenten, en el ejercicio de su tarea, fomentar el debate y la participacin de
todos.
Debate y participacin pueden propiciar la asuncin de unos objetivos comunes que
sern la base para llevar a cabo un plan de mejora y para incluir nuevos valores en la
cultura del centro.
Para alcanzar estos propsitos, en la evaluacin focalizada donde los actores internos
tienen un mayor protagonismo, los inspectores debern convertirse en facilitadores
asesorando en aspectos organizativos, metodolgicos, tecnolgicos (en el uso de las
Revista n 5 - enero 2007 - Monogrfico

15

Revista de la Asociacin de Inspectores de Educacin de Espaa

herramientas para gestionar la informacin),


dando su opinin en calidad de agentes externos que pueden aportar contraste sobre
el informe que emita el centro.
Esta tarea debe hacerse con la mirada atenta en las variables internas que inciden en
la evaluacin y el cambio. Monica Gather (2004) identifica seis variables internas que
tienen una incidencia relevante en la innovacin:

Organizacin del trabajo

Relaciones profesionales

Cultura e identidad colectiva

Capacidad de proyeccin hacia al futuro

Capacidad de liderazgo

Institucin como organizacin que aprende

Todo ello no se puede llevar a cabo si no se dispone de las habilidades necesarias, lo


cual supone poner en juego estrategias de formacin inicial y luego otras de formacin
continua para facilitar el aprendizaje de los evaluadores y la mejora de la evaluacin.
Entre otras, podemos citar: estrategias de comunicacin "on line", procesos de
metaevaluacin y sesiones presenciales de reflexin-accin.
"Nacemos siendo evaluadores, pero no necesariamente buenos evaluadores" (R.
Stake 2006 )
Salvador Pallars Martnez, Jefe de Evaluacin y seguimiento de la Inspeccin de
Educacin de Catalua
Ramir Bullich Cat de la Torra, Jefe de la Inspeccin Adjunto

BIBLIOGRAFA
STAKE, R, (2006), Evaluacin comprensiva y evaluacin basada en estndares.
Barcelona, Gra.
STUFFLEBEAM, D.L., y otros, (1995), Evaluacin sistemtica, Barcelona, Paids.
STUFFLEBEAM, D.L., y otros, (1996). Direccin participativa y evaluacin de centros.
Segundo congreso internacional sobre direccin de centros docentes. ICE, universidad
de Deusto
SANTOS GUERRA, M.A. (1993), Evaluacin externa. Madrid, Akal
SANTOS GUERRA, M.A. y otros, (1996). Evaluacin externa de la formacin de
mdicos residentes. Barcelona, Edide.
Nevo, D. (1997), Evaluacin basada en el centro. Bilbao, Ed. Mensajero.
Gather Thurler, M. (2004). Innovar en el seno de la institucin escolar. Barcelona: Ed.
Gra.
Consell Superior d'Avaluaci del Departament d'educaci de la Generalitat de
Catalunya (2005), Pla d'avaluaci. Projecte del Departament d'Educaci. Barcelona,
Generalitat de Catalunya, Departament d'Educaci.
Revista n 5 - enero 2007 - Monogrfico

16

Revista de la Asociacin de Inspectores de Educacin de Espaa

Pallars, S., Bullich, R i altres (2006). Marc


conceptual de l'avaluaci de l'educaci secundria obligatria 2006. Barcelona,
Generalitat
de
Catalunya,
Departament
d'Educaci.
Pallars, S. y altres (1999). La inspeccin del siglo XXI, modelo de evaluacin en tres
tringulos. Actas del cuarto Congreso estatal de ADIDE, Sevilla
Bullich, R i Pallars, S., (2006), L'avaluaci de centres, Quaderns d'avaluaci, nmero
5, Barcelona, Generalitat de Catalunya, Departament d'Educaci.

Revista n 5 - enero 2007 - Monogrfico

17

You might also like