Professional Documents
Culture Documents
Las organizaciones
internacionales y la
evaluacin de los
sistemas de educacin
y formacin: anlisis
crtico y comparativo
Claudia Neves
Investigadora en la Unidad de Investigacin Educacin y Desarrollo (UIED)
Facultad de Ciencias y Tecnologa/Universidade Nova de Lisboa
Palabras clave
Education and training
policy, lifelong learning,
comparative education,
sustainable development,
indicators,
personal development,
education and training
evaluation
Poltica educativa
y de formacin,
educacin/formacin
permanentes, educacin
comparada, desarrollo
sostenible, Indicadores,
desarrollo personal,
evaluacin de la
educacin/formacin
RESUMEN
Introduccin
El trabajo de investigacin que aqu se presenta parte del supuesto
de que las polticas y los sistemas educativos estn ntimamente
relacionados con algunos mbitos de la vida social y poltica, sobre
la base de la consecucin de objetivos relacionados con una filosofa poltica y la estrategia de desarrollo conexa.
Este estudio intenta desarrollar un anlisis crtico comparativo de
carcter general de los documentos de referencia elaborados por
las organizaciones internacionales (PNUD, OCDE, UNESCO,
Banco Mundial y Unin Europea) que sirven de orientacin a las decisiones sobre poltica educativa a escala mundial. La finalidad de este
artculo es examinar las lneas maestras definidas actualmente en
el mbito de la educacin como grandes objetivos del milenio.
Es decir, se trata de examinar hasta qu punto los indicadores
de evaluacin y supervisin de las polticas educativas integran el
nuevo paradigma de la educacin permanente y el desarrollo
humano y corresponden a los objetivos educativos del milenio en
el contexto de la globalizacin.
79
80
Por consiguiente, tratamos de determinar cules son las principales organizaciones internacionales que albergan algn tipo de preocupacin en el mbito de la educacin/formacin, con objeto de identificar los principales referentes, a escala mundial, de la formulacin
de las polticas educativas nacionales.
Las organizaciones seleccionadas fueron las siguientes: las
Naciones Unidas (PNUD y UNESCO), la OCDE y el Banco Mundial.
Posteriormente, ampliamos el campo de bsqueda al contexto
europeo, ya que consideramos que la Unin Europea se ha convertido en una institucin de referencia importante para las polticas de
educacin y formacin de los pases que forman parte de ella.
El material recogido se sistematiz y organiz posteriormente en
una tabla de referencia elaborada sobre la base de un anlisis de
contenidos para permitir una lectura comparativa y crtica de los datos.
La lectura se realiz a partir del cruce de un conjunto de cuestiones
surgidas del marco terico y los marcos ideolgicos y polticos
que orientaban las fuentes documentales analizadas con las cuestiones de investigacin definidas previamente.
(1) Para mayor informacin sobre el proceso de elaboracin de los Objetivos Internacionales
de Desarrollo, vase el sitio web www.Pars21.org/betterworld
81
82
El problema de la evaluacin de la
educacin/formacin a escala mundial
Organizaciones como la OCDE, la UNESCO, el Banco Mundial y
la Unin Europea ponen en marcha sistemticamente proyectos estadsticos internacionales, que renen un conjunto de indicadores que
sirven de punto de referencia a la realizacin de reformas, lo que
permite determinar los cambios en la calidad y los resultados;
llamar la atencin hacia los aspectos que se han de mejorar;
examinar las repercusiones de los esfuerzos realizados por el
sistema; desarrollar labores en relacin con otros pases o entidades
polticas y catalizar nuevas ideas (Amaro, 2002. p. 316).
Los indicadores de educacin y formacin son instrumentos de
orientacin poltica que existen, en la mayor parte de los pases industrializados, desde hace cerca de veinte aos. Estos indicadores empezaron a ser necesarios como forma de justificacin de los costes
aparejados a la educacin. Actualmente se utilizan como fuente de
informacin aplicada a la evaluacin, la planificacin y la administracin de la enseanza y la formacin.
La finalidad de los indicadores de educacin/formacin es dar a
conocer a los responsables de la toma de decisiones la situacin
de los sistemas de enseanza y formacin para facilitar su anlisis
y su evaluacin, as como para poder cuestionar las orientaciones,
antiguas y nuevas, de las actuaciones polticas (Nuttall, 1994, p. 89).
Tal como indica Gilbert Landsheere (1994): La conduccin de
un sistema educativo consiste en algo ms que en la acumulacin
de indicadores. Un sistema educativo debe funcionar necesariamente
sobre la base de tres elementos: la recogida regular de informacin,
la evaluacin de tal informacin y su traduccin en acciones institucionales (p. 12).
A la luz de la constatacin de la existencia de una presin cada
vez mayor, tanto poltica como social, para la publicacin de los datos
relativos al desempeo de la educacin y la formacin en el sentido
de una cierta responsabilidad (2), es necesario justificar los gastos
(2) Entendemos por responsabilidad la necesidad de una verificacin de la eficacia en
la utilizacin de recursos, con vistas a la optimizacin y la mejora de los resultados.
en relacin con los resultados creando las condiciones sociales necesarias para aplicar mecanismos de responsabilizacin (Afonso,
1998, p. 66).
Lo anterior se asocia a la creciente insatisfaccin de la sociedad
con los sistemas educativos y de formacin, que no ofrecen los resultados esperados, en trminos de igualdad de oportunidades de
acceso y promocin social de los sectores ms desfavorecidos.
En el mbito de la investigacin surge la preocupacin por
analizar la posible inmediatez de los objetivos educativos y cmo
stos se incorporan al proceso de desarrollo humano que supone
no slo el desarrollo cognitivo, sino tambin la integracin y el
desarrollo convergente e integral de las mltiples dimensiones
constitutivas de la personalidad y la identidad humanas (SChaves, 2003, p. 63).
Tambin en este sentido Nuttall (1994) firma que los criterios de
eleccin, elaboracin y evaluacin de los indicadores de enseanza varan en funcin de los intereses polticos y del contexto poltico en el que se enmarca el sistema de enseanza.
Refirindose a esta lgica, en virtud de la cual el Estado asume
una funcin de gestin que indujo al diseo de mecanismos de control
y responsabilizacin que pasan por la evaluacin, Almerindo Janela
Afonso indica que la adopcin de este tipo de polticas dio lugar a
una teora de la evaluacin de tipo positivista basada en indicadores
cuantificables y reflejo de una mayor preocupacin por el producto
que por el proceso. Para Afonso, la evaluacin fue una forma de introducir la lgica de mercado en el mbito del Estado y de la administracin pblica (1998, p. 75).
Es decir, las conclusiones de los estudios internacionales basados
en indicadores podran ser limitadas debido a su planteamiento
general que excluye algunos detalles vinculados al contexto pero
que influyen en los resultados de la educacin/formacin.
Desde este punto de vista, Desmond Nuttall (1992, p.14) indica
que el concepto de indicador de la educacin/formacin nos ofrece
informacin sobre el comportamiento de un sistema de educacin
y formacin y puede contribuir a la visin general que los responsables de la toma de decisiones polticas deben tener de las condiciones actuales de la educacin y la formacin, dada la complejidad
de los diversos sistemas educativos y de formacin. Por otra parte,
la informacin que ofrecen los indicadores ser siempre limitada,
ya que stos han de satisfacer una serie de necesidades de naturaleza sustantiva y tcnica. Para complementar el carcter unidimensional de los mismos, resulta igualmente necesario crear un
conjunto de indicadores que, en conjunto, formen una representa-
83
84
La supervisin de la educacin/formacin
en la Unin Europea
Uno de los rasgos distintivos de la Unin Europea es la diversidad
lingstica y cultural de los Estados miembros. As, los sistemas de
educacin y formacin mantienen un cierto aislamiento entre s y
aplican normas diferentes. Sin embargo, para que todos los ciudadanos puedan beneficiarse de esta diversidad es cada vez ms necesario que los Estados miembros colaboren entre s y que aumente
la movilidad en relacin con la educacin y la formacin. En los
ltimos veinte aos, la Unin Europea ha trabajado en este sentido.
En trminos organizativos, tanto los contenidos y los programas
como la organizacin de los sistemas de educacin y formacin
entran dentro del mbito de competencias de los Estados miembros.
El principio de subsidiariedad ofrece a la Unin Europea, como institucin, la capacidad de respaldar y complementar la accin de los
Estados miembros en determinados mbitos de la educacin y la
formacin (3).
El Consejo Europeo de Lisboa celebrado en marzo de 2000
promovi este tipo de cooperacin para establecer el marco del
proceso que condujo a la adopcin del programa de trabajo sobre
los futuros objetivos de los sistemas educativos de la Unin Europea.
La Comisin Europea elabor en primer lugar una propuesta de
informe sobre los futuros objetivos precisos de los sistemas educativos negociada por los Estados miembros. Posteriormente, el
Consejo Europeo adopt un informe final presentado en el Consejo
Europeo de Estocolmo de marzo de 2001, que estableca tres
objetivos estratgicos (COM(2001) 59 final):
Aumentar la eficacia de los sistemas de educacin y formacin
en la Unin Europea;
Facilitar el acceso universal a los sistemas de educacin y formacin;
Abrir al mundo los sistemas de educacin y formacin en la
Unin Europea.
As, este informe fue el primer documento oficial que defini un
enfoque para las polticas de educacin y formacin en la Unin
(3) Tales mbitos se recogen en los artculos 149 y 150 del Tratado.
85
86
Desarrollo personal y
bienestar social
C A T E G O R A S
S U B C A T E G O R A S
UNESCO
BM
UE
Competencias de responsabilizacin
en relacin con la calidad y la conservacin
del medio ambiente
Competencias para la ciudadana
Movilidad e intercambios
Contexto socioeconmico
Competencias bsicas
BM = Banco Mundial
OCDE
4
8
2
5
Profesores
Aprendizaje
Empleabilidad y rentabilidad
econmica
1
4
2
4
Aprendizaje continuo
de capacidades profesionales
15
Igualdad de gnero
Respeto de la diversidad
sociocultural y religiosa
Reconocimiento de competencias y
aprendizaje en contextos no formales
Oportunidades de aprendizaje permanente
para todos
Financieros
Humanos
Fsicos
2
2
87
88
grado de importancia para todas las organizaciones internacionales. Slo la OCDE y la Unin Europea definen indicadores de
supervisin de la movilidad e intercambio. La OCDE se centra ms
en la movilidad de los estudiantes de enseanza superior, mientras
que la Unin Europea evala la movilidad tanto de los alumnos como
de los profesores. En lo que se refiere a la Unin Europea, debido
a su naturaleza econmica y poltica, la creciente preocupacin por
la movilidad e intercambio de estudiantes y profesores resulta
manifiesta. La evaluacin de tal movilidad se realiza sobre la base
de los diferentes programas europeos de movilidad e intercambio.
En lo que respecta a las otras organizaciones internacionales, no
encontramos indicadores que sealen la evolucin de las polticas
educativas en relacin con la cuestin de las mejores condiciones
de movilidad, ni en el contexto educativo ni en el profesional.
Una forma de evaluar el acceso al bienestar social consiste en
observar la distribucin de la riqueza generada por la sociedad. La
distribucin de la riqueza se considera en general un buen indicador
de la evaluacin de la capacidad de financiacin de bienes necesarios
para garantizar la calidad de las condiciones de vida. En este
sentido, la caracterizacin del contexto demogrfico y econmico de
las sociedades, en trminos de educacin para el desarrollo personal
y el bienestar social, resulta importante para las organizaciones
internacionales. Tanto la UNESCO como la Unin Europea y el
Banco Mundial recaban indicadores en relacin con estos factores.
La UNESCO rene un nmero de indicadores que le permiten
evaluar tanto las tendencias demogrficas como las relaciones de
dependencia econmica. La Unin Europea desarrolla indicadores
de naturaleza demogrfica que le permiten determinar el nmero de
jvenes como porcentaje de la poblacin total e identificar la poblacin existente en edad de seguir estudios de enseanza oficial. El
Banco Mundial slo examina el PIB per cpita para ofrecer una idea
del nivel de distribucin del producto interior bruto por habitante.
Calidad del itinerario educativo/formativo y profesional
En lo que respecta a la calidad del itinerario educativo/formativo,
podemos subrayar para empezar aquello a lo que nos referimos como
competencias bsicas que las personas deben poseer para poder
realizar sus actividades cotidianas. En el anlisis realizado sealamos que todas las organizaciones, excepto el Banco Mundial,
renen indicadores que se refieren a competencias bsicas. La OCDE
rene indicadores sobre las competencias de lectura y alfabetizacin, as como en relacin con los hbitos de lectura de los alumnos
de 15 aos.
89
90
realizada no contempla nuevas formas y nuevas estrategias de aprendizaje. Slo la OCDE se destaca por la importancia que concede
a la autonoma del aprendizaje, fundamental para consolidar aptitudes de aprendizaje permanente, as como a la utilizacin de las
nuevas tecnologas de la informacin y la comunicacin como
instrumento de aprendizaje en la escuela.
Los resultados de los centros de enseanza son objeto de atencin nicamente por parte de la OCDE, que ha definido un indicador
para evaluar el rendimiento de los alumnos en tales centros. Este
tipo de indicadores permite a los pases establecer clasificaciones
de los diversos centros de enseanza sobre la base de los resultados de los alumnos. En el contexto actual, este indicador parece
estar desajustado, ya que evala la calidad de los centros de enseanza slo a partir de los resultados de los exmenes de los
alumnos.
En la misma lnea de la subcategora anterior, la empleabilidad
y rentabilidad econmica de la educacin es una de las preocupaciones de la OCDE, que ha reunido un conjunto de mediciones
para evaluar el nmero de aos que los jvenes pasan en los
mbitos de la educacin, el empleo y el desempleo. La OCDE
tambin examina la situacin de los jvenes en trminos de formacin y empleo, as como la situacin de los jvenes con bajos
niveles de formacin. En trminos de rendimiento, la OCDE dispone
de un indicador para relacionar el nivel de formacin con el de rendimiento, as como la vinculacin existente entre el capital humano
y el crecimiento econmico.
El aprendizaje en el contexto profesional slo es abordado por
la Unin Europea, que evala el gasto de las empresas en cursos
de formacin profesional y las horas de los trabajadores destinadas a recibir cursos de formacin profesional.
La eficacia de los sistemas de enseanza es objeto de preocupacin de varios gobiernos mundiales. En lo que se refiere a la
evaluacin, las organizaciones estudiadas revelan una preocupacin por reunir indicadores sobre los ndices de acceso, participacin y progresin en la educacin as como por el anlisis de los
niveles de abandono escolar temprano. La OCDE ha elaborado un
indicador para evaluar las previsiones de escolarizacin y el porcentaje de alumnos matriculados. En relacin con el acceso, participacin
y progresin en la educacin, la OCDE examina la participacin de
la poblacin activa por nivel de educacin, as como los ndices de
acceso, participacin y terminacin de los estudios de enseanza
secundaria. Asimismo, prev la evaluacin del nivel educativo de
la poblacin adulta.
91
92
93
94
Optimizacin de recursos
El discurso poltico-ideolgico considera la utilizacin equitativa
de los recursos en el mbito de la educacin una caracterstica fundamental para garantizar un nivel aceptable de calidad. El anlisis de
la totalidad de los indicadores de recursos revela que la principal
preocupacin de las instituciones internacionales consiste en
evaluar la optimizacin de los recursos financieros, probablemente
debido a la exigencia cada vez mayor de que las sociedades
rindan cuentas de la utilizacin de las dotaciones presupuestarias
(responsabilidad).
Prcticamente todas las instituciones evalan el porcentaje del
gasto pblico destinado a los sistemas de educacin/formacin y
establecen comparaciones entre tales gastos y el gasto pblico
general.
La OCDE examina el porcentaje de inversin pblica y privada
realizada en los centros de enseanza, as como el gasto pblico
total en la educacin. Por otra parte, tambin evala el gasto en los
centros por categora de recursos, comparando este tipo de gasto
con el producto interior bruto. La preocupacin de la UNESCO
relativa a los recursos financieros empleados en la educacin se
refiere al gasto pblico en la enseanza en relacin con el PIB y como
porcentaje del gasto pblico. La UNESCO ha definido un indicador
para supervisar el ndice de crecimiento medio anual del gasto
pblico en la enseanza, as como una serie de indicadores para
examinar el porcentaje del gasto corriente en el total del gasto
pblico corriente en la educacin, as como el reparto del gasto
corriente por niveles de enseanza. El Banco Mundial ha definido
slo un indicador que muestra el porcentaje de gasto pblico en la
educacin en relacin con el PIB. La Unin Europea no se distingue
mucho de las dems organizaciones. As, rene indicadores que
evalan el gasto pblico realizado en educacin como porcentaje
del PIB y el gasto privado en instituciones educativas tambin
como porcentaje del PIB. El PNUD realiza el mismo tipo de evaluacin, pero distingue entre gasto pblico por nivel de enseanza.
En relacin con los recursos humanos se observa una disminucin en el nmero de indicadores de supervisin. Nuevamente, la
principal preocupacin reside en evaluar la dotacin de recursos financieros destinados a los alumnos y profesores, es decir, el componente humano de la educacin. La OCDE, por su parte, ha definido
un indicador de supervisin del gasto pblico destinado a los estudiantes y las familias. La UNESCO evala la remuneracin de los
docentes como porcentaje del gasto corriente, el gasto por alumno
como porcentaje del PIB per cpita y el nmero de alumnos y
Conclusiones
A la luz del presente estudio emprico, centrado en la evaluacin que
las organizaciones internacionales realizan a travs de sus grandes
proyectos estadsticos, se observa la existencia de una discrepancia entre los objetivos definidos en relacin con la educacin/formacin, en trminos de Objetivos de Desarrollo del Milenio,
y sus indicadores de supervisin.
La evaluacin realizada en los informes de las organizaciones
revela, sobre todo, una visin positivista y tecnolgica de la educacin, construida a partir de descriptores e indicadores mensurables.
Las conclusiones de estos estudios comparativos internacionales
son limitadas respecto del concepto de educacin subyacente a los
Objetivos de Desarrollo del Milenio y deseable para lograr la autonoma y el desarrollo de la ciudadana.
Por consiguiente, se echan en falta los factores vinculados al
contexto del proceso educativo, a la evolucin de tal proceso y a
sus interdependencias sociales, de enorme influencia en los
procesos y resultados educativos.
La gran mayora de los indicadores se centra en los resultados,
en el acceso, en los medios y en los aspectos organizativos y
administrativos, olvidando con ello dimensiones importantes que
determinan la calidad de la educacin y la formacin, as como de
los procesos de aprendizaje y del desarrollo personal. De este
modo, tales indicadores contribuyen a la realizacin de una lectura
lineal y reductora de los procesos de educacin formales y no
formales, dotados, sin embargo, de enorme complejidad (Teresa
Ambrsio, 2003, pp. 23-32).
Por consiguiente, formulamos la hiptesis de que los modelos de
evaluacin aplicados por estas organizaciones internacionales
pueden dejar de favorecer la mejora de la calidad de la educacin,
as como la promocin de las polticas de igualdad o de justicia econmica y social, as como tampoco favoreceran la ciudadana para
95
96
Bibliografa
Afonso, Almerindo Janela. Polticas Educativas e Avaliao Educacional. Para uma anlise sociolgica da reforma educativa em
Portugal (1985-1995). Braga: Universidade do Minho, Centro
de Estudos em Educao e Psicologia/Instituto de Educao e
Psicologia, 1998.
Amaro, Gertrudes. Indicadores das Aprendizagens dos alunos:
Criao e impacto nas Polticas de Avaliao dos Sistemas
Educativos. Revista Inovao, 1997, n 2 y n 3, pp. 315-325.
Ambrsio, Teresa. Educao e Desenvolvimento Contribuio para
uma Mudana Reflexiva na Educao. Monte da Caparica:
UIED, 2001.
Ambrsio, Teresa. A Complexidade da Adaptao dos Processos
de Formao e Desenvolvimento humano. En Formao e
Desenvolvimento Humano: Inteligibilidade das suas Relaes
Complexas. Lisboa: MCX/APC Atelier 34, 2003.
Banco Mundial. Education Sector Strategy. Washington: Banco
Internacional de Reconstruccin y Desarrollo/Banco Mundial.
Banco Mundial, 1999.
Bardin, Laurence. Anlise de Contedo. Lisboa: Edies 70, 2004.
Bottani, N.; Tuijnman, A. Les indicateurs internationaux de lenseignement: cadre, laboration et interprtation. En valuer
lEnseignement. De lutilit des indicateurs internationaux. Pars:
OCDE CERI, 1994.
Bottani, N.; Walberg, H. J. What are international education indicators for? En The OCDE International Education Indicators
A framework for analysis. Pars: OCDE, 1992.
Comisin Europea. Libro Blanco sobre la educacin y la formacin
Ensear y aprender: hacia la sociedad del conocimiento.
Luxemburgo: Servicio de Publicaciones Oficiales de las Comunidades Europeas, 1995.
Comisin Europea. Futuros objetivos precisos de los sistemas
educativos. COM (2001) 59 final. Luxemburgo: Servicio de Publicaciones Oficiales de las Comunidades Europeas, 2001.
Comisin Europea. Educacin y formacin en Europa: Sistemas diferentes, objetivos comunes para 2010. Luxemburgo: Servicio de
Publicaciones Oficiales de las Comunidades Europeas, 2002.
Comisin Europea. Puntos de referencia europeos en educacin y
formacin: seguimiento del Consejo Europeo de Lisboa. COM
(2002) 629 final. Luxemburgo: Servicio de Publicaciones Oficiales
de las Comunidades Europeas, 2002.
Comisin Europea. Progress Toward the Common Objectives in
Education and Training Indicators and Benchmarks. SEC
(2004) 73. Luxemburgo: Servicio de Publicaciones Oficiales de
las Comunidades Europeas, 2004.
Fasano, C. Le savoir, lignorance et lutilit pistmologique: la construction densembles dindicateurs. En: valuer lEnseignement.
De lutilit des indicateurs internationaux. Pars: OCDE CERI.,
1994.
Landsheere, Gilbert De. Le Pilotage des Systmes dducation.
Bruselas: Universidad De Boeck, 1994.
Le Moigne, Jean-Louis. La modlisation des systmes complexes.
Pars: Dunod, 1999.
Neves, Claudia. Educao e Desenvolvimento Humano. Contributo
para uma anlise crtica e comparativadas Polticas Educativas
Luz do paradigma do Desenvolvimento Humano. Tesis doctoral.
Lisboa: ISCTE, 2005.
Nuttall, Desmond. The function and limitations of International
Education Indicators. En: The OCDE International Education Indicators A framework for analysis. Pars: OCDE, 1992.
Nuttall, Desmond. Le choix des indicateurs. En valuer lEnseignement. De lutilit des indicateurs internationaux. Pars: OCDE
CERI, 1994.
OCDE. Education at a Glance OCDE Indicators. Pars: CERI/OCDE,
1992-2003.
97
98