RMIE. JUUO-SEPTtEUBRE IOOB. VOL. 13, NUM. 38. PP.

891-917

Investigacin

EVALUACIN DEL PROGRAMA ESCUELAS DE CALIDAD EN EL ESTADO DE PUEBLA

Resultados sobre logro educativo
LEN R, GARDUO ESTRADA

Resumen:

Este trabajo prcsenra los resultados de evaluacin, .sobre logro educativo, al Programa Escuelas de Calidad en el estado de Puebla. De un total de 1 30 escuelas que cumplieron con una serie de requisitos, la muestra estuvo integrada por 26, .seleccionadas de forma aleatoria considerando nivel de marginacin, Los resultados en los exmenes de espaol, miitcmticas y habilidades de pensamiento, aplicados a los nios de 3 a 6" grados en estas escuelas, se compararon con los aplicados a los de otros 26 planteles no participantes en el programa. Las calificaciones se analizaron con el empleo del modelo lineal general tipo lU. No obstante que se encontraron diferencias estadsticamente significativas en prcticamente todos los anlisis realizados, la contribucin del programa medido por el estadstico "cta" al cuadrado parcial, fue muy baja.
Abstract:

This study presents the results of an evaluation of educational achievement in the Quality Schools Program in the state of Puebla. Out of a total of 130 schools that complied with a series of requirements, a sample was formed by randomly selecting twenty-six schools, considering the level of marginalization. The results olthe Spanish, mathematics, and thinking skills tests given to children in the third through sixth grades in these schools, were compared with the results from another tweiuy-six schools that did not participate in the program. The scores were analyzed by using a general linear model, type III. Although statistically significant differences were found in practically all the analyses, the program's contribution mea.^urcd by the partially squared "eta" statistic was very low. Palabras clave: educacin bsica, evaluacin, aprovechamiento escolar, planteles escolares, calidad de la educacin, Mxico. Keywords: basic education, evaluation, scholastic achievement, schools, quality of education, Mexico.

Len R. Garduo Estrada cs profesor-investigador y director del Centro de Esiudios en Calidad de Vida y Desarrollo Social de la Universidad de las Amricas, Puebla. Recta Cholula s/n I x. Hacienda Sama C!)atarina Mrtir. 72820, Cholula, Puebla. CE: lcon.garduno@udlap.mx
Revista Mexicana de Investigacin Educativa ' oqi

Garduo

Introduccin os bajos resultados en las pruebas de rendimiento aplicadas en diversos niveles educativos en el pas son ampliamente conocidos. Los diferentes estudios llevados a cabo tanto por organismos mexicanos como e! Instituto Nacional para la Evaluacin de la Educacin (iNEE, 2003, 2004a, b y c, 2005) como por internacionales como la Organizacin para la Cooperacin y el Desarrollo Econmicos (OCDE, 2004, 2006), muestran el pobre rendimiento de los escolares en el nivel de educacin bsica. En los recientes resultados de la Evaluacin Nacional de Logro Acadmico en Centros Escolares (ENLACE, 2007), Puebla se ubic entre los diez estados del pas que obtuvieron las calificaciones ms bajas en todos los grados educativos y asignaturas en 2007. De acuerdo con la informacin de ia pgina internet de dicha evaluacin, solamente 17.7 y 19.9% de los estudiantes de escuelas primarias pblicas lograron aprobar el examen de espaol en los niveles de "bueno" y "excelente" en los aos 2006 y 2007, respectivamente; mientras en el de matemticas, slo 16.5 y 20% lo acreditaron en los mismos niveles y aos, respectivamente. Particularmente para Puebla, el componente de educacin empleado por el Programa de las Naciones Unidas para el Desarrollo en su informe de 2002 (PNUD, 2003:33) se encuentra en el lugar 25 de los estados en la repblica. No obstante que la inversin en educacin ha aumentado situndose por arriba del promedio de los pases miembros de la OCDE (2004:3)-, en los resultados de los diversos exmenes se maniPiesta la baja calidad educativa. Como parte de un enfoque al mejoramiento escolar basado en un aumento tanto en la gestin como en la descentralizacin en la toma de decisiones a nivel escuela (De Crauwe, 2005:270), con orgenes en hace casi 25 aos y bajo el movimiento de escuelas eficaces (Coppieters, 2005:130), el Programa Escuelas de Calidad (PEC) forma parte de la poltica de reforma educativa que inici desde la pasada administracin federal y se dirige a tratar de solucionar una serie de problemas mencionados en el Plan Nacionai de Educacin 2001-2006. En ese sentido, la Secretara de Educacin Pblica (SEP) reconoce la importancia de una mayor apertura a la participacin democrtica de los diferentes actores en las escuelas, de forma que sean ellos quienes identifiquen sus necesidades y problemas y puedan establecer sus propias acciones
gg2 Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla; resultados sobre logro educativo

para resolverlos y, as, conseguir mejores resulrados en el logro educativo. Algunos de los problemas declarados por el propio programa son: el estrecho margen de la escuela para romar decisiones, el desarrollo insuficiente de una cultura de planeacin y evaluacin en la misma, los excesivos requerimientos administrativos que limitan a sus directivos para ejercer un liderazgo efectivo, la escasa comunicacin entre los actores escolares, el ausentismo, el uso poco eficaz de los recursos disponibles en la escuela, la baja participacin social y las deficiencias en la infraestructura y equipamiento en muchos planteles. De tal manera, el PEC plantea una serie de estndares que se dividen en: a) de gestin, prctica docente, y participacin social (medidos con indicadores de proceso), y b) de eficacia externa y logn educativo (medidos con indicadores de impacto y resultados) en escuelas y alumnos. El PEC plantea su propsito de mejorar la calidad de la enseanza donde los maestros, adems de incrementar su dominio de los contenidos, asuman estilos pedaggicos centrados en el aprendizaje activo de los nifio.s (St.P, 2002). Para alcanzar la calidad, los docentes debern adoptar prcticas acordes con las necesidades particulares de sus alumnos, que aumenten la confianza en sus capacidades y los estimulen constantemente en sus avances, esfuerzos y logros. Tambin, se pretende que los enseen a pensar por s mismos de forma crtica y creativa. En palabras de Alvarez (003:1), el Programa Escuelas de Calidad se propone "fomentar la democracia y mejorar los resultados de los estudiantes, especialmente aquellos que padecen condiciones de marginacin". No obstante que se han llevado a cabo diferentes evaluaciones al PEC en el pas, ninguna se ha realizado para el estado de Puebla. De tal manera, este trabajo presenta los resultados de la evaluacin sobre logro educativo de los nios en una muestra de escuelas primarias generales participantes en el programa. Las incluidas en la muestra corresponden a las que participaron en el PEC V. Los resultados se compararon con los obtenidos por los alumnos de escuelas no participantes. Este trabajo forma parte de uno ms amplio que incluy la evaluacin de los estndares de gestin, prctica docente y participacin social (Garduo, 2007a). El financiamiento del PEC proviene de fuentes federales y estatales. De acuerdo con la SEP federal hasta este momento han invertido un total de 6 mil 964.7 millones de pesos, con una tasa de crecimiento promedio anual de 23.8%. Solamente para el ciclo escolar 2005-2006, la federacin
Revista Mexicana de Investigacin Educativa

893

Gardjno

invirti un total de mil 247 millones 538 mil 843 pesos para el PEC V y se atendieron un total de 28 mil 454 escuelas pblicas de educacin bsica, considerando un monto inicial de basta 50 mil pesos y un complementario de basta 50 mil pesos, de acuerdo con lo establecido en las reglas de operacin para el ao escolar 2005-2006. En estas escuelas se estim beneficiar a un total de 6.3 millones de estudiantes. Para el estado de Puebla, el Secretario estatal de Educacin Pblica declar recientemente una inversin de 117 millones 124 mil 884 pesos para PEC V. Puebla ocupa el quinto lugar en cuanto al apoyo que recibe de la federacin, despus del Estado de Mxico, Veracruz, Distrito Federa! y Jalisco. De acuerdo con Observatorio Ciudadano de la Educacin (2006), el PEC es el programa que ms rpido crecimiento presupuestal tuvo en el sexenio 2000-2006. La Secretara de Educacin Pblica ba conseguido un apoyo financiero de parte del Banco Mundial hasta 2015Como ya se mencion, el Programa Escuelas de Calidad lleva seis aos en operacin y ba sido objeto de varias evaluaciones de carcter cuantitativo y cualitativo. Ejemplos de algunas de ellas son las realizadas por el Centro de Investigacin y Docencia Econmica (CIDE) y una por la Subsecretara de Educacin Bsica y Normal a travs de ia Direccin General de Evaluacin. En cuanto a las evaluaciones efectuadas por el CIDE, la primera (2001) estuvo dirigida a identificar la pertinencia para alcanzar los objetivos explcitos propuestos, tanto en trminos de la poltica educativa general del pas, como del diseo y las estrategias de operacin del PEC. Asimismo, se evalu el apego del programa a las reglas de operacin de 2001. El estudio permiti detectar si baba problemas iniciales en el diseo de la poltica, los que pudiera enfrentar ms adelante, a la vez que propuso algunas vas para su solucin. La evaluacin presentada fue de orden descriptivo e indicativo, ms que explicativo. La segunda (2002) continu el trabajo anterior. Sin embargo, marc el Inicio del anlisis de la estructura y organizacin de sus principales instancias gubernamentales: la coordinacin nacional del programa y la estructura en que se enmarcan las coordinaciones del PEC en las entidades federativas. La tercera evaluacin (2003) analiz la evolucin del programa y los posibles nudos problemticos, en su proceso de diseo y puesta en marcba para el cumplimiento de los objetivos a mediano y largo plazos, tambin propuso soluciones tcnicas para su mejoramiento. El desarrollo de ese trabajo consisti en recoger la
pt\A Consejo Mexicano de Investigacin Eduutiva

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

evolucin de los indicadores de resultados del PEC durante sus primeros tres aos de operacin, analizando la capacidad de adaptacin y cambio que han enfrentado las diferentes instancias involucr.idas en el logro de los objetivos propuestos. Otro trabajo realizado tambin por el CIDF (2004) se dirigi a evaluar los niveles de avance de resultados que a la fecha se haban logrado alcanzar en trminos de cobertura, metas fsicas, y sobre los indicadores de resultados estipulados en las reglas de operacin del programa. La evaluacin reportada por Loera (2005) se orient tanto a determinar el mrito en el diseo y operacin del programa en la vida de la escuela, como en ios resultados en cuanto al logro educativo. Para ello, el trabajo se desarroll con base en dos componentes: a) la medicin del rendimiento acadmico en las escuelas participantes en el PEC y b) ia realizacin de una evaluacin cualitativa. En cuanto a la parte de evaluacin sobre logro escolar, sta se realiz con la informacin proporcionada por la Direccin General de Evaluacin, que se encar}; de la aplicacin de exmenes de espaol y matemticas durante el ciclo escolar 2001-2002 considerando todas las escuelas que en ese momento participaban en el programa. La aplicacin se realiz a 30 nios por grado seleccionados de forma aleatoria. Posteriormente, en los dos ciclos escolares siguientes, la aplicacin estuvo a cargo del Instituto Nacional para la Evaluacin de la Educacin, que emple los mismos exmenes en las escuelas que continuaban en el PEC. Los resultados obtenidos en estos trabajos no muestran un avance importante, en ocasiones de menos de 1%, en el logro educativo. Si bien varios de los anlisis estadsticos son significativos, los cambios en calificaciones en las tres mediciones realizadas empleando un diseo tipo panel son muy pequeos y, en algunos casos, retroceden rn relacin con las mediciones anteriores. Desde el punto de vista de significancia prctica, los cambios no son apreciables. De forma general, en esa evaluacin se concluye que no se pueden afirmar cambios positivos o negativos atribuibles al PEC. En ese estudio no se trabaj con grupos de control. Finalmente, durante el ciclo escolar 2004-2005, la evaluacin la continu la ahora nombrada Direccin General de Evaluacin de Polticas; informacin que fue empleada por Loera y Cazares (2005) para su reporte. En cuanto a los resultados obtenidos para la muestra c(m un diseo tipo panel, no se encontraron resultados estadsticamente significativos entre
Revista Mexicana de Investigacin Educativa DQE-

Gardjfio

los ciclos escolares del 2001 al 2005. Sobre la parte comparativa entre escuelas PEC y no PEC, tampoco se observaron diferencias estadsticamente significativas. Cabe mencionar que tales estudios dirigidos por Loera incorporaron al estado de Puebla, aunque con propsitos y mtodos diferentes a los realizados en el presente trabajo. De manera general, los de Loera se dirigieron, entre otros aspectos, a determinar los cambios en logro educativo en las escuelas PEC en diferentes periodos. Murnane, Willet y Crdenas (2006:413-462), quienes trabajaron con una base de datos sobre desercin, reprobacin y extra edad a partir del censo escolar elaborado por directores de escuelas durante los aos 2001 y 2002, concluyen en su reporte que el programa no ha contribuido, de manera importante, a mejorar la educacin pblica en el pas. Por ltimo, en Puebla se llev a cabo una evaluacin de una muestra de escuelas PEC ubicadas en el municipio de Puebla {Carduo y Beltrn, 2005). En cuanto a los resultados sobre logro educativo se encontr que todas las medias de calificacin en los exmenes de espaol y matemticas aplicados a nios de tercero y sexto grados fueron reprobatorias. En las comparaciones realizadas con nios en escuelas no participantes en el programa, aunque s se observaron algunas diferencias estadsticamente significativas, stas fueron muy pequeas.
Metodologa

De acuerdo con lo establecido anteriormente, este trabajo se dirigi a evaluar el programa sobre los estndares de eficacia en logro educativo de las escuelas primarias generales participantes en PEC V. Los resultados obtenidos se compararon con los encontrados en una muestra de escuelas no participantes en el programa. Instrumentos Exmenes de espaol para tercero y sexto grados: el de tercero estuvo integrado por 30 reactivos, mientras que el empleado para sexto incluy 15. Exmenes de matemticas para tercero y sexto grados: El correspondiente a tercero incluy 30 reactivos y el de sexto 15. Los exmenes de espaol y matemticas para tercer grado fueron elaborados a partir del banco de reactivos que mantena el INEE en lnea, donde se indicaba el nivel de dificultad de cada uno. El ndice de dificultad de

Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

los reactivos seleccionados fue de .40 a .60. Los exmenes para sexto grado los proporcion la Direccin General de Investigacin, Evaluacin y Poltica Educativa de la SEP del estado. Exmenes de habilidades de pensamiento critico cientfico para estudiantes de tercero a sexto grados: los elabor un equipo de maestros dirigidos por Garduo, Morales y Mndez (2006). Los coeficientes de confiabiliddd de Livingston fueron de .75 a .89 con un punto de cortr de 60. l*ara cada examen aplicado se cumpli con el requisito de validez de contenido; para ello, particip personal de la propia Secretara. Aplicacin de los exmenes Los exmenes mencionados se aplicaron a los nios de uno de los dos o tres grupos de los grados correspondientes en las escuelas en la muestra. La seleccin del grupo se hizo de manera aleatoria. En general, se aplicaron 30 exmenes por grupo. Poblacin El esquema de muestreo empleado consider a las escuelas primarias generales de organizacin completa como unidades primarias de muestreo. La poblacin estuvo conformada por e! total de escuelas de primaria que han participado de forma ininterrumpida desde PEC I, a partir de 001. Al momento de la evaluacin participaban en el programa un total de 908 escuelas en Puebla (PEC V). Para seleccionar las de la muestra se establecieron los siguientes criterios: 1) 2) 3) 4) escuelas de organizacin completa, laborar en el turno matutino, no participar en otro proyecto de investigacin, contar con el mismo director de escuela en, cuando menos, los ltimos dos ciclos escolares, 5) no participar en otro programa compensatorio, y 6) estar inscrita en el PEC V.

Considerando los anteriores criterios, la poblacin a muestrear disminuy a 130 escuelas participantes en el PEC. La seleccin final consider su grado de marginacin de tal forma que escuelas con niveles alto, medio y bajo

Revista Mexicana de investigacin Educativa

Garduo

estuvieran proporcionalmente representadas. Este aspecto resulta importante de incluir, dado que uno de los propsitos del PEC es disminuir la diferencia en logro educativo en virtud de los diversos niveles socioeconmicos de la regin donde se encuentra la escuela. La muestra estuvo integrada por un rotal de 26 de escuelas PEC: 1 1 ubicadas en zonas escolares de marginacin alta, 4 en media, y 11 en baja. La muestra represent 20% de los planteles perrenecientes al programa que cumplieron con los requisitos establecidos anteriormente. Los criterios de seleccin de las escuelas no pertenecientes al PEC fueron los mismos de las participantes en el programa, excepto, por supuesto, que no estuvieran incluidas en l y que no recibieran los beneficios de otro programa. Asimismo, se consideraron los criterios de grado de marginacin econmica. La muestra de escuelas no PEC estuvo conformada por el mismo nmero y nivel de marginacin que las s pertenecen al programa. La seleccin para la muestra de ambos tipos de planteles se hizo de manera aleatoria. No obstante, para las no PEC se cuid que estuvieran ubicadas en las mismas o similares zonas escolares que las incluidas en el PHC. La aplicacin de los criterios mencionados permiti que: 1) las comparaciones en logro educativo entre ambos tipos de escuelas fueran principalmente atribuibles a las que ya contaban con la mayor cantidad de aos participando en el PEC, 2) no se confundieran tales resultados con los obtenidos en el caso de que las escuelas estuvieran recibiendo los beneficios de otro programa, 3) contaran con el liderazgo de un mismo director durante al menos dos aos, 4) las comparaciones con las escuelas no participantes fueran todas de organizacin completa a fin de evitar posibles diferencias en este aspecto. La grfica 1 indica el nmero de esrudiantes por gnero que contestaron los diferentes exmenes as como cuntos de ellos no lo presentaron. Como se puede observar, que el nmero de nias y nios que respondieron a los exmenes aplicados es muy semejante. Por otro lado, fueron rnuy pocos los que no respondieron al examen o que se invalid por can-cer de algn dato.

oog

Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

GRFICA 1

Participantes por gnero y rea examinada

100%

80%

60%

40%

20%

0% Hombre Mu|er y respuesta

6"" Esp, : 4 Hab. de pen,

16" Mat. I 3" Esp.

16 Hab. de pen. I 3 Mat.

15 Hab, de pen. 13 Hab, de pen.

Resultados

Como ya se indic, el diseo empleado compara los resultados obtenidos por los nios en la muestra de escuelas PEC con aqullos de las no participantes en el programa. No obstante que los resultados no puedan atribuir.se completamente al programa, debido a un nmero de factores, la .seleccin del grupo de comparacin se asemeja lo ms posible a l,is escuelas PtC. En un estudio de esta naturaleza es prcticamente imposible lograr un completo control experimental. Sin embargo, los resultados permiten tener una buena aproximacin a los efectos causado.s por el programa en cuanto a logro educativo en virtud de que las escuelas seleccionadas ya llevaban cinco aos de operacin bajo el PEC, con los beneficios econmicos correspondientes. No obstante que pudieron haberse incluido en la muestra de escuelas de comparacin a aquellas que en algn momento, por cierta razn, decidieron no continuar en el programa, se determin incluir solamente a las que desde un inicio determinaron no participar en el programa en virtud de tener una base apropiada para observar los cambios en

Revista Mexicana de Investigacin Educativa

899

Garduo

logro educativo bajo estas condiciones. El diseo empleado permiti determinar los avances en los nios a tres y a seis aos de su ingreso a una escuela PEC en cuanto a los exmenes de espaol y matemticas. Por oiro lado, tambin fue posible observar la contribucin del programa en las babilidades de pensamiento crtico cientfico a partir del tercero y basta el sexto grados. A continuacin se presentan los resultados obtenidos sobre la serie de exmenes; mismos que fueron transformados a porcentajes. El cuadro 1 muestra el nmero de estudiantes que respondieron los exmenes aplicados al conjunto de 52 escuelas participantes, su calificacin mnima y mxima, la desviacin y el error estndar, as como los resultados de los exmenes para la muestra de estudiantes PEC y no PEC. Tambin se sealan si las diferencias en calificaciones entre los nios en ambos tipos de escuelas fueron estadsticamente significativas. El procedimiento de anlisis para ello fue el de modelo lineal general que se describe ms adelante.
CUADRO 1

Nmero de nios, medias de calificacin, desviaciones y errores estndar para el total de escuelas y para la muestra de nios en escuelas PEC y no PEC. Significancia estadstica de las diferencias entre ambas modalidades
Areas y grados N 6oesp. 6o mat. 1501 1501 Total de escuelas Calificacin Min Max Media D. E. O O 93.3 73.3 39.24 30.51 16.19 12.79 PEC E. E. .42 0.33 N 710 710 Media 40.47' D. . E. E No PEC N 791 791 Media 38,14 29.58 D.E. t. E.

16.81 0.63

15.55 0.55 13,00 0.46

3 1 . 5 5 " 12.49 0.47

6o hab. pensam. 1421 5o hab. pensam. 1468 4o hab. pensam. 1456 3oesp. 30 mat. 1451 1430

5 100 0

50.72

18.72

0.50

705

52,20**20.13 0.76

715

49.27

17.10 [1.64

O lOO.O

51.26

20.01

0.52

726

52.14

20.S3 0,76

742

50,40

19.46 0.71

5 O O

100.0 93.3 83.3

54.91 46.14 24 65

21.87 19.98 9.80

0.57 0.52 0.26

725 729 704

55.40'* 21.16 0.79 44.29 20,53 0.76

731 722 726

53.43

22.47 0.83

48.02** 19-25 0.72 23.11 8.01 l).3O

2 6 . 2 4 " 11,15 0.42

3o hab,
pensam. 1450 O 95.0 46.58 20,86 0.55

725

45.30

21.60 0.80

725

47.86' 20.03 0,74

900

Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Eicuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

Como se puede observar, todas las medias del total de las 52 escuelas en la muestra son menores a 60. En cuanto a las desviaciones estndar, podemos ver que son relativamente homogneas y que los errores estndar son bastante bajos. Este resultado permite inferir que la media de la poblacin se encuentra muy cercana a la muestral. Por ltimo, en el cuadro 1 tambin podemos ver que hay nios en el conjunto de escuelas con calificaciones muy bajas y otros con muy altas; la menor se pre.sent en el rea de matemticas en tercer grado. En cuanto a la significanci-t estadstica de las diferencias, podemos observar que los nios en las escuelas PEC obtuvieron, en promedio, calificaciones superiores en todas las reas, con excepcin de espaol y habilidades de pensamiento, para tercer grado en las que los nios en escuelas no PEC obtuvieron calificaciones mayores. No se encontraron diferencias significativas en ei rea de habilidades de pensamiento de quinto grado. La informacin del cuadro anterior I:t podemos ver representada en la grfica 2.
GRFICA 2

Medias de calificacin por rea para el conjunto de 52 escuelas (PEC y no PEC)

10

6"Esp*

6 Mat**

6 Hab. de 5 Hab. de 4 Hab, de pen.** pen. pen.** Total i:-rac I No PEC

i-Mal"

3 Hab de pen,'

Revista Mexicana de Investigacin Educativa

901

Garduo

Podemos observar que la media de calificacin en espaol para el. 6 grado es menor que para los nios en tercero. Este mismo resultado lo encontramos en el rea de habilidades de pensamiento a partir dei cuarto grado. Las medias van disminuyendo poco a poco hasta que en sexto grado se presenta una diferencia de poco ms de 4% con respecto al cuarto. En contraste, para el rea de matemticas se encuentran medias ms altas en sexto que en tercero. La mayor diferencia la observamos en espaol en tercero, con una media de 3.7% superior para las escuelas que no participan en el PEC, en comparacin con las que s lo hacen. No obstanti; lo anterior, es importante notar que a simple vista notamos que la diferencia entre las medias para cada examen es muy poca; lo que implica que la contribucin del PEC en el logro acadmico de los nios es muy pobre o inexistente. Las grficas 3 y 4 muestran las medias de calificacin por gnero y por nivel de marginacin. Tambin se indican la significancia estadstica de las diferencias
GRFICA 3

Medias de calificacin por gnero. Significancia estadstica de las diferencias

70

6 Esp.

6" Mat.

6 Hab, de pen.

5 Hab. de pen. I Nios

4 Hab. de pen. Nias

3 Esp.

3 Mat.

3 Hab. de pen.

*p = .O5 * * p = .01

902

Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebia: resultados sobre logro educativo

GRFICA 4

Medias de calificacin por nivel de marginacin. Significancia estadstica de las diferencias

6Mat.** 6Hab,de 5 Hab. de 4 Hab. de 3Esp.*' pen.** pen.*' pen.**

I Alta
P = .01

3" Mal

J'Habde pen,**

Media

BBaja

Promedio

Como se observa, rodas las inedias de calificacin son mayores para los nios que para las nias, excepto en las reas de habilidades de pensamiento y matemticas para tercer grado. Todas las diferencia.s resultaron estadsticamente significativas excepto para las reas de matetnticas del sexto grado as como para habilidades de pensamiento de tercero y sexto. Sin embargo, en general, las diferencias en calificacin son muy pequeas. En cuanto a las medias de calificacin considerando el nivel de marginacin, tambin podemos observar que las diferencias son muy pequeas. No obstante, un resultado importante es que las medias de talificacin de los nios que se encuentran en escuelas de alta marginacin son muy semeRevista Mexicana de Investigacin Educativa

903

Garduo

jantes o aun superiores a las de alumnos de marginacin media o baja. Otro dato importante es que os estudiantes de escuelas de marginacin media, casi de forma consistente, tienen medias de calificaciones menores a los de otros niveles de marginacin. Todas las diferencias entre los distintos niveles de marginacin fueron estadsticamente significativas, con excepcin de la prueba para el tercer grado de matemticas. Como ya se mencion, con el fin de determinar diferencias estadsticamente significativas sobre las distintas variables de logro educativo entre escuelas PEC-no PEC, gnero y nivel de marginacin, se llev a cabo una serie de anlisis de varianza factorial que muestran tanto los efectos principales como de interaccin sobre las variables mencionadas. Para tales anlisis se emple el enfoque del modelo lineal general que permite trabajar con diseos no equilibrados. El cuadro 2 muestra estos resultados. En virtud de que la muestra de escuelas de marginacin media es menor que para las de marginacin alta y baja, debido a su proporcin menor en la poblacin, se emple un modelo tipo 111 que tiene la ventaja de ser invariable respecto del nmero diferente de estudiantes en cada celda. Los resultados sobre los efectos principales en cuanio a diferencias en calificaciones entre las escuelas PEC-no PEC, grado de marginacin y gnero ya fueron presentados. Para los inVisis post hoc de las interacciones PEC-no PEC con gnero y marginacin, en la parte inferior del cuadro 2 se incluyen los resultados de la prueba Tamhane para tales interacciones; tambin da cuenta de las medias y errores estndar as como las diferencias entre medas para las interacciones que se encontraron signiflcativas. Dicba prueba considera las diferencias en los tamaos de las muestras empleadas. En cuanto a las interacciones PEC-no PEC por nivel de marginacir, se encontraron resultados estadsticamente significativos en los exmenes de espaol y babilidades de pensamiento de tercero, cuarto y sexto grades, y para matemticas de sexto. Sobre las interacciones PEC-no PEC por genero, nicamente se encontraron resultados significativos para los exmt-nes de matemticas y espaol de sexto grado. Sobre ei examen de espaol de tercer grado se encontraron diferencias estadsticamente significativas entre las calificaciones en el nivel de mareinacin medio en las escuelas PEC y todas las calificaciones de los alumnos tanto para los planteles PEC como para los no PEC en todos los niveles de marginacin. Como se puede observar en el cuadro 2, la media
qQA Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

de calificacin de los nios en las escuelas PEC del nivel medio de marginacin fueron las ms bajas. Para este mismo examen, la diferencia entre las calificaciones de los niveles de marginacin alto y bajo en las escuela.s no PEC tambin fueron significativas. Adems, podemos ver que la media de calificacin para los nios en escuelas no PEC de nivel de marginacin alto ^ue la mayor de todas.
CUADRO 2

Resultados del anlisis de varianza factorial a travs del modelo lineal general, valor "eta" al cuadrado parcial y anlisis post-hoc Tamhane para niveles de marginacin y gnero. Informacin descriptiva para cada nivel de marginacin y gnero (H= hombres; M= mujeres)
ESPAOL 3" PEONO PEC Fuente

Significacin

Eta al cuadrado parcial .075 .817 .026 .034 .035 .014 .844 .009 .003 .002

Por nivel de marginacin

Modelo corregido Interseccin

PECNOPEC

Marg PECNoPEC * Marg Por gnero Modelo corregido Interseccin

PECNoPEC SEXO PECNOPEC * SEXO

23.296 6446.948 38.417 25.379 25,950 6.741 7791.639 13,052 4.942 2.338

,000 ,000 ,000 .000 .000 .000 .000 ,000 .026 ,127

Prueba Tamhane. Interacciones por nivel de marginacin Marginacin PEC Alta Media X Err. estndar Marginacin PEC Media No PEC Baja 18.95"* 18.01** 47.78 112 28,83 1 Marginacin no PEC Alta Media Baja 50,33 1.21 48,43 1.41 45.36 1,04

Baja 46.84 1.24

Diferencia entre medias

21,5"* 4,97*

19,59**

1652"

Revista Mexicana de Investigacin Educativa

905

Garduo

MATEMTICAS 3 PEC-NO PEC Fuente F

i Significacin Eta al cuadrado parcial .031 ,845 ,022 .004 .002 .030 .867 .004 .025 .001

Por nivel de marginacin

Modelo corregido Interseccin

PECNOPEC

Marg
PECNOPEC Marg

9.164 7791.942 31.362 2.782 1.587 14.619 9293.881 5,446 36.573 1,295

.000 .000 .000 .062 ,205 .000 .000 .020 .000 .255

Por gnero

Modelo corregido Interseccin Sexo

PECNOPEC

Sexo * PECNOPEC

HABILIDADES DE PENSAMIENTO 3" PEC NO PEC Fuente F Significacin Eta al cuadrado parcial .060 .803 .034 ,014 ,025 .006 ,834 .004 .000 .002

Por nivel de marginacin

Modelo corregido Interseccin Marg

PECNOPEC

Marg * PECNOPEC

18.595 5874.746 25,731 20.761 18,154 2.687 7225.784 5.155 ,387 2.876

,000 ,000 .000 .000 ,000 .045 .000 .023 .534 .090

Por gnero

Modelo corregido Interseccin

PECNOPEC SEXO PECNOPEC * SEXO

Prueba Tamhane. Interacciones por nivel de marginacin Marginacin PEC Alta Media X Err estndar Marginacin Media 47.04 1.26 29.4 1,08 Marginacin No PEC Alta Media Baja 48.97 1,16

Baja 49.69 1,21

46,4 1.7

47,37 1.16

PEC

Diferencia entre medias 17.63'* 20.28**

19,57'*

17.0**

17.97**

'ps.OI

906

Consejo Mexicano de Investigacin Ed JC3tiva

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

HABILIDADES DE PENSAMIENTO 4 PEC NO PEC

Fuente

Significacin

Eta at cuadrado parcial ,069 .831 .008 .053 .013 ,009 .864 .004 .005 .000

Por nivel de marginacin

Modelo corregido Interseccin

PECNOPEC

Marg PECNOPEC * Marg

21.463 7139,130 11,482 40.320 9.696 4.420 9171,578 5.898 6.555 .242

.000 000 .001 .000 .000 .004 .000 ,015 .011 .623

Por gnero

Modelo corregido Interseccin

Sexo PECNOPEC Sexo * PECNOPEC

Prueba Tamhane. Interacciones por nivel de marginacin

M a r g i n a c i n PEC

Marginacin No PEC Baja 61.97 1.18

Alta
X

Media
47.89 1.82

Alta
56,63 1,25

Media 39 46 1.85 1461**

Baja 55.2 1.25

Err. estndar PEC Marginacin Alta Media Baja Afta Media

'ps.Ol

54.07 1.18

Diferencia entre rTiedias 8.7* 5.33* 8,4* 22 5 1 ' * 17.17** 15,73** 7,3* 6.77**

7.9**

14.08*'

No PEC
*p .05

HABILIDADES DE PENSAMIENTO 5" PEC NO PEC Fuente F Significacin Eta al cuadrado parcial .010 .836 ,002 ,007

Por nivel de marginacin

Modelo corregido Interseccin

PECNOPEC

Marg
PECNOPEC * M a r g

3.024 7473.461 2,574 4,855 1,250 2,885 9721.384 6.222 2.394 ,000

.010 .000 .109 .008 ,287 .035 .000 ,013 .122 .992

,002 ,006 .870

,004 ,002 ,000

Por gnero

Modelo corregido
Interseccin SEXO PECNOPEC SEXO * PECNOPEC

Revista Mexicana de Investigacin Educativa

907

Garduo

HABILIDADES DE PENSAMIENTO 6 PEC NO PEC Fuente F Significacin Eta al cuadrado parcial .025 .847

Por nivel de margnacn

Modelo corregido Interseccin PECNoPEC Marg PECNoPEC * Marg Modelo corregido Interseccin
SEXO PECNOPEC SEXO PECNOPEC

7.185 7854.519 14.278 9.294 3.913 4.146 10463.390 .381 8.194 3.275

.000 .000 .000 .000 .020 .006 .000 .537 .004 .071

.010
.013 .005 .009 .881 .000 .006 .002

Por gnero

Prueba Tamhane. Interacciones por nivel de marginacin Marginacin PEC Alta Media X Err. estndar Marginacin No PEC
**pS.O1

Baja 51.01 1,04

Marginacin No PEC Alta Media Baja 50.04 0.77 38.05 1.94

54.2 1.3

50.26 1.8

50.59
1.14

Diferencia entre medias 11.98* 12.54** 16.14** 12.2** 12.95**

Media

MATEMTICAS 6 PEC NO PEC Fuente F Significacin Eta al cuadrado parcial .027 .808 .010 .003 .010 .011 .853 .005 .000 .005

Por nivel de marginacin

Modelo corregido Interseccin Marg

PECNOPEC

Marg * PECNoPEC Por gnero Modelo corregido Interseccin

PECNOPEC SEXO PECNOPEC * SEXO

8.302 6342.960 7.894 5.259 7.865 5.377 8685.649 7.340 .586 7.780

.000 ,000 .000 .022 .000 .001 .000 .007 .444 .005

908

Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

Prueba Tamhane (matemticas 6) Interacciones por nivel de marginacin Marginacin PEC Marginacin No PEC Alta Media Baja 27.89 0.65 27.82 1.12 32 39 0.74

Alta
X Err. estndar Marginacin PEC Alta Baja Atta Baja **ps.O1 32.38 O 75

Media
28.96 1.12

Baja 31.46 0.68

Diferencia entre medias 4.49* 3.56** 4 56" 4.5**

No PEC *ps.O5

4.56"

Interacciones por gnero Gnero PEC H M X Err. estndar 32.64 0.66 30.31 0.65 Gnero no PEC H M

29.03 0.63
H 3.6**

30.3 0 66

PEC
ps.Ol

Gnero H

Diferencia entre medias H M

ESPAOL 6" PEC-NO PEC Fuente

Significacin

Eta al cuadrado parcial .030 .809 .024 .004 .000 020 .859 ,004 .010 007

Por nivel de marginacin

Modelo corregido Interseccin Marg

PECNoPEC Marg * PECNOPEC

9258 6385,088 18718 5.937 .361 7803.209{a) 2311880.124 1367.707 3977.763 2522.039

.000 .000 ,000 .015 .697 .000 ,000 .020 .000 .002

Por gnero

Modelo corregido Interseccin

PECNoPEC SEXO PECNoPEC SEXO

Revista Mexicana de Investigacin Educativa

909

Gardijfio

Prueba Tamhane. Interacciones por gnero (espaol 6)

Gnero PEC H M

Gnero no PEC H M 38.7 0.76 38,08 0,78

X Err. estndar

43,21 0.9

37,35 0,84

PEC
< ,01

Gnero H

Diferencia entre medias H M 5.86""

H 4,51**

M 5,13

En cuanto a los resultados del examen de habilidades de pensamiento para los nios de tercero se encontraron diferencias estadsticamente significativas, cuando menos al nivel de .01, entre el nivel de marginacin medio en las escuelas PEC con las calificaciones de todos los dems niveles de marginacin. Como se puede observar, los alumnos de las no PEC de marginacin alta obtuvieron la media mayor. Sobre la prueba de habilidades de pensamiento para cuarto grado, las calificaciones de los alumnos de escuelas PEC de marginacin baja result estadsticamente superior a las de los nios de los otros niveles en ambos tipos de escuelas. Tambin se encontraron diferencias significativas entre las calificaciones de los alumnos en las escuelas PEC de marginacin media con aquellos en la no PEC de zonas alta media y baja. Por ltimo, las ca.lificaciones de los de escuelas no PEC en el nivel de marginacin media fueron las ms bajas de todas y las diferencias con los dems niveles fueron significativas. Sobre los exmenes de habilidades de pensamiento para sexto grado, se encontraron diferencias significativas entre las calificaciones de los alumnos de las escuelas PEC y no PEC de los niveles de marginacin bajo, medio y alto, con las de los de planteles no PEC de nivel medio de marginacin, quienes obtuvieron las calificaciones ms bajas. En cuanto a los resultados en el examen de matemticas de sexto grado, se encontraron diferencias estadsticamente significativas entre las calificaciones de los nios en escuelas PEC en el nivel de marginacin bajo y alto en comparacin con las de los alumnos de planteles no PEC de nivel de marginacin alto, as como entre las calificaciones de los grupos de escuelas PEC de marginacin alta con aquellos de no PEC de nivel medio.
Q1Q Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

Por ltimo, tambin se encontraron diferencias significativas entre las escudas no PF.C con nivel de marginacin bajo con las de medio, as como entre las de marginacin alta con las de nivel bajo. En cuanto a las interacciones por gnero para el examen de macemticas de sexto grado, se encontraron diferencias significativas entre los alumnos de escuelas PEC y los de no PEC, quienes obtuvieron calificaciones menores. Sobre el examen de espaol, los nios de planteles I'HC tuvieron calificaciones estadsticamente superiores en comparacin con las y los alumnos de ambos tipos de escuela. En otras palabras, considerando el valor F y su nivel de probabilidad, se encontraron diferencias estadsticamente signiflicativ.is sobre los efectos principales PEC-no PEC, gnero y marginacin, as como sobre sus correspondientes interacciones para la mayora de las calificaciones. No obstante lo anterior, los valores en la columna del estadstico "eta" al cuadrado parcial, que ndica la importancia "prctica" de cada variable, muestra que la cantidad de varianza que aporta cada variable a ios resultados en los exmenes es muy reducida. Considerando el valor mximo de este anlisis que es de uno, el puntaje mayor fue de .053 para la variable habilidades de pensamiento de cuarto grado en relacin con el nivel de marginacin. En cuanto a la contribucin del programa sobre logro educativo, vemos que todos los valores "eta" son sumamente bajos, e inclusive negativos al mismo, considerando las calificaciones en los exmenes de espaol y habilidades de pensamiento de tercer grado. De tal manera, aunque muchos de los efectos principales y de interaccin son estadsticamente significativos, stos no muestran un efecto importante sobre las variables de logro educativo. De hecho, casi todos los valores F son bajos.
Conclusiones

Considerando los resultados sobre el conjunto de escuelas, claramente podemos ver que el objetivo de mejorar el rendimiento escolar de los nios planteado en el Programa Nacional de Educacin no se est alcanzando, cuando menos, de forma general y a los niveles que se esperara. No obstante la descentralizacin educativa iniciada a principios de los aos noventa, en la que el gobierno federal pas a los estados el manijo de las escuelas, parece que no ha logrado su propsito. Los gobiernos estatales parecen reproducir los esquemas burocrticos centralizados de administracin de las escuelas en sus entidades. La idea de favorecer una gestin escolar en la
Revista Mexicana de Investigacin Educativa 9^ 1

Garduno

que cada escuela diagnostique, establezca y alcance sus propios objetivos todava no se logra. En un trabajo cualitativo con jefes de sector y supervisores, realizado como parte de esta evaluacin (Garduo, 2007b), se encontr que muchos de ellos no conocan las caractersticas ms sobresalientes del programa ni su reglas de operacin. De tal forma, no puede esperarse que tales personajes tengan un papel importante en el cumplimiento de sus funciones que estn indicadas en dichas reglas. De igual manera (Garduo, 2007a), se encontr que los directores no ejercan un Hderazgo participativo ni tendiente al mejoramiento de la calidad en los aspectos de enseanza en el aula. Asimismo, como parte de este trabajo, se hall que los planes escolares de transformacin educativa y los anuales de trabajo (Garduo y Herrera, 2007) estaban muy pobremente elaborados en prcticamente todos sus componentes. De acuerdo con la informacin obtenida, inclusive se encontraron retrocesos en las medias de calificacin en habilidades de pensamiento <ie cuarto a sexto grados y en espaol de tercero a sexto, as como calificaciones mayores en los alumnos de las escuelas no PEC en las reas de espaol y habilidades de pensamiento de tercer grado. A pesar de lo anterior, es importante mencionar que se encontraron calificaciones altas en ambos grupos de escuelas y que ser necesario conducir un estudio que identifique los factores endgenos y exgenos que intervienen en tales resultados. Los resultados obtenidos en los diversos exmenes aplicados muestran claramente que tanto la inversin en tiempo como en los recursos destinados al Programa Escuelas de Calidad no han logrado alcanzar, de manera apreciable, el mejoramiento en el logro educativo que plantea. No obstante que al momento de la evaluacin llevaba ya cinco aos en operacin, los resultados en los exmenes aplicados, en promedio, son reprobatorios. Considerando la serie de cuadros y grficas, claramente se observa que las medias de calificacin se encuentran por debajo de 60%, que representara la calificacin mnima aprobatoria. Casos extremos de promedios muy bajos los encontramos en los exmenes de matemticas para tercero y SXto grados. A pesar de que la mayora de valores F resultaron estadsticamente significativos, la contribucin del programa en cada examen es muy pobre como lo demuestran los diferentes valores "eta" al cuadrado parcial. En otras palabras, la contribucin del PEC para el logro educativo es prcticamente nula. Las mayores diferencias entre escuelas PEC y no PEC no fueron
912 Consejo Mexicano de Investigacin Educiitiva

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

ms all de 4%. Es importante destacar que las calificaciones en espaol de los nios de sexto grado, a pesar que ya llevan prciicamente todos sus estudios de primaria en una escuela que se ha mantenido en el PEC por cinco aos, no han logrado superar claramente no slo las calificaciones de los alumnos de las que no participan, sino tambin la de los estudiantes en las propias escuelas PKC que tienen bastante menos tiempo que ellos; esto es, de los de tercer grado. Otro aspecto importante es que prcticamente todas las medias de calificacin en los diferentes exmenes aplicados a las escuelas PEC son menores para el nivel de marginacin medio en comparacin con el bajo y alto. En los de espaol y habilidades de pensamiento para t< rcer grado, la diferencia es de casi 20%, o de casi 60% para cada examun si se compara la media de calificacin del nivel medio de marginacin con la meda de calificacin ms alta. En este sentido, resulta interesante que el PEC est logrando salvar la brecha entre las escuelas de niveles de marginacin alto y bajo, pero que en el caso de los exmenes mencionados, las de nivel medio no hayan logrado alcanzarlas del todo. En relacin con el gnero, las diferencias entre nios y nias de las escuelas PEC son prcticamente inexistentes; la mayor, de casi 6%, la encontramos en el rea de espaol de sexto grado. Otro dato importante son los errores estndar. Como sabemos, estos estadsticos nos sirven para determinar dnde se encuentra la meda de la poblacin a diferentes intervalos. Como ya se mencion, dado que los valores son muy pequeos, las medias mustrales no estn muy lejanas de las poblacionales. Por otro lado, los valores encontrados son muy consistentes con los trabajos anteriores. Otro aspecto a considerar en este trabajo es el empleo de una metodologa que permiti comparar a estudiantes que ya haban permanecido cinco aos con los beneficios del programa con otro grupo que no los haba recibido. Si bien la idea de determinar el impacto en el logro educativo en trabajos previos ya haba estado presente, ninguno emple un diseo de esta naturaleza. Por otro lado, el uso de un procedimiento de anlisis estadstico como el modelo lineal general tipo III permiti identificar los efectos principales y de interaccin con las variables de marginacin y gnero con las caractersticas ya mencionadas. En este sentido, el estadstico "eta" al cuadrado parcial posibilit evaluar la contribucin prctica del programa en el logro educativo que, como ya se mencion, mostr
Revista Mexicana de Investigacin Educativa oa

Garduno

resultados que indican el impacto prcticamente nulo de! programa en el logro educativo. Dados estos resultados ser necesario repensar probablemente no el PEC en s, sino su operacin. De ser un programa para transformar la gestin y la administracin, es uno que, en mucho, mantiene la burocracia: la requisicin de planeaciones y los proyectos sin respetar los tiempos y sin otorgar la capacitacin adecuada. Latap (2004:185) menciona que la eficacia de la administracin pblica depende, a fin de cuentas, de las cualidades de (as personas que manejan los programas. En un intento por determinar los principales cuellos de botella que tiene este programa, podemos decir que uno de ellos se encuentra en el escaso nmero de personas que apoyan toda su operacin en el estado de Puebla. Sin tratar de identificar responsables sobre los resultados encentrados, es necesario hacer una breve reflexin que nos acerque a su explicacin. Considerando las principales funciones del PEC en cuanto a incorporacin, financiamiento, formacin, acompaamiento y evaluacin resulta sumamente difcil que la instancia principal responsable del programa en el estado cuente con 19 elementos, de los cuales solamente 12 participan en las tareas sustantivas de formacin, acompaamiento y evaluacin para atender a una poblacin de 2 mil 507 escuelas inscritas en el PEC V. Otro elemento tambin importante es el papel que desempean los directores de escuela. Al interior de los planteles son ellos los lderes y deben asumir su papel protagnico en el mejoramiento escolar. Sin embargo, deben ser capacitados. La elaboracin de los programas estratgicos de transformacin educativa y los planes anuales de trabajo, el establecimiento de un clima escolar democrtico y participativo, el apoyo a los maestros para pensar su enseanza y su mejoramiento a travs de los cursos c[ue ofrece la SEP federal y la estatal aunados a los que consigan con los recursos que el PEC proporciona, fomentar la autoevaluacin crtica pero propositiva, insistir en el apoyo que puedan brindar los supervisores y apoyos tcnico pedaggicos, son aspectos neurlgicos como parte de su funcin para el mejoramiento escolar. Por lo anterior, siguiendo a Latap (2004), es menester que las secretaras de Educacin Pblica federal y estatales cuenten con programas internos, talleres y seminarios orientados a desarrollar una cultura de eficacia entre sus funcionarios; en virtud de que su cambio mental es condicin esencial para la eficacia de sus polticas. Lo mismo debiera
Q1 Consejo Mexicano de Investigacin Educativa

Evaluacin del Programa Escuelas de Calidad en el estado de Puebla: resultados sobre logro educativo

urgirse para los cuadros medios de directores de escuela, jefes de zona y sector y supervisores, "eslabones donde con frecuencia naufragan los programas" (Latap, 2004:350). No obstante todos estos problemas, consideramos que el PEC es un programa importante, con buenos elementos que han probado su eficacia en muchas investigaciones al respecto. De tal manera, pensamos que el programa debe continuar. De acuerdo con Bracho (2006:12) no es fcil modificar una cultura escolar que tiene muchos vicios de distinto orden y a diferentes niveles. Creemos que se est llevando a cabo un proceso de transformacin al interior de las escuelas donde el director, los maestros, nios y padres de familia estn siendo cada vez ms conscientes de su papel en este cambio. El programa ha alcanzado e sptimo ao de vida y parece ser que despus del tiempo transcurrido, las visiones acerca del programa estn comenzando a cambiar. Esa es la premisa con la que se fundamentan estas conclusiones: el cambio de paradigma. Al inicio, daba la impresin de ser un programa compensatorio orientado a satisfacer con recursos econmicos los huecos que quedaban de los proporcionados por la SEP. Actualmente puede decirse que si bien es cierto que, en la gran mayora de las escuelas, el paradigma sigue basndose en el aumento de los recursos, ste se est orientando a la mejora de la educacin. La calidad tiene que ver con actitud, compromiso, democracia y pasin. No importa cul sea nuestra rea de estudio o de trabajo. La calidad se conseguir en el momento en que cada uno de nosotros nos sintamos responsables de ella, diseando en nuestros propios planes de vida la manera en que contiibuiremo.s con ella diariamente, en la familia, en la escuela y en la comunidad en general, esparcindola como un virus benigno a todos aquellos con los que convivimos diariamente. Referencias bibliogrficas
Alvarez, A. (2003). 'Reforma Educativa en Mxico: el Programa Escuelas de Calidad", Revista Electrnica Iberoamericana sobre Calidad. Eficacia y Cambio en Educacin, vol. 1, num. 1, 1-15. Bracho, T. (2006). Evaluacin externa del Programa Escuelas de Calidad (PEC) 2006-2007, Mxico: Centro de Investigacin y Docencia Econmicas, A.C. CIDE (2001). Evaluacin del Programa Escuelas de Calidad 2001, Mxico: Centro de Investigacin y Docencia Econmicas. AC (disponible en http://basica.sep.gob.nix/dgdgie/ escueasdecalidad/pdfs/CIDE2001 .pdf).
Revista Mexicana de Investigacin Educativa 9^5

Garduo

CIDE (2003). Programa Escuelas de Calidad. PEC2002. Segunda evaluacin externa, Mxico: Centro de Investigacin y Docencia Econmicas. AC (disponible en http://basica.sep.gob.mx/dgdgie/escuelasdecalidad/pdfs/ClDE2002.pdf). CIDE (2004a). Programa Escuelas de Calidad. PEC2001-2003: evaluacin externa. Primer borrador, Mxico: Centro de Investigacin y Docencia Econmicas, AC (disponible en http://basica.sep.gob.mx/dgdgie/escueIasdecalidad/pdfs/CIDE2003.pdO. CIDE (2004b). Evaluacin externa del Programa Escuelas de Calidad PEC 2004, Mxico: Centro de Investigacin y Docencia Econmicas, AC (disponible en: http:// bsica, sep.gob.mx/dgdgie/escuelasdecalidad/pdfs/CIDE2004.pdf). Coppieters, P. (2005). "Turning schools into learning organizations", European journal of Teacher Education, vol. 28, num. 2, pp. 129-139. De Grauwe, A. (2005). "Improving the quality of education through school-based management: learning from international experiences". Review of Education, 51: 269-287. ENLACE (2007). Resultados para Puebla. Resultados en logro educativo en espaol y matemticas, Mxico: Secretara de Educacin Pblica (disponible en http://enlace.sep.gob.rnx/ index.php?option=com_content&task=view&id=l 17&Itemid=128 consultado el 11 de noviembre de 2007). Garduo, L. (2007). Evaluacin del Programa Escuelas de Calidad en el nivel de educacin primaria del estado de Puebla. Informe sinttico. Puebla: Centro de Estudios en Calidad de Vida y Desarrollo Social-UDLA/CONACyT. Garduo, L. (2007a). Evaluacin del Programa Escuelas de Calidad en el nivel de educacin primaria en el estado de Puebla. Informe al Consejo Nacional de Ciencia y Tecnolo^a. SEPSEBYN-2004-C01-70/A-1. Garduo, L. (2007b). Evaluacin del Programa Escuelas de Calidad en el nivel de educacin primaria en el estado de Puebla. El caso de asesores tcnico-pedaggicos, supervisores y jefes de sector: un estudio cualitativo (documento indito). Garduo, L. y Beltrn, D. (2005). Evaluacin del PEC en el nivel de educacin primaria en el municipio de Puebla, Puebla: Universidad de las Americas (documento indito). Garduo, L. y Herrera, J. (2007). "Evaluacin del Programa Escuelas de Calidad e el estado de Puebla: resultados de un anlisis de contenido sobre los planes estratg eos de transformacin escolar y de los planes anuales de trabajo", trabajo presentado en la 2^ Reunin Regional Norte, Centroamrica y Caribe de Evaluacin Educativa, 26-28 de septiembre. Campeche: Colegio de Bachilleres de Campeche/Instituto de Evaluacin e Ingeniera Avanzada. Garduo, L., Morales, A. y Mndez, E. (2006). "Elaboracin y validacin de una serie de instrumentos para medir habilidades de pensamiento crtico cientfico en alumnos de educacin primaria", ponencia presentada en el Sptimo Foro Nacional de Evaluacin, San Luis Potos: CENEVAL. INEE (2003). La calidad de la educacin bsica en Mxico: primer informe anual, Mxico: Instituto Nacional para la Evaluacin de la Educacin. INEE (2004a). Panorama educativo de Mxico: indicadores del sistema educativo nacional 2003, Mxico: Instituto Nacional para la Evaluacin de la Educacin.

Consejo Mexicano de Investigacin Eduotiva

Evaluacin del Programa Escuetas de Calidad en el estado de Puebla: resultados sobre logro educativo

INEE (2004b). La calidad de la educacin bsica en Mxico, Mxico: Instituto Nacional para la Evaluacin de la Educacin. INF.E (2004c). Cmo est la educacin secundaria en Mxico?, M=xco: Instituto Nacional para la Evaluacin de la Educacin. INEE (2005). La calidad de la educacin bsica en Mxico, Mxico Instituto Nacional para la Evaluacin de la Educacin. Latap, P. (2004). La SEP por dentro. Las polticas de ia Secretarla de Educacin Pblica comentadas por cuatro dt sus secretarios (1992-2004), Mxico: Fondo de Cultura Econmica. Loera, A. (2005). Cambios en las escuelas que participan en el VEC 2001-2004. Evaluacin cualitativa del Programa Escuelas de Calidad. Reportes nacionales, fiisc III, s/\/c: Heurstica Educativa (disponible en bsica.sep.gob.mx/pec/Documentos/ EvaIuaciones%20de%20Heurisrica/Cambios%20en%20escutlas20012004vrdefpdr). Locra. A. y Cazares, O. (2005). Anlisis ee cambios de logros acadmicos y eficucia social de las escuelas de la muestra cualitativa 2001-2005, Chihuahu.i: Heurstica Educativa (disponiblen http://basica.sep.gob.mx/dgdgie/escuelasdecali(lad/Evaluaciones/Documentos/F.valuaciones%20de%20Heuriscica/Reportecambioslogrosacadeniic()s.pdf). Murnane, R., WiHet, J. y Crdenas, S. (2006). Ha contribuido el Programa Escuelas de Calidad (PEC) a mejorar la educacin pblica en Mxico?, disponible en http:// bsica.sep.gob.mx/dgdgie/cscuelasdecalidad/Evaluaciones/Documenros/HARVARD/ PEC%20REPORT.pdf. OCDE (2004). Panorama de la educacin 2004. Nota de pas: Mxico. Organizacin para la Cooperacin y el Desarrollo Econmicos. OCDE (2006). Panorama de la educacin 2006, Espaa: Santillana. Observatorio Ciudadano de ia Educacin (2006). Plataforma Educativa 2006. Captulo V, Educacin Bsica, Mxico: Observatorio Ciudadano de la i;ducacin. PNUD (2003). Informe sobre desarrollo humano: Mxico 2002. Mxico: Programa de las Naciones Unidas para el Desarrollo. SEP (2002). Cmo conocer mejor nuestra escuela? Elementos para el diagnstico. Cuadernos para transformar nuestra escuela. Secretara de Educacin Pblica/Cooperacin Espaola.

Articulo recibido: 1 de junio de 2007 Dictaminado: 15 de noviembre de 2007 Segunda versin: I 5 de enero de 2008 Aceptado: 13 marzo de 2008

Revista Mexicana de Investigacin Educativa

917