UNIVERSIDADE FEDERAL DE JUIZ DE FORA

TIAGO DE PAULA ZAGNOLI

A IMPORTNCIA DA APROPRIAO DOS RESULTADOS NA AVALIAO EM
LARGA ESCALA






Trabalho de Concluso de Curso apresentado ao
Centro de Polticas Pblicas e Avaliao da
Educao da Universidade Federal de Juiz de Fora,
como requisito parcial obteno do grau de
Especialista em Gesto e Avaliao da Educao
Pblica.

Orientao: Alessandra Belo Assis Silva

















Juiz de Fora
2013

1



INTRODUO

Este Plano de Trabalho de Concluso de Curso, apresentado ao Centro de
Polticas Pblicas e Avaliao da Educao (CAEd), da Universidade Federal de Juiz de
Fora (UFJF), tem como objetivo principal mostrar a importncia da apropriao de
resultados do SAEB em todas as redes de escolas pblicas, sejam elas municipais,
estaduais ou federais. Atravs da apropriao dos resultados possvel fazer inmeras
inferncias a melhoria da qualidade e equidade educacional nas escolas.
Neste trabalho, procuramos investigar qual o entendimento por parte dos
agentes educacionais, sejam eles gestores, professores e supervisores sobre as avaliaes
utilizadas para medir a qualidade do ensino, bem como a interpretao de seus resultados e
suas consequncias na criao de polticas pblicas.
Dessa forma, este Trabalho de Concluso de Curso foi dividido em trs sees.
Na Seo I, foi abordado o problema vivenciado por grande parte dos profissionais que o
no entendimento dos resultados obtidos e sua interpretao equivocada. Na Seo II, o
problema foi analisado por meio de uma reviso bibliogrfica luz dos seguintes autores,
Bonamino, Brooke, Cassetari, Horta Neto, Silva, entre outros.Na Seo III, foi concludo o
trabalho com sugestes de aes prticas que podem ser desenvolvidas a partir da
interpretao correta dos resultados por todos os agentes educacionais, bem como a
sociedade que deve ter um papel ativo junto aos demais na busca pela melhoria da
qualidade da educao, e na diminuio da desigualdade.











2



Seo I Descrio do Problema
Desde a dcada de 1990 o Brasil vem passando por uma transformao na
avaliao da qualidade e na busca pela equidade no ensino. A primeira atitude em busca da
qualidade de educao foi a criao do Sistema Nacional de Avaliao da Educao Bsica
(SAEB) em 1990 pela Secretaria Nacional de Educao Bsica (SENEB). Com o passar dos
anos muitos aspectos do SAEB foram modificados at chegar ao modelo atual. O objetivo
dessa avaliao no avaliar alunos, professores, gestores e escolas como unidade, mas
verificar a qualidade, equidade dos sistemas educativos e prestar contas com a sociedade.
A partir dos resultados possvel monitorar o ensino pblico no pas, servindo tambm para
elaborar inmeras polticas pblicas de incentivo educao. Tal transformao tem se
tornado cada vez mais importante devido ao Plano Nacional de Educao (PNE) criado pelo
governo federal entrando em vigor a partir de 2011. Esse plano estabelece metas para a
educao nacional, como pode ser visto no site do Ministrio da Educao:

O projeto confere fora de lei s aferies do ndice de desenvolvimento da
educao bsica (IDEB) criado em 2007, no mbito do PDE para
escolas, municpios, estados e pas. Hoje, a mdia brasileira est em 4,6
nos anos iniciais do ensino fundamental (primeiro ao quinto ano). A meta
chegar a 6 (em uma escala at 10) em 2021. Outra norma prevista no
projeto confronto dos resultados do IDEB com a mdia dos resultados em
matemtica, leitura e cincias obtidos nas provas do Programa Internacional
de Avaliao dos Alunos (Pisa). (Programa Nacional da Educao PNE,
2011)


Com base nas metas estipuladas no PNE, muitos gestores tm se preocupado cada
vez mais com as notas referentes ao ndice do IDEB que composto pelos indicadores
relacionados s notas obtidas no Sistema Nacional de Avaliao da Educao Bsica
(SAEB) e a taxa mdia de aprovao escolar. Essa preocupao acontece tambm devido
aos rankings, muitas vezes perversos, divulgados pela mdia com a classificao de
melhores e piores escolas de acordo com o IDEB.
Devido a esses acontecimentos, alguns agentes educacionais
1
acabam recriminando
a avaliao e considerando-a como um instrumento que no valido para eles, pois no
verifica as situaes de aprendizagem nas salas de aula que interfere diretamente no
processo de aprendizagem. E, principalmente por no considerar a realidade do aluno, que
apenas eles como pessoas presentes na comunidade escolar compreendem.
Outro problema que podemos citar a interpretao equivocada dos resultados que
ocorre devido aos gestores escolares no os entenderem. Essas informaes, assim como

1
Entendemos agentes como sendo todos os personagens que compe o corpo escolar, sejam eles
gestores, professores, supervisores, etc.
3



alguns termos utilizados, no so novas, mas infelizmente ainda no fazem parte do
cotidiano desses agentes educacionais. Isso pode ser percebido ao perguntarmos dentre
esses profissionais, aqueles que j tiveram algum contato com Matriz de Referncia, que
conhecem a diferena entre Item e Questo ou sabem o significado do termo proficincia
que amplamente utilizado em avaliaes externas. Esse tipo de questionamento pode ser
feito em qualquer escola, e o resultado tende a ser muito semelhante, mostrando que
apenas uma pequena parcela desses profissionais demonstram conhecer o que uma
matriz de referncia ou um item.
Com isso, boa parte dos gestores escolares no sabe como interpretar estes
resultados e eles acabam sendo esquecidos, no atingindo o propsito dessa avaliao,
pois a partir dela as escolas podem fazer algumas inferncias com o intuito de melhorar a
qualidade do ensino. Em alguns casos, ofertado a alguns desses profissionais uma oficina
ou minicurso no qual sero explicados como esses resultados devem ser analisados.
Porm, essas oficinas no so oferecidas a todos os professores e a todas as escolas. Isso
se d por meio das secretarias ou dos gestores que selecionam uma parcela desses
profissionais para participar desses treinamentos, esperando que esses profissionais
tornem-se multiplicadores, repassando o que foi aprendido aos demais colegas. Tem-se
percebido que os profissionais selecionados para participar de tais oficinas, sejam eles
professores, gestores ou at mesmo aqueles que compem a parte educacional das
secretarias demonstram pouco conhecimento, ou no se sentem seguros sobre os temas
abordados. Logo, esses profissionais que deveriam compartilhar tal aprendizado com os
demais colegas, no o fazem e os resultados acabam caindo no esquecimento.
Antes de entrarmos propriamente nos resultados interessante diferenciarmos os
tipos de avaliaes utilizadas. As avaliaes podem ser internas ou externas. Entende-se
por avaliao interna aquela realizada pelo professor em sala de aula, a fim de verificar a
aprendizagem dos estudantes. Nesse caso, o professor pode recorrer a diferentes tipos de
abordagens ou instrumentos avaliativos. As avaliaes externas, tambm conhecidas como
avaliaes em grande ou larga escala, so avaliaes realizadas por agentes que no
pertence a escola avaliada. Seu foco o desempenho da escola e os resultados que, se
interpretados de forma correta, permitem a implementao de polticas pblicas.
Atualmente, o Sistema de Avaliao Brasileiro atual composto por duas avaliaes:
a ANEB Avaliao Nacional de Educao Bsica, tambm conhecida por SAEB, e a
ANRESC Avaliao Nacional do Rendimento Escolar, conhecida como Prova Brasil, que
aplicada quase censitariamente aos alunos do 5 e 9 anos do ensino fundamental de quase
todas as escolas pblicas (com no mnimo 20 alunos), situadas em rea urbana e rural,
ampliando a atuao do SAEB. Essas avaliaes oferecem resultados por Unidade da
4
Federao, redes educacionais e escolas (neste ltimo caso, quando se trata da Prova
Brasil). Ambas contribuem para o clculo do IDEB.
O problema citado anteriormente comum na maioria das escolas, independente da
regio. Para fim de esclarecimento, sero apresentados os dados das proficincias do
estado de Gois - GO na disciplina de Matemtica segundo a ltima edio do SAEB
realizada em 2011. Tais resultados encontram-se disponveis no site do INEP.
Tabela 1-Mdia das proficincias em Matemtica do 5 ano do Ensino
Fundamental
Fonte: Inep/Daep (2013) adaptado
Tabela 2- Mdia das proficincias de Matemtica do 9 ano do Ensino Fundamental
Fonte: Inep/Daep (2013) adaptado
Tabela 3- Mdia das proficincias de Matemtica dos alunos do 3 srie do
Ensino Mdio
Fonte: Inep/Daep (2013) adaptado
As tabelas apresentadas foram adaptadas mostrando apenas a proficincia obtida
pelo estado de Gois em comparao com a proficincia em mbito nacional por
5



dependncia administrativa, seja ela federal, estadual, municipal, privada e pblica. Essa
informao uma prvia do material que chega s escolas e disponibilizado pelo site do
INEP antes da produo dos boletins pedaggicos.Muitos professores ou gestores com a
posse de tal material no sabem o que significa cada um desses valores, associando-os
apenas a uma nota obtida pela escola no teste, e no como um valor associado ao trao
latente, ou seja, ao desenvolvimento cognitivo dos estudantes avaliados.
Para um entendimento sobre a interpretao dos resultados, importante
explicarmos como esses resultados chegam at a escola. A divulgao dos resultados do
SAEB ou da Prova Brasil, por parte do Governo Federal, se d pela internet ou por meio de
boletins pedaggicos que so encaminhadas para cada escola. Esses boletins pedaggicos
trazem informaes como: nmero de alunos avaliados em mbito nacional, estadual,
municipal e rede de ensino, divididos com base na etapa avaliada, Anos Iniciais / Anos
Finais do Ensino Fundamental.
A fim de elucidao, tomou-se por meio dos dados disponveis no site do INEP o
boletim pedaggico dos resultados da Prova Brasil na edio de 2009 de uma escola do
estado de Gois, a qual chamaremos de Colgio Estadual I
2
. Mostraremos fragmentos
dessa cartilha, mas a mesma pode ser conferida no anexo.

Tabela 4 Resultados Prova Brasil de 2009 no Colgio Estadual I


Fonte: INEP (2013)

Por meio dessas informaes, os gestores ou professores podem realizar uma
anlise quanto participao dos alunos nessa avaliao. Caso percebam que houve baixa
participao, uma interveno pode ser feita.
A figura abaixo mostra outro fragmento retirado do boletim pedaggico encaminhado
s escolas. Esse fragmento traz as proficincias obtidas pela escola nas duas etapas nas

2
Nome fictcio para manter o anonimato da escola selecionada.
6



disciplinas de Lngua Portuguesa e Matemtica, alm da evoluo no ndice do IDEB desde
sua implementao em relao as metas estipuladas.
Tabela 5- Proficincias nas disciplinas Lngua Portuguesa e Matemtica no
Colgio Estadual I


Fonte: INEP (2013)

Grfico 1- Evoluo do IDEB (2005-2011)


Fonte: INEP (2013)

Cada escola recebe um boletim pedaggico com seus resultados. Porm, o que
ocorre nas escolas, que tais resultados ficam apenas a mostra em bannersou cartazes,
nenhuma anlise sendo feita e nenhuma poltica pblica pensada, visando a melhoria dos
resultados nas prximas edies das avaliaes.
7



Diante dos problemas apresentados, gestores em consonncia com professores e
supervisores devem buscar meios de resoluo dos problemas apresentados a partir de
uma anlise correta dos resultados obtidos nas diversas avaliaes, sejam elas municipais,
estaduais ou federais. Para isso, os resultados devem ser aceitos independentes se forem
favorveis ou no, e imprescindvel que todos os agentes envolvidos entendam os termos
empregados, compreendam como a avaliao utilizada e quais suas contribuies em
retratar a realidade da educao naquela escola ou estado. Portanto, s a partir da
interpretao e utilizao correta dos resultados, medidas efetivas sero tomadas de forma
a contribuir para uma melhoria na educao.



























8






Seo 2 Anlise do Problema

A dcada de 1960 pode ser considerada como ponto de partida de uma srie de
estudos sobre as desigualdades no acesso escola e no desempenho dos estudantes,
mostrando-se visvel no Brasil s a partir da dcada de 80, quando o Ministrio da Educao
comeou a desenvolver estudos sobre Avaliao Educacional. Podemos dizer que tais
estudos foram a pedra fundamental para criao do Sistema de Avaliao da Educao
Bsica (SAEB). Segundo Oliveira & Rocha (2007,p.2),

[...] desde a Constituio Federal de 1988, passando pelas sucessivas
Medidas Provisrias, pela LDB de 96, pelo Plano Nacional de Educao e
por vrios Decretos, constata-se um avano no desenvolvimento e
implementao de Polticas de Avaliao em Larga Escala para aferio
quantitativa e qualitativa da Educao Nacional.

Muitas vezes, ao pensarmos no SAEB, pensamos geralmente apenas nas
proficincia em Lngua Portuguesa e Matemtica, deixando de lado outras coisas que so
consideradas por eles, Gatti (2009, p.12) acredita que

[...] o SAEB compe-se de dois grandes eixos: o primeiro voltado ao acesso
ao ensino bsico no qual se verifica o atendimento demanda (taxas de
acesso e taxas de escolarizao) e a eficincia (taxas de produtividade,
taxas de transio e taxas de eficincia interna); o segundo eixo relativo
qualidade, implicando no estudo de quatro dimenses relativas: 1. Ao
produto desempenho do aluno quanto a aprendizagem de contedos e
desenvolvimento de habilidades e competncias; 2. Ao contexto nvel
socioeconmico dos alunos, hbitos de estudo, perfil e condies de
trabalho dos docentes e diretores, tipo de escola, grau de autonomia da
escola, matriz organizacional da escola; 3. Ao processo planejamento do
ensino e da escola, projeto pedaggico, utilizao do tempo escolar;
estratgias de ensino; 4. Aos insumos infra -estrutura, espao fsico e
instalaes, equipamentos, recursos e materiais didticos.

Apesar de ter passado quase trs dcadas desde o surgimento de tais pesquisas,
esse tipo de avaliao ainda visto com um olhar de desconfiana por parte dos agentes
escolares (professores, gestores, supervisores). Muitos, pra no dizer a maioria, sequer
tiveram algum tipo de contato com as matrizes de referncia, e conduzem os testes como
no dando a importncia devida. Para garantir uma confiabilidade nos resultados, a unidade
avaliadora deve ser imparcial na elaborao dos testes. Segundo Luckesi

9



[...] a avaliao dever ter o mximo possvel de rigor no seu
encaminhamento. Pois que o rigor tcnico e cientfico no exerccio da
avaliao garantiro ao professor, no caso, uminstrumento mais objetivo de
tomada de deciso. Em funo disso, sua ao poder ser mais adequada
e mais eficiente na perspectiva da transformao.(2010, p.44),

O SAEB ou SAEGO so compostos por um questionrio socioeconmico e pelos
testes cognitivos que so elaborados com base em matrizes de referncia, desenhadas a
partir de uma anlise das propostas curriculares, julgando um conjunto de habilidades
essenciais para o aluno ao trmino de cada etapa avaliada. Junto com a taxa de aprovao
escolar, os resultados do SAEB servem tambm como base de clculo para o ndice de
Desenvolvimento da Educao Bsica IDEB.
Um dos grandes fatores negativos do SAEB ser de carter amostral, ou seja,
selecionada para realizar a prova uma parcela da populao. Alm disso, h sua demora na
entrega dos resultados que dura cerca de 2 anos. Essa demora na entrega dificulta a
adoo de polticas pblicas. Logo, os estados perceberam a necessidade de criarem
avaliaes estaduais. Dentre os estados pioneiros esto: Minas Gerais, com a criao do
Sistema Mineiro de Avaliao (Simave) criado em 1991, e o Cear, com o Sistema
Permanente de Avaliao da Educao Bsica (Spaece) em 1992. Em 2011 houve a
criao do Sistema de Avaliao do Estado de Gois (Saego). Essas avaliaes, em sua
grande maioria, seguem os mesmos modelos utilizados pelo SAEB ou Prova Brasil. A
criao desses sistemas estaduais de avaliao de extrema importncia, pois as matrizes
de referncia so criadas com base no prprio currculo do estado, ou seja, voltadas sua
realidade. Outro fator positivo quanto aos resultados que chegam at as escolas em
menos de um ano aps a aplicao das avaliaes, permitindo assim uma interveno
breve de polticas pblicas.
Os resultados como proficincia em Lngua Portuguesa e Matemtica so gerados a
partir da utilizao do modelo da TRI (Teoria de Resposta ao Item) nos testes cognitivos, e
os outros resultados atravs da interpretao dos questionrios socioeconmicos. A
utilizao da TRI permite que os testes, mesmos que diferentes e aplicados em momentos
distintos, sejam comparados. Quanto aos questionrios, so respondidos por alunos, e os
professores a outro, com perguntas que visam aferir o nvel de escolaridade do professor,
tempo de carreira, salrio, em quantas escolas o professor trabalha, nmero de aulas
ministradas, etc. Tais dados so de extrema importncia para os gestores, pois traa o perfil
da docncia atuante na escola.
As avaliaes em larga escala compem hoje o principal mtodo utilizado para a
medio da qualidade da educao.
[...] atualmente o rendimento dos alunos em testes padronizados modelo
adotado em avaliaes nacionais e estaduais tem sido o principal
10



mecanismo de medida da qualidade da educao. Entretanto, apesar de
algumas excees interessantes, os sistemas de ensino encontram
grande dificuldade para utilizar os resultados das avaliaes como
instrumento de gesto.(CASSETARI, 2008, p.1)

Como dito anteriormente, esses agentes, sejam eles professores, gestores ou
supervisores, desconhecem a interpretao desses resultados. Por desconhecerem, ora
deixam o material arquivado no sendo compartilhado, ora realizam uma interpretao
equivocada dos resultados. comum ver gestores compararem os resultados obtidos nas
avaliaes com os de outras instituies, na maioria das vezes estabelecendo um ranking a
partir das notas obtidas.O professor normalmente no est interessado em descobrir quem
sabe o que foi ensinado, mas sim quem no aprendeu. (LUCKESI, 2010, p.49).
Muitos gestores, com base nos dados apresentados, realizam uma interpretao de
forma equivocada dos resultados, seja por meio das proficincias obtidas, ou pelo indicador
do IDEB. comum vermos membros da comunidade escolar se mostrarem arredios quanto
aos resultados apresentados, principalmente se os mesmos no forem satisfatrios,
justificando que esses no representam a realidade de sua escola.Em outros casos, quando
os resultados se mostram favorveis, o gestor exalta sua gesto como satisfatria, no
atribuindo mrito aos demais profissionais envolvidos. Entretanto, quando os resultados se
mostram desfavorveis, h uma cobrana dos professores por parte dos gestores sobre os
resultados obtidos, condicionando o professor como culpado pelo desempenho.
Segundo Sordi & Ludke (2009, p. 327)
A aprendizagem da avaliao institucional inclui o saber posicionar-se
diante dos dados oferecidos pela avaliao externa, usando-os para
esclarecer a realidade escolar, quer pela aceitao das evidncias ou pela
refutao das mesmas.

importante que todos os agentes educacionais se posicionem favorveis a
avaliao e assumam seu papel dentro da escola de forma efetiva.
Quanto ao indicador do IDEB, costumam-se pensar em polticas pblicas a partir de
uma interpretao equivocada da nota. Para entendermos o problema, necessrio retomar
o que o IDEB e como calculado.O IDEB um indicador de qualidade educacional que
combina informaes de desempenho em exames padronizados (Prova Brasil ou SAEB)
obtido pelos estudantes aofinal das etapas de ensino (4 e 8 sries do ensino fundamental
e 3 srie do ensino mdio) com informaes sobre rendimento escolar (aprovao). Esse
indicador calculado por meio da frmula abaixo:
N
IDEB
T

11



Observa-se que N representa a mdia das proficincias em Lngua Portuguesa e
Matemtica, padronizada para um indicador de 0 a 10, e T representa o indicador de
rendimento baseado na taxa de aprovao da etapa de ensino dos alunos.
comum ver gestores propondo polticas que almejam o aumento das proficincias
em Lngua Portuguesa e Matemtica por meio de uma cobrana maior nessas disciplinas,
visando uma melhora no IDEB. Esse tipo de poltica implementada, realmente, pode fazer
com que as proficincias aumentem, mas em contrapartida, esse endurecimento no ensino
dessas disciplinas pode repercutir em uma queda na taxa de aprovao. O pensamento
inverso tambm muito comum, que seria o aumento da taxa de aprovao. Mas o fato de
no reter os alunos pode significar que, em algum momento, o aprendizado foi
comprometido, o que ocasionaria uma queda na proficincia. Portanto, para garantir um
aumento no indicador do IDEB, necessrio se pensar em polticas pblicas que visem
sempre o aumento das proficincias em Lngua Portuguesa e Matemtica, e tambm das
taxas de aprovao escolar.
Outro problema enfrentado aps a divulgao dos resultados o fato dos gestores e
a mdia criarem um ranking com base nas notas obtidas, classificando as escolas que
possuem indicadores e proficincia maiores como melhores em relao quelas que
possuem menor proficincia e indicadores.
Em alguns casos, esse ranking com base nas notas ou indicadores ocasiona a
poltica de bonificao do professor.

Os resultados do sistema nacional de avaliao tm direcionado polticas
educacionais estaduais e municipais a gerirem seus sistemas de ensino
pautados na responsabilizao individual dos alunos, professores e das
escolas pelo seu baixo ou alto desempenho, desencadeando mecanismos
de premiao diante dos resultados obtidos. (SILVA, 2010, p. 445).

Segundo Silva (2010), tomando como base os resultados das avaliaes, comeam
a surgir por parte dos estados polticas de bonificao para escolas e professores que
alcanaram as metas previamente estipuladas, ou que obtiveram melhores resultados na
avaliao. Esse tipo de incentivo surge nas avaliaes estaduais e municipais que se
baseiam nos mesmos quesitos da Prova Brasil. Esse tipo de poltica por si s, j incentiva
uma classificao das escolas distorcendo o objetivo da avaliao que deveria ter como
propsito a criao de polticas pblicas contribuindo para a elaborao do planejamento
pedaggico nas escolas.
Logo, professores visando busca dessa bonificao, muitas vezes se perguntam,
por que no trabalhar apenas as habilidades na matriz de referncia? Afinal, apenas elas
12



sero avaliadas. Esse tipo de pensamento de querer preparar o aluno para o teste visto
com frequncia. Segundo Casassus (2010, apud SILVA, p.7)

[...] uma das maiores preocupaes das avaliaes em larga escala a
possibilidade da reduo dos currculos s reas e tpicos abrangidos pela
avaliao padronizada, pois os professores podem acabar ensinando para
o exame e fazendo com que os professores ocupem o tempo a exercitar
os alunos a escolher uma resposta entre as apresentadas

Ainda sobre o preparo dos estudantes para o teste, segundo Bonamino,

[...] evidncias nacionais e internacionais mostram que principalmente o uso
de resultados das avaliaes de para informar iniciativas de
responsabilizao forte pode envolver riscos para o currculo escolar. Um
deles a situao conhecida como ensinar para o teste, que ocorre quando
os professores concentram seus esforos preferencialmente nos tpicos
que so avaliados e desconsideram aspectos importantes do currculo,
inclusive de carter no cognitivo. (BONAMINO& SOUSA, 2012, p.383)

Esse um tipo de pensamento um tanto questionvel. O fato de preparar o
estudante para o teste no demonstra que o contedo foi dado e a habilidade consolidada.
Deve-se trabalhar em sala de aula os contedos com base no currculo ou contedo
programtico. O principal objetivo da prova o de averiguar o nvel de conhecimento dos
alunos da rede pblica de ensino atravs de competncias e habilidades prvias nas etapas
de escolarizao. O contedo dessa prova no se refere ao currculo educacional, e sim
matriz de referncia, que um documento que descreve as habilidades avaliadas em cada
etapa de escolarizao. A matriz de referncia no deve ser confundida com matriz
curricular, por tratar-se de um recorte. Ela reconhece um conjunto de habilidades essenciais
para aquela etapa de escolarizao, essas habilidades por si s, na maioria das vezes
encontram-se dentro do currculo, mas em hiptese alguma, a matriz de referncia adotada
nos testes deve substituir o currculo adotado.
Como vimos, o teste se baseia em um conjunto de itens (questes) de mltipla
escolha, mas existem contedos que no so possveis aferir em um teste de mltipla
escolha. Tomemos um exemplo: em um teste de mltipla escolha, possvel verificar se o
estudante desenvolveu a habilidade de associar pontos no plano cartesiano a suas
coordenadas, mas nesse tipo de avaliao, no conseguimos identificar se o estudante sabe
construir um plano cartesiano. Essa habilidade que envolve construo, no passvel de
se avaliar utilizando um teste de mltipla escolha. Portanto, cabe ao professor em suas
aulas, verificar tal aprendizado dessa habilidade.
Contudo, novamente percebemos que, apesar das avaliaes permanecerem por
quase 30 anos no Brasil, e sendo abordadas com uma nfase maior na ltima dcada
13



devido ao PNE, as pessoas ainda no esto familiarizadas com os conceitos e contedos
referentes s avaliaes.

Os resultados da pesquisa realizada por Joo Luiz Horta Neto (2006) sobre
o uso dos dados do Saeb 2003 pela Secretaria de Educao do Distrito
Federal para orientar o planejamento da rede de ensino, por exemplo,
ajudam a ilustrar a escassa interferncia de avaliaes de primeira gerao
no contexto da gesto educacional. A pesquisa indicou que, apesar de os
gestores da Secretaria de Educao defenderema importncia do Saeb,
eles tm pouco conhecimento e praticamente no utilizam os dados
gerados pela avaliao nos processos de gesto, principalmente devido a
limitaes para compreender os resultados produzidos. (BONAMINO&
SOUSA, apud HORTA NETO2012, p.384)

Destacam-se, assim, dois desafios a serem enfrentados hoje no campo da avaliao.
O primeiro - mais relacionado s instituies responsveis pela execuo das avaliaes e
aos gestores de rede - a necessidade urgente de se desenvolver estratgias de
divulgao, de forma a facilitar a compreenso e a apropriao dos resultados das
avaliaes pelas diferentes equipes das Secretarias de Educao e das escolas. O segundo
fazer com que aqueles que esto na ponta da linha; diretores de escolas, coordenadores
pedaggicos e professores, se apropriem dos resultados e passem a utiliz-los na
orientao das atividades de ensino. Para esses, principalmente, a avaliao precisa deixar
de ser meramente diagnstica e assumir definitivamente o papel de instrumento de gesto e
responsabilizao (BROOKE, 2006).
Portanto, imprescindvel que todos os agentes acadmicos sejam capacitados e
tambm se transformem em multiplicadores, pois s assim ser possvel a articulao de
polticas pblicas efetivas, visando a equidade e diminuindo a desigualdade no ensino. Mas
enganam-se aqueles que atribuem a culpa pelos resultados sendo eles satisfatrios ou no
apenas s escolas. Segundo Silva,

[...] no se pode atribuir apenas escola, a responsabilidade pelos
resultados. Se as instncias superiores no garantirem e assegurarem as
condies indispensveis para o exerccio de um trabalho de qualidade,
torna-se complicado exigir que as escolas alcancem os ndices estipulados.
Enquanto no forem assumidas medidas concretas que contemplem todos
os ngulos da problemtica da educao, possivelmente, iro surgindo
outras alternativas que substituam as anteriores, com novas propostas e
aes. (SILVA, 2009, p.14)

Com base em entrevistas realizadas com gestores, Horta Neto ressalta a grande
dificuldade em trabalhar com os resultados do SAEB.
Os dados apurados apontaram que, apesar da disposio dos gestores em
utilizar os resultados do Saeb como um instrumento auxiliar nos processos
de gesto, alguns fatores impedem que isto ocorra de forma eficaz. Esses
fatores esto ligados tanto s dificuldades de compreenso dos relatrios
14



oficiais at s dificuldades da equipe gestora em organizar seu
planejamento. A pesquisa apontou que essa avaliao ainda cheia de
mistrios e seus resultados precisam ser mais bem explicitados para que
possam ser efetivamente utilizados em benefcio da qualidade educacional.
Assim, a divulgao dos resultados do Saeb uma de suas etapas mais
crticas. necessrio que os relatrios apontem no somente os resultados
numricos, mas que sejam disponibilizadas informaes complementares
que ofeream uma viso mais clara sobre os problemas educacionais
apontados pela avaliao e um conjunto de solues possveis para super-
los.(HORTA NETO, 2010, E p.79-80)

Contudo, Horta Neto reafirma que h uma inteno por parte dos gestores em utilizar
os resultados oriundos do SAEB, mas para isso, necessrio que sua dificuldade em
interpretao seja superada.
Dentre os diversos significados dessas iniciativas, a literatura educacional tem
ressaltado a importncia e o papel desempenhado pela avaliao nos avanos em relao
aos aspectos metodolgicos e institucionais, no acompanhamento de polticas educacionais,
e a associao entre avaliao e polticas de promoo de equidade (FRANCO et al, 2007;
SOARES, 2005). atravs das informaes colhidas mediante os processos de avaliao
que gestores e demais agentes inseridos no processo educativo identificam prioridades e
alternativas, a fim de alcanar a eficcia das aes e como melhor aperfeioar os
investimentos no setor. Da mesma forma, indicam o que se deve esperar que os alunos
aprendam em sua trajetria escolar luz dos currculos propostos e identificam quais so os
fatores escolares intra ou extraescolares que favorecem ou limitam a aquisio das
competncias esperadas (AGUIAR, 2009).















15






Seo III Soluo do problema.

Como vimos anteriormente, problemas como classificao das escolas por meio de
ranking, substituio do currculo pela matriz de referncia e polticas pblicas que visam
apenas, ora o aumento da proficincia, ora melhoria na taxa de aprovao, so oriundos de
uma interpretao equivocada dos resultados apresentados.
Desde sua primeira edio em 1990,(passados 23 anos) para muitos agentes
educacionais o SAEB ainda continua um mistrio. Muitos nem sequer sabem o que significa
e quais os resultados proporcionados por essa avaliao. H aqueles que ainda que
conheam seu significado, apiam a avaliao, mas no conseguem interpretar seus
resultados. O grande desafio hoje fazer com que todos os profissionais em todas as
escolas saibam entender o significado das proficincias obtidas, sejam em Lngua
Portuguesa ou Matemtica, assim como a evoluo dos indicadores do IDEB, pois esse o
primeiro passo para se pensar em polticas pblicas voltadas efetivamente para a melhoria
da educao e no desempenho dos alunos.
O IDEB foi criado como parte do Plano de Desenvolvimento da Educao (PDE).
Atravs de suas notas, estados e municpios devem usar os resultados do ndice como
parmetro para orientar a melhoria do ensino em sua rede. Para isso, faz-se necessrio que
tais profissionais sejam capacitados a compreender os resultados obtidos por suas escolas.
Infelizmente, como j foi dito, essas capacitaes, quando ocorrem, no contemplam
todos os profissionais e, muito menos, todas as escolas. Esse fato pode justificar o
desconhecimento do SAEB ou da Prova Brasil nos dias de hoje por profissionais do setor
educacional.
A partir de uma interpretao correta dos resultados obtidos, tais profissionais
perceberiam que o objetivo da avaliao no estabelecer um ranking entre as escolas,
classificando-as entre piores e melhores, mas sim diagnosticar a real situao da educao
atual no Brasil. Com esse entendimento sobre os propsitos da avaliao, gestores devem
procurar se atentar em como esses resultados so passados aos professores. Cabe a
todos, gestores, supervisores, mas principalmente aos professores, a interpretao
pedaggica dos resultados. um trabalho rduo que envolver horas de dedicao aos
resultados. Mas ningum melhor que o professor, que se encontra dentro da sala de aula,
para analisar quais caractersticas pedaggicas os resultados da avaliao apresentam. Isso
se resume a identificar, por meio das proficincias obtidas, qual foi a caracterstica deixada
16



por aqueles alunos que realizaram a avaliao, analisando quais temas necessitaro de
uma ateno maior no prximo ano j pensando em intervenes necessrias. Vale lembrar
que o professor sozinho at pode estabelecer alguma mudana,mas nessas horas que o
gestor no pode ser omisso.
Os boletins pedaggicos devem ser de fcil entendimento, com linguagem clara e
objetiva, pois eles acompanharam todos os profissionais das escolas por todo o ano. Assim
como as oficinas de divulgao de resultados devem ser explicativas e os interlocutores
capazes de sanar todas as dvidas apresentadas.
Como foi afirmado, talvez o maior problema enfrentado hoje fazer com que essa
informao chegue a todos e no apenas a uma minoria. Uma soluo para sanar esse
problema de acessibilidade informao e fazer com que esse esclarecimento dos
resultados chegue a todas as escolas, seria a utilizao de materiais de divulgao com
recursos audiovisual. Poderia-se criar vdeos explicativos onde fossem ensinados sobre os
conceitos que envolvem a avaliao, apresentao e esclarecimento sobre matriz de
referncia, e que ensinassem, de forma simples, como fazer a interpretao dos resultados,
proporcionando uma explicao a qualquer pessoa, de qualquer regio.
Outra maneira, porm um pouco mais complexa, seria a utilizao da plataforma
MOODLE para ministrar tais oficinas de apropriao de resultados ou at mesmo cursos
com temas sobre educao voltados para os tcnicos das secretarias ou aos gestores.
Outra dvida comum decorrente do no entendimento dos resultados e da avaliao
a elaborao das aulas baseadas na Matriz de Referncia, bem como a adoo dos itens
ao invs das questes.
comum que professores e gestores pensem em polticas pblicas voltadas a
aqueles alunos que se mostraram nos nveis mais baixos, disponibilizando aulas de reforo
ou acompanhamento ao longo do ano. Essa interveno possivelmente faria com que os
alunos que se mostraram nos menores nveis melhorem, mas se no tivermos uma ateno
tambm queles alunos que se encontram nos nveis mais elevados, sua proficincia pode
cair, e isso no positivo.
Portanto, as intervenes devem ser feitas visando o aumento da proficincia em
todos os nveis, ou seja, intervenes devem ser feitas tanto para alunos que se encontrem
nos nveis mais baixos at aqueles que, segundo a avaliao, encontram-se melhores. Cabe
ressaltar que o ideal que todos os alunos se encontrassem nos nveis mais elevados,
visto que o teste se baseia em uma matriz de referncia composta por um conjunto de
habilidades mnimas (essenciais) ao trmino dessa etapa.
Outra interveno que poderia ser feita pelos professores, no caso da Matemtica,
seria a adoo de estratgias para tornar a aula mais agradvel, mais dinmica. Para isso
17



poderia se pensar na utilizao de recursos, sejam eles audiovisuais, materiais concretos,
mas principalmente, a adoo de simulaes criadas por meio de softwares matemticos.
Este ltimo torna a aula mais atrativa aos olhos dos alunos.
Porm, nos deparamos com alguns obstculos. O primeiro deles com relao
utilizao desses recursos pelo professor. Apesar de alguns desses recursos serem de fcil
manipulao, nos esbarramos novamente com a capacitao de tais professores para sua
utilizao. O outro fator seria a falta desse tipo de material (jogos ldicos, computadores,
datashow), ou lugar apropriado para sua utilizao, principalmente um laboratrio de
informtica. Nesse caso, seria necessria a interveno do gestor, pois se relaciona com a
infraestrutura oferecida pela escola.
Devemos reforar a ideia de que somente a partir da interpretao correta dos
resultados, polticas pblicas efetivas voltadas a melhoria na qualidade do ensino, e no
desenvolvimento cognitivo do estudante sero realizadas. incabvel que esses resultados,
ao chegarem s escolas, permaneam como uma mera nota obtida pela escola nessa
avaliao. Os gestores devem interpret-los como uma medida de qualidade que se refere a
como o ensino vem sendo ofertado em sua escola, como foi visto, alm dos resultados das
proficincias, possui tambm os resultados obtidos pelos questionrios contextuais.
importante ao gestor aliar os resultados das proficincias com os resultados dos
questionrios contextuais, no replanejamento pedaggico adotado pela escola. Esse ltimo
traz dados relativos infraestrutura, perfil dos docentes, bem como os nveis de
escolaridade dos profissionais atuantes. Isso importante para que o gestor possa pensar
em polticas pblicas, sejam elas relativas ao espao fsico, bem como orientao dos
professores.
Quanto aos professores, como perguntarem sobre os resultados da sua turma, ou
mais especfico sobre cada um de seus alunos. Esse tambm no o objetivo dessa
avaliao. Esse tipo de anlise local j realizada pelo prprio professor em suas
avaliaes dentro da sala de aula. Compete a avaliao em larga escala o objetivo de
avaliar a qualidade do ensino oferecido pelo sistema educacional brasileiro sendo adequada
para avaliar redes ou sistemas de ensino, e no alunos individualmente.
Os resultados apresentados no caso da Prova Brasil, referem-se a todos os alunos
da etapa avaliada, sejam eles de diferentes turmas A, B ou C que realizaram o teste.A
interpretao desses resultados pelos professores vem auxili-los dentro da sala de aula,
pois por meio desses, possvel constatar qual tema da Matemtica, ou mais especfico
ainda, qual contedo necessita de mais ateno em sua abordagem, ao longo do ano. Isso
permite ao professor o replanejamento de suas aulas, buscando solues como as j
citadas para atrair a ateno dos alunos e deixar as aulas mais chamativas.
18



Esse tipo de anlise dos resultados por parte dos professores importantssimo.
Tomemos como exemplo a escola mencionada no texto. Segundo os resultados do Colgio
Estadual I, e com o auxlio da Descrio dos Nveis da Escala de Desempenho de
Matemtica SAEB, a habilidade de interpretar informaes apresentadas por meio de
coordenadas cartesianas demonstrou ser desenvolvida por apenas 22% dos alunos do 9
ano do ensino fundamental que realizaram o teste. Isso corresponde a apenas14 alunos de
um total de 64. Logo, os outros 50 alunos ainda no demonstraram ter desenvolvido essa
habilidade. Essa uma habilidade que se espera que fosse consolidada nos Anos Finais do
Ensino Fundamental, pois para trabalhar Funes logo no 1 Ano do Ensino Mdio
fundamental que os alunos tenham condies de fazer inferncias no plano cartesiano.
A avaliao tambm vem como uma prestao de contas sociedade. Por meio dos
resultados, a sociedade pode acompanhar a qualidade da educao ofertada em sua
localizao e se tornar um agente ativo, exercendo a cobrana por melhorias e se fazendo
cada vez mais presentes na escola.
Contudo, partirei da premissa de que duas aes so fundamentais para o
desenvolvimento da educao, buscando a equidade, a diminuio da desigualdade e a
melhoria na qualidade. A primeira, que imprescindvel que as pessoas envolvidas, sejam
elas professores, gestores, supervisores, etc., conheam os conceitos que sustentam a
avaliao e sejam capazes de interpretar de forma correta os resultados obtidos, pois s
assim pensaro em polticas pblicas efetivas e voltadas realidade de cada escola. E a
segunda que esses resultados devem chegar a toda a comunidade escolar e toda a
equipe deve utiliz-los de forma pedaggica.









19



REFERNCIAS

BRASIL. INEP. Prova Brasil: Resultados 2009. Braslia: INEP. Disponvel em:
<http://sistemasprovabrasil2.inep.gov.br/ProvaBrasilResultados/>. Acesso em: 17 de
setembro de 2013.

BRASIL. INEP. SAEB/Prova Brasil 2011:primeiros resultados. Braslia: INEP. Disponvel
em: <http://sistemasprovabrasil2.inep.gov.br/ProvaBrasilResultados/>. Acesso em: 17 de
setembro de 2013.

BONAMINO, A. e SOUSA, S. K. Trs geraes de avaliao da educao bsica no
Brasil: interfaces com o currculo da/na escola. Educao e Pesquisa, So Paulo, v. 38,
n. 2, p. 373-388, abr./jun. 2012. Disponvel em:
http://www.scielo.br/pdf/ep/v38n2/aopep633.pdf. Acesso em: 25 set. 2013.

BROOKE, N. O futuro das polticas de responsabilizao educacional no Brasil.
Cadernos de Pesquisa, v. 36, n. 128, p. 377-401, maio/ago, 2006

CASSETTARI, N. Pagamento por Performance na Educao Bsica. In: 31 Reunio
Anual da ANPED, 2008, Caxambu. 31 Reunio Anual da ANPED, 2008. v. 1. p. 1-15.

GATTI, B. A. Avaliaes de sistemas educacionais no Brasil. Ssifo Revista de
Cincias da Educao. n.9, maio/ago. 2009. Disponvel em:
<http://sisifo.fpce.ul.pt/pdfs/Revista%209%20PT%20d1.pdf>. Acesso em: 17 de outubro de
2013.

HORTA NETO, J. L. Os desafios da utilizao dos resultados de avaliaes nacionais
para o Desenvolvimento de polticas educacionais por um governo subnacional no
Brasil. Revista Iberoamericana de Educacin, n. 53, maio/ago 2010. Disponvel em:
<http://www.rieoei.org/rie53a03.htm>. Acesso em: 13 de outubro de 2013.

LUCKESI, C. C. Avaliao da aprendizagem escolar. 21.ed. So Paulo: Cortez, 2010.
181p.


20



OLIVEIRA M. A. M; ROCHA, G. Avaliao em larga escala no Brasil nos primeiros anos
do ensino fundamental. In: XXIII Simpsio Brasileiro, V Congresso Luso-Brasileiro, I
Colquio Ibero-Americano de Poltica e Administrao da Educao, 2007, Porto Alegre/Rio
Grande do Sul. Por uma escola de qualidade para todos, 2009.

ORTIGO, M.I.R. e AGUIAR, G. Repetncia escolar nos anos iniciais do Ensino
Fundamental: evidncias a partir dos dados do Prova Brasil . 2009 (mimeo).
SILVA, I.F. O Sistema Nacional de Avaliao: Caractersticas, dispositivos legais e
resultados. Estudos em Avaliao Educacional, So Paulo, v.21, n.47, p.427-448, set/dez
2010.

SILVA, M. J. A. A. Demanda por Resultados no Contexto da Regulao das Polticas
Pblicas. In: XXIV Simpsio Brasileiro, III Congresso Interamericano de Poltica e
Administrao da Educao, 2009, Vitria/ Esprito Santo. Direitos Humanos e Cidadania:
desafios para as polticas pblicas e gesto democrtica da educao, 2009.

SORDI, M.R.L; LUDKE, M. Da avaliao da aprendizagem avaliao institucional:
aprendizagens necessrias. Avaliao, Campinas; Sorocaba, SP, v. 14, n. 2, p. 313-336,
jul. 2009.











21















ANEXOS










22



Anexo I Boletim pedaggico dos resultados da Prova Brasil - 2009

23





24