Anlise do processo de exame de grau na ps-

graduao stricto sensu

Silvana Pezzi
Instituto de Ensino Superior Santo Antonio
Andrea Valria Steil
Universidade Federal Santa Catarina

Resumo

O artigo tem por objetivo contribuir para o aprofundamento das

discusses acerca da qualidade da ps-graduao stricto sensu no
mbito nacional, a partir de um de seus elementos constituintes: o
exame de grau. O exame de grau discutido de forma terica, por
meio da anlise sistematizada de pesquisas nacionais e internacio-
nais relacionadas com o tema. Primeiramente, so discutidos os
propsitos de mestrados e doutorados, analisados os objetivos dos
exames de grau, investigados os procedimentos e os critrios
adotados na avaliao dos exames de grau, apontando seus pon-
tos de vulnerabilidade. A seguir, sistematizam-se e analisam-se as
variveis relacionadas subjetividade dos elementos decisrios
de cada examinador e as influncias externas s quais a banca
est envolta. Em sua concluso, ressalta-se o alto nvel de
heterogeneidade associado ao conhecimento e percepo dos
padres esperados para a formao de um mestre e um doutor,
que influencia sistemicamente no processo de exame de grau. Por
fim, os temas sugeridos para a continuao da pesquisa visam
buscar maior consistncia nos procedimentos de avaliao dos
exames de grau e uma avaliao mais equitativa do ps-graduan-
do, contribuindo para a qualidade da ps-graduao stricto sensu.

Palavras-chave

Exame de grau Mestrado Doutorado Ps-graduao Qualidade.

Correspondncia:
Andrea Valria Steil
Rua Ayrton Roberto de Oliveira, 32,
6 andar Itacorubi
88034-050 Florianpolis SC
E-mail: andrea@stela.org.br.

Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009 33

Analysis of the process of viva voce in graduate
programs of degree by research

Silvana Pezzi
Instituto de Ensino Superior Santo Antonio
Andrea Valria Steil
Universidade Federal Santa Catarina

Abstract

The article aims at contributing to further the discussion about

the quality of graduate programs of degree by research in this
country, taking into account one of its constitutive elements: the
viva voce. The viva is discussed in a theoretical manner through
the systematized analysis of national and international studies
related to the theme. Firstly, the article discusses the purposes
of master and doctorate programs, the objectives of the viva, its
procedures and criteria, and then it points out its vulnerable
aspects. The variables related to the subjectivity of the decision
elements of each examiner are then analyzed, as well as the
external influences surrounding the work of the examiners. In its
conclusion the article indicates the high degree of heterogeneity
associated to the knowledge and perception of the standards
expected for the formation of a master or doctor, which influences
systemically the process of the viva. Lastly, the themes suggested
for the continuity of this line of work aim at improving the
consistency of the viva procedures, and at a more equitable
assessment of the candidate, thereby contributing to improve the
quality of graduate programs of degree by research.

Keywords

Viva voce Master program Doctorate program Graduate

programs Quality.

Contact:
Andrea Valria Steil
Rua Ayrton Roberto de Oliveira, 32,
6 andar Itacorubi
88034-050 Florianpolis SC
E-mail: andrea@stela.org.br.

34 Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009

 Os cursos de ps-graduao stricto sensu
(mestrado e doutorado) tm como principal
objetivo a formao de pesquisadores em pes-
quisa cientfica e treinamento avanado (Brasil,
1965). Sua realizao compreende a aprovao
em um conjunto de disciplinas e culmina com a
elaborao e a defesa da monografia de conclu-
so, a dissertao e a tese, respectivamente.
O exame de grau o processo que ava-
lia os graus de mestrado e doutorado e se con-
figura no julgamento final dos anos de esforo
investidos pelo aluno em conduzir e registrar a
pesquisa desenvolvida. O exame de grau compre-
ende um conjunto de aes composto por dois
momentos: a) a leitura prvia do trabalho escri-
to; e b) o exame oral ou a defesa pblica. Ape-
sar de se constituir em dois momentos distintos,
no exame oral que se concretiza a avaliao de
grau, momento no qual os examinadores ouvem
os candidatos, realizam sua arguio e expres-
sam as suas consideraes acerca do trabalho
escrito e de sua apresentao.
A prtica do exame oral remanescente
da disputa pblica formal que ocorria na Idade
Mdia durante a apresentao de uma tese. Sua
prtica institucionalizava o mtodo filosfico da
poca, no qual o candidato deveria defender
uma tese contra as opinies contrrias ou obje-
es de seus examinadores (anttese) (Salomon,
2001, p. 267). A partir dessa defesa, a audin-
cia votava se premiaria ou no o novo filsofo
ou telogo, o doutor, admitindo-o como um
membro de sua faculdade (Phillips; Pugh, 2000;
Salomon, 2001). Os exames orais hoje, na maio-
ria dos pases, incluindo o Brasil, constituem-se de
discusses geradas a partir de perguntas e comen-
trios de dois ou mais examinadores, dependendo
da instituio. Nesse processo, os examinadores
balizam a sua arguio e os seus comentrios
acerca do trabalho sob avaliao a partir de sua
viso a respeito dos propsitos dos cursos de
mestrado e de doutorado e do grau de exigncia
que atribuem s dissertaes e s teses.
Os propsitos do doutorado e mestrado
tm sido tema de discusses de governos, por
intermdio de rgos reguladores e de institui-
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
es acadmicas e de financiamento, e de in-
dstrias e pesquisadores, principalmente em
mbito internacional (Denicolo, 2003; Velho,
2003; Lovat et al., 2002; Mullins; Kiley, 2002;
Severino, 2002; Latona; Browne; 2001; Velloso;
Velho, 2001; Wright; Cochrane, 2000; Pole,
2000; Winter et al ., 2000; Johnston, 1999;
Liljegren, 1998; Gazola, 1996; Clark, 1993).
Consensualmente, esses estudos relatam a ex-
panso da ps-graduao e a preocupao com
o aumento de sua demanda, associada garan-
tia de manuteno da qualidade dos programas
e dos alunos formados.
Apesar da crescente preocupao com a
qualidade da ps-graduao, a falta de um senti-
do unvoco para o conceito de qualidade reflete
um tema cuja compreenso, envolta em subjetivi-
dades, ainda incipiente. Como consequncia,
observa-se usualmente nos exames de grau uma
no indicao clara de critrios a serem utilizados
na avaliao. Quando existem, esto sujeitos a
interpretaes acerca de seu significado, o que
tende a resultar em um quadro de avaliao hete-
rogneo e desordenado (Phillips; Pugh, 2000;
Pole, 2000; Madsen, 1992; Powell; Green, 2003;
Tinkler; Jackson, 2001; Johnston, 1997; Denicolo,
2003; Powell; McCauley, 2002; 2003; Holbrook et
al., 2002; Lovat et al., 2001).
Em busca da garantia da qualidade, r-
gos certificadores e financiadores tm procu-
rado estabelecer procedimentos normativos
relativos avaliao. No Brasil, de competn-
cia da Coordenao de Aperfeioamento de
Pessoal de Nvel Superior CAPES a avalia-
o de programas de mestrado e doutorado em
todas as reas do conhecimento (Art. 18, De-
creto 3.860/01, Brasil, 2004). Os objetivos do
Sistema de Avaliao da Ps-Graduao da
CAPES envolvem: a) o estabelecimento do pa-
dro de qualidade para o mestrado e o douto-
rado e a identificao dos cursos que atendam
a esse padro; e b) a contribuio para o apri-
moramento de cada programa de ps-gradua-
o por meio da realizao de um parecer acer-
ca dos pontos fracos e fortes do projeto do
programa e de seu desempenho. Essa avaliao
35
 realizada a cada trs anos pelas comisses de
reas do conhecimento da CAPES, com acom-
panhamento anual, e abrange todos os progra-
mas e cursos que integram o Sistema Nacional
de Ps-Graduao SNPG (CAPES, 2008).
Para a realizao da avaliao, todas as
comisses de reas utilizam uma mesma ficha,
elaborada pela CAPES, com a especificao dos
critrios de avaliao. Esse processo busca a
garantia de uma base de uniformidade e de
padronizao do processo de avaliao, o que
pressupe a observncia, por todas as reas,
dos pontos bsicos para esse fim definidos pelo
CTC [Conselho Tcnico Cientfico] (CAPES,
2008). Os quesitos de avaliao constantes da
ficha atual (apresentada em 2006) so: Propos-
ta do Programa; Corpo Docente; Corpo Discen-
te, Teses e Dissertaes; Produo Intelectual;
e Insero Social. O primeiro item avaliado
com os atributos muito bom, bom, regular, fra-
co ou deficiente. Os demais quesitos possuem
um peso inicial proposto pelo CTC de 30% para
cada um deles, podendo cada rea alterar os
pesos individuais destes dentro da faixa de
25% a 35%, desde que a soma deles seja 90%.
Apenas o quesito Insero Social tem seu peso
definido pelo CTC como 10%, o qual no pode
ser alterado pelas reas. Cada rea pode, tam-
bm, detalhar os indicadores relacionados a
cada item e, ainda, incluir em sua proposta um
novo item, caso haja a necessidade de especi-
ficar algum aspecto de seu desempenho. Por
fim, cada rea pode indicar o peso a ser atri-
budo aos itens de cada quesito e, desde que
devidamente justificado, sugerir um novo item
ou, ainda, que algum item proposto pela CAPES
seja zerado (CAPES, 2008).
O SNPG juntamente com as diretrizes e
os procedimentos que a CAPES vem imprimindo
ao processo de avaliao so esforos importan-
tes na consolidao da ps-graduao brasilei-
ra no cenrio internacional e em seu processo
de melhoramento contnuo. Entretanto, ainda
cabe aos programas de ps-graduao e aos
seus examinadores de teses e dissertaes a
interpretao dos itens dos quesitos de avaliao
36 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
constantes nas fichas de avaliao. A dificulda-
de em se apresentar procedimentos normativos
unvocos pode ser considerada um reflexo da
impossibilidade de se definir de forma burocr-
tica o que se constitui um doutorado ou
mestrado, uma tese ou uma dissertao (Moura
Castro, 2002; Phillips; Pugh, 2000; Madsen,
1992). Velloso e Velho (2001) observaram, a
partir de sua pesquisa com coordenadores de
mestrado no Brasil, a dificuldade de se estabe-
lecer o que deve ser exigido das dissertaes
em funo das diferentes interpretaes dos
propsitos de tais cursos. Seguindo uma ten-
dncia internacional, a comunidade acadmica
nacional questiona a exigncia de dissertao
como trabalho de concluso para o mestrado.
Alternativas tm sido sugeridas e utilizadas,
porm sendo recente a discusso, o consenso
ainda no foi alcanado.
O delineamento de uma avaliao de grau
responsvel, transparente, equiparvel e que
reconhea a diversidade do processo de forma-
o dos graus de mestrado e doutorado indele-
velmente precisar se confrontar com questes
ideolgicas, radicadas nas interpretaes dos
conceitos polissmicos atribudos ps-gradu-
ao stricto sensu. Entre estas est a questo
referente ao que e ao que deve ser avaliado:
o processo ou o produto; a tese ou a disserta-
o, unicamente; ou o candidato. Embora teses
e dissertaes sejam consideradas prioritrias
como fonte de evidncia para a qualidade
(Denicolo, 2003; Mullins; Kiley, 2002; Velloso;
Velho, 2001), questiona-se que outras evidncias
poderiam agregar valor avaliao e quais se-
riam os critrios realmente utilizados pelos exa-
minadores. A despeito da relevncia dessas
questes e mesmo com as investigaes mais re-
centes, o exame de grau tem sido negligencia-
do como objeto de pesquisa (Johnston, 1997;
Holbrook et al ., 2002; Mullins; Kiley, 2002;
Powell; Green, 2003; Denicolo, 2003; Wallace,
2003; Trafford, 2003; Joyner, 2003; Powell;
McCauley, 2000; 2003; Morley, 2003).
A partir desse quadro de referncias, este
artigo tem por objetivo geral contribuir para o
aprofundamento das discusses referentes
qualidade da ps-graduao stricto sensu no
mbito nacional, a partir da anlise sistematiza-
da de um de seus elementos constituintes: o
exame de grau. Para o alcance desse propsito,
o artigo procura: a) resgatar e sistematizar os
principais estudos realizados na rea; b) discu-
tir os propsitos de mestrados e doutorados; c)
analisar os objetivos dos exames de grau; e, por
fim, d) investigar os procedimentos e os critri-
os adotados na avaliao dos exames de grau e
apontar os seus pontos de vulnerabilidade.
O artigo est organizado em cinco sees.
Os propsitos da ps-graduao stricto sensu
so discutidos na segunda seo. A seguir, so
apresentadas as principais pesquisas atuais sobre
o processo de avaliao de mestrados e de dou-
torados. Nas subsees seguintes, discutem-se: a)
o que avaliado no exame desses graus, desta-
cando o dilema existente entre se avaliar o pro-
cesso e/ou o produto dos cursos de mestrado e
doutorado; b) a relevncia e a finalidade do exa-
me oral ou da defesa pblica; c) a existncia ou
no de consenso nas avaliaes expressas pelos
examinadores para um mesmo trabalho; d) as ca-
ractersticas e os critrios que os examinadores
buscam ao avaliar; e) como os examinadores
realizam a avaliao; e f) o procedimento e a
influncia da composio da banca na avaliao.
A seo quatro analisa conjuntamente esses ele-
mentos e apresenta a concluso do artigo. Por fim,
a seo cinco apresenta as referncias bibliogr-
ficas utilizadas.
A discusso desenvolvida neste artigo
no tem o propsito de se constituir em uma
anlise final da questo, uma vez que esse
debate multifacetado e envolto em variveis
no abordadas aqui. Pelo contrrio, tem-se a
cincia de que o artigo levanta mais questes
do que as responde, porm se parte do pressu-
posto de que teorizar sobre os aspectos envol-
vidos no processo de avaliao do exame de
grau ajuda a aumentar a conscincia acerca
dos critrios com os quais pesquisadores e
examinadores podem medir, criticar e melhorar
as suas prprias prticas.
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
Os propsitos da ps-
graduao
A questo dos propsitos da ps-gradu-
ao stricto sensu tem se configurado em tema
de pesquisa, especialmente na literatura inter-
nacional. Para alm da academia, agncias
governamentais, indstrias e instituies sem
fins lucrativos tambm tm debatido a questo,
na medida em que o conhecimento tem sido
compreendido cada vez mais como capital e o
processo de se fazer pesquisa no tem se res-
tringido mais academia (Clark, 1993; Severino,
2000). Alm desse aspecto, muitas pesquisas
tm demonstrado que a academia no se con-
figura mais no destino profissional exclusivo de
mestres e de doutores, que tm atuado tambm
na iniciativa privada ou em servios de governo.
Essa nova configurao tem compelido o mer-
cado de trabalho a pressionar a academia no
sentido de esta repensar seu papel como forma-
dora de pesquisadores e desenvolvedora de
conhecimento (Sampaio; Velloso, 2002). nes-
se contexto que tomam vulto os debates acer-
ca dos propsitos dos mestrados e doutorados
(Pole, 2000).
No Brasil, os propsitos da ps-graduao
stricto sensu podem ser sumarizados a partir de
duas vises opostas. A primeira considera a exis-
tncia da ps-graduao unicamente atrelada
produo de conhecimento, mediante a conduo
de pesquisa articulada formao de novos pes-
quisadores. Outra corrente alerta para a rigidez dos
modelos e paradigmas da ps-graduao brasilei-
ra, na qual se evidencia uma no clareza quanto
aos objetivos e propsitos para cada um dos seus
nveis de formao. Os que suportam essa corrente
argumentam acerca de um superdimensionamento
do mestrado, exigido por alguns programas, no
qual consideram a existncia de um excessivo
nmero de crditos a serem cumpridos, muitas
disciplinas obrigatrias e exames de qualificao
muito abrangentes (Velho, 2003; Velloso; Velho,
2001; Gazolla, 1996).
Internacionalmente, apesar das tendn-
cias para a busca de uma maior confluncia da
37
ps-graduao com o mercado de trabalho,
observa-se tambm essa dicotomia de perspec-
tivas. Com relao a esse aspecto, Liljegren
(1998) destaca que alguns setores da socieda-
de, em especial da indstria, tm questionado
a utilidade dos programas atuais de doutorado
para propsitos no acadmicos e propem
doutorados profissionais como um grau distinto
dos doutorados de pesquisa. No entanto, a
autora ressalta que h um temor de que formas
alternativas para o doutorado podem ser um
risco sua qualidade, principalmente se forem
feitas muitas modificaes nos seus propsitos.
Nacional ou internacionalmente, pode-se
concluir que essas duas correntes revelam a neces-
sidade de estudos mais detidos que busquem,
luz da multiplicidade de mudanas e desenvolvi-
mentos que esto ocorrendo atualmente na ps-
graduao, clarificar as ambiguidades e aprofundar
o grau de entendimento dos propsitos da ps-
graduao stricto sensu. Esses estudos teriam o
potencial para aumentar a transparncia em rela-
o ao processo de formao, s qualificaes e
habilidades esperadas e relevncia do conheci-
mento produzido (Denicolo, 2003; Warde, 2002;
Pole, 2000).
As pesquisas atuais sobre o
processo de avaliao
escasso o nmero de pesquisas sobre
o processo de avaliao de teses e dissertaes.
Dentre os existentes, destacam-se alguns estu-
dos realizados na Austrlia, Nova Zelndia e
Gr-Bretanha. Esses estudos investigaram como
os examinadores avaliam o pensamento crti-
co, expresso nas teses, por meio da anlise do
estilo de escrita dos candidatos (Simpkins,
1987); dos procedimentos adotados pelos exa-
minadores ao realizar seu trabalho de avaliao
(Nelson, 1991; Mullins; Kiley, 2002); do proces-
so de avaliao de dissertaes (Hansford;
Maxwell, 1993); dos procedimentos de escolha
de examinadores (Parry; Hayden, 1994; Tinkler;
Jackson, 2000; Powell; McCauley, 2002; 2003);
dos relatrios redigidos por examinadores; dos
38 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
conflitos e das posies adotados pelos exami-
nadores ao avaliar as teses (Holbrook et al .,
2002; Lovat et al ., 2001; Powell; McCauley,
2002); das eventuais diferenas no estilo e
contedo expressos nos comentrios dos exa-
minadores de diferentes reas de conhecimen-
to (Lovat et al., 2001); da natureza e do prop-
sito do exame oral e da participao ou no dos
orientadores nesse exame (Powell; McCauley,
2002); da necessidade de treinamento e qualifi-
cao para os examinadores (Powell; McCauley,
2002; 2003); da tenso existente entre avaliar o
processo de treinamento em pesquisa e o produto
final a tese ou a dissertao (Powell; McCauley,
2002; 2003; Denicolo, 2003); e dos critrios
usados para distinguir teses aprovveis de teses
excepcionais (Denicolo, 2003).
Observa-se que vrios aspectos do pro-
cesso de avaliao do exame de grau tm sido
investigados em profundidade. Dentro do esco-
po deste artigo, alguns desses tpicos sero
abordados mais detalhadamente na sequncia.
O dilema entre avaliar o
processo ou o produto
Na medida em que a academia no
mais o destino exclusivo de doutores e mestres,
emergem questionamentos acerca do que deve
ser avaliado como resultado desses cursos.
Com relao a esse aspecto, a Ficha de
Avaliao atual de programas da CAPES, no que-
sito Corpo Discente, Teses e Dissertaes, especi-
fica dois itens relacionados explicitamente qua-
lidade das teses e dissertaes: a) Qualidade das
Teses e Dissertaes: Teses e Dissertaes Vincu-
ladas a Publicaes; e b) Qualidade das Teses e
Dissertaes. Outros Indicadores.
Uma anlise nos documentos da avalia-
o trienal 2007 (trinio 2004-2006) das re-
as de conhecimento revela que o item A tem
sido avaliado pelas diferentes reas de conhe-
cimento pela proporo de teses e dissertaes
que geram publicaes referenciadas no siste-
ma Qualis em um perodo especfico aps a
defesa. J para a avaliao do item B, tem sido
utilizado um conjunto maior de indicadores,
com especificidades nas reas de conhecimento.
Exemplos de outros indicadores utilizados por
diferentes reas do conhecimento incluem:
participao de examinadores externos ao pro-
grama; titulao dos examinadores; atuao
dos examinadores como docentes em progra-
mas de ps-graduao credenciados pela CAPES
ou em Institutos de Pesquisa da rea da tese ou
dissertao; alinhamento das teses e disserta-
es com as linhas de pesquisa do programa;
prmios recebidos pelas teses ou dissertaes
de entidades de fomento, de associaes cien-
tficas ou outras entidades.
A partir da anlise dos itens relacionados
qualidade das teses e dissertaes da Ficha de
Avaliao da CAPES e como estes tem sido
operacionalizados pelas reas do conhecimen-
to, no chega a ser surpresa o fato de a prti-
ca usual dos programas de ps-graduao
enfatizar quase que unicamente a avaliao da
tese ou da dissertao. Esse procedimento,
embora legitimado pelo sistema de avaliao
vigente atualmente no Brasil, pode gerar uma
tenso referente ao objetivo ltimo de uma
avaliao de grau: avaliar o processo de forma-
o do pesquisador ou avaliar exclusivamente
o produto, o trabalho de concluso.
Para uma avaliao orientada ao produto,
seria suficiente que a tese ou a dissertao
revelasse, em sua forma tipicamente tradicional
e sequencial, o modelo metodolgico: origem
do problema, reviso de literatura, refinamen-
to das perguntas, metodologia do estudo,
implementao do estudo, resultados, anlise,
implicaes e concluses (Denicolo, 2003). J
para uma avaliao focada no desenvolvimen-
to do pesquisador, questiona-se que outras
dimenses da formao poderiam ser conside-
radas. As discusses abordadas na literatura,
embora destaquem a importncia de outras
dimenses, enfatizam ainda a tese (ou a disser-
tao) como elemento-chave no qual estas
podem ser averiguadas. Para Denicolo (2003),
por exemplo, o desenvolvimento do conheci-
mento do aprendiz e como as dificuldades
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
metodolgicas foram tratadas deveriam estar
refletidos na tese. De forma complementar,
Haguette (2002) sugere que a competncia
adquirida como pesquisador deve estar revela-
da na tese ou dissertao.
H divergncias entre os examinadores
acerca da utilizao de dimenses adicionais na
avaliao de grau, tais como a qualidade do trei-
namento e o ambiente onde a pesquisa foi de-
senvolvida, segundo a pesquisa realizada por
Powell e McCauley (2002). No obstante, a mai-
oria dos examinadores prioriza a tese como ele-
mento de avaliao, ponderando que os referidos
itens no devem ser considerados na avaliao.
Apesar desse aspecto, esses mesmos examinado-
res exprimem outros atributos como competn-
cia do candidato, padres de aprovao e jul-
gamento do candidato como dimenses a serem
consideradas, mas no explicitam claramente a
tese como reveladora dessas dimenses. Assim,
questiona-se onde e de que forma elas poderiam
ser analisadas. Uma hiptese considerar que os
examinadores utilizem o exame oral para esse fim.
No entanto, a prioridade mxima que tem sido
atribuda ao trabalho escrito tem tambm susci-
tado dvidas quanto necessidade e importn-
cia do exame oral.
O exame oral - a defesa pblica
No Brasil, o exame oral se equaciona com
a defesa pblica de um mestrado ou doutorado.
Embora cada programa de ps-graduao tenha
sua prpria regra, geralmente para o mestrado
fazem parte da banca examinadora pelo menos
dois doutores e, para o doutorado, alm de um
moderador, a compe mais trs doutores, dois
deles externos ao programa. Via de regra, o
orientador participa da defesa. Aps a apresen-
tao do candidato e da arguio da banca
examinadora, abre-se o questionamento ao
pblico presente. Cada pas possui sua prpria
poltica para a definio do exame oral. H pa-
ses onde o exame oral no pblico e cuja
participao do orientador nem sempre per-
mitida ou limitada.
39
 A anlise da literatura referente ao exa-
me de grau revela a coexistncia de trs posi-
cionamentos acerca de seu objetivo maior. O
primeiro questiona se o exame oral deve ser
tomado em um sentido mais amplo, no qual
seja possvel verificar se o candidato adquiriu as
habilidades pressupostas a um pesquisador e se
compreendeu a metodologia como resultado de
seu treinamento. O segundo aponta para a hi-
ptese de que a funo do exame oral fun-
damentalmente averiguar a autenticidade da
autoria. Por fim, o terceiro identifica o exame
oral como um ritual de passagem para o futu-
ro colega da academia (Madsen, 1992; Powell;
McCauley, 2002; Phillips; Pugh, 2000).
Diante dessas perspectivas, Mullins e Kiley
(2002) aprofundaram a investigao sobre im-
portncia do exame oral para o processo de ava-
liao de grau. Os pesquisadores constataram
dois pontos de vista distintos expressos pelos
examinadores: a) a nica evidncia que deve ser
usada para avaliao a tese e, portanto, so-
mente por meio dela que o aluno deve ser
avaliado; e b) a formao do aluno como pes-
quisador em potencial deve ser tambm consi-
derada para que ambiguidades e incertezas ave-
riguadas na leitura da tese possam ser discutidas
com o candidato. De acordo com Phillips e Pugh
(2000), decidir que somente a tese deva justificar
a aprovao do ttulo, antes que ela tenha sido
defendida em uma defesa oral, inapropriado.
Outra argumentao em favor do exame oral
compreende a possibilidade de os examinadores
conclurem que a tese adequada, mas a defesa
no foi (Phillips; Pugh, 2000). Esse argumento re-
ferenda a importncia atribuda formao do
pesquisador, na medida em que, alm de relatar
a pesquisa que conduziu, o candidato deve ser
capaz de defender seus posicionamentos diante
dos questionamentos da comunidade cientfica,
representada pelos examinadores.
Apesar da existncia de uma dicotomia
relativa ao objetivo do exame de grau, h con-
senso referente ao exame como um momento
potencial para aprendizagem de todos os en-
volvidos no processo de avaliao, mas isso
40 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
raramente ocorre. A defesa tem se tornado mais
um momento para se polir o trabalho escrito,
aperfeioando-se as suas qualidades literrias e
clarificando-se a contribuio do conhecimento
expressa no texto (Powell; McCauley, 2002). A
anlise realizada nesta seo remete inferncia
de que a defesa oral no tem alcanado todo o
seu potencial como processo de avaliao, prin-
cipalmente no que se refere aos aspectos rela-
cionados formao do pesquisador.
Homogeneidade no julgamento
final
No comum nas universidades brasilei-
ras a existncia de documentos que indiquem
quais padres devam ser seguidos na avaliao
pelos examinadores das bancas de defesa. Tam-
bm no h, na maioria das instituies, a exi-
gncia de elaborao por escrito dessas avalia-
es. A exigncia formal a de que a avaliao
geral da banca seja registrada na ata da defesa.
Esse registro especifica se o aluno foi ou no
aprovado, se foi aprovado com ou sem restri-
es ou, ainda, se o trabalho foi aprovado com
louvor (h variaes entre as instituies).
Com relao a esse aspecto, Johnston
(1997) analisou os procedimentos adotados pe-
las universidades europeias e australianas. Nestas,
ao final da avaliao de grau, cada examinador
realiza uma das seguintes recomendaes: a) tese
aprovada; b) tese aprovada, desde que as corre-
es e/ou complementaes especificadas no re-
latrio satisfaam universidade; c) ressubmisso
da tese para reavaliao depois da reviso ter
sido feita; ou d) tese reprovada. A pesquisa reve-
lou variaes bastante significativas nos resulta-
dos finais da avaliao de um mesmo trabalho,
desde aquelas nas quais dois examinadores reco-
mendavam aprovao direta e um recomendava
reprovao, at aquelas com duas recomendaes
para ressubmisso e uma recomendao para
aprovao direta. Mesmo no sendo possvel ave-
riguar os motivos reais de tais inconsistncias,
Johnston (1997) aponta como hiptese plausvel
a inadequao da escolha dos examinadores: exa-
minadores sem conhecimento adequado do m-
todo, ferramental ou assunto; e examinadores que
no so simpticos abordagem adotada pelo
estudo (incompatibilidade ideolgica).
Alm da discrepncia observada no veredic-
to final das recomendaes, Johnston (1997) ain-
da identificou inconsistncias referentes interpre-
tao atribuda pelos examinadores a cada uma das
quatro recomendaes propostas para decidir o
julgamento final da tese. As referidas inconsistn-
cias podem ser observadas quando os examinado-
res propem uma recomendao para aprovao
direta, mas sugerem algumas consideraes, o
que poderia ser interpretado como a segunda op-
o de recomendao: aprovada, com algumas
restries, mas sem a necessidade de submeter o
trabalho a novo julgamento. Tal confuso se repete
entre as duas alternativas que sugerem correes,
porm no h informao que auxilie os examina-
dores a determinar em que grau a extenso das
correes muda de uma recomendao para outra.
Portanto, decidir o quanto pouco ou muito,
profunda ou superficial, para definir a extenso da
correo, vai depender exclusivamente da interpre-
tao de cada examinador.
Essa seo demonstrou que, alm de
uma possvel inadequao na escolha dos exa-
minadores, que pode resultar em avaliaes
super ou subestimadas, a heterogeneidade no
julgamento final pode estar relacionada di-
versidade de interpretaes dos critrios for-
mais de avaliao por parte dos examinadores.
Caractersticas e critrios que
os examinadores buscam ao
avaliar
As pesquisas relatadas nesta seo refe-
rem-se s caractersticas e aos critrios utiliza-
dos especificamente para avaliao de teses. A
despeito dessa restrio, considera-se que es-
tas se configuram em um importante indicador
acerca do comportamento dos examinadores
tambm em sua tarefa de avaliar dissertaes.
De modo geral, ao realizarem suas avalia-
es, os examinadores analisam a tese como um
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
todo. Em funo desse aspecto, tendem a apre-
sentar dificuldades para pontuar claramente e de
forma objetiva os critrios que utilizam. De acor-
do com Johnston (1997), os registros da avalia-
o presentes nos relatrios elaborados pelos
examinadores podem ser aglutinados em dois
grupos. No primeiro, esto os atributos relaciona-
dos com o desafio intelectual, incluindo o julga-
mento da significncia do estudo, a contribuio
rea, o rigor do projeto da pesquisa, a origina-
lidade e a formao adquirida. Dizem respeito aos
critrios formais associados comumente s teses
e s dissertaes, tanto na literatura acadmica
quanto nos manuais de metodologia cientfica.
No segundo, evidenciam-se os registros acerca do
carter mais redacional da tese, compreendido
como a editorao, a gramtica, o estilo de escrita,
a clareza, lgica de construo do texto e a ca-
pacidade de sintetizar. Esses elementos, embora
no estejam diretamente relacionados ao objeti-
vo central de uma tese, configuram-se no grupo
predominante dos registros dos examinadores.
As pesquisas de Hansford e Maxwell
(1993) e Lovat et al. (2001) confirmam a predo-
minncia dos registros referentes ao carter
redacional da tese. Em torno da metade dos
relatrios investigados por Lovat et al. (2001)
apresentavam registros relacionados a erros or-
togrficos e tipogrficos. Conquanto as limita-
es na redao no sejam suficientes para re-
provar uma tese, as pesquisas revelam que um
trabalho deficitrio em sua apresentao, com
erros tipogrficos, ortogrficos, gramaticais ou de
referncias, tende a aborrecer e distrair o exami-
nador. Quando isso ocorre, alguns examinadores
tendem a perder a confiana no candidato e a
considerar a existncia de problemas mais pro-
fundos de inadequao e de conceitualizao no
trabalho (Johnston, 1997). Com relao a esse
aspecto, pesquisadores identificaram uma forte
correlao entre as teses cujas avaliaes rece-
beram recomendao de tese aprovada e a
ausncia de erros de carter redacional. Apesar
desse aspecto, no foram raras as situaes em
que, para uma mesma tese, alguns examinado-
res apontassem uma lista de tais erros, ao mes-
41
mo tempo em que outros praticamente no os
apontavam (Johnston, 1997; Lovat et al., 2001).
O fato de os examinadores focarem suas consi-
deraes prioritariamente nos aspectos
redacionais sugere que esses se comportam, a
princpio, como qualquer leitor, com um senso
de expectativa, curiosidade e desejo de ser es-
timulado. A atitude de especialista do examina-
dor tende a ser assumida apenas em um segun-
do momento (Johnston, 1997).
O segundo grupo de elementos de ava-
liao registrados pelos examinadores diz res-
peito aos aspectos relacionados com o desafio
intelectual da formao de doutor. Hansford e
Maxwell (1993) identificaram e quantificaram
esses registros, agrupando-os em reviso de
literatura, concluses, estrutura terica e mto-
do empregado. Por sua vez, averiguaram que
raramente ha comentrios acerca da amostra,
da pergunta de pesquisa, da coleta de dados e
da concepo da pesquisa (Hansford; Maxwell;
1993; Lovat et al., 2001).
Considerando-se que os examinadores
no percam o interesse inicial da leitura da tese
em funo de erros redacionais muito eviden-
tes, eles passam a verificar outros aspectos de
avaliao da tese. Seguindo suas prprias
idiossincrasias, buscam e respondem, peculiar-
mente, ao que consideram ser os pontos fortes
e fracos em uma tese. H evidncias que indi-
cam que os examinadores tendem a aprovar
teses que se ajustam melhor s suas ideologi-
as, mantendo, assim, o processo de avaliao
de um modo conservador (Johnston, 1997;
Powell; McCauley, 2002). No entanto, mesmo
ao assumirem posies conservadoras, os exa-
minadores relutam em reprovar as teses. As
duas principais razes so que a tese vista
como o resultado de trs a quatros anos de
esforo e dedicao e porque um doutorado
um processo caro em termos de recursos finan-
ceiros e em consumo de tempo (Johnston,
1997; Mullins; Kiley, 2002; Lovat et al., 2001).
Apesar da existncia dos aspectos relaci-
onados ao desafio intelectual e do carter
redacional da tese, operacionalizar quais critrios
42 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
especficos uma tese deva possuir para que seja
aprovada sem maiores restries considerado
um dos pontos mais complexos do processo de
avaliao (Denicolo; 2003). Na busca por uma
sistematizao das caractersticas apontadas
pelos examinadores, Mullins e Kiley (2002) iden-
tificaram quatro grupos: 1) scholarship, como
originalidade, coerncia, autonomia e indepen-
dncia; 2) construo de um argumento bem
estruturado; 3) possibilidade de publicao
gerar dois a quatro artigos para publicao em
revistas cientficas conceituadas; e 4) reflexo
avaliao crtica do prprio trabalho, como o
aluno reconhece e trata as contradies e o
entendimento do que significa pesquisa.
Com relao a esses aspectos, Moura
Castro (2002) sugere ser s vezes mais claro
apontar o que no uma tese (p.113), do que
expressar claramente o que ela . Nesse contex-
to, os examinadores apontam uma tese sofrvel
como aquela que apresenta caractersticas como
falta de coerncia, falta de entendimento da
teoria, falta de confiana e problema de pesquisa
inadequado (Mullins; Kiley, 2002). Por outro
lado, as teses consideradas excepcionais e que
merecem meno honrosa so aquelas cujos
autores foram capazes de fazer uma metfora
artstica, envolvendo o leitor com elegncia, se-
gurana e criatividade (Mullins; Kiley, 2002).
Ressalta-se que, embora o critrio con-
tribuio ao conhecimento seja um elemento
caracterizador essencial de uma tese, h pou-
ca indicao de que os examinadores extraiam
conhecimento, aprendam algo novo ou mesmo
questionem seu prprio conhecimento a partir
da leitura das teses que avaliam (Lovat et al.,
2001). Uma das possveis razes para isso tal-
vez seja a intolerncia de que o estudante possa
saber mais que o examinador em algum ponto
(Lovat et al., 2001; Holbrook et al., 2002). De
forma complementar, tambm no h indica-
es de que sejam esperadas publicaes du-
rante o curso. Os examinadores, s vezes, men-
cionam artigos dos candidatos publicados em
revistas e conferncias que utilizem a reviso
por pares ou que tenham sido publicados in-
ternacionalmente. No entanto, os examinadores
expressam a importncia de se produzirem
publicaes a partir do trabalho final, aps a
avaliao ter ocorrido e o trabalho ter sido
aprovado (Lovat et al., 2001; Denicolo, 2003).
Como os examinadores
realizam a tarefa de avaliar
Como os examinadores chegam s suas
decises individuais para realizar a avaliao e
quais so os padres requeridos para uma tese
(e dissertao) tm sido considerados um mis-
trio (Nelson, 1991). Ao iniciarem suas ativida-
des, os examinadores apresentam pouca prepa-
rao, uma vez que no existem procedimentos
formais que os orientem ou os preparem para
essa atividade. A despeito de seu despreparo
inicial, os examinadores tendem a se sentir mais
confiantes e seguros a partir da avaliao de
duas ou trs teses e se tornam mais flexveis
medida que sua experincia como examinado-
res se solidifica (Mullins; Kiley, 2002).
Os examinadores consideram a tarefa de
avaliar complexa e trabalhosa. Por exemplo,
para os examinadores entrevistados por Mullins
e Kiley (2002), realizar essa atividade demanda
o equivalente a trs ou quatro dias inteiros de
trabalho, fora de seu horrio normal de expe-
diente devido ateno exigida. No entanto,
eles aceitam a tarefa principalmente pelo seu
senso de responsabilidade para com a comuni-
dade acadmica, que se manifesta sob trs di-
ferentes aspectos: para manter os padres da
rea de conhecimento; porque avaliar teses
uma funo da academia; e para demonstrar
reciprocidade na participao em bancas de
avaliao para com os seu colegas acadmicos.
Os autores identificaram, ainda, diferentes esti-
los de leitura utilizados na avaliao do traba-
lho escrito. A maioria dos entrevistados revelou
uma sequncia de trabalho que se inicia com a
leitura do resumo, seguida da introduo e fi-
nalizada com a concluso. Esse procedimento
busca identificar a viso do todo da tese. A se-
guir, o examinador realiza uma leitura sequencial.
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
A primeira impresso causada pela leitura inicial
a que fica mais marcada. como se os exami-
nadores j soubessem do resultado de sua ava-
liao a partir da leitura dos primeiros captulos
do trabalho. Nesse processo, o engajamento no
incio da leitura considerado fundamental. Ele
que vai determinar o humor do examinador
durante todo o resto da avaliao (Lovat et al.,
2001; Mullins; Kiley, 2002).
O engajamento inicial tambm o reflexo
do posicionamento adotado pelo examinador ao
avaliar. Inicialmente, ao posicionar-se como leitor,
o examinador age como um editor (Johnston,
1997). Entretanto, conforme Holbrook et al .
(2002) ressaltam, esse posicionamento est sub-
metido a outro: o de orientador. A partir do
momento em que o examinador interage mais
profundamente com o contedo, ele pode expe-
renciar um conflito a respeito de que papel deva
assumir, vivenciando-os de forma no necessari-
amente exclusiva.
Os papis assumidos pelo examinador
tambm esto relacionados com a sua percep-
o acerca do que seja o conhecimento. A par-
tir da utilizao da teoria habermasiana (1972)
sobre as formas de conhecer, Lovat et al. (2001)
sugerem que essa percepo deriva dos interes-
ses cognitivos dos examinadores, os quais po-
dem ser genericamente agrupados em trs tipos.
No primeiro tipo, h um interesse no controle
tcnico, que gera uma forma de conhecer deno-
minada de emprico-analtica. No segundo,
identifica-se um interesse em compreender sig-
nificados, o que faz aflorar uma forma de co-
nhecer chamada de histrico-hermenutica.
Por fim, existe um interesse em se emancipar, em
se tornar um agente mais livre. Esse interesse
conduz a uma forma de conhecer denominada
de crtica ou autorreflexiva. Esses trs inte-
resses cognitivos geram, como consequncia,
trs posicionamentos do examinador frente
tese ou dissertao sob avaliao.
Quando opera o interesse no controle
tcnico, o examinador age como um especia-
lista. Ele quer saber todos os fatos sobre o
objeto que est sendo investigado, pois sua
43
ateno est mais voltada ao controle tcnico
do conhecimento que est sendo avaliado.
um posicionamento mais hierrquico, com a
qual o examinador quer verificar se o aluno
pode reproduzir seu conhecimento. J quan-
do opera o interesse na compreenso dos sig-
nificados, o examinador age como parceiro.
Ele procura compreender as relaes entre os
fatos expressos no trabalho e busca por um
entendimento interpretativo. Ele quer explorar as
dimenses mais profundas, agindo de uma for-
ma mais colaborativa (dialtica) com o estudan-
te. Por fim, quando opera o interesse na eman-
cipao, o examinador age como ouvinte.
Nesse caso, os papis de mestre e aprendiz so
potencialmente invertidos. O examinador quer
aprender o que o estudante aprendeu, desde
que o ltimo seja considerado em pleno dom-
nio de seu conhecimento e, portanto, capacita-
do a ensinar algo novo (Lovat et al., 2001).
Pode-se perceber uma semelhana entre
o posicionamento do examinador diante da
forma como concebe o conhecimento e o seu
engajamento inicial com a leitura do trabalho
que avaliar. Ao agir como rbitro, o examina-
dor busca descobrir se o estudante aprendeu
sua lio, pois est mais interessado em ave-
riguar a correo dos resultados revelados no
trabalho. Ao assumir um papel de conselheiro,
ele interagir com o estudante, buscando
compreend-lo e auxili-lo em seu desenvolvi-
mento e suas descobertas. Por ltimo, ao de-
sempenhar o papel de ouvinte, o examinador
busca aprender o que estudante aprendeu.
Os papis assumidos pelos examinadores
esto, ainda, sujeitos a influncias internas (por
exemplo, seu estilo metodolgico) e externas
(como submisso aos critrios estabelecidos pela
instituio, as opinies dos outros examinadores e
at mesmo a adequao da orientao qual o
aluno foi submetido) (Phillips; Pugh, 2000;
Mullins; Kiley, 2002). No que diz respeito s influ-
ncias internas, Mullins e Kiley (2002) verificaram
que os examinadores buscam avaliar teses dentro
de sua disciplina e consideram que provavelmen-
te no seriam convidados a avaliar trabalhos cujos
44 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
paradigmas estivessem distantes de sua prxis.
As influncias externas podem ser identi-
ficadas por meio de diferentes elementos. Por
exemplo, a presso sofrida pelas universidades
para apresentarem nmeros satisfatrios de tra-
balhos aprovados repassada aos examinadores,
que podem se sentir compelidos a aprovar traba-
lhos no limiar dos padres mnimos de exign-
cia (Phillips; Pugh, 2000). Associada a esse aspec-
to, est a questo de alunos que experenciaram
dificuldades em sua orientao, uma vez que o
estudante pode ficar a merc da competncia ou
incompetncia do seu orientador (Haguette,
2002). Nesse caso, o examinador defronta-se com
o dilema de ser ou no justo penalizar o candi-
dato pela falha em sua orientao e o requisi-
to da manuteno de exigncias mnimas para
permitir que receba o ttulo. Na viso de Phillips
e Pugh (2000), nesses casos, os examinadores
deveriam ser to complacentes com o aluno
quanto possvel, buscando preservar as exigncias
mnimas. De forma complementar a essa aborda-
gem, Mullins e Kiley (2002) observaram que o
conhecimento prvio do orientador, do departa-
mento ou da instituio tem forte influncia so-
bre a avaliao dos examinadores. Tal pode ser
essa influncia que Denicolo (2003) concluiu em
sua pesquisa que os candidatos receberem mais
ou menos recomendaes tese depende muito
mais da instituio onde esto matriculados e de
quem so os demais examinadores, associado ao
apoio e preparao que receberam de seus
orientadores, do que da qualidade absoluta do
trabalho submetido (p. 90).
Composio da banca
examinadora
Conforme identificado, o procedimento
adotado para compor as bancas de defesa tam-
bm se configura em um importante elemento
no processo de avaliao de grau. Segundo
Powell e McCauley (2002), ele determinante
quando se busca uma avaliao justa e indepen-
dente. Diferentes interpretaes do que deve ser
avaliado e como deve ocorrer a avaliao con-
duzir a diferentes procedimentos para a com-
posio da banca examinadora. Vrias pesquisas
tm sido realizadas sobre como compor essas
bancas (Johnston, 1997; Powell; McCauley,
2002; 2003; Parry; Hayden, 1994; Tinkler;
Jackson, 2000; Mullins; Kiley, 2002).
Questes relacionadas exigncia ou no
de um examinador externo, ao nmero de com-
ponentes, participao ou no do orientador
e, ainda, acerca de quem pode ou deve suge-
rir possveis examinadores foram discutidas por
Johnston (1997); Powell e McCauley (2002;
2003) e Mullins e Kiley (2002). Os critrios
mais citados para a escolha de examinadores
foram relatados por Powell e McCauley (2003):
ser especialista no assunto ou na rea, demons-
trada por publicaes ou atividades de pesqui-
sas; ter experincia em bancas de avaliao; ter
experincia em orientao; e ser doutor ou um
lder inquestionvel da rea. Do ponto de vis-
ta dos examinadores, as razes pelas quais eles
so escolhidos envolvem: ser especialista na
rea e, por isso, ter clareza dos padres esta-
belecidos; ser uma das poucas pessoas qualifi-
cadas naquela rea; e ser compreensivo com a
situao do estudante (Mullins; Kiley, 2002).
No processo de escolha dos examinado-
res, a experincia em avaliao tem sido consi-
derada um componente de peso. Com relao a
esse aspecto, foram identificadas duas possveis
razes pelas quais examinadores inexperientes
tm sido negligenciados. A primeira enfatiza suas
atitudes como muito crticas, resultante de sua
incipiente compreenso dos desafios que reca-
em sobre o aluno, do processo de fazer o cur-
so e de sua inexperincia em ter alunos prprios
em situao de avaliao. A segunda razo res-
salta o pequeno escopo de comparao dos
padres e critrios exigidos para avaliao de
trabalhos de doutorado, uma vez que normal-
mente o nico que possuem como parmetro
o seu prprio (Mullins; Kiley, 2002).
Alm desses aspectos, h tambm dis-
cusses acerca de quem deve participar da es-
colha dos examinadores. As vises se dividem
desde as mais conservadoras at as mais li-
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
berais. Na viso conservadora, a participao
do orientador e do aluno na tomada de deci-
so no so permitidas e, na viso mais liberal,
ambos participam da escolha, uma vez que es-
ses ltimos estariam mais aptos a sugerir pes-
soas experientes no tema do trabalho (Phillips;
Pugh, 2001; Powell; McCauley, 2002; 2003).
Sistematizao da anlise e
consideraes finais
A sistematizao e anlise das pesquisas
acerca do exame dos referidos graus nos permite
concluir que este se configura em um processo
multifacetado e envolto em idiossincrasias. So
muitas as variveis que, concomitantemente, in-
fluenciam dinamicamente nesse processo. As
principais dizem respeito concepo do que se
espera de um mestrado ou de um doutorado;
dificuldade em se estabelecer critrios formais
para a avaliao e variedade de interpretaes
a eles atribudas; concepo de quais devam
ser as evidencias a serem consideradas na ava-
liao, se exclusivamente o trabalho de conclu-
so ou tambm o desenvolvimento do futuro
pesquisador; concepo do que conheci-
mento para o examinador; e, por fim, a impor-
tncia da composio da banca como elemen-
to de equanimidade e agregador de qualidade ao
processo. O Quadro 1 apresenta um sumrio
dessas questes.
A questo dos propsitos atribudos aos
mestrados e doutorados central para a an-
lise do exame de grau. Com relao a esse
aspecto, verificou-se que, tanto no cenrio
nacional quanto no internacional, no h con-
senso acerca desses propsitos. As vises
oposicionais existentes decorrem da configura-
o societal atual, que demanda aprendizagem
continuada, projetos interdisciplinares e que
tem encaminhado os ps-graduados a carreiras
para alm da academia. Na medida em que se
questionam os propsitos de mestrados e de
doutorados, questionam-se tambm os objeti-
vos e os processos envoltos na avaliao do
exame de seus respectivos graus, principalmente
45
no que se refere ao que deve ser o foco da ava-
liao e a que critrios utilizar.
Em uma das vises acerca do foco de ava-
liao, todas as evidncias a serem analisadas para
que o estudante receba seu ttulo devem estar ex-
pressas exclusivamente na tese ou na dissertao.
Nessa viso, o trabalho de concluso precisa refletir
os preceitos metodolgicos formais. Uma segunda
viso compreende que a tese ou a dissertao po-
dem se apresentar de um modo menos formal e
com um estilo mais artstico, como tambm refle-
tir outras evidncias relacionadas ao desenvolvi-
mento do estudante como pesquisador. Essas duas
vises remetem questo da utilidade ou neces-
sidade do exame oral para as avaliaes de grau.
Para os que consideram a tese como nica evidn-
cia a ser considerada, o exame oral se torna poten-
cialmente dispensvel, na medida em que a reali-
zao de um doutorado ou de um mestrado se
equacionaria com o desenvolvimento de uma tese
ou de uma dissertao. J na segunda viso, se-
ria por meio do exame oral que poderiam ser
verificadas outras dimenses da formao do ps-
graduando. Apesar desse aspecto, os que conside-
ram o exame oral como oportunidade para se
analisar outras dimenses da formao do pesqui-
sador ainda apontam a tese ou a dissertao como
46 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...
elemento de prioridade mxima nas evidncias para
a avaliao do exame de grau.
Na medida em que a tese e a dissertao
so compreendidas como evidncias prioritrias,
investigou-se se havia consenso na avaliao
final desses trabalhos por parte dos examinado-
res e, ainda, quais eram os critrios levados em
considerao. A partir de pesquisas que analisa-
ram os relatrios individuais de avaliao para
um mesmo candidato, verificou-se que h uma
grande heterogeneidade nos pareceres dos exa-
minadores. Apesar dessa no consensualidade
nos resultados, identificou-se um padro de com-
portamento comum por parte dos examinadores.
No incio de suas carreiras, na medida em que
possuem como parmetro apenas a avaliao de
sua prpria formao como doutor, os examina-
dores podem se sentir inseguros e relativamen-
te despreparados para a tarefa de avaliar e ten-
dem a se comportar de forma mais rigorosa.
medida que adquirem maior experincia, tendem
a se tornar mais flexveis.
Na busca pela compreenso desses com-
portamentos, questionou-se se essa rigorosi-
dade conduziria os examinadores inexperientes
a se fixarem em critrios considerados mais
formais e diretamente relacionados ao desafio
intelectual, como a originalidade, a metodolo-
gia e a contribuio ao conhecimento demons-
tradas no trabalho. Essa proposio no con-
firmada pela literatura da rea, que indica que
o foco da avaliao, de examinadores experien-
tes ou no, direciona-se grandemente aos as-
pectos redacionais do trabalho. Surpreendente-
mente, o examinador atua inicialmente no
como um especialista, mas exclusivamente
como um leitor. Nesse processo, um trabalho
inadequadamente redigido com erros ortogr-
ficos e gramaticais excessivos tende a aborre-
cer o examinador e o conduzir a suspeitar de
que a tese possa ser fraca em termos de desa-
fio intelectual. Portanto, um trabalho bem re-
digido pr-condio para que o examinador
atue como o especialista e se envolva com os
aspectos formais do trabalho.
Como leitor ou especialista, o examina-
dor elabora sua viso do trabalho como um
todo a partir da leitura de uns poucos captu-
los. Uma pr-avaliao da qualidade geral da
tese ou dissertao realizada por meio desse
processo. Os examinadores sabem quando
uma tese ou dissertao deve ser aprovada ou
no, na medida em que julgam a capacidade
geral do estudante para o desenvolvimento de
uma pesquisa independente. Esses aspectos
dificultam o estabelecimento de critrios claros
e objetivos e a consequente atribuio de pe-
sos para a avaliao que resultem em uma nota
final para o trabalho. Mesmo nos casos em que
so atribudos critrios, existe uma complexida-
de intrnseca relacionada polissemia dos cri-
trios e, portanto, de suas interpretaes. Esses
aspectos dificultam a compreenso unnime dos
critrios de avaliao por parte dos examinado-
res, orientadores e estudantes e, por conseguin-
te, a sua efetiva utilizao.
Associado aos fatores indicados, h ou-
tras influncias internas e externas ao processo
de avaliao de grau. As internas incluem a ide-
ologia do examinador, seu estilo metodolgico
e os diferentes papis assumidos por este duran-
te a avaliao. medida que o examinador
interage com o contedo do trabalho e a partir
Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009
de sua concepo acerca do que seja o conhe-
cimento, ele pode agir como especialista/rbitro,
como parceiro/conselheiro e/ou como ouvinte/
aprendiz. Fazem parte das externas a submisso
aos critrios estabelecidos pela instituio que
outorgar o grau, os critrios definidos pela
CAPES, a argumentao dos outros examinado-
res e a adequao da orientao a qual o alu-
no foi submetido. As externas podem afetar
sobremaneira sua deciso final, a ponto de o
resultado de sua avaliao final depender mais
da instituio onde o trabalho foi desenvolvi-
do, dos demais examinadores e de quem foi o
orientador do que da qualidade efetiva do tra-
balho. A soma desses fatores internos e exter-
nos tende a levar o examinador a tornar-se
reticente em reprovar, compelindo-o a aprovar
teses que estejam no limiar de seus padres
mnimos de exigncia.
Todas essas questes acerca dos ele-
mentos constituintes da avaliao influenciam
cada examinador. No entanto, o julgamento
final de um mestrado e de um doutorado se
configura no resultado do julgamento de um
grupo de examinadores. nesse contexto que
a escolha dos membros para compor a banca
examinadora adiciona complexidade ao proces-
so e se torna relevante para uma avaliao justa
e independente.
guisa de uma concluso, destaca-se a
complexidade do processo de avaliao dos
graus de mestrado e de doutorado. O PNPG vi-
gente (Brasil, 2004) assim como os quesitos e
itens de avaliao presentes na Ficha de Avalia-
o da CAPES apresentam uma viso mais estra-
tgica e no discutem detalhadamente a questo
especfica do exame de grau. Adicionalmente s
diretrizes gerais estabelecidas pelo PNPG e s
especificaes da Ficha de Avaliao, verifica-se
que a avaliao dos graus de mestrado e de
doutorado nos cursos tambm est intrinseca-
mente relacionada subjetividade dos elementos
decisrios individuais de cada examinador e s
influncias externas s quais a banca est inde-
levelmente envolva. Em consonncia com o iden-
tificado por Denicolo (2003), verifica-se um alto
47
nvel de insegurana associado ao conhecimen-
to dos padres gerais esperados para a formao
de um mestre e de um doutor. Essa realidade
demanda mais estudos e debates, como os rea-
lizados neste artigo no cenrio nacional, a fim de
se obter maior consistncia nos procedimentos de
avaliao dos exames de grau, contribuindo, dessa
forma, para uma avaliao mais justa e coerente
do ps-graduando e para a qualidade da ps-gra-
duao stricto sensu.

Referncias bibliogrficas

BRASIL. Ministrio da Educao. Coordenao de Aperfeioamento de Pessoal de Nvel Superior. Parecer n. 977/65
977/65, CESu
Disponvel em: < http://www.capes.gov.br/sobre-a-capes/legislacao/2339-pareceres> Acesso em: 15 out. 2008.

______. Plano Nacional de Ps-Graduao (PNPG)

(PNPG): 2005-2010. Braslia: Capes, 2004. Disponvel em: <http://www.capes.gov.br/
servicos/plano-nacional-de-pos-graduacao>. Acesso em: 15 out. 2008.

CAPES. Coordenao de Aperfeioamento de Pessoal de Nvel Superior. Avaliao da ps-g

ps-graduao
raduao. Disponvel em: <http://
raduao
www.capes.gov.br/avaliacao/avaliacao-da-pos-graduacao>. Acesso em: 15 out. 2008.

CLARK, B. (Ed.). The research foundation for graduate education

education. Los Angeles: University of California Press, 1993.

DENICOLO, P. Assenging the PhD: a constructive view of criteria. Quality assurance in educa tion
education
tion, v. 11, n. 2, p. 84-91, 2003.

GAZOLLA, A. L. A. Evoluo das formas de organizao da ps-graduao brasileira. In: CAPES

CAPES. Discusso da ps-graduao
Brasileira - 1996. Braslia, 1996. p. 93-100.

HABERMAS, J. Knowledge and human interests

interests. London: Heinemann, 1972.

HAGUETTE, T. M. F. Universidade: nos bastidores da produo do conhecimento. In: BIANCHETTI, L.; MACHADO, A. M. N. (Orgs.).
A bssola do escrever
escrever: desafios e estratgias na orientao de teses e dissertaes. Florianpolis; So Paulo: UFSC; Cortez,
2002. p. 371-382.

HANSFORD, B.; MAXWELL, T. A masters degree program: structural components and examiners comments. Higher educa tions
educations
research and development
development, v. 12, p. 171-187, 1993.

HOLBROOK, A. P. et al. Examining the quality of doctoral research

research, 2002. Disponvel em: <http://edtech.connect.msu.edu/
Serchaera2002/viewproposaltext.asp?propID=2165> Acesso em: 27 ago. 2003.

JOHNSTON, S. Examining the examiners: an analysis of examiners' reports on doctoral theses. Studies in higher educa tion
education
tion, v. 22,
n. 3, p. 333-348, Oct. 1997.

______. Postgraduate supervision in education: an overview of the literature. In: HOLBROOK, A.; JOHNSTON, S. (Eds.). Supervision
of postgraduate research in education
education. Victoria: AARE, 1999.

LATONA, K.; BROWNE, M. Factors associated with completion of research higher degrees. Higher educa tion series
education series, Report n. 37,
p. 8, Maio 2001.

LILJEGREN, D. The PhD in 2005 and ensuring the quality of the postgraduate experience
experience. Quality in postgraduate research:
managing the new agenda. Adelaide: The University of Adelaide, 1998. p. 53-56. Disponvel em <http://www.canberra.edu.au/
celts/QPR/1998/Liljegren1998.pdf>. Acesso em: 04 out. 2003.

LOVAT, T. J. 'W
'Waa ys of knowing'
knowing': how examiners position themselves in relation to the doctoral theses. In: Aera Annual Metting, New
Orleans. 2002. Disponvel em <http://edtech.connect.msu.edu/Searchaera2002/searchsessions.asp?sessID=878>. Acesso
em: 27 ago. 2003.

48 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...

LOVAT, T., HOLBROOK, A.; HAZEL, G. Wha
Whatt qualities are rare in examiners reports? 2001. Disponvel em: <www.aare.edu.au/
01pap/lov01589.htm> Acesso em: 27 ago. 2003.

MADSEN, D. Successful dissertations and theses

theses. 2nd ed. San Francisco: Jossey-Bass, 1992.

MORLEY, L. L.; DAVID, M. Quality and equality in British PhD assessment. Quality assurance in education
education
tion, v. 11, n. 2, p. 63-71,
2003.

MOURA CASTRO, C. Memrias de um orientador de tese: um autor rel sua obra depois de um quarto de sculo? In: BIANCHETTI,
L.; MACHADO, A. M. N. (Orgs.). A bssola do escrever
escrever: desafios e estratgias na orientao de teses e dissertaes.
Florianpolis; So Paulo: UFSC; Cortez, 2002. p. 109-134.

MULLINS, G.; KILEY, M. Its a PhD, not a Nobel prize: how experienced examiners assess research theses. Studies in higher
educa tion
education
tion, v. 27, n. 4, p. 369-386, 2002.

NELSON, H. The gatekeepers: examining the examiners. Australian historical association bulletin
bulletin, n. 68, p. 12-27, 1991.

PARRY, D.; HAYDE, M. Super vising higher deg

Supervising ree research students
degree students. Canberra: Australian Government Publishing Services,
1994.

PHILLIPS, E. M.; PUGH, D. S. How to get a PhD

PhD. 3rd. ed. Buckingham: Open University Press, 2000.

POLE, C. Technicians and scholars in pursuit of the PhD: some reflections on doctoral study. Research pa pers in educa
papers tion
education
tion, v. 15,
n. 1, p. 95-111, 2000.

POWELL, S.; GREEN, H. Research degree examining: quality issues of principle and practice. Quality assurance in educa tion
education
tion, v.
11, n. 2, p. 55-63, 2003.

POWELL, S.; MCCAULEY, C. Research degree examining - common principles and divergent practices. Quality assurance in
educa tion
education
tion, v. 12, n. 2, p. 104-115, 2002.

______. The process of examining research degrees: some issues of quality. Quality assurance in educa tion
education
tion, v. 11, n. 2, p. 10,
p. 73-83, 2003.

SALOMON, D. V. Como fazer uma monog rafia

monografia
rafia. So Paulo: Martins Fontes, 2001.

SAMPAIO, H.; VELLOSO, J. Formao de mestres (e doutores): contribuies para as atividades profissionais. In: VELLOSO, J.
(Org.). A ps-graduao no Brasil
Brasil: formao e trabalho de mestres e doutores no pas. Braslia: CAPES, 2002. p. 419-437.

SEVERINO, A. J. Metodologia do trabalho cientfico

cientfico. So Paulo: Cortez, 2000.

______. Ps-graduao e pesquisa: o processo de produo e de sistematizao do conhecimento no campo educacional. In:
BIANCHETTI, L.; MACHADO, A. M. N. (Orgs.). A bssola do escrever
escrever: desafios e estratgias na orientao de teses e
dissertaes. Florianpolis; So Paulo: UFSC; Cortez, 2002. p. 67-87.

SIMPKINS, W. S. The way examiners assess critical thinking in educational administration theses. Journal of educa tional
educational
administra tion
administration
tion, v. 25, n. 2, p. 248-268, 1987.

TINKLER, P.; JACKSON, C. Examining the doctorate: institutional policy and the PhD examination process in the UK. Studies in
higher educa tion
education
tion, v. 25, n. 2, p. 167-180, 2000.

______. Learning to be examined

examined: the British PhD examination process. 8th International Literacy and Education Research
Network Conference on Learning, 4-8 July, 2001.

TRAFFORD, V. Questions in doctoral vivas: views from the inside. Quality assurance in educa tion
education
tion, v. 11, n. 2, p. 114-122, 2003.

VELHO, L. Uma nova viso para a ps-graduao? O debate nos Estados Unidos e Europa. Disponvel em: <http://
www.comciencia.br/reportagens/universidade/uni11.shtml> Acesso em: 12 maio 2003.

Educao e Pesquisa, So Paulo, v.35, n.1, p. 033-050, jan./abr. 2009 49

VELLOSO, J.; VELHO, L. Mestrandos e doutorandos no pas
pas: trajetrias de formao. Braslia: CAPES, 2001.

WALLACE, S. Figuratively speaking: six accounts of the PhD viva. Quality assurance in educa tion
education
tion, v. 11, n. 2, p. 99-107, 2003.

WARDE, M. Sobre orientar pesquisa em tempos de pesquisa administrada. In: BIANCHETTI, L.; MACHADO, A. M. N. (Orgs.). A
bssola do escrever
escrever: desafios e estratgias na orientao de teses e dissertaes. Florianpolis; So Paulo: UFSC; Cortez,
2002. p. 235-254.

WINTER, R.; GRIFFITHS, M.; GREEN, K. The 'academic' qualities of practice: what are the criteria for a practice-based PhD? Studies
in higher educa tion
education
tion, v. 25, n. 1, p. 25-37, 2000.

WRIGHT, T.; COCHRANE, R. Factors influencing successful submission of PhD theses. Studies in higher educa tion
education
tion, v. 25, n. 2,
p. 182-195, 2000.

Recebido em 30.01.08
Aprovado em 11.11.08

Silvana Pezzi, mestre e doutora em Engenharia de Produo, docente do Instituto de Ensino Superior Santo Antonio/
Inesa. E-mail: spezzi@uol.com.br

Andrea Valria Steil, psicloga, mestre em Administrao e Doutora em Engenharia de Produo, com estgio doutoral
na Universidade do Sul da Flrida, professora do Programa de Ps-Graduao em Engenharia e Gesto do Conhecimento
da UFSC e Pesquisadora do Instituto Stela.

50 Silvana PEZZI e Andrea V. STEIL. Anlise do processo de exame de grau na ps:...