SILVA e SILVA, M.O. de. Avaliao de Polticas e Programas Sociais: aspectos conceituais e metodolgicos.

In: Avaliao de Polticas e Programas Sociais: teoria e prtica. SILVA e SILVA. So Pa lo: Veras !ditora, "##$. P. %&' (%. INTRO !"#O O te)to a*orda os aspectos conceit ais e metodol+gicos de avaliao de polticas e programas sociais, sit ando'a no ,m*ito da pes- isa avaliativa. ./...0 momento do processo de 1ormao e implementao das polticas p2*licas de corte social.3 4%&5 Para iniciar a disc sso a a tora apresenta no - e consiste as polticas p2*licas, todo o se s 6eitos envolvidos nesse processo de desenvolvimento, os *em como, as di1erentes processo,

concep7es dos re1eridos s 6eitos e no - e estas implicam no decorrer do re1erido processo. .8oda poltica p2*lica 9 ma 1orma de reg lao o interveno na omiss7es do

sociedade. Artic la di1erentes s 6eitos, - e apresentam interesses e e)pectativas diversa. :onstit i m con6 nto de a7es o !stado decorrente de decis7es, constit da por 6ogo de interesses, tendo como limites e condicionamentos os processos econ;micos, polticos e sociais.3 4%&5 ....toda poltica p2*lica 9 orientada para promover o m mecanismo de m dana social, *em'estar de segmentos sociais, m mecanismo de

principalmente os mais destit dos, devendo ser

distri* io de renda e e- idade social. Vista como mecanismo - e cont9m contradi7es, contrap7e'se < percepo da poltica p2*lica o de ma interveno estatal s *ordinada to somente < l+gica da

ac m lao capitalista.3 4%=5

SILVA e SILA a1irma - e o processo das polticas p2*licas se constit i m con6 nto de momentos classi1icados como: no lineares, artic lados e interdependentes - e tem na implementao a con1ig rao dos o*6etivos,metas e res ltados - e se pretende alcanar. .As polticas so trans1ormadas em programas - ando as condi7es iniciais so criadas, mas s a materiali>ao s+ ocorre com a implementao, constit indo'se a 1ase mais a*rangente e talve> mais comple)a do processo das polticas p2*licas, de modo - e as di1ic ldades conceit ais e empricas impedem distino da implantao da pr+pria poltica.3 4%(5 ....a implementao 9 conce*ida como contin ao da poltica, de modo - e o s cesso o 1racasso de m condiciona o o tro.3 4?#5 .O - e a poltica 1a> 9 modelar a implementao, de1inindo a arena na - al o processo ocorre, a identidade e o papel dos principais s 6eitos, o alcance de possveis instr mentos desen@ados para a ao, *em como os crit9rios para alocao de rec rsos.3 4?#5 .... a implementao 9 parte da poltica, de modo - e a teoria da poltica 9 1orm lada tendo em vista s a e)ec o e, como tal, ir sempre desenvolver e re1orm lar a poltica, o - e tam*9m coloca a implementao como avaliao /MOAAB! C DILEAVISFG, $(=?0.3 4?#5 .Assim, o processo das polticas p2*licas 9 ass mido, nos se s di1erentes momentos, por saem o ma diversidade de s 6eitos - e entram, permanecem no processo sendo estes orientados por ma de1inio e

di1erentes nacionalidades e movidos por di1erentes interesses, 1a>endo do desenvolvimento das polticas p2*licas contradit+rio e no linear.3 4?#'?$5 m processo

A$A%IA"#O *O*&NTO

& PO%'TI(AS & PRO)RA*AS SO(IAIS &N+!ANTO O PRO(&SSO AS PO%'TI(AS P,-%I(AS

HISTRICO, CONCEPES E ESPECIFICIDADES .Avaliao de polticas e programas sociais 9 m campo de est do da pes- isa social em desenvolvimento, veri1icando'se s a e)panso a partir dos anos H# nos !stados Inidos, no ,m*ito dos programas de com*ate a po*re>a.3 4??5 Besse ponto do te)to, a a tora evidencia o longo camin@o percorrido atrav9s de - atro gera7es no - e di> respeito < e)panso da avaliao de polticas e programas sociais nos !stados Inidos, ligados inicialmente, a m modelo comportamental e ne tralistaJ o se declnio nos anos =# e a s a retomada na d9cada de (# at9 c@egar em como se de s a e)panso no Krasil. .... 9 retomado o interesse pela pes- isa avaliativa, agora a partir de a*ordagens compreensivas - e se prop7e a artic lar o m9todo - antitativo com o - alitativo, merecendo grande ateno as variveis conte)t ais desconsideradas pelos modelos comportamental, ne tralista, - antitativista...3 4?L'?H5 .Bo Krasil, a e)panso das avalia7es de polticas e programas sociais 9 registrada a partir dos nos =#, - ando os movimentos sociais passam a demandar polticas sociais m direito a cidadania.3 4?H5 niversali>adas, como

.8odavia, no Krasil, a prtica da avaliao de polticas e programas sociais ainda 9 m ito restrita e desenvolvida mais como m mero controle de gastos do - e para realimentar os programas em desenvolvimento, servindo m itas ve>es para p nir e desenvolver ma c lt ra do medo.3 4?H5 .:onsiderada n ma perspectiva de cidadania, a avaliao pode se constit ir em instr mento e1ica> para controle social das polticas sociais.3 4?&5 .... m possvel instr mento - e pode ser tili>ado por segmentos

sociais organi>ados para 1ortalecimento da presso social so*re o estado no sentido de con- ista de direitos sociais. Ma6a vista as in1orma7es de - e a avaliao pode gerar e p *licar so*re polticas e programas sociais.3 4?&'?=5 .... etimologicamente, o termo avaliao signi1ica valor, es1oro de apreciar e1eitos reais, determinando o - e 9 *om o necessariamente, de r im. 8rata'se, m m ato m 6 lgamento valorativo, portanto, no 9

ato ne tro nem e)terior <s rela7es de poder, mas 9 eminentemente poltico - e integra o conte)to de por nat re>a interdisciplinar.3 4?=5

m programa

p2*lico, e)igindo post ra de o*6etividade e de independNncia, sendo,

.Bo campo pro1issional, as avalia7es so deli*eradas, sistemticas e comple)as, orientando'se pelo m9todo cient1ico e apresentando carter p2*lico. Incl em, necessariamente, m ma dimenso - e 9

t9cnico'metodol+gicaJ e o tra, - e 9 polticaJ am*as, tam*9m necessariamente, artic ladas. 8rata'se da pes- isa avaliativa, de carter aplicado, - e se social.3 4?=5 tili>a de m9todos e t9cnicas da pes- isa

.Avaliao 9 ento entendida como O ma 1orma de pes- isa social aplicada, sistemtica, plane6ada e dirigidaJ destinada a identi1icar, o*ter e proporcionar de maneira vlida e con1ivel dados e in1orma7es s 1icientes e relevante para apoiar na 1ase de diagn+stico, programao o o m programa /tanto de m e)ec o0, o

con6 nto de atividades espec1icas - e se reali>am, 1oram reali>adas se reali>aro, com prop+sito de prod >ir e1eitos e res ltados em - e se deram essas de g ia para ma concretosJ comprovando a e)tenso e o gra

con- istas, de 1orma tal - e sirva de *ase o

tomada de decis7es nacional e inteligente entre c rsos de ao o para sol cionar pro*lemas e promover o con@ecimento.3 /APIILAQ ! ABE!Q' !PP, $((?, p. %$0 4?(5

Bo presente te)to somos inseridos no niverso da pes- isa avaliativa, perce*endo de 1orma clara a di1erenciao entre os sentidos da avaliao e s a con1ig rao na dimenso pro1issional. O*serva'se ainda todo m es1oro em apro1 ndar esse est do - ando a a tora a*orda so*re a identidade da avaliao sistemtica. .Qec sa'se a- i a avaliao como mero prop+sito de controle, de 1iscali>ao de amedrontamento e destaca'se o compromisso com valores 9ticos e com a no ne tralidade, o - e rea1irma a perspectiva de m dana da poltica, com alterao imediata dos programas sociais na direo dese6ada, tendo como re1erNncia as demandas sociais.3 4L$'L"5 R ando se trata do - estionamento .:omo AvaliarS3 SILVA e SILVA re1ere'se ao tipo de avaliao e m9todo in1ormando da grande variedade dos tipos de avaliao, *em como se s princpios, condicionando a seleo do tipo de avaliao e do m9todo ao o*6eto e

aos o*6etivos da avaliao, vinc lando a avaliao de polticas e programas sociais < pes- isa avaliativa. .Besse es1oro de e)plicar as especi1icidades e concep7es da pes- isa avaliativa, esta 9 considerada como ato t9cnico e poltico, instit da por procedimentos capa>es de captar o pro6eto de sociedade de re1erNncia da poltica e programa avaliado, moldado nas correla7es re1erenciada de 1oras - e e)pressam as demandas sociais, e por o*6etivos, 1inalidades, compromissos

desdo*ramentos n m Omovimento - e transcende <s concl s7es e se materiali>a nas s as aplica7esO. /PQ!S8!S, $(((. p. ?L0 4L"'L%5 .8em por *ase ma metodologia - e no se red > a procedimentos, o*6eto,

mas envolve concepo te+rica da pr+pria avaliao e de se dos procedimentos...3 /SAIL, $((((0 4L%5

e como press posto o entendimento de - e m9todo no se separa

TIPOS DE AVALIAO .... a avaliao apresenta ma variada tipologia, con1orme os crit9rios - e se seg em.3 4L?5 Beste momento, a a tora cita te+ricos de re1erNncia e aponta os tipos de avaliao em 1 no do momento de reali>ao dos o*6etivos, con1orme crit9rio de tempo, em 1 no de - em reali>a a avaliao, a procedNncia dos avaliadores, da escala o dimenso dos programas, o*6eto da avaliao e em 1 no dos destinatrios, do conte2do o

con1orme se m9rito, ra>7es o 6 sti1icativas da pr+pria avaliao. ASPECTOS METODOLGICOS

Bo - e se re1ere < prod o do con@ecimento social, a a tora vN a necessidade inicial de conceit ar ma lin@a metodol+gica a ser seg ida ao se tratar de avaliao de polticas e programas sociais, para - e ap+s, possa'se percorrer o camin@o a ser constr do nesse processo. .8rata'se da concepo de metodologia, no entendida como con6 nto de procedimentos e t9cnicos, mas constit indo, te+rico de e)plicao da pr+pria avaliao e de se aceitar o 4H?5 $. Processo e s 6eitos sociais .... considerada en- anto avaliao tem se m processo cient1ico de prod o de m processo rec@aar m

m corpo o*6etoJ da

compreenso de m9todos como todo raciocnio empregado para m 1ato como verdadeiro e t9cnica conce*ida tili>ado para coletar dados o para analis'los.3 como instr mento

con@ecimento para realimentar as polticas e programas sociais, a pr+prio processo, e como tal, 9 constante e contn o, e)presso por diversas opera7es, mas - e so interrelacionadas, interdependentes e, <s ve>es, concomitantes.3 4H?' HL5 .Atividades preliminares o preparat+rias < avaliao - e consistem

em de1inir aspectos essenciais a permitir a contin idade do processo, destacando'se a negociao entre as partes - e encomendam e a e- ipe - e desenvolver a avaliao, representando compati*ili>ao e interesses e competNncias.3 4HL5 .!la*orao do plano da pes- isa de avaliao - e se re1ere < de1inio pr9via dos passos para orientar o est do avaliativo, envolvendo: /T0 de1inio de m marco te+rico de re1erNncia, m es1oro de

/...0de1inio do niverso do programa a ser considerado na avaliao, /T0 delimitao do o*6eto da avaliao, /T0 de1inio de o*6etivos e metas, /T0 seleo da estrat9gia metodol+gica para desenvolvimento da avaliao, /T0 de1inio da amostragem, /T0 de1inio do plano de anlise das in1orma7es levantadas no est do, /T0 determinao das 1ormas e dos passos a serem seg idos no processamento das in1orma7es...3 4HH'H&5 .Implementao da avaliao o tra*al@o de campo /T0 momento

m ito pec liar a cada e)periNncia, dependendo, por e)emplo, do porte do programa, do taman@o da e- ipe e da dimenso do est do avaliativo - e se pretende desenvolver.3 4H&'H=5 .Processamento, anlise e sntese dos dados e in1orma7es. 8rata'se do momento de ela*orao de dados e in1orma7es, - e so ordenadas, classi1icadas e agr pados, tendo como re1erNncia o o*6eto e os o*6etivos da avaliao. /T0 processar e sistemati>ar os dados e in1orma7es para permitir analis'los e ela*orar concl s7es.3 4H=5 .!la*orao e disc sso do relat+rio. O relat+rio de m est do

avaliativo deve conter a sntese dos res ltados da avaliao, concl s7es e recomenda7es ela*oradas pela e- ipe t9cnica da avaliao...3 4H(5 .Aplicao dos res ltados da avaliao 9 a- idestacada como ponto central da avaliao considerando o carter de investigao social aplicada...3 4&#5 ". M9todos, modelos e t9cnicas .A avaliao de polticas e programas sociais se tili>a dos m9todos e t9cnicas pr+prios da pes- isa social /T0 consideram'se essencial, /T0

trNs aspectos *sicos: a0 identi1icao de pro*lemas e controv9rsias apontadas nesse campo de con@ecimentoJ *0 os modelos t9cnicas s ais.3 4&"5 :om relao aos pro*lemas e controv9rsias, a a tora aponta alg mas - est7es metodol+gicas com *ase nos a tores :MAMK!QS, D!E!L, QOED!LL /$(("0, os - ais con1rontam os paradigmas - antitativo ) - alitativo evidenciando as caractersticas de cada cient1icos, dando a id9ia de dicotomia entre a*ordagens podem camin@ar 6 ntas na m e - e a apro)imao de am*os devem se s *meter a alg ns crit9rios m paradigma e o tro. avaliao, desde - e :ont do, SILVA e SILVA, * sca o entendimento de - e as d as c idadosamente. .... o - e deve @aver na pes- isa social e, em partic lar na pes- isa avaliativa, 9 ma artic lao da dimenso - antitativa com a dimenso - alitativa na perspectiva de - e a realidade social tam*9m se e)pressa por - antidades, devendo se s signi1icados serem interpretados n ma perspectiva - alitativa.3 4&?'&L5 .Mesmo considerada a possi*ilidade de so artic lado da tili>ados na avaliao das polticasJ c0 programas sociais, os m9todos e as

metodologia - antitativa com a - alitativa, alg ns 1en;menos sociais devem ser analisados e interpretados com o nat re>a de 1ato - alitativa.3 4&H5 Ainda com relao aos pro*lemas e controv9rsias, so colocadas - est7es re1erentes < implementao do pr+prio programa e - est7es diretamente relacionadas < avaliao. .Im aspecto central - e se coloca na implementao 9 a relao entre ca salidades e interven7es, na medida em - e os programas so de in1orma7es de

sociais en1ati>am variveis ca sais a*ertas a manip lao, 1a>endo com - e as variveis consideradas ca sais apresentem poder relativo de prod >ir di1erena /m danas0.3 4&H5 .pro*lemas e controv9rsias diretamente relacionados com a avaliao /T0 a posio s *alterna oc pada pela pes- isa avaliativa, devido a 1orma tam*9m s *ordinada como se constit i a poltica social no Krasil em relao < poltica econ;micaJ a conse- Nncia 1alta de legitimidade da avaliaoJ o no envolvimento na avaliao de todos os s 6eitos na avaliaoJ a resistNncia nat ral < avaliao no sistema de gesto de polticas p2*licas...3 4&&5 Bo te)to, 1ala'se do m9todo e modelos na avaliao de polticas e programas sociais atrav9s da s perao do m9todo - antitativo. .... se vem 1irmando o recon@ecimento de - e a metodologia de avaliao deve ser a*erta, visto - e 4&&5 .... so apontados os modelos de avaliao mais recorrentes na literat ra. 8rata'se de monitoramentoJ da avaliao poltica da polticaJ da avaliao de processos e da avaliao de res ltadosU impactos.3 4&='&(5 .O monitoramento, em*ora se relacione com a avaliao 9 ma m 2nico m9todo 9 considerado ins 1iciente para dar conta da comple)idades da realidade social.3

atividade gerencial - e visa o controle de entrega de ins mos de acordo com as metas e man teno de calendrio de tra*al@o.3 4&(5 .A avaliao poltica da poltica volta'se para emitir 6 lgamento em relao < poltica o programao em siJ implicando em atri* ir valor aos res ltados alcanados, ao aparato instit cional onde o programa

implementado

aos

atos

mecanismos

tili>ados

para

modi1icao da realidade social so* interveno. Para tal, re- er de1inio de crit9rios e envolve princpios polticos 1 ndamentais so*re concepo re1erente ao *em'estar @ mano, destacando os princpios de ig aldade e democracia e a concepo de cidadania /VIPI!IQ!EO C VIPI!IQ!EO, $(=H03 4=#5 .A avaliao de processos 9 o modelo de avaliao de polticas e programas sociais - e se volta, so*ret do, para a1erir a e1iccia do programa. /T0 se preoc pa, especi1icamente, em identi1icar a relao entre metas atingidas ) metas propostas, e com a ade- ao entre meios tili>ados na implementao e os o*6etivos originais.3 4="5 .8ratando especi1icamente da avaliao de impactos, tem'se como 1oco central as m danas - antitativas e - alitativas decorrentes de determinadas a7es governamentais /polticaU programa0 so*re as condi7es de vida de e1etividade.3 4=L5 .os modelos de avaliao de processo e de impactos podem, na prtica da pes- isa avaliativa, ser tili>ados de modo artic lado, gerando o - e a literat ra denomina de avaliao compreensiva - e com*ina anlise de processo e de impactos em decorrNncia da implementao de m determinado programa. !sta*elece ainda rela7es de processo e dos impactos com os o*6etivos previamente de1inidos, proc rando tam*9m identi1icar as ca sas - e inter1eriram na implementao, * scando compreender a cone)o entre ins mos e m danas. Isto 9, est acontecendo o - N e por - N. O*6etiva entender os e1eitos e1etivos prod tivos pela implantao de alcanadas.3 /KQODB! e DILEAVISFG, $((%0 4==5 m programa, mas - e avaliar a relao metas propostas e metas ma pop lao, tendo portanto, como crit9rio a

Ao se re1erir aos m9todos e t9cnicas s ais na avaliao de polticas e programas sociais a a tora preoc pa'se em remeter'se < literat ra espec1ica so*re a pes- isa social com *ase nos modelos citados acima. .... o prod to da avaliao no 9 m 6 lgamento dos res ltados de m programa, mas a indicao de elementos para a 1orm lao de novas interven7es. /T0 A tili>ao desses modelos e)ige a s perao de post ras metodol+gicas rgidas, centradas n m 2nico m9todo o n ma 2nica t9cnica.3 4=(5 Ademais, @ - e se considerar - e os instr mentos e as t9cnicas s ais na avaliao de polticas e programas sociais no so, em si, ne tros, post ras por serem re1erenciados de1inidas teoricamente, dos determinando orientando, metodol+gicas avaliadores,

portanto a intencionalidade - e move a prtica da avaliao.3 4=('(#5