2 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

24
Tcnica Delphi
Antnio Maria Gomes de Castro e Suzana
Maria Valle Lima

1 Introduo

A partir da dcada de 60, os efeitos combinados de trs revolues tecno-

lgica, econmica e sociocultural vm desenhando diversas transformaes nos
sistemas sociais e econmicos mundiais. Essas transformaes so o resultado de
mudanas profundas nos paradigmas de desenvolvimento, tecnolgico e institu-
cional, que geram a necessidade de uma nova institucionalidade, compreendida
como a redefinio de regras do jogo e prticas sociais que governam todas as
organizaes envolvidas.
Estas transformaes afetam a estratgia, a estrutura e a programao das
organizaes. Os impactos dessas mudanas podem estar inter-relacionados e
demandar modificaes das capacidades (competncias) organizacionais, das
prioridades, dos processos internos e dos produtos e servios oferecidos pelas
organizaes.
A formulao de estratgias sempre demanda, entre outros pr-requisitos,
o conhecimento sobre cenrios ou vises de futuro. Estratgias englobam pa-
dres de respostas a oportunidades ou ameaas que devem ser interpretadas, a
partir de eventos, fatos, comportamentos atuais e suas tendncias. A aplicao
de tcnicas prospectivas oferece o marco conceitual e as ferramentas adequadas
para trabalhar convenientemente esta questo.
Este aparato tcnico e gerencial tem sido introduzido na gerncia das orga-
 Tcnica Delphi 3

nizaes e capaz de tornar mais precisa e eficaz a formulao de estratgias.

Todavia, precisa manejar grandes quantidades de informao, sem a qual toda a
sua eficincia se torna comprometida. Coletar, interpretar, armazenar, recuperar
e difundir informao de qualidade sobre o desempenho das organizaes uma
tarefa de formidvel complexidade e de impacto direto sobre os futuros avanos
das tcnicas prospectivas.
A informao representa um importante insumo para a realizao de estudos
prospectivos e ao mesmo tempo produto desses estudos. Analisar sistemas nos
quais se inserem as organizaes demanda um enorme manancial de informao,
a ser identi-ficado, coletado, interpretado, transformado no formato adequado,
armazenado e poste-riormente recuperado. Todo este processo caracteriza um
sistema de gesto da infor-mao e gera como produto uma base sistematizada
de informao, que pode ser nova-mente utilizada no futuro.
A lio que se pode derivar a de que, em cenrios de mudanas aceleradas e
de incerteza, necessrio promover um constante reposicionamento estratgico
da orga-nizao. Todavia, para se reposicionarem, as organizaes vo demandar
um acervo de capacidades e de informaes para a interpretao da realidade, a
anteviso dos desdobramentos dos eventos presentes e a formulao de estra-
tgias. As competncias em aplicao e uso de tcnicas prospectivas passam a
representar uma forte demanda para a manuteno da sustentabilidade organi-
zacional, neste ambiente de turbulncia.
As ferramentas prospectivas de inteligncia estratgica j so amplamente
utilizadas no ambiente de negcios pelas organizaes, como forma de obteno
de competitividade e sustentabilidade organizacional. As aplicaes e os usos
so variados, em escopo, finalidades e mtodos. Tais aplicaes cobrem desde a
prospeco do futuro do negcio, aplicando a tcnica de cenrios alternativos,
at os estudos setoriais, visando formulao de estratgias de gesto.
Conhecer estas aplicaes uma forma de divulgar e promover a inteligncia
estratgica no mbito das organizaes de comunicao. Conseqentemente,
este captulo se prope a apresentar e analisar: (a) a importncia e os usos da
prospeco; (b) os mtodos e as tcnicas utilizados, com especial ateno para
a Tcnica Delphi. A apresentao ser ilustrada com exemplos de metodologia,
resultados e usos.

2 Conceito de futuro e de tcnicas prospectivas. Estratgia

A oferta adequada de produtos e servios clientela de uma organizao

requer a utilizao de tcnicas prospectivas das necessidades futuras, como orien-
4 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

tao para o esforo organizacional. Tais tcnicas se agrupam sob a denominao

de anlise prospectiva.

A anlise prospectiva um conjunto de conceitos e tcnicas para a previso do

comportamento futuro de variveis socioeconmicas, polticas, culturais e tecnolgi-
cas. No mbito da gesto organizacional, objetiva identificar as demandas atuais,
potenciais e futuras do mercado de produtos e servios da organizao, que possam
constituir-se em oportunidades ou ameaas.

A anlise prospectiva uma base slida para a competitividade e susten-

tabilidade institucional. ela que vai permitir a compreenso e percepo, de
forma sistemtica, do comportamento de variveis do ambiente organizacional,
relevantes para a definio de rumos e estratgia.
Para operacionalizar a anlise prospectiva, necessrio conhecer as foras
do contexto que, no momento presente, esto moldando o futuro de interesse
da organizao. Neste caso, a anlise de sistemas o enfoque a adotar. Uma
discusso mais aprofundada sobre a aplicao e vantagens do enfoque sistmico
na anlise prospectiva pode ser encontrada nos trabalhos de Castro et al. (2002),
(2004). A seguir, examinam-se os marcos conceituais sobre anlise prospectiva,
para em seguida derivar, desse conjunto de teorias, metodologias aplicveis
prospeco em comunicao.

2.1 Compreenso do futuro: abordagens e conceitos

As noes de incerteza e de ambiente turbulento se combinam para originar

o conceito de futuro adotado neste texto. Por este conceito, o futuro visto como
o resultado da interao entre tendncias histricas e a ocorrncia de eventos
hipotticos (CASTRO et al., 1998).

DEFINIO DE FUTURO
Futuro o resultado da interao entre tendncias histricas e eventos hipotticos
(BRUCE B. JOHNSON, citado por CASTRO et al., 1998).

Este conceito de futuro est fortemente ligado chamada viso prospectiva,

em estudos de futuro. Por outro lado, incorpora tambm elementos da escola
americana de estudos de futuro (forecasting ou estudos tendenciais) ao considerar
as tendncias histricas para desenvolver sua anlise (JOHNSON et al., 1994).
 Tcnica Delphi 5

A idia de futuros tendencial e alternativo uma forma interessante de se

organizar a reflexo sobre o futuro. Ao formular o futuro como uma continuao
do passado (o que uma hiptese plausvel, porm de baixa probabilidade de
ocorrncia, uma vez que a turbulncia admitida no como hiptese, mas como
fato), o estudioso do futuro pode obter uma referncia para orientar os seus
estudos. O futuro tendencial funciona como um marco de referncia, que pode
auxiliar na construo de vises alternativas de futuro.
Quer utilizem princpios do estudo tendencial clssico quer de prospec-
o, os estudos do futuro no podem prescindir de: (1) identificar padres no
comportamento das variveis presentes no sistema sob estudo; (2) identificar
relaes entre estas variveis. Para atender a estas necessidades, a teoria geral
de sistemas e particularmente as tcnicas de anlise de sistemas so de grande
utilidade (ver CASTRO et al., 2002).

2.2 Utilizao da prospeco na formulao de estratgias

Os resultados dos estudos prospectivos servem gesto estratgica. Enquan-

to a anlise prospectiva procura responder questo o que pode acontecer no
futuro?, a estratgia tenta, a partir desse questionamento, definir escolhas do
tipo: quem sou eu? o que posso fazer? o que vou fazer? como vou fazer? Assim,
anlise prospectiva e estratgia assumem uma vinculao estreita, onde a quali-
dade desta ltima funo direta da primeira.

Anlise prospectiva Estratgia

a forma de definir rumos da organi-
zao, a partir de cenrios futuros.
Tem como propsito responder ques-
to o que pode acontecer no futuro? Tem como propsito responder a ques-
tes do tipo: quem sou eu? o que posso
fazer? o que vou fazer? como vou fazer?

Conseqentemente, a anlise prospectiva gera o insumo bsico, a base de

informao sobre como o futuro pode se apresentar, para a formulao de es-
tratgia, seja de organizaes, setores, seja de segmentos produtivos. Esta base
de informao se torna mais importante, medida que se define estratgia para
posies mais distantes no futuro e que se trabalha em ambientes com maior
nvel de turbulncia.
A comunicao um dos ramos de atividade humana com grandes ndices de
6 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

risco, submetida a ambientes de alta turbulncia (em geral, mais conhecimento

demandado em pases menos desenvolvidos, onde as velocidades e as intensidades
das mudanas so quase sempre maiores). Todas estas caractersticas a tornam
uma cliente de estudos prospectivos, como ferramenta de gesto estratgica.
O processo de incorporao de resultados de estudos prospectivos na gesto
das organizaes conhecido como estratgia, formulao de estratgia ou pla-
nejamento estratgico. Na fase de implementao, o processo de monitoramento
estratgico determina qual dos cenrios elaborados explica melhor o momento
presente e futuro prximo da organizao e determina o conjunto de estratgias
mais adequado para orientar a gesto e os rumos institucionais.

3 A Tcnica Delphi

3.1 Caractersticas gerais

A Tcnica Delphi foi desenvolvida por pesquisadores da Rand Corporation

(WRIGTH, citado por CASTRO et al., 1995; CASTRO et al., 1998; LIMA et
al., 2001). aplicada a partir do produto da anlise sistmica de desempenho
passado e presente do segmento em estudo, que determina fatores crticos de
desempenho do sistema. A forma de operacionalizao de uma pesquisa Delphi
est representada na Figura 1.
A Tcnica Delphi se operacionaliza pela formao de um painel de espe-
cialistas (Painel Delphi) e pela elaborao de questionrio interativo, aplicado
em rodadas sucessivas. Apresenta as seguintes caractersticas (LINSTONE &
TUROFF, 1975):
busca de consenso entre especialistas sobre eventos futuros;
baseia-se em avaliao intuitiva coletiva baseada em: (a) uso estruturado
do conhecimento;(b) experincia dos especialistas; (c) criatividade; (d)
anonimato;
trabalha em ambientes com sries histricas deficientes;
enfoque interdisciplinar; perspectivas de mudanas em tendncias (ruptu-
ras);
tratamento estatstico simples;
reavaliao de respostas para novo questionrio.
 Tcnica Delphi 7

Figura 1 Processo de pesquisa de futuro utilizando a Tcnica Delphi.

O consenso obtido a partir de sucessivas rodadas de questes, nas quais

os painelistas avaliam alternativas e opinam sobre o futuro nos temas definidos
como importantes. Nas rodadas seguintes, voltam a reavaliar suas posies ante-
riores, agora com o conhecimento da posio dos pares sobre as questes. Nesse
processo interativo, o anonimato preservado, sendo as posies dos painelistas
colocadas para o painel sem que os participantes saibam sobre a autoria.
O exame de opinio dos pares, sem que se conheam os autores das opini-
es, e a possibilidade de mudar uma opinio, sem que a presso do grupo seja
exercida, talvez a maior fortaleza da Tcnica Delphi. Este processo interativo
de debate, sem os fatores subjetivos que esto sempre presentes em reunies
e outros tipos de eventos grupais, elimina parte do vis que a subjetividade in-
troduz no exame das idias, ajudando a conduzir a discusso na prevalncia da
lgica. Cada participante pode expressar suas concordncias ou discordncias
s opinies emitidas ao longo do painel de acordo com a lgica proposta pela
pesquisa e com o seu prprio julgamento, sem levar em conta simpatias e an-
tipatias pessoais, que muitas vezes contaminam o julgamento das proposies
em um evento presencial.
Obviamente, num painel Delphi as questes devem fornecer aos painelistas,
criteriosamente selecionados, a informao necessria para que o mesmo possa
fundamentar a sua avaliao. No razovel apenas perguntar como vai ser o
futuro de determinado tema ou varivel, mas oferecer ao avaliador alguma in-
8 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

formao sobre o desempenho anterior da varivel questionada, sobre as foras

que a impulsionaram e/ou restringiram e, a partir dessa base de informao,
solicitar a avaliao do desempenho futuro. Por essa razo, a pesquisa Delphi
deve ser calcada em um bom estudo diagnstico e sistmico do tema e num
questionrio criteriosamente elaborado. Estes trs fatores (anlise sistmica,
escolha dos painelistas e elaborao do questionrio Delphi) sero detalhada-
mente apresentados a seguir.

3.2 Anlise sistmica

Uma das questes cruciais para a formulao de uma viso de futuro no

painel Delphi a caracterizao do sistema que ser prospectado, suas variveis
e estruturas componentes e as relaes entre estas variveis. somente a par-
tir da compreenso dessa complexa rede de relaes de causas e efeitos que se
pode determinar como funciona um sistema, quais as variveis que definem o
seu comportamento e a partir da estabelecer algum mecanismo de reflexo para
formular cenrios sobre esse compor-tamento no futuro.
Essas abordagens so de natureza bastante diversificada. Castro et al. (2001)
mencionam como tcnicas disponveis para realizar esta anlise as Tcnica do
Iceberg (VAN DER HEIDJEN, 1997), a Matriz de Motricidade e Dependncia
(VIEIRA, 1999), a Matriz de Impacto Cruzado. GODET (1994) aponta ainda as
tcnicas MICMAC, como componente de um mtodo denominado Anlise Es-
trutural. Todas estas abordagens buscam decifrar a complexidade dos sistemas,
identificando as variveis-chaves que representem o seu comportamento passado
e presente, para formular as hipteses de comportamento futuro.
Todavia, em muitos casos, as abordagens empregadas em geral no distin-
guem graus de hierarquias entre as variveis, setores e eventos, ou seja, no con-
sideram o carter sistmico das relaes entre esses elementos, tornando difcil
a criao de um marco lgico sobre o passado e o presente, que possa apoiar a
formulao de hipteses de futuros plausveis.
Neste ponto reside um fator crtico de qualidade dos estudos prospectivos
(CASTRO et al., 2002). Sem um bom mapeamento das foras e dos eventos
importantes que determinaram o passado e moldam o presente, impossvel
traar boas vises de futuros plausveis, com robustez suficiente para orientar a
formulao de estratgias.
 Tcnica Delphi 9

3.2.1 Aplicao do enfoque sistmico como forma de compreenso da

realidade

Quando se olha para a realidade, esta se apresenta como um confuso emara-

nhado de fatos, eventos e relaes, ocorrendo em dimenses temporais e espaciais
distintas, e raramente prontamente perceptveis ao analista. Este conjunto deve
ser decifrado, transformado em algo organizado e com sentido, para se extrair
dessa complexidade a informao estratgica para gerar deciso.
O enfoque sistmico possui no seu contedo lgico as ferramentas neces-
srias para solucionar esta dificuldade metodolgica. Tcnicas analticas, como
a modelagem de sistemas, permitem uma organizao da realidade complexa,
de forma a conectar as diversas dimenses envolvidas. Na Figura 2, ilustra-se a
complexidade inerente a este processo de anlise e como o enfoque sistmico
pode ser utilizado como ferramenta analtica. No caso, toma-se como exemplo
uma anlise no mbito do agronegcio.

Figura 2 Aplicao do enfoque sistmico anlise prospectiva.

Utilizando os princpios da anlise de sistemas, prope-se que um sistema

possa ser caracterizado por seu desempenho, ou sua capacidade de transformar
insumos em produtos (CASTRO et al., 1995; CASTRO et al., 1999). Este de-
sempenho pode ser representado por fatores crticos de desempenho, conforme
representado pelas setas na Figura 2. Por sua vez, estes podem ser afetados pelas
foras propulsoras e restritivas. Uma fora propulsora ou restritiva qualquer
varivel (ou grupo de variveis, ou estrutura) que afeta fortemente o desempe-
nho de um sistema, de um modo positivo ou negativo. As foras propulsoras,
portanto, mantm uma correlao positiva com o fator crtico, enquanto as foras
restritivas apresentam uma correlao negativa com aquele fator.
10 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

Ao utilizar a abordagem descrita na Figura 2, se estar aplicando uma das

ferramentas mais poderosas do enfoque sistmico, a anlise de sistemas. Um
sistema est analisado quando se definem os seus objetivos, a razo pela qual ele
opera; os seus insumos, os elementos que entram no sistema; os seus produtos,
elementos que saem do sistema; os seus limites; os seus componentes, elemen-
tos internos que transformam insumos em produtos; os fluxos, movimento de
elementos entre os seus componentes, definindo as variveis de estado e as taxas
de fluxo, que podem ser utilizadas para medir o comportamento dinmico e o
desempenho do sistema (SARAVIA, 1986).
Alm destes elementos, se estar decompondo a complexidade do sistema
estudado em hierarquias, com limites bem definidos e utilizando-se as tcnicas
de modelagem de sistemas. Modelagem a tcnica que configura a realidade
como um sistema e constri modelos para represent-la de forma diferente da
dela prpria. Os modelos construdos so representaes pictricas, conceituais,
matemticas ou qualquer outra forma de representao que possa ser utilizada
para aumentar a compreenso da realidade.
As ferramentas de anlise e modelagem de sistemas ajudam na identificao
de componentes de um sistema e na descrio das relaes entre estes, de for-
ma a determinar os fatores crticos de desempenho, aquelas variveis de maior
importncia para determinado comportamento do sistema. Neste exerccio, so
tambm determinadas as foras propulsoras e restritivas aos fatores crticos, ou
seja, as variveis que se relacionam com estes, potencializando ou deprimindo o
seu desempenho. Ao final do processo de modelagem, em geral se obtm uma
rede de relaes de variveis causa e efeito, que descreve o desempenho do sistema
que est sob anlise. Determinar esta rede um passo essencial para a anlise
diagnstica de um sistema, especialmente para sua anlise prospectiva.

3.3 Seleo de especialistas para o Painel Delphi

Na operacionalizao do Painel Delphi, selecionam-se especialistas, que

respondem a questionrio especialmente preparado para este tipo de tcnica. A
escolha dos especialistas ao mesmo tempo um diferenciador dessa metodolo-
gia de pesquisa e um dos fatores-chaves de sucesso. Embora estes especialistas
no tenham que neces-sariamente ter conhecimento formal, devem ter um
conhecimento aprofundado, de forma a opinar com autoridade sobre os temas
investigados.
Na escolha dos especialistas, devem ser ponderadas as variveis: o conhe-
cimento dos especialistas nos temas abordados no Painel Delphi; a capacidade
de imaginar possibilidades futuras de ocorrncia de eventos relacionados ao
tema em estudo e suas conseqncias; a capacidade de relacionar eventos de
 Tcnica Delphi 11

diversas naturezas (tecnolgicas, econmicas, sociais) e seus impactos sobre

o desempenho do sistema em estudo. So fatores relevantes a considerar na
escolha a experincia do profissional no tema, contribuies relevantes, rea de
atuao e tipo de organizao de origem. Diversidade de vises um outro fator
a considerar, sendo por isso importante selecionar profissionais que atuem em
diversos campos profissionais, tais como na iniciativa privada, no setor pblico,
universidade pblica e privada, institutos de pesquisa pblico e privado etc.
Ao contrrio de outras tcnicas de pesquisa (como o survey, por exemplo),
nas quais a representatividade da amostra o fator-chave de sucesso, na Tcni-
ca Delphi o conhecimento tcnico e gerencial e a experincia profissional dos
especialistas so as variveis-chaves na escolha de respondentes para compor o
painel Delphi. Tais elementos garantem a qualidade do painel e reforam as opi-
nies obtidas a partir da pesquisa, como fonte para a formulao de estratgias
para o sistema.
Uma outra questo que necessita definio em relao ao nmero de pai-
nelistas ou especialistas participando do painel. Em geral, esta uma questo
para a qual no h uma frmula definida, uma vez que este nmero pode ser
influenciado pela existncia (e disponibilidade em participar) de especialistas
em determinado tema. Como no se trata de representar estatisticamente uma
determinada populao, os critrios de deciso baseiam-se em julgamento intui-
tivo da equipe coordenadora do Painel. Como orientaes de procedimentos, no
se encontram bons estudos baseados em painis com menos de 20 especialistas,
nem com elevado nmero de participantes.
Painis com menos de 20 participantes podem apresentar problemas de co-
bertura e profundidade sobre os temas em discusso na pesquisa. J aqueles com
excessivo nmero de painelistas podem apresentar forte orientao tendncia
central, na tabulao das respostas, reduzindo as possibilidades de obteno de
inovaes, a partir de opinies mais afastadas da tendncia central. Alm disso,
podem tornar extremamente difcil o gerenciamento da pesquisa, limitando a
obteno de resultados.
Em geral, painis com um nmero entre 30 e 100 painelistas atendem aos
requisitos de qualidade dos resultados e de factibilidade de gerenciamento da
pesquisa, sendo por isso comumente referenciados na literatura pertinente.

3.4 Questionrio Delphi: finalidade e preparao

O questionrio Delphi o principal instrumento da anlise prognstica. Tem

a finalidade de identificar a percepo do grupo de especialistas selecionados
sobre o comportamento futuro de fatores crticos (e foras que os impulsionam
12 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

e os limitam) ao desempenho do sistema objeto do estudo de futuro.

Como j visto anteriormente, a anlise prognstica s pode ser iniciada a
partir de estudo aprofundado, que reflita o momento atual e o passado, do sis-
tema de interesse. Para comear a elaborao desse questionrio, fundamental
que a equipe de especialistas tenha em mos, portanto:
a) fatores crticos e variveis que os influenciam identificados e definidos;
b) modelo das relaes entre fatores crticos e as variveis (ou conjuntos de
variveis, ou estruturas) que os influenciam;
c) sries histricas ou medidas de situao atual sobre o comportamento
de fatores crticos e de variveis a eles relacionadas;
Se essas medidas no esto disponveis, o prprio questionrio Delphi
o instrumento para levant-las.
Cada pergunta do questionrio deve possuir os seguintes elementos:
a) corpo da pergunta: nesse segmento, so oferecidas as definies das
variveis que se quer analisar, na questo, seja isoladamente, seja em relao
umas com as outras. Tambm se apresentam dados gerais sobre as variveis e
sua relevncia para o sistema que est sendo analisado;
b) informaes, incluindo indicadores quantitativos relacionados vari-
vel foco da questo, no momento da pesquisa; se disponvel, devem ser feitas
apresentaes sintticas e visuais de sries histricas desses indicadores; essas
informaes devem ser o resultado de anlise diagnstica realizada previa-men-
te sobre o sistema, na qual tenham sido identificados os fatores crticos e suas
influncias (impulsoras ou restritivas);
c) solicitao de uma avaliao, do painelista, sobre a situao futura da
varivel. Essa solicitao pode ter a forma de uma pergunta estruturada (com
respostas predefinidas), semi-estruturadas (respostas predefinidas acompanhadas
por oportunidade para acrscimo de avaliaes qualitativas ou comentrios), ou
abertas (respostas definidas pelo prprio painelista). O horizonte temporal (ano
do futuro para o qual so realizadas as avaliaes) deve ser claramente mostrado,
em cada questo;
d) opcionalmente, podem tambm ser includos cenrios, na formulao
de algumas questes. Esses cenrios tm simplesmente a funo de fornecer
informaes de contexto para as avaliaes de futuro;
e) instrues para resposta questo, incluindo a forma da resposta (mar-
car com um X?, avaliar em uma escala?), alternativas de resposta e escalas de
mensurao.
Esses segmentos, apresentados aqui como itens isolados, na prtica com-
binam-se, indistintamente, em cada questo Delphi. O Quadro 1 fornece um
 Tcnica Delphi 13

exemplo de questo Delphi, na rea de comunicao.

A seguir, descrevem-se alguns princpios relevantes para a elaborao de
questes Delphi.

Elaborao de questes Delphi:

Um primeiro passo a deciso sobre o grau de estruturao das respostas.

De modo geral, a recomendao para que se estruture o quanto possvel cada
questo, possibilitando, no entanto, oportunidades para que o painelista apre-
sente a lgica para suas respostas, especialmente a partir da segunda rodada
do Painel, onde essa lgica essencial para o bom uso do conhecimento que
compartilhado em uma investigao Delphi.
O grau de estruturao depender tambm do quanto se conhece e se conta
com medidas sobre o fator/varivel que cada questo focaliza. No entanto, mesmo
quando no se conta com essas mensuraes, o prprio Painel pode ser utilizado
para obt-las, por meio de escalas ordinais.
A forma mais simples de mensurao a distino de respostas em diferentes
categorias nominais: por exemplo: aprovados/no aprovados; feminino/masculi-
no; grupo 1/grupo 2/grupo 3/grupo 4; Estados Unidos/Brasil/Mxico etc. Essas
mensuraes podem ser contadas em freqncias e percentuais de respostas.
Podem-se utilizar tambm escalas ordinais, em que as unidades sob anlise
so classificadas em relao a uma varivel que pode ser mensurada em um con-
tinuum, mas para a qual no temos medidas diretas disponveis. Por exemplo,
pode-se perguntar a um painelista qual a probabilidade de um dado evento, no
futuro, e oferecer a ele, como alternativas de respostas: alta probabilidade,
mdia probabilidade e baixa probabilidade.
Uma forma de mensurao mais interessante pelas possibilidades de an-
lise que permite so as escalas de intervalo. Nestas, aplica-se uma escala em
que se pressupem intervalos iguais, entre medidas numricas, correspondendo
a diferentes estados da varivel de interesse. Por exemplo, pode-se perguntar
sobre a capacidade de fiscalizao de uma determinada lei, no futuro, em uma
escala ordinal de 10 pontos, em que o nmero 1 corresponde capacidade quase
nula e o nmero 10 capacidade extremamente elevada. Assumem-se, nesse
caso, intervalos iguais entre os vrios pontos da escala. A grande vantagem desse
tipo de mensurao que permite a realizao de inmeras anlises estatsticas,
tornando mais rica a compreenso de um determinado fenmeno.
As questes fechadas podem ter diferentes estruturas:
a) dicotmicas (com respostas do tipo sim-no) ou de mltipla escolha (com
mais de duas alternativas de natureza qualitativa), correspondendo s
escalas nominais e ordinais;
14 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

b) ou definidas por uma escala de intervalo, como a escala de Likert (escala de
concordncia, de cinco a sete pontos), que uma das mais utilizadas.

Quadro 1 E
 xemplo de questo Delphi na rea de comunicao (a partir de informa-
es da ANJ, 2003).

LEITURA DE JORNAIS

1. Segundo a Associao Nacional de Jornais, o Brasil mostra tendncia

para alta na circulao de jornais, ainda que se verifiquem ocasionalmente
pequenas redues, como ocorreu em 2001. Essa Associao aponta que a
circulao anual est em 64,2 exemplares por mil habitantes (consideran-
do-se somente a populao adulta), muito abaixo dos pases desenvolvi-
dos, sem falar nos que, como Japo ou Noruega, passaram muito dos 600
exemplares por mil.
Sabe-se que entre as causas do baixo ndice de circulao de jornais no
Brasil esto o nvel educacional da populao e a sua composio etria.
A mesma associao informa, em sua pgina eletrnica, que leitores que
mais lem jornais esto na faixa etria de 15 a 34 anos, correspondendo,
atualmente, a um total de 62 milhes de pessoas, dos quais cerca de 50%
so os que lem jornais, na atualidade. Observa-se ainda que, nessa faixa
etria, vem caindo sistematicamente a taxa de analfabetismo (de 20,1%,
em 1990, para 13,6%, em 2000), ao mesmo tempo em que tem aumentado
(para at 95%, em algumas regies) a taxa de escolarizao, na faixa de 7
aos 14 anos. Essa populao de analfabetos, nessa faixa etria, corresponde
a um total de 16 milhes de pessoas, aproximadamente.

Considerando essas informaes e uma taxa anual de crescimento da po-

pulao de 1,8% ao ano, estime o total de leitores, em 2010, nessa faixa etria,
indicando sua avaliao na Tabela seguinte:

Anos Total de leitores, na

faixa de 15 a 34 anos
2001 32,8 milhes
2002 33,5 milhes
2010 ______ milhes
 Tcnica Delphi 15

Utilize o espao abaixo para explicar o raciocnio lgico utilizado para fazer
a estimativa acima:
________________________________________________________________
________________________________________________________________
________________________________________________________________
______________________________________________________________________

Para qualquer tipo de mensurao (escalas nominais, ordinais ou de intervalo)

que esteja includa em uma questo, a formulao desta deve obedecer s recomen-
daes a seguir. A pergunta deve ser formulada de modo simples, usualmente com
termos de linguagem comum. Deve ser especfica e referir-se a um nico conceito ou
dimenso de julgamento (CONVERSE e PRESSER, 1986).
As alternativas de resposta devem ser mutuamente exclusivas, devem ser exaus-
tivas (isto , todas as possibilidades devem estar includas, inclusive as combinaes
entre alternativas); a questo central deve estar clara, dentro de cada alternativa.
As instrues para resposta (ou o argumento da pergunta) devem tornar claro se o
cliente ou usurio pode escolher mais de uma alternativa. A excluso da alternativa
mdia recomendada, especialmente se se quer como o caso uma resposta mais
comprome-tida dos avaliadores (CONVERSE e PRESSER, 1986; PAYNE, 1980).
particularmente til observar que as alternativas de resposta devem apresen-
tar nvel de agregao semelhante. Por exemplo, para a pergunta que tipo de mdia
ser mais acessado pelo consumidor, no futuro?, as alternativas poderiam ser: (a)
Jornal, (b) Rdio; (c) Televiso etc. A alternativa imprensa no seria adequada, por
representar outro nvel de agregao, que inclusive engloba as demais alternativas.
Em alguns casos muito particulares especialmente quando no se conhecem
todas as alternativas possveis , os menus podem incluir uma alternativa outros/
outras, para acomodar respostas que no se enquadrem nas demais possibilidades
de resposta.
Perguntas abertas (isto , aquelas em que no so oferecidas alternativas de
resposta) devem ser formuladas de modo tal que requeiram respostas discursivas ou
explicaes sobre o tema tratado (e no respostas do tipo sim-no). Isto porque este
tipo de questo pode ser extremamente til para a identificao de aspectos qualita-
tivos no facilmente detectados atravs de questes fechadas (em que as alternativas
de respostas so fornecidas de antemo).
O Quadro 2 apresenta um conjunto de regras bsicas a serem utilizadas na ela-
borao de questes Delphi.
Uma orientao extremamente importante, para o desenvolvimento de question-
rios, de maneira geral, e particularmente para Questionrios Delphi, a necessidade
de aperfeioamento exaustivo desse instrumento, de modo a eliminar vieses de in-
16 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

terpretao no prevista pela equipe de especialistas. Assim, a elaborao deve dar-se

pelo ajuste de inmeras verses de um instrumento inicial, at que a equipe avalie
que, dentro de seu conhecimento, no pode incluir mais nenhum aperfeioamento.

Quadro 2 Orientao para a formulao de perguntas em Questionrio Delphi.

ORIENTAO GERAL
Tenha certeza de entender em profundidade o tema de cada pergunta/grupo
de perguntas.
Tenha certeza de que o tema est totalmente definido (quem, por qu,
quando, onde e como).
Tenha certeza de que o tema faz sentido para seu pblico-alvo (os espe-
cialistas).
Decida que tipo de pergunta melhor para o tema perguntas abertas,
opo mltipla etc.
Evite expressar-se de maneira ofensiva em relao ao painelista (por exem-
plo, sendo didtico demais).
Evite ambigidades em palavras ou expresses.
Evite perguntas com negativa dupla (por exemplo: Voc no concorda que
tal evento no vai ocorrer, no futuro?).
Use poucas e simples palavras para formular as perguntas; palavras conhe-
cidas so as melhores.

PERGUNTAS ABERTAS
H mesmo necessidade de perguntas abertas?
Verifique se as perguntas abertas podem ser convertidas em perguntas
estruturadas.
Elabore perguntas abertas de forma suficientemente diretiva para que suas
expectativas sobre as respostas sejam atendidas.

PERGUNTAS COM MLTIPLAS ALTERNATIVAS

Evite alternativas implcitas; transforme-as em alternativas sobre a per-
gunta proposta.
Alternativas devem ser mutuamente exclusivas, ou deve existir a alternativa
para resposta ambas.
Alternativas devem ser complementares.
Evite duplicidade de objetos em uma mesma pergunta, dividindo-a em
duas questes.
Deixe claro se possvel escolher mais de uma alternativa.
Evite um nmero exagerado de alternativas.
Formule cada alternativa com preciso e clareza.
 Tcnica Delphi 17

Nesse momento, a equipe deve submeter essa verso a um teste denomi-

nado validao semntica com um conjunto reduzido de especialistas, com
as mesmas caractersticas daqueles que iro participar do Painel Delphi. Nesse
teste, objetiva-se uma avaliao de clareza e dificuldade apresentada por cada
questo Delphi. O procedimento consiste em aplicar a verso mais aperfeioada
do questionrio, para que esse grupo de especialistas lhe responda. Solicita-se
tambm que esses painelistas registrem pontos no claros, dificuldades para
responder e sugestes de aperfeioamento. Esse registro pode tambm ser feito
com a ajuda de outro instrumento, com essa finalidade.
Terminada a validao semntica, a equipe deve analisar os dados obtidos e
tomar decises sobre pontos a aperfeioar no questionrio. Feitos esses ajustes,
pode-se, afinal, preparar e realizar o Painel Delphi.

3.5 Estudos prospectivos e informao

3.5.1 Informao como insumo aos estudos prospectivos

Os estudos prospectivos demandam informao, para formar a base para a

prospeco do futuro. A dificuldade , em geral, identificar fontes de informao
sobre o desempenho do sistema ou dos seus componentes, no formato demandado
pelo modelo de anlise, com confiabilidade suficiente e em sries histricas de
durao compatvel com os objetivos dos estudos.
O padro da informao disponvel , em geral, organizado por disciplinas,
enquanto os estudos prospectivos adotam o enfoque sistmico. Esta uma das
causas de dificuldades de formato. O registro na verso disciplinar tende a ser
esttico, enquanto a viso sistmica dinmica, incluindo a varivel tempo no
processo analtico. Por isso, raramente esto disponveis no acervo de informao
existente sobre um sistema (por exemplo, uma cadeia produtiva) sries histricas
sobre fluxos entre as organizaes componentes.
Uma outra dificuldade a obteno de informao qualitativa e quantitativa
que permita analisar processos produtivos e gerenciais. Isto ocorre por razes
diversas. Determinadas dimenses das organizaes sofrem com a falta de regis-
tro, e isto na maioria das empresas, tornando a recuperao da informao sobre
operao e custos dos processos produtivos e gerenciais um exerccio rduo e
impreciso. Em outras organizaes, onde os processos de registro de informao
so mais aprimorados, a questo do sigilo para minimizar a imitao competitiva
torna a coleta de informao ainda mais problemtica, havendo muitas vezes a
18 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

necessidade de empregar tcnicas de coleta cruzada, para esclarecer determina-

dos temas.
As tcnicas empregadas para esta tarefa so a coleta de dados secundrios,
realizada por processo de pesquisa bibliogrfica e de busca na Internet, e levanta-
mento direto, entrevistando stakeholders, servidores e clientes das organizaes.
Este trabalho de campo permite equipe coletar um grande acervo de informaes
qualitativas e eventualmente quantitativas, de grande utilidade para a anlise de
desempenho dos sistemas, e raramente disponvel em bases de informao mais
estruturadas.
Uma vez coletada, a informao organizada em sries histricas, grficos,
tabelas ou em formato descritivo, quando se tratar de informao qualitativa.
Neste tratamento, as planilhas eletrnicas e os softwares de anlise estatstica
so as ferramentas mais empregadas. Estas ferramentas informatizadas tambm
permitem o armazenamento, a recuperao rpida e o intercmbio eletrnico,
viabilizando o trabalho de pesquisa em redes virtuais.

3.5.2 Informao como produto dos estudos prospectivos

Uma das grandes contribuies dos estudos prospectivos a ampliao da

base de conhecimento sobre o desempenho dos sistemas e das organizaes
analisados. Esta viso sistmica e prospectiva que um bom estudo proporciona
relativamente escassa no mercado de conhecimento e de grande valor para a
formulao de estratgias de gesto.
Ademais, estes exerccios contribuem para a formao de uma cultura es-
tratgica nas organizaes (VAN DER HEIDJEN, 1997), o que influencia posi-
tivamente a implementao das estratgias traadas a partir dos resultados dos
estudos prospectivos.

4 Aplicaes da Tcnica Delphi nas organizaes de comunicao

As organizaes de comunicao produzem ou transferem informao e

conhecimento para a sociedade. Os estudos prospectivos so importante ferra-
menta para a gesto de competitividade de negcios, para a gesto de programas
e projetos, entre outros. Entre muitos possveis usos, a prospeco tecnolgica
pode indicar oportunidades e ameaas ao desenvolvimento tecnolgico, setorial
e regional, apontando gargalos, limitaes, oportunidades e demandas por tec-
nologias e servios.
De uma forma geral, tm sido observados aplicaes de estudos sistmicos
e pros-pectivos com diferentes propsitos. Podem-se mencionar aplicaes na
 Tcnica Delphi 19

gesto de sistemas sociais e econmicos e organizaes (gesto de negcios), no

desenvolvimento social e econmico, na formulao de polticas pblicas. So
exemplos dessas aplicaes as seguintes:
Gesto da eficincia (produtividade e custos): estas so as aplicaes mais
usuais do conceito. A partir do exame de entradas e sadas do sistema
ou das organizaes componentes, e de seus processos produtivos, de-
terminam-se fatores limitantes produtividade e aos custos, gerando-se
a informao pertinente para a melhoria do desempenho dos diversos
sistemas produtivos. Exemplos dessas aplicaes so encontrados nos
estudos sobre a competitividade das cadeias produtivas da soja (CAS-
TRO et al., 2000), da manga (LEITE et al., 1998), do melo (DIAS et al.,
1998), da uva (GAMA et. al., 1998) e do dend (LIMA et al., 2000).
Gesto da qualidade e da diferenciao: os requisitos de qualidade dos pro-
dutos e processos dos clientes intermedirios e finais de uma cadeia
produtiva ou de uma organizao podem ser determinados, assim como
a importncia e o nvel de cumprimento desses requisitos objetivamente
avaliados, e a partir desses produtos possvel definir polticas para a
gesto da qualidade e da diferenciao de produtos dessa cadeia produ-
tiva ou organizao (ver PESSOA & LEITE, 1998).
Gesto da competitividade: competitividade em geral determinada por
vantagem comparativa em custos, o que indica maior eficincia produ-
tiva, ou por diferenciao de produtos. O estudo comparativo de cadeias
produtivas ou organizaes competidoras um timo instrumento para
indicar fatores crticos de competitividade de natureza tecnolgica, ge-
rencial ou estrutural, uma vez que permite uma viso sistmica sobre o
desempenho de sistemas e processos produtivos. Os estudos sistmicos
e prospectivos apontam fatores crticos de competitividade no presente
e no futuro, criando uma base de informao para a formulao de estra-
tgias de competitividade (ver WRIGHT & JOHNSON, 1992; CASTRO
et al., 2002).
Gesto da sustentabilidade ambiental: a anlise dos processos produtivos
agrcola e industriais e de suas interfaces com o meio ambiente pode
ser avaliada, estimando-se possveis impactos atuais e futuros sobre a
sustentabilidade ambiental (ver NOGUEIRA et al., 1998; BELARMINO
et al., 1998).
Gesto dos mercados e oportunidades (foco): ao analisar o comportamento
de consumidores intermedirios e finais de produtos e subprodutos de
uma cadeia produtiva ou organizao, os estudos prospectivos geram
informao para a deciso sobre nfases de produtos e mercados consu-
midores (ver LEITE & CASTRO, 2003; BRISOLA & CASTRO, 2004).
20 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

Gesto da comunicao e da informao: sistemas sociais so compostos

de organizaes e outros segmentos sociais com funes distintas e
geograficamente dispersos. Para desempenhar suas funes, necessitam
informao tecnolgica, gerencial e de mercados de fatores e de produtos,
geradas interna e externamente ao sistema. A forma como a informao
produzida, flui e apropriada pelos diversos componentes do sistema
social e um fator preponderante no seu desempenho atual e futuro.
Este conhecimento essencial para desenvolver estratgias de gesto
de informao no sistema. Um exemplo de estudo dessa natureza foi
feito cobrindo a cadeia da soja no Mato Grosso (DUARTE & CASTRO,
2004).
Melhoria da base de informaes: boas decises demandam informao de
qualidade (bibliografia, sites, bases de dados). Os estudos prospecti-
vos geram informao dessa natureza, que pode ser democratizada em
processos alternativos de gesto de informao, accessvel aos diversos
extratos sociais componentes dos sistemas sociais.
Melhoria da imagem e sustentabilidade institucional: estudos de desempenho
de sistemas sociais e cadeias produtivas, por rgos governamentais e
no governamentais, geram uma importante contribuio aos atores da
cadeia, contribuindo para realar a imagem institucional positiva das
organizaes patrocinadoras desses estudos, perante a sua clientela.
Gesto da distribuio de benefcios (eqidade): o exame dos fluxos de capital
de uma determinada cadeia ou sistema social pode indicar aos gestores
de polticas pblicas as discrepncias na apropriao dos benefcios
produzidos nesses sistemas e a necessidade de intervenes localizadas,
para garantir um acesso mais equnime s oportunidades e aos benefcios
gerados pela atividade produtiva.
Gerao e gesto de polticas pblicas: a implantao de polticas especficas
orientadas para determinado setor ou regio podem ser acompanhadas
e ter os seus impactos avaliados, principalmente no que tange com-
petitividade das cadeias produtivas e ao desenvolvimento dos sistemas
sociais afetados. Ao revelar com maior preciso a natureza dos gargalos
tecnolgicos e no tecnolgicos, e as oportunidades e ameaas futuras
ao desempenho da cadeia produtiva, e ao desenvolvimento dos sistemas
sociais, os estudos prospectivos contribuem para orientar a formulao
de novas polticas pblicas de apoio ao desempenho da cadeia e do de-
senvolvimento dos sistemas sociais. Um exemplo desse tipo de uso o
trabalho de Yamaoka & Watanabe (1998), sobre a cadeia produtiva da
seda no Paran.
 Tcnica Delphi 21

5 Concluso

A Tcnica Delphi foi desenvolvida inicialmente para apoiar estudos estrat-

gicos na Rand Corporation. Com a evoluo e a difuso do seu uso, a cada dia
so identificadas novas aplicaes para esta metodologia. Este texto examina
conceitos, mtodos e usos dessa metodologia, mostrando possibilidades de apli-
cao gerais e especficas, no mbito da comunicao e organizaes vinculadas
ao tema.
Vrios usos e aplicaes da Tcnica Delphi exemplificados neste texto podem
ser de interesse das organizaes e estudiosos da comunicao, seja para realizar
estudos e pesquisas sobre a cincia da comunicao, seja para organizar a gesto
estratgica das organizaes envolvidas. O marco conceitual e os procedimentos
metodolgicos apresentados aparentemente no apresentam dificuldade para ser
incorporados ao mbito da comunicao, podendo por isso representar mais uma
ferramenta poderosa para gerentes e pesquisadores dessa rea.
Ressalte-se que a anlise de sistemas, notadamente no que tange ao estudo
de fluxos de informao, representa um complemento indispensvel s tcnicas
prospectivas, devendo por isso ser incorporada como tcnica complementar s
aplicaes da tcnica Delphi na comunicao.
A realizao de estudos de futuro, como se viu, no um exerccio de adi-
vinhao ou de pura arte. Na verdade, envolve grandes doses de rigor metodo-
lgico, seja na realizao de estudos diagnsticos de base, seja no levantamento
de percepes de especialistas no tema que se est investigando, essencial para
a validade e a solidez das anlises de futuro que se pode fazer, a partir desses
levantamentos.
Estudos prospectivos tm se tornado cada vez mais relevantes, como ferra-
menta poderosa e sistemtica para gerar conhecimento que permita desenhar
planejamentos e estratgias com maiores chances de sucesso, especialmente
naquelas reas em que decises que esto sendo tomadas, no presente, tenham
conseqncias ou impactos apenas em horizontes temporais de longo prazo.
Esse certamente o caso dos sistemas de gerao de informao e conhecimento,
como o caso da comunicao.
22 Mtodos e tcnicas de pesquisa em comunicao - Material do Portal Atlas

Referncias Bibliogrficas

BELARMINO L. C. et al. Diagnstico de demandas no sistema natural de terras baixas

no Sul do Brasil. In: CASTRO, A. M. G. de et al. Prospeco tecnolgica de cadeias produtivas
e sistemas naturais. Braslia: Embrapa/DPD/SPI, 1998.

BRISOLA, M.; CASTRO, A. M. G. de. Fluxo e sintonia da informao sobre as prefern-

cias dos consumidores de carne bovina do DF entre os agentes a montante da cadeia de
produo. CADERNOS de C&T, Braslia: Embrapa, 2004 (submetida para publicao).

CASTRO, A. M. G. de; COBBE, R. V.; GOEDERT, W. J. Prospeco de demandas tecnolgicas:

manual metodolgico para o SNPA. Braslia: Embrapa-DPD, 1995.

________ et al. Prospeco tecnolgica de cadeias produtivas e sistemas naturais. Empresa Brasi-
leira de Pesquisa Agropecuria. Departamento de Pesquisa e Desenvolvimento. Braslia:
Embrapa-DPD, 1998.

________ et al. Estratgias para a institucionalizao de prospeco de demandas tecno-

lgicas na Embrapa. Revista de Administrao da UFLA, 1, 2, 3-16, 2000.

________ et al. La dimensin de futuro en la construccin de la sostenibilidad institucional. Proyecto

Nuevo Paradigma, ISNAR - Servicio Internacional para la Investigacin Nacional, Costa
Rica, 2001.

________ et al. Competitividade da cadeia produtiva da soja na Amaznia Legal. Braslia: Em-
brapa/DPD, IPEA e FADE 2002.

________ et al. Cadena productiva: marco conceptual para la prospeccin tecnolgica.

Revista Espacios, Venezuela: Caracas, v. 23, no 2, 2002.

________ de et al. O futuro da produo de cultivares e sementes no Brasil. Impactos da Biotec-

nologia e da Lei de Proteo do Conhecimento. Braslia: Embrapa, 2004. (No prelo.)

DIAS, R. de C. S. et al. A cadeia produtiva do melo no Nordeste. In: CASTRO, A. M.

G. de et al. Prospeco tecnolgica de cadeias produtivas e sistemas naturais. Braslia: Embra-
pa/DPD/SPI, 1998.

DUARTE, J.; CASTRO, A. M. G de. Comunicao e tecnologia na cadeia produtiva da soja em

Mato Grosso. Braslia: Embrapa, 2004.

GODET, M. From anticipation to action: a handbook of strategic prospective. Paris: Unesco

Publishing, 1994.

LEITE, L. A. de S. et al. O agronegcio da manga no Nordeste do Brasil. In: CASTRO,

A. M. G. de et al. Prospeco tecnolgica de cadeias produtivas e sistemas naturais. Braslia:
Embrapa/DPD/SPI, 1998.

LEITE, R. R.; CASTRO, A. M. G. de. Competitividade da cadeia do abacaxi em Gois.

Cadernos de C&T. Braslia: Embrapa, 2003.
 Tcnica Delphi 23

LIMA, S. M. V. et al. Competitividade da cadeia produtiva do dend na Amaznia Legal. Braslia:

Embrapa/DPD, IPEA e FADE, 2000.

________ et al. La dimensin de entorno en la construccin de la sostenibilidad institucional.

Proyecto Nuevo Paradigma, ISNAR Servicio Internacional para la Investigacin Na-
cional, Costa Rica, 2001.

LINSTONE, H. A.; TUROFF, M. The Delphi Method: techniques and applications. Readings,
Massachusets: Addison Wesley, 1975.

NOGUEIRA E. A. et al. Estudos de prospeco de demandas do sistema natural da regio

Sudoeste do Estado de So Paulo. In: CASTRO, A. M. G. de et al. Prospeco tecnolgica de
cadeias produtivas e sistemas naturais. Braslia: Embrapa/DPD/SPI, 1998.

PESSOA, P. F. A. de P.; LEITE, L. A. de S. Estudo da cadeia produtiva como subsdio para

pesquisa e desenvolvimento do agronegcio. Centro Nacional de Pesquisa de Agroindstria
Tropical. Fortaleza: Embrapa-CNPAT, 1996.

SARVIA, A. Enfoque de sistemas para el desarrollo agrcola. San Jose: Editorial IICA,
1986.

SILVA, P. C. G. de et al. A cadeia produtiva da uva de mesa no Nordeste do Brasil. In:

CASTRO, A. M. G. de et al. Prospeco tecnolgica de cadeias produtivas e sistemas naturais.
Braslia: Embrapa/DPD/SPI, 1998.

VAN DER HEIJDEN, K. Scenarios: the art of strategic conversation. New York: John
Wiley, 1996.

VIEIRA, L. F. El mtodo de escenrios para definir el rol de los INIAS en la investigacin agroin-
dustrial. La Haya, Paises Bajos: ISNAR, 1999.

YAMAOKA, R. S.; WATANABE, J. K.; BARONI, S. A. Estudo da cadeia produtiva da

seda no Estado do Paran. In: CASTRO, A. M. G. de et al. Prospeco tecnolgica de cadeias
produtivas e sistemas naturais. Braslia: Embrapa/DPD/SPI, 1998.