The qualitative approach in the research in production management in Brazil/A abordagem qualitativa na pesquisa em administracao da producao no Brasil/El abordaje cualitativo en la investigacion en administracion de la produccion en Brasil.
Roman, Darlan Jose ; Marchi, Jamur Johnas ; Erdmann, Rolf Hermann 等
1. INTRODUCAO
A pesquisa na area de Administracao da Producao e historicamente
caracterizada por seu enfoque quantitativo-descritivo (BUFFA, 1980;
CHASE, 1980; FILIPPINI, 1997). As ferramentas e modelos propostos se
preocupam, normalmente, mais com a proposicao de modelos gerenciais do
que com o desenvolvimento da teoria ou com uma analise mais critica.
Talvez esse fato seja decorrente da forte predominancia do paradigma
funcionalista na pesquisa em Administracao.
Contudo, uma mudanca na forma de fazer pesquisa em Administracao da
Producao tem sido observada, principalmente pelo surgimento de estudos
de natureza qualitativa (AMUNDSON, 1998). E possivel mesmo falar em
predominancia dos estudos qualitativos nesta area em alguns momentos, em
edicoes de periodicos ou anais de eventos. Esse fato chamou a atencao de
Lacerda et al. (2007), que realizaram um estudo para verificar as
abordagens utilizadas na academia. Dentre seus achados, destaca-se a
observacao de que ha uma diferenca importante entre a producao academica
brasileira e a estrangeira. Enquanto em publicacoes nacionais ha maior
quantidade de artigos qualitativos, em publicacoes internacionais os
artigos quantitativos sao preponderantes.
A insercao da pesquisa qualitativa na area da Administracao da
Producao tem chamado a atencao de alguns autores para os aspectos
relativos a qualidade dos estudos e ao rigor metodologico (CAUCHICK
MIGUEL, 2007, 2010; PEREIRA MELLO et al., 2012, entre outros). Assim,
este trabalho se junta aos anteriores a fim de melhor compreender como a
area de operacoes produz conhecimento. Com o objetivo de identificar as
caracteristicas metodologicas predominantes e os principais temas
abordados nos estudos sobre gestao da producao, estruturou-se uma
pesquisa documental que analisou a producao cientifica publicada em
periodicos brasileiros com conceito A (QualisCapes) na area. Foram
analisados 486 artigos publicados no periodo compreendido entre 2007 e
2011.
Nesse sentido, este artigo contribui para o conhecimento das
caracteristicas metodologicas da pesquisa em Administracao da Producao,
e avanca ao fornecer resultados relativos a um periodo temporal
especifico e, ate entao, inexplorado. Tais resultados permitem observar
a coerencia entre pesquisadores nacionais e internacionais na maneira de
fazer pesquisa nesta area, seja preferencialmente por meio de
determinados metodos de pesquisa, seja por assuntos abordados.
A seguir, apresenta-se o referencial teorico que destaca o contexto
da pesquisa em Administracao da Producao no Brasil. Na sequencia, o
metodo utilizado para a conducao da pesquisa e formalizado. Por fim, os
dados sao analisados e discutidos, destacando-se alcances e limites dos
principais metodos.
2. PESQUISA QUALITATIVA
A escolha entre diferentes metodos de pesquisa depende do objetivo
da pesquisa, do que se esta tentando explicar. Exemplificando, se o
pesquisador quer descobrir a intencao de voto de um eleitor, entao o
metodo quantitativo, como um survey, pode ser a escolha mais apropriada.
Se, entretanto, o pesquisador esta preocupado em explorar a historia de
vida das pessoas ou seu comportamento no cotidiano, entao o metodo
qualitativo pode ser mais apropriado (SILVERMAN, 2006). E dificil
definir claramente a pesquisa qualitativa como um terreno de discussao
ou de discurso. Ela nao possui uma teoria ou um paradigma nitidamente
proprio. E empregada em muitas disciplinas distintas, nao pertencendo a
uma unica disciplina. "E melhor entender a investigacao qualitativa
como um terreno ou uma arena para a critica cientifica social, do que
como um tipo especifico de teoria social, metodologia ou filosofia"
(SCHWANDT, 2006:194).
A pesquisa qualitativa implica uma enfase nas qualidades das
entidades e nos processos e significados que nao sao examinados ou
medidos experimentalmente quanto a quantidade, volume, intensidade ou
frequencia (DENZIN; LINCOLN, 2006). "Em certo sentido, todos os
metodos de pesquisa sao, no fundo, qualitativos. O emprego de dados
quantitativos ou procedimentos matematicos nao elimina o elemento
intersubjetivo que representa a base da pesquisa social" (VIDICH;
LYMAN, 2006:49). Historicamente, a pesquisa qualitativa
[...] e a denominacao de um movimento reformista surgido no inicio
dos anos 1970 no meio academico. O movimento abrangeu multiplas criticas
epistemologicas, metodologicas, politicas e eticas da pesquisa
cientifica social em campos e disciplinas que favorecem estrategias de
pesquisa experimental, quase-experimental, correlacional e da pesquisa
feita atraves de levantamentos. (SCHWANDT, 2006:193).
A pesquisa qualitativa envolve o estudo do uso e a coleta de uma
variedade de materiais empiricos--estudo de caso, experiencia pessoal,
introspeccao, historia de vida, entrevista, artefatos, textos e
producoes culturais, textos observacionais, historicos, interativos e
visuais--que descrevem momentos e significados rotineiros e
problematicos da vida dos individuos (DENZIN; LINCOLN, 2006). O uso de
multiplos metodos ou da triangulacao na pesquisa qualitativa reflete uma
tentativa de assegurar uma compreensao em profundidade do fenomeno em
questao. "No processo analitico da pesquisa qualitativa se utilizam
conjuntos distintos de metodos, como a analise semiotica, a analise
narrativa, do conteudo, do discurso, de arquivos e a fonemica, ate mesmo
as estatisticas, as tabelas, os graficos e os numeros." (DENZIN;
LINCOLN, 2006).
Avaliar a qualidade da pesquisa qualitativa requer um entendimento
das bases ontologicas e epistemologicas do pesquisador e da pesquisa
(AMIS; SILK, 2008). Godoy (2006) propoe uma agenda minima de criterios
que devem ser levados em consideracao para garantir a qualidade da
pesquisa qualitativa: 1) necessidade de clareza na apresentacao dos
pressupostos orientadores do paradigma qualitativo que da sustentacao ao
estudo; 2) realizacao de estudo-piloto; 3) explicitacao da forma pela
qual se desenvolveu o trabalho de campo e o processo analitico; 4)
consistencia entre dados coletados e resultados; 5) fornecimento de
dados ricos e abundantes; 6) realizacao de checagens pelos participantes
e pesquisadores; 7) fornecimento de informacoes suficientes para que
haja possibilidade de ocorrer a generalizacao naturalistica; 8)
organizacao de arquivos que preservem os dados.
No Brasil, Pinto et al. (1999) identificaram que os tipos de
estudos qualitativos mais usados na producao do conhecimento sao: a
etnografia, a etnometodologia, o estudo de caso, o estudo documental e a
grounded theory. Mais recentemente, Godoi e Balsini (2006) identificaram
que, especificamente nos estudos em organizacoes, os principais metodos
qualitativos empregados sao: estudos de caso, pesquisa-acao, etnografias
e grounded theory.
3. A PESQUISA NA ADMINISTRACAO DA PRODUCAO NO BRASIL
A pesquisa em Administracao da Producao e desenvolvida por autores
pertencentes tanto a programas de pos-graduacao de Administracao quanto
a programas da area de Engenharia de Producao (CORREA; PAIVA; PRIMO,
2010). No entanto, conforme Arkader (2003), parece haver uma lacuna
metodologica a suprir referente a qualidade metodologica dos estudos
realizados na area. A tradicao da pesquisa nesta area evidencia que se
deu excessiva enfase ao instrumental quantitativo, e as associacoes com
a engenharia e as ciencias da decisao contribuem para essa configuracao
predominantemente quantitativa (ARKADER, 2003).
O grande desafio que se coloca para a pesquisa em operacoes no pais
e de natureza metodologica. A origem na engenharia, campo com orientacao
de pesquisa distinta da gerencial, nao tem, decerto, favorecido a
solidez metodologica da producao cientifica nacional nas operacoes
quando vistas como campo funcional em Administracao. Assim como se viu
ser relativamente recente em centros mais desenvolvidos a adocao da
pesquisa empirica no estudo da Gerencia de Operacoes, observa-se que
essa tendencia, aqui, ainda nao se encontra muito propagada. Parece ser
necessario dar melhor formacao a nossos pesquisadores em operacoes,
levando a adocao de estrategias de pesquisa robustas, adequadas para
responderem a perguntas relevantes para a area, seguidas de um bom
planejamento e execucao de pesquisas de campo. Parece tambem ser preciso
dotar nossos pesquisadores de melhor instrumental para analisar os dados
colhidos, de forma a poderem gerar uma literatura que contribua,
efetivamente, para o conhecimento da area, tanto em nivel nacional
quanto internacional (ARKADER, 2003:70).
Segundo Correa, Paiva e Primo (2010), um levantamento realizado
para o Painel do EnANPAD 2008 nas principais revistas brasileiras da
area de Administracao (RAC, RAE, RAUSP e REAd) encontrou 19 artigos
publicados sobre o tema Administracao da Producao entre 2002 e 2008.
Notou-se que havia um equilibrio entre metodos qualitativos e
quantitativos (oito artigos cada), e que os outros tres trabalhos
abordavam discussoes teoricas. Nesse contexto, pode-se afirmar que, ao
longo da primeira decada deste seculo, a pesquisa em Administracao da
Producao manteve a pluralidade metodologica ate hoje caracteristica da
area (CORREA; PAIVA; PRIMO, 2010).
Em pesquisa semelhante, envolvendo, no entanto, periodicos
especificos da area de Administracao da Producao no periodo de 2003 a
2006, Lacerda et al. (2007) verificam que, com relacao a abordagem
utilizada, aparentemente ha uma diferenca importante entre a producao
academica brasileira e a estrangeira. Enquanto em publicacoes nacionais
ha maior quantidade de artigos qualitativos, em publicacoes
internacionais os artigos quantitativos parecem ser preponderantes.
Com relacao a analise dos dados de procedimentos tecnicos, Lacerda
et al. (2007) verificam que parece haver uma notavel diferenca entre as
publicacoes brasileiras e as estrangeiras. Enquanto as pesquisas
nacionais parecem usar mais estudos de caso, as internacionais aparentam
ser mais concentradas em pesquisa bibliografica. O levantamento e a
pesquisa experimental parecem ser outros dois procedimentos muito
utilizados.
Recentemente, foi lancada no Brasil uma coletanea de artigos sob a
forma de livro que trata de metodos de pesquisa no campo da Engenharia
da Producao (CAUCHICK MIGUEL, 2010), o que evidencia a preocupacao de
entender melhor como se faz pesquisa, especialmente pesquisa empirica.
Segundo Nakano (2010), o campo da gestao de operacoes faz parte das
ciencias sociais e tem por objetivo estudar e desenvolver teorias sobre
os processos empresariais, justificando as pesquisas empiricas. Conforme
esse autor, uma tendencia positiva pode ser observada nos anais do
Encontro Nacional de Engenharia da Producao (ENEGEP), no periodo de 1996
a 2004, relativa a um aumento significativo (ultrapassou os 50% do total
de artigos publicados) de estudos de natureza empirica. Nesse contexto,
os trabalhos que envolvem abordagens qualitativas de pesquisa ganharam
relevancia, em especial os estudos de caso (CAUCHICK MIGUEL, 2007). O
objetivo deste trabalho coaduna com os dados apresentados,
principalmente por atualizar o contexto da producao cientifica no campo
de gestao da producao e operacoes, mais precisamente com relacao as
abordagens qualitativas.
4. METODOLOGIA
Com o objetivo de identificar as caracteristicas metodologicas
predominantes nos estudos sobre gestao da producao e, fundamentalmente,
descrever os metodos qualitativos utilizados, estruturou-se uma pesquisa
documental que analisou a producao cientifica publicada em periodicos
brasileiros com conceito A (QualisCapes) na area. Foram analisados 486
artigos publicados no periodo compreendido entre 2007 e 2011. Os
procedimentos metodologicos empregados neste trabalho baseiam-se no
estudo desenvolvido por Godoi e Balsini (2006). Inicialmente, foram
definidos os criterios de classificacao dos artigos, estruturando-se a
analise documental nas seguintes etapas:
1. classificacao dos artigos segundo o tipo de pesquisa
(quantitativo, qualitativo, qualiquantitativo e ensaio teorico);
2. eliminacao dos artigos classificados como pesquisa quantitativa,
quali-quantitativa e ensaio teorico;
3. classificacao das pesquisas qualitativas de acordo com o metodo
ou estrategia utilizados (analise critica do discurso, estudo de caso,
etnografia, grounded theory, pesquisa-acao e outros);
4. identificacao dos principais temas abordados nos estudos de
natureza qualitativa.
Os artigos classificados metodologicamente como outros sao aqueles
nos quais nao foi possivel conhecer a estrategia utilizada. Ou seja, o
artigo menciona ser qualitativo, mas apenas relata que foram conduzidas
entrevistas (estruturadas, nao estruturadas, em profundidade) ou
observacoes (participante ou nao participante).
Para a coleta dos dados foram selecionados os dois principais
periodicos brasileiros da area de Administracao que tratam
especificamente da pesquisa em gestao da producao. As revistas
selecionadas foram a Producao, da USP, e a Gestao e Producao, da UFSCar,
qualificadas no periodo da pesquisa como A2 na area de Administracao,
Contabilidade e Turismo pelo sistema Qualis-Capes. Optou-se por
investigar as publicacoes referentes aos cinco ultimos anos,
compreendendo os anos de 2007 a 2011, seguindo-se as recomendacoes de
Lacerda et al. (2007) quanto a importancia do desenvolvimento de estudos
desse genero nesse periodo temporal.
Na primeira etapa da pesquisa, analisou-se a totalidade dos artigos
publicados nas revistas Producao e Gestao e Producao. A analise
desenvolveu-se com a leitura da sessao correspondente ao aporte
metodologico empregado. Neste passo, os artigos foram classificados como
quantitativos, qualitativos, quali-quantitativos, ensaios e nao
identificado. Os trabalhos categorizados como com metodologia nao
identificada correspondem aos que nao possuem a secao Metodologia ou,
mesmo a possuindo, nao fazem qualquer mencao ao tipo de metodo
empregado.
Na etapa seguinte, os artigos qualitativos foram categorizados em:
analise critica do discurso, estudo de caso, etnografia, grounded
theory, pesquisa-acao e estrategia nao identificada. Foram identificados
184 artigos de natureza qualitativa. Desses, analisaram-se os principais
temas estudados com abordagem qualitativa. Cabe ressaltar que o objetivo
deste artigo nao consiste em investigar a validade epistemologica dos
metodos empregados. Procurou-se preservar o entendimento dos autores dos
artigos analisados com relacao a adequacao de cada metodo ao objetivo
dos trabalhos.
A analise dos dados foi realizada com o auxilio de representacoes
visuais, como graficos e tabelas, e houve predominancia da estatistica
descritiva. Os principais dados resultantes da pesquisa foram analisados
tambem de acordo com as informacoes constantes na secao Referencial
Teorico deste artigo.
5. RESULTADOS
Foram analisados, no total, 486 artigos cientificos, 249 dos quais
correspondentes a revista Gestao e Producao (51,2%) e 237 a revista
Producao (48,8%). Observa-se, na Tabela 1, que na revista Producao houve
aumento crescente de artigos publicados no decorrer do periodo. A mesma
conclusao nao se aplica a revista Gestao e Producao, que registrou um
decrescimo de publicacoes no ano de 2011.
Os artigos foram classificados, em sua maioria, como quantitativos
(Tabela 2). Observa-se, no entanto, um relativo equilibrio entre os
metodos quantitativo e qualitativo. Levando-se em consideracao o periodo
de analise, nao se pode inferir o declinio ou crescimento de algum tipo
de investigacao. Estudos em periodos diferentes (LACERDA et al., 2007),
por exemplo, apontam o predominio do metodo qualitativo na pesquisa em
Administracao da Producao no contexto brasileiro.
Em estudo semelhante, Godoi e Balsini (2006) observam haver um
equilibrio significativo entre os metodos qualitativos e quantitativos
nos trabalhos publicados na area de Administracao. No entanto, esses
autores encontraram predominancia de trabalhos do tipo "ensaio
teorico" nos principais periodicos brasileiros de Administracao no
periodo de 1997 a 2004.
Segundo a Tabela 3, a maior parte dos trabalhos qualitativos
analisados utiliza a estrategia de estudo de caso (71,2%). Neste
trabalho, nao houve diferenciacao entre estudos de caso unico e estudos
de casos multiplos. A discrepancia entre a utilizacao do estudo de caso
e o uso de outras estrategias e significante. Apenas 16 trabalhos
afirmaram utilizar a pesquisa-acao como estrategia e apenas um trabalho
decidiu utilizar a estrategia Grounded Theory.
As estrategias etnografia e analise do discurso nao receberam
qualquer mencao. Completam a analise aproximadamente 19% dos trabalhos
classificados como "outros", ou seja, nestes casos, a
estrategia declarada pelos autores nao estava clara. Alguns trabalhos
relatam apenas que houve o emprego de entrevistas em profundidade.
Outros trabalhos mencionam apenas a utilizacao de observacoes como
estrategia de coleta de dados.
Os principais temas estudados por meio da abordagem qualitativa nos
artigos estudados podem ser vistos nos Quadro 1 e 2. O primeiro quadro
apresenta os resultados relativos ao periodico Producao e o segundo
refere-se ao periodico Gestao & Producao. Apreciando-se o Quadro 1,
nota-se que houve um relativo aumento no numero de artigos e na
diversidade de temas dentro do periodo estudado. Alem do aumento
numerico, os artigos passaram, de uma concentracao de dois ou tres temas
em 2007, para uma diversificacao maior nas publicacoes dos anos
seguintes. Temas tradicionais como a gestao enxuta e de projetos tiveram
seu espaco compartilhado com temas emergentes, como o gerenciamento da
cadeia de suprimentos, o processo e desenvolvimento de produtos, as
questoes sobre sustentabilidade e gestao ambiental e temas relacionados
a estrategia de producao.
Especificamente em 2007, os temas que mais figuraram entre os
artigos foram gestao enxuta e gestao de projetos. Em 2008, o tema gestao
da cadeia de suprimentos foi o que apareceu mais, seguido de perto pelos
temas gestao enxuta e ergonomia. Em 2009, o tema gestao da cadeia de
suprimentos manteve-se em destaque, seguido pelo tema ergonomia. O tema
gestao enxuta cedeu espaco para o tema processo de desenvolvimento de
produtos. Em 2010, os principais temas foram: estrategia e
sustentabilidade, gestao da cadeia de suprimentos, gestao enxuta e
processo de desenvolvimento de produtos. Em 2011, a estrategia figurava
como tema principal, seguido de um tema tambem ligado a estrategia--as
relacoes interorganizacionais--, da gestao da seguranca e saude no
trabalho e do processo de desenvolvimento de produtos.
No Quadro 2, referente ao periodico Gestao e Producao, pode-se
observar que a diversificacao nas tematicas dos artigos publicados ja
acontecia em 2007. Ou seja, as publicacoes nao estavam concentradas em
alguns poucos temas. Alem disso, os temas emergentes acima citados ja
figuravam nos volumes desse periodico. Em 2007, ja se destacavam artigos
sobre a gestao da cadeia de suprimentos, cadeia produtiva, redes de
empresas e estrategia. Em 2008, o tema lider seguiu o mesmo: gestao da
cadeia de suprimentos, seguido de gestao enxuta e seis sigma. Em 2009,
os temas que mais figuraram nos artigos do periodico foram: gestao da
tecnologia e inovacao e temas relativos a cadeias produtivas, redes e
governanca. Em 2010, processo e desenvolvimento de produtos destacou-se,
seguido de temas ligados a gestao ambiental, responsabilidade social e
sustentabilidade. Em 2011, novamente, o tema processo e desenvolvimento
de produtos teve destaque, seguido agora por artigos sobre gestao
enxuta, inovacoes e relacoes entre cliente e fornecedor.
Em sintese, os principais temas estudados por meio de abordagem
qualitativa e publicados nos periodicos estudados (2007-2011) sao a
gestao enxuta, o gerenciamento da cadeia de suprimentos e o processo e
desenvolvimento de produtos. Outros temas, de estrategia de producao,
tambem merecem destaque, principalmente cadeias produtivas, redes,
aliancas, integracao vertical, relacoes interorganizacionais e
cooperacao e governanca. Esses resultados seguem tendencias apontadas
tambem em estudos publicados em periodicos internacionais como o de
Taylor A. e Taylor, M. (2009), mas, obviamente, referem-se aos periodos
considerados nos estudos.
Esses autores analisaram 310 publicacoes do International Journal
of Operations and Production Management, periodico europeu, no periodo
recente de 2004 a 2009. De acordo com os resultados encontrados, os
principais temas de pesquisa atualmente sao: gestao da cadeia de
suprimentos, estrategia de operacoes, gestao do desempenho e operacoes
em servicos. Nota-se que existem temas similares aos encontrados nos
periodicos brasileiros, como os dois primeiros, mas tambem diferencas,
pois no Brasil o foco parece ser producao enxuta e desenvolvimento de
produtos, enquanto no periodico estudado por Taylor, A. e Taylor, M.
(2009) a gestao do desempenho e operacoes de servicos aparecem com
destaque.
Os temas ligados a gestao enxuta e a gestao da cadeia de
suprimentos tambem foram destaque em um estudo de Slack, Lewis e Bates
(2004). Os autores investigaram os principais temas colocados em pratica
por alunos de MBAs nos EUA e os compararam com os temas mais pesquisados
e publicados nos periodicos Journal of Operations Management e
International Journal of Operations and Production Management, durante o
mesmo periodo, de 2000 a 2003. Contudo, os temas relacionados a
estrategia de producao e medicao de desempenho foram mais
representativos no que se refere a pesquisa, e temas como MRP e PCP
tiveram mais destaque relativamente as praticas.
Algumas tendencias sao percebidas com relacao a temas do escopo da
pesquisa qualitativa em gestao da producao. Parece haver um deslocamento
do interesse de pesquisa de temas taticos para temas estrategicos, e o
pesquisador passa a procurar entender o todo e nao somente partes
especificas da producao, por meio de estudos de temas transversais, como
cadeias, inovacao e sustentabilidade, por exemplo. Essas mudancas
observadas vao ao encontro do que Pilkington e Meredith (2009)
encontraram ao estudar os principais autores e temas do campo da
Administracao da Producao e Operacoes no periodo de 1980 a 2006. Entao,
parece haver mais congruencias que divergencias quando se compara o que
se publica no Brasil e o que se publica fora. Por outro lado, nao foi
possivel saber a profundidade com que cada tema e tratado em um ou outro
local, ate porque essa nao era a proposta inicial deste trabalho.
Entretanto, a medida que os temas de pesquisa vao se tornando mais
estrategicos, tambem sua subjetividade aumenta, reforcando a demanda por
abordagens qualitativas de pesquisa, capazes de dar conta de fenomenos
complexos. Nesse sentido, destaca-se, a seguir, uma discussao sobre as
principais estrategias de pesquisa utilizadas na area de producao:
estudo de caso e pesquisa-acao. Procurou-se fazer observacoes sobre os
alcances e limites dessas estrategias de pesquisa, pois se acredita que
quanto maior for o conhecimento sobre essas formas de fazer pesquisa,
maiores serao as chances de o pesquisador fazer uma escolha mais madura,
evitando surpresas negativas no decorrer da pesquisa.
6. LIMITES E ALCANCES DAS ESTRATEGIAS DE ESTUDO DE CASO E
PESQUISA-ACAO
A predominancia dos metodos de estudo de caso e pesquisa-acao nos
artigos investigados pode refletir certo vies das pesquisas
desenvolvidas no Brasil no campo da Administracao da Producao e
Operacoes. Esses dados corroboram as preocupacoes de autores como
Cauchick Miguel (2007) e Pereira Mello et al. (2012). O primeiro
contribuiu para um melhor entendimento do metodo de estudo de caso
especificamente no campo de Producao e Operacoes. Os ultimos publicaram
um artigo com o mesmo objetivo, porem dando atencao ao metodo de
pesquisa-acao. Como esses autores apresentaram de modo competente a
aplicacao dos metodos no campo da Producao e Operacoes, este topico
procura avancar na discussao sobre o alcance e os limites desses
metodos.
Meredith (1998) destaca que, considerando-se as questoes de
pesquisa "o que", "como" e "por que"
determinado fenomeno ocorre, o estudo de caso e exitoso em responde-las
por completo, o que outros tipos de pesquisa, em especial as pesquisas
tradicionais do campo, como surveys e simulacao matematica, nao
alcancam, principalmente quanto aos "por ques". Nos periodicos
internacionais, conforme Barratt, Choi e Li (2011), evidencia-se que
este metodo tem dado significativa contribuicao para a elaboracao de
teorias no campo, em especial nas areas de manufatura estrategica.
Tambem e observado que os estudos de caso nessa area tem natureza
integrativa, pois combinam teorias da manufatura estrategica com outras
teorias, como a teoria da contingencia, a teoria da modularidade e as
teorias vindas da Engenharia.
As areas de estudo nas quais o estudo de caso tem sido aplicado
geralmente sao aquelas pouco exploradas. Segundo Meredith (1998), a
capacidade exploratoria que os estudos de caso possuem constitui uma das
tres forcas que esta estrategia apresenta no contexto da pesquisa em
Administracao da Producao e Operacoes. As outras duas forcas se referem
a capacidade de captar e compreender a natureza complexa dos fenomenos e
a possibilidade de gerar teoria a partir dessa compreensao.
A pesquisa-acao, por sua vez, pode contribuir para uma base
conceitual mais solida no campo da Producao e Operacoes, conforme
destaca Westbrook (1995). Esse autor defende que, como o processo de
pesquisa-acao e ciclico e envolve participacao e aprendizagem, esta
muito mais envolvido com os acontecimentos do presente e do futuro do
que outras estrategias, como o estudo de caso, cujo foco sao os relatos
de acontecimentos passados. Apesar de menos empregada que o metodo de
estudo de caso, a pesquisa-acao possui um interessante alcance nos
estudos sobre Producao e Operacoes.
Dois exemplos sao utilizados para ilustrar o alcance da
pesquisa-acao. O primeiro se refere a um modelo de intervencao baseado
no sistema Toyota de producao e na teoria das restricoes construido por
Macke (2006) e aplicado em uma industria de ceramica de pequeno porte no
Sul do Brasil. O segundo exemplo consiste em um teste de uma ferramenta
de tomada de decisao para melhoria da qualidade realizado por Hales et
al. (2006) e aplicado em tres empresas do Sul dos Estados Unidos,
escolhidas por apresentarem linhas de producao e preocupacao com
incremento em qualidade. O primeiro ajudou a empresa a programar
mudancas no processo produtivo, enquanto o segundo contribuiu para
verificar a eficiencia de uma ferramenta de decisao na linha de
producao.
Desses exemplos, pode-se perceber que a dinamica da pesquisa-acao
permite ao pesquisador maior interacao com o objeto pesquisado e, assim,
propor melhorias e alteracoes durante o processo de intervencao e
construir teoria a partir da acao realizada (COUGHLAN, P.; COGHLAN, D.
2002). Ainda que seja uma teoria nao generalizavel em um primeiro
momento, a pratica acumulada pode gerar aprendizado durante o proprio
processo de pesquisa, talvez o fato mais relevante desta estrategia de
pesquisa. Ainda conforme Eden e Huxham (1996), a pesquisa-acao
possibilita captar a teoria aplicada dos participantes e nao as teorias
de discurso destes mesmos participantes.
O Quadro 3 destaca os alcances desses metodos de pesquisa, que
podem contribuir para a reflexao do pesquisador no momento em que este
optar por um ou outro metodo.
Tais metodos, contudo, possuem limites ou desvantagens como
quaisquer outros metodos. Segundo Meredith (1998), alguns dos limites do
estudo de caso podem ser: a pouca familiaridade com os procedimentos de
pesquisa, o pouco controle, a dificuldade de acesso aos dados, o tempo
demandado e a necessidade de triangulacao dos dados. Esses limites se
relacionam com a experiencia do pesquisador e o tempo exigido para a
conclusao do projeto. Os limites relacionados a familiaridade do
pesquisador com o metodo podem ser suprimidos uma vez que o metodo seja
mais bem dominado. Ja os limites relacionados ao tempo sao mais
complicados de resolver.
Segundo Kock, McQueen e Soott (1997), a pesquisa-acao apresenta
pelo menos tres fraquezas, ou, como tratado aqui, limites. Tais limites
decorrem, segundo esses autores, do conflito entre os paradigmas da
pesquisa positivista e os da nao positivista. O primeiro limite
refere-se a dificuldade de produzir modelos generalizaveis. Isso decorre
da dificuldade de validade externa quando a pesquisa ocorre fora do
contexto em que tais modelos foram criados. O segundo limite diz
respeito ao baixo controle do ambiente. Essa limitacao ocorre pela
dificuldade inerente ao metodo de isolar variaveis para algum possivel
teste. O terceiro limite e o grande envolvimento pessoal do pesquisador
com a organizacao. Esse fato pode trazer vieses ao trabalho quando
existe conflito de interesses, aumentando sobremaneira a
responsabilidade do pesquisador (KOCK et al., 1997).
O Quadro 4 destaca os principais limites apontados para os metodos
de pesquisa que estao em discussao.
Na presente discussao, analisaram-se os dois metodos qualitativos
mais empregados em pesquisas no campo da Producao e Operacoes no Brasil
atualmente. Observou-se que os metodos de estudo de caso e pesquisa-acao
apresentam importantes contribuicoes para a pesquisa no campo de
Producao e Operacoes, como evidenciado no alcance que ambos possuem. Por
outro lado, e importante tambem a ponderacao sobre os limites que lhes
sao inerentes. No momento do projeto de pesquisa, o pesquisador
necessariamente analisa qual metodo tera condicoes de melhor subsidia-lo
em sua pesquisa. Observando alcances e limites, podera fazer uma escolha
mais madura, evitando surpresas no decorrer da pesquisa.
7. CONSIDERACOES FINAIS
O presente artigo teve por objetivo identificar as caracteristicas
metodologicas predominantes nos estudos sobre gestao da producao e os
principais temas abordados nos estudos. Para tanto, desenvolveu-se uma
pesquisa documental que analisou a producao cientifica publicada em
periodicos brasileiros com conceito A (QualisCapes) na area. Foram
analisados 486 artigos publicados no periodo compreendido entre 2007 e
2011.
Dentre os principais resultados, pode-se constatar que houve
equilibrio entre os trabalhos de natureza quantitativa e qualitativa. Em
alguns momentos do periodo analisado, observa-se que o metodo
qualitativo foi mais utilizado que o metodo quantitativo. Essas duas
abordagens sao as mais largamente utilizadas, enquanto os trabalhos
caracterizados como ensaios ou qualiquanti se apresentam em quantidade
menor.
Os principais temas estudados por meio de abordagem qualitativa e
publicados nos periodicos estudados sao ligados a gestao enxuta, ao
gerenciamento da cadeia de suprimentos e ao processo e desenvolvimento
de produtos. Outros temas, ligados a estrategia de producao, tambem
merecem destaque, principalmente cadeias produtivas, redes, aliancas,
integracao vertical, relacoes interorganizacionais e cooperacao e
governanca.
Com relacao as estrategias de pesquisa qualitativas mais
empregadas, notou-se que o estudo de caso tem ganhado a preferencia dos
pesquisadores comparativamente as outras estrategias de investigacao.
Depois, a pesquisaacao, que, apesar de nao obter o mesmo porcentual de
uso verificado no estudo de caso, apresentou um emprego consideravel. No
entanto, em razao das caracteristicas inerentes a pesquisa em Producao,
a pesquisa-acao poderia ser mais bem aproveitada, pois, conforme
discutido no trabalho, esta estrategia tem um bom alcance para o
desenvolvimento de estudos aplicados. A Grounded Theory mostrou-se com
aplicacao reduzida, reflexo talvez de dificuldades impostas pelo metodo,
como acessibilidade e tempo de duracao da pesquisa. Ja com relacao as
estrategias de analise critica do discurso e etnografia, nao foi
observada nenhuma ocorrencia.
A partir da observacao da enfase no emprego dos metodos estudo de
caso e pesquisa-acao, desenvolveu-se uma discussao preocupada em
evidenciar o alcance e os limites desses metodos. Este tipo de
ponderacao e relevante no momento em que o pesquisador elabora seu
projeto de pesquisa e analisa qual metodo apresentara condicoes melhores
de subsidia-lo.
Como sugestoes para estudos futuros, e interessante ampliar a
amostra para outros periodicos e ampliar o periodo de tempo, para
possibilitar uma visao mais ampliada do emprego dos metodos de pesquisa
no campo. Um estudo que se preocupe em verificar a adequacao dos metodos
qualitativos utilizados pode apresentar contribuicoes significativas,
como permitir avaliar a qualidade metodologica dos trabalhos publicados
nesta area. Por fim, futuras pesquisas ligando os temas de gestao da
producao com as escolhas metodologicas se mostrariam relevantes no
sentido de verificar tendencias e oportunidades de pesquisa na area.
8. REFERENCIAS BIBLIOGRAFICAS
AMIS, J. M.; SILK, M. The philosophy and politics of quality in
qualitative organizational research. Organizational Research Methods, v.
11, n. 3, p. 456-480, 2008. <http://dx.doi.org/
10.1177/1094428107300341>.
AMUNDSON, S. D. Relationships between theorydriven empirical
research in operations management and other disciplines. Journal of
Operations Management, v. 16, n. 4, p. 341-359, 1998.
<http://dx.doi.org/10.1016/S0272-6963(98)000187>.
ARKADER, R. A. A pesquisa cientifica em gerencia de operacoes no
Brasil. Revista de Administracao de Empresas, v. 43, n. 1, p. 70-79,
2003.
BARRATT, M.; CHOI, T. Y.; LI, M. Qualitative case studies in
operations management: trends, research outcomes, and future research
implications. Journal of Operations Management, v. 29, n. 4, p. 329-342,
2011. <http://dx. doi.org/10.1016/j.jom.2010.06.002>.
BUFFA, E. S. Research in operations management. Journal of
Operations Management, v. 1, n. 1, p. 17, 1980.
<http://dx.doi.org/10. 1016/0272 6963(80)90005-4>.
CAUCHICK MIGUEL, P. A. Adocao do estudo de caso na engenharia da
producao. In: CAUCHICK MIGUEL, P. A. (Org.) Metodologia de pesquisa em
engenharia da producao e gestao de operacoes. Rio de Janeiro: Elsevier,
2010. p. 129-144.
--. Estudo de caso na engenharia da producao: estruturacao e
recomendacoes para sua conducao. Revista Producao, v. 17, n. 1, p.
216-229, 2007. <http://dx.doi.org/10.1590/S0103
65132007000100015>.
CHASE, R. B. A classification and evaluation of research in
operations management. Journal of Operations Management, v. 1, n. 1, p.
9-14, 1980. <http://dx.doi.org/10.1016/0272-6963(80)90006-6>.
CORREA, H. L.; PAIVA, E. L.; PRIMO, M. A. M. A pesquisa em gestao
de operacoes no Brasil: um breve relato de sua evolucao. Revista de
Administracao de Empresas-Eletronica, v. 9, n. 2, p. 1-9, 2010.
COUGHLAN, P.; COGHLAN, D. Action research for operation management.
International Journal of Operations and Production Management, v. 22, n.
2, p. 220-240, 2002.
<http://dx.doi.org/10.1108/01443570210417515>.
DENZIN, N. K.; LINCOLN, Y. S. Introducao: a disciplina e a pratica
da pesquisa qualitativa. In: DENZIN, N. K.; LINCOLN, Y. S. O
planejamento da pesquisa qualitativa: teorias e abordagens. 2. ed. Porto
Alegre: ARTMED, 2006.
EDEN, C.; HUXHAM, C. Action research for management research.
British Journal of Management, v. 7, n. 1, p. 75-86, 1996.
<http://dx.doi.org/10.1111/j.1467-8551.1996.tb00107.x>.
FILIPPINI, R. Operations management research: some reflexions on
evolution, models and emprirical studies in OM. International Journal of
Operations and Production Management, v. 17, n. 7, p. 655-670, 1997.
<http://dx.doi.org/10.1108/01443579710175583>.
GODOI, C. K. Estudo de caso qualitativo. In: GODOI, C. K.;
BANDEIRA-DE-MELLO, R.; SILVA, B. da. Pesquisa qualitativa em estudos
organizacionais: paradigmas, estrategias e metodos. Sao Paulo: Saraiva,
2006.
GODOI, C. K.; BALSINI, C. P. V. A pesquisa qualitativa nos estudos
organizacionais brasileiros: uma analise bibliometrica. In: GODOI, C.
K.; BANDEIRA-DE-MELLO, R.; SILVA, A. B. da. Pesquisa qualitativa em
estudos organizacionais: paradigmas, estrategias e metodos. Sao Paulo:
Saraiva, 2006.
HALES, D. N.; SIHA, S. M.; SRIDHARAN, V.; MAcKNEW, J. I.
Prioritizing tactical quality improvement: an action research study.
International Journal of Operations and Production Management, v. 26, n.
8, p. 866-881, 2006. <http://dx.doi.org/10.1108/01443570610
678648>.
KOCK, N.; McQUEEN, R. J; SCOTT, J. L. Can action research be made
more rigorous in a positivist sense? The contribution of an iterative
approach. Journal of Systems and Information Technology, v. 1 n. 1, p.
1-23, 1997. <http:// dx.doi.org/10.1108/13287269780000732>.
LACERDA, D. P.; DA SILVA, E. R. P.; NAVARRO, L. L. L.; OLIVEIRA, N.
N. P.; CAULLIRAUX, H. M. Algumas caracterizacoes dos aspectos
metodologicos na area de Operacoes: Uma analise a partir de periodicos
nacionais e internacionais. In: ENCONTRO DA ASSOCIACAO NACIONAL DE
POS-GRADUACAO E PESQUISA EM ADMINISTRACAO, 31., Rio de Janeiro, 2007.
Anais... Rio de Janeiro: ANPAD, 2007.
MACKE, J. A pesquisa-acao como estrategia de pesquisa
participativa. In: GODOI, C. K.; BANDEIRA-DE-MELLO, R.; SILVA, A. B. da.
Pesquisa qualitativa em estudos organizacionais: paradigmas, estrategias
e metodos. Sao Paulo: Saraiva, 2006.
MEREDITH, J. Building operations management theory through case and
field research. Journal of Operations Management, v. 16, n. 4, p.
441-454, 1998. <http://dx.doi.org/10.1016/S0272-6963(98) 00023-0>.
NAKANO, D. N. Metodos de pesquisa adotados na engenharia da
producao e gestao de operacoes. In: CAUCHICK MIGUEL, P. A. (Org.)
Metodologia de pesquisa em engenharia da producao e gestao de operacoes.
Rio de Janeiro: Elsevier, 2010. p. 63-72.
PEREIRA MELLO, C. H.; TURRIONI, J. B.; XAVIER, A. F.; CAMPOS, D. F.
Pesquisa-acao na engenharia da producao: proposta de estruturacao para
sua conducao. Producao, v. 22, n. 1, p. 1-13, 2012.
<http://dx.doi.org/10.1590/ S0103 65132011005000056>.
PILKINGTON, A.; MEREDITH, J. The evolution of the intellectual
structure of operations management--1980-2006: a citation/co-citation
analysis. Journal of Operations Management, v. 27, n. 3, p. 185-202,
2009. <http://dx.doi.org/ 10.1016/j.jom.2008.08.001>.
PINTO, M. D. de S.; BRITO, S. L. E.; COLOSSI, N.; PATRICIO, Z. M.
Aplicacao e metodos qualitativos na producao de conhecimento: uma
realidade particular e desafios coletivos para compreensao do ser humano
nas organizacoes. In: ENCONTRO DA ASSOCIACAO NACIONAL DE POS-GRADUACAO E
PESQUISA EM ADMINISTRACAO, 23., Foz do Iguacu: ANPAD, 1999. Anais... Foz
do Iguacu, 1999.
SCHWANDT, T. A. Tres posturas epistemologicas para a investigacao
qualitativa: interpretativismo, hermeneutica e construcionismo social.
In: DENZIN, N. K.; LINCOLN, Y. S. O planejamento da pesquisa
qualitativa: teorias e abordagens. 2. ed. Porto Alegre: ARTMED, 2006.
SILVERMAN, D. Interpreting qualitative data. 3. ed. London: Sage
Publications, 2006.
SLACK, N.; LEWIS, M.; BATES, H. The two worlds of operations
management research and practice--can they meet, should they meet?
International Journal of Operations and Production Management, v. 24, n.
4, p. 372-387, 2004. <http://dx.doi.org/10.1108/014435704105
24640>.
TAYLOR, A.; TAYLOR, M. Operations management research: contemporary
themes, trends and potential future directions. International Journal of
Operations and Production Management, v. 29, n. 12, p. 1316-1340, 2009.
<http://dx.doi.org/10.1108/0144357 0911006018>.
VIDICH, A. J.; LYMAN, S. M. Metodos qualitativos: sua historia na
sociologia e na antropologia. In: DENZIN, N. K.; LINCOLN, Y. S. O
planejamento da pesquisa qualitativa: teorias e abordagens. 2. ed. Porto
Alegre: ARTMED, 2006.
WESTBROOK, R. Action research: a new paradigm for research in
production and operations management. International Journal of
Operations and Production Management, v. 15, n. 12, p. 6-20, 1995.
<http://dx.doi.org/10.1108/01443579510104466>.
DOI: 10.5700/rege491
Recebido em: 26/4/2012
Aprovado em: 17/12/2012
Darlan Jose Roman
Doutorando em Administracao do Programa de Pos-graduacao da
Universidade Federal de Santa Catarina--Florianopolis-SC, Brasil
Mestre em Administracao pelo Programa de Pos-graduacao da
Universidade Federal de Santa Catarina
E-mail:
[email protected]
Jamur Johnas Marchi
Professor Assistente da Universidade Federal do Pampa
(UNIPAMPA)--Santana do Livramento-RS, Brasil
Aluno de Doutorado em Administracao do Programa de Pos-graduacao da
Universidade Federal de Santa Catarina (PPGA/UFSC)
Mestre em Administracao pelo Programa de Pos-graduacao da
Universidade Federal de Santa Maria (PPGA/UFSM)
E-mail:
[email protected]
Rolf Hermann Erdmann
Professor Associado da Universidade Federal de Santa Catarina
(PPGA/UFSC) Florianopolis--SC, Brasil
Doutor em Engenharia da Producao pelo Programa de Pos-graduacao em
Engenharia da Producao da Universidade Federal de Santa Catarina
(PPGEP/UFSC)
E-mail:
[email protected]
Tabela 1--Quantidade de artigos analisados
Periodicos 2007 2008 2009 2010 2011 Total %
Gestao e 43 46 55 60 45 249 51,2
Producao
Producao 41 42 41 54 59 237 48,8
Total 84 88 96 114 104 486 100
Fonte: Dados da pesquisa (2012).
Tabela 2--Classificacao dos artigos analisados quanto ao
tipo de pesquisa
Tipo de Pesquisa 2007 2008 2009 2010 2011 Total %
Quantitativa 47 36 42 43 42 210 43,2
Qualitativa 26 38 36 45 39 184 37,8
Ensaio 8 6 5 8 6 33 6,8
Quali-quanti 1 2 6 11 11 31 6,5
N.I 2 6 7 7 6 28 5,7
Total 84 88 96 114 104 486 100
Fonte: Dados da pesquisa (2012).
Tabela 3--Estrategia de pesquisa utilizada pelos estudos qualitativos
Estrategia 2007 2008 2009 2010 2011 Total %
Estudo de 20 28 25 30 28 131 71,2
caso
Grounded 1 1 0,5
Theory 3 4 3 4 2 16 8,7
Pesquisaacao
Outros 3 6 7 11 9 36 19,6
Total 26 38 36 45 39 184 100
Fonte: Dados da pesquisa (2012).
Quadro 1--Principais temas abordados na Revista Producao (2007-2011)
2007 2008 2009
Gestao enxuta (5) Gerenciamento da Gerenciamento da
Gestao de projetos cadeia de suprimento cadeia de suprimento
(2) Terceirizacao (1) (4) (3)
Logistica reversa/ Gestao enxuta (3) Ergonomia (3)
Gestao ambiental (1) Ergonomia (2) Processo de
PCP (1) Customizacao em desenvolvimento
massa (1) Qualidade de produto (3)
de servicos (1) Sistemas integrados
Marketing industrial de gestao (1) Gestao
(1) do conhecimento (1)
Gestao de portfolios/ Terceirizacao/ saude
DNP (1) PCP/ ocupacional (1)
Seguranca/ Gestao Rastreabilidade (1)
de riscos (1) Estrategia e
Processo de desempenho
desenvolvimento organizacional (1)
de produto (1) Contabilidade de
Gestao do custos/custeio
conhecimento (1) ABC (1) Tomada de
decisao (1)
Acessibilidade
espacial/inclusao
social (1)
2010 2011
Estrategia (5) Estrategia (4)
Sustentabilidade e Relacoes interorganizacionais (3)
gestao ambiental (5) Gestao da seguranca e saude do
Gerenciamento da trabalho (2) processo de
cadeia de Desenvolvimento de produto (2)
suprimentos (4) Gestao de compras (1)
Gestao enxuta (3) Teoria das restricoes/
Processo e projeto analise de processos (1)
de desenvolvimento Gestao de projetos (1)
de produto (3) Cadeia produtiva/
Gestao da seguranca agricultura familiar (1)
e saude do trabalho Manutencao produtiva (1)
(2) Engenharia reversa (1)
Gestao de projetos/
portfolio de
projetos (1)
Qualidade em
servicos (1)
PCP/ reducao de
lead time (1)
Gestao de pessoas (1)
Gestao do
conhecimento (1)
Fonte: Dados da pesquisa (2012).
Quadro 2--Principais temas abordados na Revista
Gestao e Producao (2007-2011)
2007 2008 2009
Gestao da cadeia de Gestao da cadeia de Gestao da
suprimentos (3) suprimentos (3) tecnologia e
Cadeias, redes de Gestao enxuta (2) inovacao (3)
empresas e sistemas Seis sigma (2) Cadeias, redes e
de producao (3) Gestao do governanca (3)
Estrategias de desempenho (2) Gestao de custos
producao (2) Gestao de servicos (2)
Ergonomia (1) (2) Pesquisa e
Mudanca Responsabilidade desenvolvimento de
organizacional (1) social corporativa produtos (2)
Gestao ambiental/ (1) Rapidez no
FMEA (1) Tempo de atendimento (1)
Sistema toyota de atravessamento (1) Integracao vertical
producao (1) Manutencao (1) (1)
Avaliacao de Gestao de FMEA (1)
desempenho (1) competencias (1) Apoio multicriterio
Gestao de portfolios Gestao de pessoas (1) a decisao (1)
(1) Gestao do Cadeia de
Gestao de conhecimento (1) suprimentos /
projetos (1) Logistica interna/ servicos (1)
metodo SBC (1) Gerenciamento de
Projeto projetos/estrategia
organizacional/ de manufatura (1)
organizacao do Producao enxuta
trabalho (1) (1)
Pesquisa e Previsao de
desenvolvimento de demanda (1)
produtos (1) Qualidade da
Gestao da informacao (1)
variabilidade (1)
Ergonomia/controle
de processo (1)
2010 2011
Processo e Processo e
desenvolvimento de desenvolvimento de
produtos (3) produtos (3)
Gestao ambiental (2) Gestao enxuta (3)
Responsabilidade Inovacao (2)
social e Relacoes cliente-
desenvolvimento fornecedor (2)
sustentavel (2) Gestao de projetos
Gestao de servicos (2)
(2) Cooperacao e
Gestao enxuta (2) aliancas estrategicas
Gestao da seguranca (2)
e saude no trabalho Gestao integrada (1)
(1) Servico de pos-
Configuracao da vendas (1)
cadeia de Sociologia
suprimentos (1) economica (1)
Sistemas de Custos de transacao
informacao (1)
geografica (1) Desempenho de
Qualidade e equipes (1)
comunicacao interna Gestao de custos (1)
(1) Estrategia de
Teoria das cadeias producao (1)
meios-fins (1)
Governanca (1)
Fonte: Dados da pesquisa (2012).
Quadro 3--Alcance do estudo de caso e da pesquisa-acao
Estudo de Caso Pesquisa-Acao
Compreensao aprofundada do Oportunizar a reflexao
"como" e "por que" dos sobre a situacao-problema.
fenomenos E dinamica, ou seja, permite a
Capacidade de explorar areas percepcao do processo de mudanca.
ou temas pouco estudados O pesquisador participa do
Capacidade de construir processo de mudanca.
teoria a partir da Captar a teoria aplicada dos
realidade empirica participantes do sistema produtivo.
Diagnosticar, planejar,
agir e avaliar as acoes,
produzindo aprendizagem
entre os participantes.
Intervem no presente
visando melhorar o futuro.
Gerar teoria aplicada.
Fonte: Elaborado pelos autores (2012).
Quadro 4--Limites do Estudo de Caso e da Pesquisa-Acao
Estudo de Caso Pesquisa-Acao
Pouca familiaridade com os Dificuldades em produzir modelos
procedimentos de pesquisa gerais Baixo controle do ambiente
Pouco controle Dificuldade Superenvolvimento pessoal
de acesso aos dados Escassez
de tempo demandado para a
pesquisa Necessidade da
triangulacao dos dados
Fonte: Elaborado pelos autores (2012).
