Oliveira Walter Bach 2012 Criterios-De-Validade-em-pesqu 9127

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Ed. Especial SO PAULO, SP NOV./DEZ.
Z. 2012 ISSN 1518-6776 (impresso) ISSN 1678-6971 (on-line)

Submisso: 14 dez. 2011. Aceitao: 3 out. 2012. Sistema de avaliao: s cegas dupla (double blind review).
UNIVERSIDADE PRESBITERIANA MACKENZIE. Ana Silvia Rocha Ipiranga (Ed. convidada), p. 225-254.
critrios de validade em pesquisas

em estratgia: uma anlise em
artigos publicados no enanpad de
1997 a 2010
DENISE DE OLIVEIRA
Mestranda em Administrao pelo Programa de Ps-Graduao em Administrao
da Universidade Regional de Blumenau (Furb).
Rua Antnio da Veiga, 140, Victor Konder, Blumenau SC Brasil CEP 89012-900
E-mail: qualific@gmail.com
SILVANA ANITA WALTER

Doutora em Administrao pelo Programa de Ps-Graduao em Administrao
da Pontifica Universidade Catlica do Paran (PUC-PR).
Professora do Programa de Ps-Graduao em Administrao da Universidade Regional de Blumenau (Furb).
E-mail: silvanaanita.walter@gmail.com
TATIANA MARCEDA BACH

Mestranda em Administrao pelo Programa de Ps-Graduao da
Universidade Regional de Blumenau (Furb).
E-mail: tatibach@gmail.com
Este artigo pode ser copiado, distribudo, exibido, transmitido ou adaptado desde que citados, de forma clara e explcita,
o nome da revista, a edio, o ano e as pginas nas quais o artigo foi publicado originalmente, mas sem sugerir que a
RAM endosse a reutilizao do artigo. Esse termo de licenciamento deve ser explicitado para os casos de reutilizao ou
distribuio para terceiros. No permitido o uso para fins comerciais.
DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH
RESU M O
226
Os critrios de validade constituem-se em elementos fundamentais que compem o rigor metodolgico de um estudo cientfico. Diante disso, esta pesquisa
teve por objetivo analisar os critrios de validade utilizados em estudos cientficos da rea de estratgia, publicados nos anais do Encontro da Associao
Nacional de Ps-Graduao e Pesquisa em Administrao (EnAnpad) entre 1997
e 2010. Na reviso terica, abordam-se critrios de validade dos autores Selltiz,
Wrightsman e Cook (1987), Straub e Carlson (1989), Cooper e Schindler (2003),
Babbie (2005), Hair Jr., Anderson, Tatham e Black (2005), Yin (2005), Brewer
e Hunter (2006) e Malhotra (2006). A partir da reviso de literatura, visando
ampliar a adoo de critrios de validade, propem-se itens que possam auxiliar
os pesquisadores a verificar a adequao de seus estudos aos principais critrios.
Realizou-se uma pesquisa bibliogrfica e bibliomtrica com 53 artigos da rea
de estratgia, bem como se fez anlise de contedo do referencial terico dos
artigos e se submeteram os dados anlise descritiva de frequncia e percentual
da utilizao de validao quanto ao tipo de pesquisa (quantitativa, qualitativa e
que mesclam as duas abordagens); aos tipos de critrios de validao empregados; e s obras mais citadas ao abordar validao. Constatou-se que as validades
convergente, discriminante, de contedo e de construto foram os critrios mais
empregados nos estudos revisados e que a validade de critrio (validade de critrio, concorrente e preditiva), apesar de amplamente abordada na literatura, foi
empregada em menos de 10% desses estudos. Entre os resultados obtidos, verificou-se ainda que, na rea de estratgia, so realizadas pesquisas que denotam
preocupao com a validao, mas que esse nmero ainda pequeno diante da
quantidade de artigos publicados na rea no perodo analisado, havendo espao para explorao de outros critrios de validade, como a validao de critrio.
Espera-se que este estudo possa contribuir, por meio da divulgao e da orientao a respeito dos principais critrios de validade, para que as pesquisas adotem
procedimentos de pesquisa voltados validao dos instrumentos de pesquisa.
RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

SO PAULO, SP NOV./DEZ. 2012 p. 225-254 ISSN 1518-6776 (impresso) ISSN 1678-6971 (on-line)
critrios de validade em pesquisas em estratgia
PA LAV RAS -CH AVE

Validade; Critrios de validao; Estratgia; Artigos cientficos; Bibliometria.
1 INT RO D U O
Os critrios de validade de instrumento nas pesquisas cientficas consistem em um elemento fundamental que compe o rigor metodolgico. Na viso
de Gressler (2004), a validade cientfica est relacionada ao rigor com o qual a
pesquisa desenvolvida, pois, sem a mesma, os resultados no sero confiveis (STRAUB; CARLSON, 1989). A ateno para os assuntos de validao pode
mover o campo para estudos significativos e conceitos refinados, longe de estruturas intratveis e medidas defeituosas (STRAUB; CARLSON, 1989).
Entre os primeiros registros observados em validade de construto, destaca-se
o estudo de Cronbach e Meehl (1955), na rea da psicologia, com a inteno de
especificar qualidades para investigao antes da publicao de testes.
Discusses e estudos realizados nas ltimas dcadas apontam para relevantes preocupaes quanto carncia de validao nos instrumentos de pesquisas
cientficas. Conforme Straub e Carlson (1989), a validao dos instrumentos tem
sido empregada inadequadamente. Entre importantes apontamentos, os autores afirmam que poucos pesquisadores dedicaram sria ateno ao assunto. Na
perspectiva de averiguar os avanos da validao de instrumentos em pesquisas
cientficas, Boudreau, Gefen e Straub (2001), a partir da pesquisa de Straub e
Carlson (1989), constataram que pesquisadores que desenvolvem estudos quantitativos aplicam, em maior quantidade, critrios de validade em seus estudos.
Contudo, o campo ainda no atingiu o ponto no qual a validao a regra, e no
a exceo.
Walter, Baptista e Augusto (2008) averiguaram que, em estudos terico-empricos que investigaram o tema Viso Baseada em Recursos, principalmente
os levantamentos, no se exploravam adequadamente os critrios de confiabilidade e de validade, apesar de alguns casos os apresentarem. Nesse sentido,
Straub e Carlson (1989) apontam que, apesar da conscincia crescente entre
os pesquisadores sobre o emprego do arcabouo metodolgico, esse precisa ser
mais rigoroso, pois a maioria dos estudos empricos continua no lanando mo
de critrios de validade. Diante disso, torna-se importante investigar que critrios podem ser utilizados para atingir o rigor metodolgico e, ainda, como pesquisas acadmicas brasileiras esto sendo validadas.

227
No sentido apontado, esta pesquisa tem por objetivo analisar os critrios de

validade utilizados em estudos cientficos da rea de estratgia, publicados nos
anais do EnAnpad entre 1997 e 2010.
A escolha da rea de estratgia para a realizao da pesquisa ora apresentada
est relacionada ao j observado por pareceristas que avaliam artigos submetidos a eventos e peridicos desta rea da administrao a respeito do considervel nmero de novos instrumentos de pesquisa (e adaptao dos j existentes)
que so propostos sem a meno a procedimentos de validao. Assim, em uma
busca preliminar, observou-se que, dos mais de mil artigos de estratgia disponveis nos anais do EnAnpad, no perodo de 1997 a 2010, apenas 53 fazem referncia validao da pesquisa realizada.
A pesquisa que se realizou encontra-se neste artigo, o qual est estruturado
da seguinte forma: na Seo 2, apresenta-se uma reviso dos principais aspectos relacionados aos critrios de validade identificados na literatura; na Seo 3,
descreve-se o delineamento metodolgico; na Seo 4, expem-se os resultados
obtidos; e, na ltima seo, apresentam-se as consideraes finais, as limitaes
e as sugestes para futuras pesquisas.
228
FU N D AM E N TA O T E R I C A
Brewer e Hunter (2006) ressaltam que a mensurao, em cincia social,

consiste em realizar observaes e organiz-las em uma pesquisa de forma que o
conjunto de dados obtidos expresse uma caracterstica social de uma amostra de
pessoas ou eventos. A validao e a instrumentalizao da pesquisa compem as
etapas do estgio da mensurao. Nesse contexto, a instrumentalizao consiste
na elaborao de uma ferramenta de pesquisa, ou na escolha de uma j existente, para mensurar o conceito que se deseja pesquisar. J a validao determina
como e com que preciso essas medidas representam os conceitos (BREWER;
HUNTER, 2006). Em outras palavras, validade o nvel por meio do qual uma
medida emprica reflete o significado real do conceito ou construto que se quer
abranger (SELLTIZ; WRIGHTSMAN; COOK, 1987; BABBIE, 2005). Para Hair
Jr., Anderson, Tatham e Black (2005), um construto com validade perfeita no
contm erros de mensurao.
Para Cooper e Schindler (2003), a validade se refere ao grau das diferenas
reais entre os pesquisados encontradas por meio da ferramenta de mensurao. A regra geral de validao que medidas diferentes de um mesmo fenmeno deveriam concordar, no podendo, contudo, sofrer da mesma fonte de erro
(BREWER; HUNTER, 2006). O desejo que a ferramenta de mensurao seja
sensvel a todas as nuanas de significado e s transformaes ocorridas ao longo
do tempo (COOPER; SCHINDLER, 2003) ou que suas diferenas em escores

representem, na caracterstica mensurada, as reais diferenas entre os diversos
sujeitos da amostra (MALHOTRA, 2006). Assim, segundo Cooper e Schindler
(2003), a dificuldade em realizar o teste de validade encontra-se no fato de que,
normalmente, no se sabe quais so as diferenas reais.
Do ponto de vista de Brewer e Hunter (2006), a validade de um construto
julgada por sua capacidade de executar seu papel explicativo, e seu conceito serve
para unir logicamente vrios aspectos de validade, sendo necessrio, contudo, para
organizar as comparaes, realizar cada um dos passos de validao. Os autores
redefinem a validao de uma medida como a comparao entre medidas, pois
essa definio mais ampla e possui a vantagem de definir validade em termos
do processo atual de validao. Nessa concepo, uma medida vlida aquela
que se relaciona altamente com medidas de aspecto e contedo de seu conceito
vlidas e com medidas correlatas de um conceito conhecido ou suposto, bem
como que apresenta baixa ou nenhuma relao com medidas de conceitos no
relacionadas ao conceito que est sendo mensurado. Alm disso, a medida precisa estabelecer correlaes com outras medidas, mesmo quando essas empregam
tcnicas diferentes das suas (BREWER; HUNTER, 2006).
Babbie (2005) alerta para que se tome cuidado no sentido de no confundir
validade com confiabilidade. A confiabilidade a aplicao repetida de tcnicas,
por meio de mtodos que implicam resultados coerentes. Dessa forma, a confiabilidade relaciona-se com coerncias nas descobertas da pesquisa e verificada por meio da comparao dos resultados de aplicaes repetidas da mesma
medida em circunstncias levemente diferentes ou comparando os resultados
obtidos nas mesmas circunstncias com medidas muito semelhantes. Hair Jr.,
Anderson, Tatham e Black (2005) acrescentam que a validade est relacionada
preciso, enquanto a confiabilidade est ligada coerncia.
Percebe-se, assim, que as definies de validade encontradas abrangem
trs principais aspectos: a) mensurar com preciso (sem erros) o conceito ou
construto que quer abranger, refletindo o significado real desse conceito (SELLTIZ; WRIGHTSMAN; COOK, 1987; BABBIE, 2005; HAIR JR.; ANDERSON;
TATHAM; BLACK, 2005; BREWER; HUNTER, 2006); b) as diferenas obtidas entre os escores devem refletir as diferenas reais entre os respondentes e
entre as nuanas de significado na varivel, sem sofrerem da mesma fonte de
erro (COOPER; SCHINDLER, 2003; BREWER; HUNTER, 2006; MALHOTRA,
2006); e c) existir, ao serem realizadas comparaes entre instrumentos, relao
alta com medidas do conceito j validadas e baixa relao com construtos no
relacionados (BREWER; HUNTER, 2006).
Esses trs aspectos, conforme se apresentar a seguir, se relacionam com
critrios de validade apresentados pelos autores. A literatura aponta diversos cri RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial
229
230
trios de validade dos instrumentos de mensurao, e essas referncias se desenvolvem medida que aumentam as preocupaes com mensuraes cientficas
(COOPER; SCHINDLER, 2003).
Cooper e Schindler (2003), por exemplo, caracterizam a validade externa e
a validade interna como as principais formas de validade. A primeira se refere
generalizao dos dados no que tange s pessoas, aos ambientes e s pocas. A
segunda se relaciona habilidade de realizar a mensurao a partir do instrumento de pesquisa. Na validade interna, Straub e Carlson (1989) questionam se os
efeitos observados poderiam ter sido causados por um conjunto de variveis no
hipotticas e/ou imensurveis ou se poderiam ser relacionados a esse conjunto de
variveis no hipotticas e/ou imensurveis. crucial reconhecer que a validade
interna no estabelece se o pesquisador est trabalhando com variveis que verdadeiramente refletem o fenmeno sob investigao (STRAUB; CARLSON, 1989).
No contexto da validade interna, Cooper e Schindler (2003) sugerem trs
principais configuraes de validao: validade de contedo, validade de critrios
e validade de construto. Malhotra (2006) e Hair Jr., Anderson, Tatham e Black
(2005) tambm destacam essas trs formas de validade (contedo, critrios e
construto) como as principais na validao de uma mensurao.
A validade de contedo (tambm chamada de nominal ou de face) uma
avaliao subjetiva do contedo, porm sistemtica, sendo que o pesquisador examina se os itens da escala envolvem o domnio do construto medido de forma
adequada (COOPER; SCHINDLER, 2003; HAIR JR.; ANDERSON; TATHAM;
BLACK, 2005; MALHOTRA, 2006). Em uma organizao, por exemplo, para
mensurao da imagem pblica, pode-se optar, a partir do instrumento de coleta
de dados eleito, pelos itens conhecimento, atitudes ou opinies e, na sequncia,
selecionar as opinies relevantes para a pesquisa (COOPER; SCHINDLER, 2003).
Cooper e Schindler (2003) e Babbie (2005) acrescentam que, em uma criteriosa validade de contedo, o instrumento abrange, de forma adequada, os
tpicos definidos como relevantes para as dimenses analisadas, assim como
os significados includos no conceito. Um teste de capacidade matemtica, por
exemplo, no se limita adio, pois necessrio envolver outros significados,
como a subtrao, a multiplicao e a diviso (BABBIE, 2005).
Brewer e Hunter (2006) consideram a validade de face e a de contedo
como diferentes, destacando que uma medida possui validade de face quando
obviamente mais pertinente ao significado do conceito do que ao significado
de outro conceito. Para ter validade de contedo, por sua vez, os dados de uma
medida devem possibilitar uma prova adequada do comportamento social pelo
conceito (BREWER; HUNTER, 2006).
Para Straub e Carlson (1989), a validade de contedo e a de face so difceis
de ser verificadas porque o universo de contedo possvel virtualmente infinito.
Por isso, Cronbach (1971) sugere um processo de reviso por meio de peritos do
campo at que uma verso de consenso seja alcanada ou, como destacado por
Hair Jr., Anderson, Tatham e Black (2005), consulta a uma pequena amostra de
respondentes especialistas para julgar a adequao dos indicadores escolhidos
para representar o construto.
Cooper e Schindler (2003) destacam que outra forma de determinar a validade de contedo usar um painel de pessoas para julgar como o instrumento
atende aos padres. Dessa forma, os pesquisadores definem os itens essenciais
pesquisa, os quais so avaliados, igualmente, por meio de um ndice de validade
de contedo e, a partir disso, mantm os itens que atingirem um valor estatstico
importante (COOPER; SCHINDLER, 2003).
As validades de face e de contedo eliminam erros resultantes da utilizao
de medidas irrelevantes ou insuficientes. Contudo, consistem em condies prvias, no eliminando a possibilidade de ocorrncia de outros erros. Dessa forma,
se faz necessria a adoo de outros critrios (BREWER; HUNTER, 2006). A
esse respeito, Hair Jr., Anderson, Tatham e Black (2005) indicam que a validade
de contedo no considerada uma medida suficiente de validade, de maneira
que pesquisadores em administrao normalmente prosseguem com validade
de construto ou de critrio.
A validade de critrio examina se a escala de medida se comporta conforme
o esperado em relao a outras variveis, as quais so selecionadas por meio
de critrios significativos (HAIR JR.; ANDERSON; TATHAM; BLACK, 2005;
MALHOTRA, 2006). Essa forma de validade, segundo Cooper e Schindler
(2006), reflete o sucesso das medidas usadas para a previso ou estimativa de
uma situao. Pode-se prever um resultado ou estimar a existncia de um comportamento ou condio atual. Contudo, para o critrio de validade ser verdadeiro, preciso observar os seguintes elementos: relevncia, iseno de vis, confiabilidade e disponibilidade (COOPER; SCHINDLER, 2003). Hair Jr., Anderson,
Tatham e Black (2005) exemplificam que, no desejo de medir um construto de
lealdade de um cliente, a satisfao pode ser um critrio usado para validar o
instrumento, pois clientes leais tendem a estar satisfeitos.
A validao de critrio pode ser realizada sob duas perspectivas: concorrente
(tambm chamada de concomitante) e preditiva (COOPER; SCHINDLER, 2003;
HAIR JR.; ANDERSON; TATHAM; BLACK, 2005; MALHOTRA, 2006).
Na primeira, coletam-se simultaneamente os dados da escala e das variveis (MALHOTRA, 2006), e os escores devem estar correlacionados (HAIR JR.;
ANDERSON; TATHAM; BLACK, 2005). Os clientes altamente satisfeitos com
um determinado restaurante, por exemplo, tambm devem ser frequentadores
assduos do mesmo (HAIR JR.; ANDERSON; TATHAM; BLACK, 2005). Tem-se,
portanto, uma descrio do presente, visto que os dados do critrio esto dispo RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial
231
232
nveis simultaneamente classificao do previsor. Assim sendo, um mtodo de

observao que categoriza corretamente as famlias pela renda atual tem validade
concorrente (COOPER; SCHINDLER, 2003).
Na segunda, a coleta dos dados da varivel critrio realizada posteriormente do construto que est sendo validado (HAIR JR.; ANDERSON; TATHAM;
BLACK, 2005; MALHOTRA, 2006). Assim, segundo Hair Jr., Anderson,
Tatham e Black (2005), a validade preditiva busca prever os escores futuros
de uma varivel dependente a partir dos ndices atuais obtidos na avaliao de
um construto. Nessa direo, um questionrio de opinio que prev, com uma
boa margem de acerto, o resultado das eleies sindicais tem validade preditiva
(COOPER; SCHINDLER, 2003). Selltiz, Wrightsman e Cook (1987) citam o
exemplo dos vestibulares, cuja validade preditiva pretende identificar quem se
formar ou quem desistir por meio da correlao dos resultados como medida
de um critrio.
Babbie (2005) considera a validade relacionada a critrio e a validade preditiva como sinnimas, definindo-a como o grau por meio do qual uma medida se
relaciona a algum critrio externo, ou seja, a validade de um teste escrito para
motoristas evidenciada pela relao entre as notas obtidas pelo candidato no
teste e sua competncia em dirigir, tendo como critrio a competncia ao volante.
A validade de construto, segundo Cooper e Schindler (2003), considera,
alm do instrumento de mensurao utilizado, a teoria. uma avaliao do
grau que o instrumento mede do constructo terico que o pesquisador deseja
estudar (SELLTIZ; WRIGHTSMAN; COOK, 1987; BREWER; HUNTER, 2006;
MALHOTRA, 2006). Brewer e Hunter (2006) acrescentam que essa validade
tambm indica que os conceitos construdos realmente definem caractersticas
mensurveis das pessoas ou dos grupos pesquisados.
De forma mais detalhada, de acordo com Cooper e Schindler (2003), na validade de construto, tenta-se identificar os construtos implcitos que so mensurados, bem como determinar como os testes representam esses construtos. Assim,
uma medida apresenta validade de construto no grau em que estiver de acordo
com as correlaes previstas em outras proposies tericas. O mtodo por meio
do qual definido operacionalmente o evento precisa corresponder a uma base
terica emprica. Depois de estabelecido que o construto importante no sentido terico, busca-se a adequao do instrumento. Se houver uma medida do
evento conhecida, correlacionam-se os resultados obtidos usando essa medida
com aquelas derivadas dos instrumentos (COOPER; SCHINDLER, 2003).
Isso realizado, de acordo com Malhotra (2006), por meio de respostas
s questes tericas sobre como funciona a escala, o porqu do funcionamento
da escala e quais dedues podem ser feitas a partir da teoria relacionada com
a escala. Por isso, a validade de construto pressupe uma slida teoria sobre a
natureza do construto e do relacionamento deste com os demais (MALHOTRA,

2006) ou, como apontam Hair Jr., Anderson, Tatham e Black (2005), necessrio entender a fundamentao terica subjacente s medidas obtidas.
Para Selltiz, Wrightsman e Cook (1976), a validade de construto diminui a
necessidade de evidncia de confiabilidade. Isso porque, segundo os autores, se
medidas que usam mtodos bastante diferentes mostram acordo considervel
ou se medidas apresentam correlaes razoavelmente altas com outras variveis
com as quais era predito se relacionarem, essas devem ser razoavelmente seguras.
Os autores apontam alguns elementos que compem a validade de construto, como validade convergente e validade discriminante ou discriminatria
(SELLTIZ; WRIGHTSMAN; COOK, 1987; HAIR JR.; ANDERSON; TATHAM;
BLACK, 2005; BREWER, HUNTER, 2006; MALHOTRA, 2006).
A validade convergente indica em que extenso a escala se relaciona positivamente com outras medidas do mesmo construto (HAIR JR.; ANDERSON;
TATHAM; BLACK, 2005; MALHOTRA, 2006), ou seja, a concordncia entre os
escores obtidos com dois instrumentos que medem o mesmo construto (SELLTIZ; WRIGHTSMAN; COOK, 1987). Esse tipo de validade avaliado, segundo
Brewer e Hunter (2006), comparando medidas metodologicamente dissimilares, sendo que, para uma medida ser segura, deve apresentar leituras consistentes, independentemente de variaes secundrias.
A validade discriminante (ou discriminatria), em contraposio, avalia em
que grau a medida em questo no est relacionada com outras das quais deveria
se diferenciar (HAIR JR.; ANDERSON; TATHAM; BLACK, 2005; MALHOTRA,
2006), isto , refere-se discordncia entre dois instrumentos que medem diferentes construtos (SELLTIZ; WRIGHTSMAN; COOK, 1987). Essa validade testada, portanto, por meio da comparao entre medidas que, supostamente, no
possuem conexo e consiste na habilidade que a medida apresenta de distinguir
o fenmeno estudado (BREWER; HUNTER, 2006).
Malhotra (2006) apresenta, tambm, a validade nomolgica como um elemento da validade de construto. A validade nomolgica, segundo o autor, indica
a relao entre os construtos tericos de forma a confirmar as correlaes significativas entre eles, originadas de uma teoria.
Para Brewer e Hunter (2006), alm das validades convergente e discriminante, a validade preditiva (descrita anteriormente ao se abordar a validade de
critrio) tambm um elemento da validade de construto. Para esses autores,
a validade preditiva de uma medida obtida pela comparao entre medidas
de conceitos teoricamente relacionados e consiste na habilidade que a medida
possui de confirmar hipteses. A obteno de altos ndices destas trs validades (convergente, discriminante e preditiva), para os autores, garante a validade
de construto, visto que requerem medidas cujas tcnicas so to diferentes que
233
234
qualquer convergncia encontrada nos resultados das medidas dificilmente ser

atribuvel a um erro.
Ainda a respeito da validade de construto, Selltiz, Wrightsman e Cook (1987)
e Straub e Carlson (1989) apontam que essa validade pode ser avaliada por meio
de tcnicas multitraos-multimtodos (MMMT) ou tcnicas como anlise fatorial de componentes principais ou confirmatrias.
Segundo Brewer e Hunter (2006), a validao de multitraos-multimtodos foi desenvolvida por Campbell e Finke (1959) e consiste em uma comparao entre vrias leituras de uma mesma situao social. Essa validao envolve
a identificao precisa das caractersticas do conceito avaliado e a aplicao de,
pelo menos, dois mtodos diferentes para desenvolver medidas mltiplas de cada
caracterstica. As medidas so aplicadas a uma amostra e geram uma matriz de
informaes que indicam a fora das associaes empricas entre as diferentes
medidas da mesma caracterstica, entre medidas semelhantes de caractersticas
diferentes e entre medidas diferentes de caractersticas diferentes. Se as medidas medem as caractersticas do conceito de forma adequada, diferenciando
caractersticas diferentes, a expectativa que as correlaes entre as medidas de
determinada caracterstica sejam mais fortes que entre medidas de caractersticas diferentes.
Selltiz, Wrightsman e Cook (1987) destacam a matriz multitraos-multimtodos a partir de um desenho de tabela de correlaes composto pela validade
convergente e pela validade discriminatria. Essa tabela demanda, pelo menos,
dois mtodos para medir, no mnimo, duas variveis diferentes. Baseia-se no
princpio de que quanto mais caractersticas duas mensuraes tiverem em
comum, maior ser sua correlao. Podem compartilhar dois tipos de caractersticas: trao (contedo) emtodo (forma de mensurao). A matriz multitraos-multimtodos permite ao pesquisador determinar em que medida os escores
refletem o trao e o mtodo contido em toda a mensurao.
Alm dos tipos de validade j destacados, Straub e Carlson (1989) destacam,
ainda, mais um tipo de validade: a de concluso estatstica. Essa, segundo Straub
e Carlson (1989), consiste em uma avaliao das relaes matemticas entre
variveis e a probabilidade de que essa avaliao matemtica fornea um quadro correto da verdadeira covariao (COOK; CAMPBELL, 1979 apud STRAUB;
CARLSON, 1989). Outro fator usado para determinar a validade da concluso
estatstica de um estudo o poder estatstico, que consiste na probabilidade de
a hiptese nula ter sido rejeitada corretamente. A rejeio adequada est intimamente associada ao tamanho de amostra, de forma que testes com tamanhos de
amostra maiores so menos provveis de rejeitar a hiptese nula impropriamente (BAROUDI; ORLIKOWSKI, 1989; COHEN, 1969, 1977; KRAEMER; THIEMANN, 1987 apud STRAUB; CARLSON, 1989).
Babbie (2005) tambm apresenta dois tipos de validade diferentes: aparente

e de construo. A primeira refere-se qualidade de um indicador que reflete,
de alguma varivel, uma medida razovel. Um exemplo a destacar um acordo entre pesquisadores sobre a melhor forma de medir um conceito. Selltiz,
Wrightsman e Cook (1987) acrescentam que a validade aparente avaliada por
juzes que examinam a tcnica de mensurao empregada, de forma a verificar
se a mesma mede o que proposto. Fonoaudilogos poderiam, por exemplo,
examinar um teste para medir graus de retardo na linguagem das pessoas e
decidir se esse teste mede o que prope, a partir de um ndice de validade para
avaliar a concordncia entre os juzes (SELLTIZ; WRIGHTSMAN; COOK, 1987).
A validade de construo, por sua vez, a forma como uma medida se relaciona,
em um sistema de relaes tericas, com outras variveis (BABBIE, 2005).
Tem-se, ainda, a validade simultnea, destacada por Selltiz, Wrightsman e
Cook (1987), que consiste na capacidade de um teste diferenciar dois indivduos.
Por exemplo, se um teste elaborado para mensurar o grau de conscincia poltica
de indivduos entre vrios grupos sociais possibilitar a distino entre indivduos
da situao e da oposio, o teste teria validade simultnea. Isso porque, alm
de medir o grau de conscincia poltica, estaria assinalando as posies polticas
contrrias (SELLTIZ; WRIGHTSMAN; COOK, 1987).
Deu-se destaque, at o momento, a medidas de validade apresentadas na
literatura sem a considerao dos tipos de estudo nos quais podem ser empregadas. Assim, faz-se, a seguir, uma apresentao sobre a validao em estudos
de caso.
Yin (2005) aborda os critrios de validade de projetos de pesquisa de estudo
de caso, que so apresentados como testes utilizados para verificar a qualidade de
uma pesquisa. O autor vale-se de trs critrios comumente descritos para todos
os mtodos de cincias sociais e aborda sua aplicao em estudos de caso: validade de construto, validade interna e validade externa. A validade de construto, segundo Yin (2005), consiste em medidas operacionais adequadas para os
conceitos, e sua aplicao em estudos de caso pode se dar por meio do emprego
de mltiplas fontes de evidncia e da demonstrao de um encadeamento das
evidncias obtidas, sendo que o relatrio do estudo de caso deve ser revisado
por informantes-chave.
A validade interna, por sua vez, consiste na definio de relaes causais
entre determinadas condies, de forma que s pode ser aplicada em estudos
explanatrios ou causais, no se adequando a estudos descritivos ou exploratrios
(YIN, 2005). Essa validade pode ser obtida em estudos de caso, de acordo com
Yin (2005), por meio da adequao do estudo de caso ao padro de base prognstica ou com vrias previses alternativas; da anlise dos resultados do estudo de
caso para construir uma explanao coerente a seu respeito; e do emprego de um
235
modelo lgico, que define um encadeamento dos eventos ao longo do tempo por
meio de padres de causa-efeito.
Sobre a validade externa, Yin (2005) elucida que essa abrange a possibilidade de os resultados encontrados no estudo serem generalizados para outras
condies, o que pode ser demonstrado, em estudos de caso, por meio da utilizao de teoria em estudos de caso nico e, em estudo de caso mltiplos, por
meio da lgica de replicao. A generalizao de estudos de caso considerada
analtica, ou seja, busca-se generalizar um grupo de dados para uma teoria mais
abrangente (YIN, 2005).
Os critrios de validade fundamentados neste estudo encontram-se sintetizados e dispostos no Quadro 1.
Quadro 1
CONFIGURAES DE VALIDADE CITADAS

PELOS AUTORES ESTUDADOS
Autores
Conceitos
Diferentes tipos de validade

Externa: refere-se capacidade de os dados serem
generalizados entre pessoas, ambientes e pocas.
Cooper e
Schindler
(2003)
236
Validade:
grau por meio
do qual as
diferenas
encontradas
com uma
ferramenta de
mensurao
refletem as
diferenas
reais entre os
respondentes.
Contedo: grau por meio do qual

os contedos dos itens representam
adequadamente o universo de todos os
elementos relevantes.
Interna:
habilidade de um
instrumento de
pesquisa medir
o que deve ser
medido.
Critrio:
reflete o
sucesso das
medidas
usadas
para a
previso ou
estimativas
de uma
situao.
Preditiva: previso do
futuro; os dados do
critrio so mensurados
depois da passagem do
tempo.
Concorrente: descrio
do presente; os dados do
critrio esto disponveis
simultaneamente
classificao do previsor.
Construto: identificao dos

construtos implcitos que so
mensurados e determinao de como o
teste representa esses construtos.
(continua)

Quadro 1 (Continuao)

Autores
Conceitos

Contedo/nominal: avaliao subjetiva, porm sistemtica,
da exatido com que o contedo de uma escala representa
o trabalho de mensurao em questo.
Malhotra
(2006)
Validade:
extenso por
meio da qual
as diferenas
em escores
observados na
escala refletem
as verdadeiras
diferenas entre
objetos quanto
caracterstica
que est sendo
medida.
Critrio: examina
se a escala de
medidas funciona
conforme o
esperado em
relao s
outras variveis
selecionadas
como critrios
significativos.
Concomitante/concorrente:
ocorre quando os dados da escala
e das variveis so coletados
simultaneamente.
Preditiva: ocorre quando os dados
sobre a escala so coletados em um
determinado momento e os dados das
variveis em um instante futuro.
Convergente: indica a extenso por
meio da qual a escala se relaciona
positivamente com outras medidas do
mesmo construto.
Construto: indica
que construto ou
qual caracterstica
est medindo.
Discriminante: avalia at que ponto

uma medida no se correlaciona com
outros construtos, dos quais se supe
que ela difira.
Nomolgica: determina o
relacionamento entre construtos
tericos.
Validade:
ponto at onde
um construto
Hair Jr.,
mede o que
Anderson,
deve medir.
Tatham e
Um construto
Black (2005) com validade
perfeita no
contm erros de
mensurao.
Contedo/face validity: envolve uma avaliao

sistemtica, mas subjetiva, para medir o que deve ser
medido.
(continua)

237

Autores
Conceitos
Validade:
ponto at onde
um construto
Hair Jr.,
mede o que
Anderson,
deve medir.
Tatham e
Um construto
Black (2005) com validade
perfeita no
contm erros de
mensurao.

Critrio: avalia
se o construto
tem desempenho
esperado
em relao a
outras variveis
identificadas
como critrios
significativos.
Construto: avalia
o que o conceito
est, de fato,
medindo.
Concorrente: ocorre quando os

escores das variveis so obtidos,
aproximadamente, no mesmo ponto no
tempo e devem ser correlacionados.
Preditiva: prev valores futuros de
uma varivel dependente a partir de
escores obtidos no construto que est
sendo testado.
Convergente: sinaliza at onde
o construto est positivamente
relacionado com outras medidas do
mesmo construto.
Discriminante: sinaliza at onde o
construto no se correlaciona com
outras medidas que dele diferem.
Aparente: processo subjetivo, analisado por um grupo de

especialistas, em que a escala mede o que se pretende medir.
Simultnea: a capacidade de um teste distinguir entre
dois indivduos sabidamente diferentes.
Preditiva: constitui-se na capacidade de um teste identificar
diferenas futuras.
Selltiz,
Wrightsman
e Cook
(1987)
238
Validade:
Construto:
abrange o
construto que se uma avaliao
do quanto o
quer abranger.
instrumento mede
o constructo
terico que se
deseja medir.
A concordncia fornece evidncia da

validade convergente.
Discordncia uma evidncia de

validade discriminatria.
Multitraos-multimtodos: tabela de correlaes que

demonstra, na validao de construto, o desenho, tanto da
validade convergente como da validade discriminatria.
(continua)


Autores
Conceitos

Face: ocorre quando uma medida mais pertinente ao
significado de um conceito do que ao significado de outro
conceito.
Contedo: os dados de uma medida devem possibilitar
uma prova adequada do comportamento social pelo
conceito.
Confiabilidade: comparao dos resultados de aplicaes
repetidas da mesma medida em circunstncias levemente
diferentes.
Brewer
e Hunter
(2006)
Validao de
uma medida:
comparao
entre medidas.
Convergente: determinada por meio da comparao

entre medidas metodologicamente dissimilares, sendo
que, para uma medida ser segura, deve apresentar leituras
consistentes, independentemente de variaes secundrias.
Discriminante: testada por meio da comparao entre
medidas que, supostamente, no possuem conexo e
consiste na habilidade que a medida possui de distinguir o
fenmeno estudado.
Preditiva: obtida pela comparao entre medidas
de conceitos teoricamente relacionados e consiste na
habilidade que a medida apresenta de confirmar hipteses.
Construto: indica se conceitos construdos realmente
definem caractersticas mensurveis das pessoas ou dos
grupos.
Multitraos-multimtodos: desenvolvida por Campbell
e Finke (1959), consiste em uma comparao entre vrias
leituras de uma mesma situao social.
Straub e
Carlson
(1989)
Sem a
validao dos
instrumentos,
os resultados do
estudo no so
confiveis.
Contedo/face: difcil de ser verificada porque o universo

de contedo possvel virtualmente infinito.
(continua)

239

Autores
Conceitos

Construto: avalia o que o construto ou o conceito est
medindo, pergunta se as medidas escolhidas so capazes de
descrever o evento.
Straub e
Carlson
(1989)
Sem a
validao dos
instrumentos,
os resultados do
estudo no so
confiveis.
Multitraos-multimtodos: a validade de construto pode

ser avaliada por meio dessa tcnica.
Interna: questiona se os efeitos observados poderiam ter
sido causados por um conjunto de variveis no hipotticas
e/ou imensurveis ou ser relacionados a esse conjunto de
variveis no hipotticas e/ou imensurveis.
Concluso estatstica: consiste na avaliao das relaes
matemticas entre variveis e a probabilidade de que
essa avaliao matemtica fornea um quadro correto da
verdadeira covariao.
Aparente: qualidade de um indicador que a faz parecer
uma medida razovel de alguma varivel.
Babbie
(2005)
Validade:
grau por
meio do qual
uma medida
emprica reflete
adequadamente
o significado
real do conceito
considerado.
Contedo: grau por meio do qual uma medio cobre a

amplitude de significados includos no conceito.
Critrio/preditiva: grau por meio do qual uma medida se
relaciona a algum critrio externo.
Construo: modo como uma medida se relaciona a outras
variveis em um sistema de relaes tericas.
Externa: processo de testar a validade de uma medida,
como ndice ou escala, examinando suas relaes com
outros supostos indicadores da mesma varivel.
Interna: processo pelo qual os itens individuais de uma
medida composta se relacionam com a prpria medida.
240
Yin (2005)
Validade: testes
para verificar a
qualidade de
uma pesquisa.
Construto: medidas operacionais adequadas para os

conceitos.
Interna: definio de relaes causais entre determinadas
condies.
(continua)

Quadro 1 (Concluso)

Autores
Conceitos
Yin (2005)
Validade: testes
Externa: possibilidade de os resultados encontrados
para verificar a
no estudo serem generalizados para uma teoria mais
qualidade de
abrangente.
uma pesquisa.
Fonte: Elaborado pelos autores.
Para sintetizar as informaes apresentadas e visualizar os critrios mais

citados, apresentam-se, no Quadro 2, os tipos de critrios de validade destacados
pelos autores conforme a fundamentao terica.
Quadro 2
CRITRIOS DE VALIDADES CITADOS PELOS AUTORES
Critrios
Selltiz,
Wrightsman
e Cook (1987)
Straub e
Carlson
(1989)
Cooper e
Schindler
(2003)
Construto
Contedo
Preditiva
Convergente
x
x
Interna
x
x
Externa
Aparente
Multitraosmultimtodos
Yin
(2005)
Brewer
e
Hunter
(2006)
x
x
x
x
Malhotra
Total
(2006)
Concorrente
Confiabilidade
Critrio
Discriminante
Babbie
(2005)
Hair Jr.,
Anderson,
Tatham
e Black
(2005)
x
x
3
3
2
x
(continua)

241
Quadro 2 (Concluso)
CRITRIOS DE VALIDADES CITADOS PELOS AUTORES
Critrios
Selltiz,
Wrightsman
e Cook (1987)
Straub e
Carlson
(1989)
Cooper e
Schindler
(2003)
Babbie
(2005)
Hair Jr.,
Anderson,
Tatham
e Black
(2005)
Yin
(2005)
Brewer
e
Hunter
(2006)
Malhotra
Total
(2006)
Concluso
Estatstica
Face
Simultnea
Nomolgica
A partir da reviso de literatura apresentada, visando contribuir com a adoo de critrios de validade, destacam-se, no Quadro 3, algumas informaes
que podem auxiliar os pesquisadores a verificar a adequao de seus estudos aos
principais critrios. Ressalta-se que o termo elemento apresentado no quadro
pode ser um construto, uma varivel, um fator ou um conceito, ou seja, o que se
deseja mensurar ou pesquisar.
Quadro 3
QUESTES PARA VERIFICAR OS PRINCIPAIS CRITRIOS DE

VALIDADE CITADOS NA LITERATURA CONSULTADA
Critrios
CONTEDO, FACE OU NOMINAL:
O contedo do elemento expressa o que se deseja mensurar?
O contedo do elemento no expressa melhor outro elemento diferente do qual se deseja
mensurar?
242
CONSTRUTO:
O que o elemento est mensurando?
O instrumento est mensurando o elemento desejado?
Qual o ndice de sucesso em mensurar o elemento desejado?
Convergente: O elemento mensurado se relaciona positivamente com outras medidas do
mesmo elemento?
Qual o grau no qual medidas de um elemento se relacionam positivamente?
(continua)

Quadro 3 (Concluso)
QUESTES PARA VERIFICAR OS PRINCIPAIS CRITRIOS DE

VALIDADE CITADOS NA LITERATURA CONSULTADA
Critrios
Discriminante: O elemento mensurado no se relaciona com outras medidas do mesmo
elemento?
Qual o grau de independncia das medidas de um mesmo elemento?
CRITRIO:
O elemento mensurado expressa o desejado em comparao com outros elementos
significativos?
Qual o grau de relao entre o elemento mensurado e os outros elementos significativos?
Qual o grau de independncia do resultado obtido no elemento mensurado em relao aos
outros elementos significativos?
Concorrente: Consiste em uma observao atual (ou no mesmo perodo de tempo) de
elementos correlacionados?
Preditiva: possvel prever um resultado ou ao a partir dos resultados obtidos no
elemento mensurado?
Nesta seo, abordaram-se critrios de validade de autores como Selltiz,

Wrightsman e Cook (1987), Straub e Carlson (1989), Cooper e Schindler (2003),
Babbie (2005), Hair Jr., Anderson, Tatham e Black (2005), Yin (2005), Brewer
e Hunter (2006) e Malhotra (2006). Alm disso, propuseram-se questes para
verificao dos critrios de validade de contedo, de construto e de critrio.
DE L I N E AM E N T O M E T O D O L G I C O
Para este estudo, optou-se pela pesquisa bibliogrfica e bibliomtrica. A partir da pesquisa bibliogrfica, realizou-se uma anlise de contedo do referencial
terico e se fez uma proposio de itens de anlise que podem auxiliar os pesquisadores a verificar a adequao de seus estudos aos principais critrios.
A pesquisa bibliogrfica, de acordo com Cervo e Bervian (2004), estuda
um problema com base em referenciais tericos publicados em documentos,
visando conhecer as contribuies cientficas anteriores (por meio de diferentes
fontes, tais como: livros, publicaes em peridicos e artigos cientficos) sobre
determinado tema. Para Gil (2009), esse tipo de pesquisa realizado a partir de
material j elaborado e publicado em relao ao assunto.
243
J na pesquisa bibliomtrica, desenvolveu-se uma perspectiva temporal longitudinal, com base nos artigos em estudos de estratgia, publicados nos anais
do EnAnpad, no perodo de 1997 a 2010. O estudo bibliomtrico, de acordo com
Macias-Chapula (1998), aplica mtodos quantitativos produo, divulgao e
utilizao de informaes registradas. Os estudos longitudinais, conforme Hair
Jr., Anderson, Tatham e Black (2005), descrevem eventos ao longo do tempo.
A escolha da abrangncia desta pesquisa foi motivada pela disponibilizao
dos anais das edies do EnAnpad, em CD-ROMs, a partir do ano de 1997.
A obteno dos artigos revisados ocorreu por meio de buscas eletrnicas nos
CD-ROMs de cada edio do evento, no perodo de tempo e na rea temtica
determinados, por meio das seguintes palavras-chave: validade, mensurao,
critrios de validade, validao e confiabilidade.
Analisaram-se 53 artigos da rea de estratgia, os quais foram subdivididos
em dois grupos: os que aplicaram critrios de validade nos estudos e indicaram
as etapas da validao (45 artigos), e os que apenas mencionaram a validade da
pesquisa, porm no esclareceram o procedimento adotado (oito artigos).
A classificao ocorreu por meio de leitura, inicialmente, do resumo e do
mtodo de estudos dos artigos. Posteriormente, realizou-se o registro, em uma
planilha eletrnica, das seguintes informaes: ano de publicao dos trabalhos,
autores, ttulo, trechos que indicam validade, critrios de validade especficos,
trechos em que foram apresentadas as etapas da validade aplicadas, autores citados, obras citadas e tipo de pesquisa de cada estudo. Aps o registro, realizou-se
a apurao dos dados, destacando os quantitativos em forma de tabelas.
Procedeu-se, ento, anlise descritiva de frequncia e percentual da utilizao de validao quanto ao tipo de pesquisa (quantitativa, qualitativa e que mesclam as duas abordagens), aos tipos de critrios de validao empregados e s
obras mais citadas quando da abordagem da validao. No que concerne classificao da metodologia utilizada nos artigos, de acordo com Gressler (2004), a
abordagem quantitativa caracteriza-se pela formulao de hipteses, definies
operacionais das variveis, quantificao nas modalidades de coleta de dados e
de informaes e utilizao de tratamentos estatsticos. A abordagem qualitativa
difere, em princpio, da abordagem quantitativa, visto que no emprega instrumentos estatsticos como base do processo de anlise (GRESSLER, 2004).
244
A PRE S E N TAO E A N L I S E DOS

R E S U LTAD O S
Nesta seo, apresentam-se os resultados obtidos e se faz a anlise deles. A

Tabela 1 expe o nmero de artigos que apresentaram critrios de validade e dos
que apenas citaram validade e no esclareceram sua aplicao, bem como mostra
uma subdiviso em pesquisas quantitativas e qualitativas.
Tabela 1
UTILIZAO DE CRITRIOS DE VALIDADE

Apresentaram critrios e
informaram sua aplicao
Apresentaram critrios, mas no

indicaram a aplicao
Total
Quantitativos
27
50,94%
Quantitativos
03
5,66%
30
56,6%
Qualitativos
14
26,41%
Qualitativos
04
7,55%
18
34,0%
Quantitativo e
qualitativo
04
7,55%
Quantitativo e
qualitativo
01
1,89%
05
9,4%
Total
45
84,90%
Total
08
15,10%
53
Fonte: Elaborada pelos autores.
Conforme observado na Tabela 1, dos artigos pesquisados, 53 apresentaram

ou citaram algum tipo de critrios de validade utilizado nas pesquisas, sendo que
45 deles informaram sobre a aplicao e oito no elucidaram os procedimentos e
as etapas da validao. Isso denota que grande parte dos estudos da rea de estratgia est preocupada com os critrios de validade, havendo, contudo, ainda, um
grande espao para ampliao da adoo dos procedimentos de validao, visto o
amplo nmero de artigos publicados na rea no perodo (mais de mil).
Observa-se, tambm, que a grande maioria dos estudos quantitativos (27
artigos) aplicou critrios de validade e informou as etapas. Entre os estudos qualitativos, boa parte igualmente realizou esses procedimentos (14 artigos). J em
relao aos estudos que mesclam as abordagens qualitativa e quantitativa, quatro
destacaram os critrios e os procedimentos de aplicao adotados, e um no indicou a aplicao. Tem-se, assim, que os estudos quantitativos apresentam maior
preocupao com os procedimentos de validao dos instrumentos utilizados do
que as pesquisa qualitativas ou qualitativo-quantitativas. O menor nmero de
artigos qualitativos que citaram a utilizao de critrios de validade pode estar
relacionado ao fato de que esses estudos podem empregar abordagens epistemolgicas no positivistas, as quais adotam pressupostos de validao diferentes.
Para uma discusso sobre validade sob a tica de abordagens no positivistas,
consultar Oliveira e Piccinini (2009) e Ollaik e Ziller (2011).
Na Tabela 2, destacam-se as obras mais citadas nos artigos revisados que
abordam validade.

245
Tabela 2
OBRAS MAIS CITADAS SOBRE VALIDADE

Obras
Citaes
Obras
Citaes
Yin (2001, 2005)
Cronbach e Meehl (1955)
Hair Jr., Anderson, Tatham e Black

(1998, 2005, 2007, 2009)
Garver e Mentzer (1999)
Diamantopoulos e Winklhofer (2001)
Helm (2005)
Bardin (1977, 2009)
Kline (1998)
Churchill (1979)
Milliken (1987, 1990)
Fornell e Lacker (1981)
Netemeyer, Bearden e Sharma

(2003)
Campbell e Fiske (1959)
Nunnally (1978)
Hair Jr., Anderson, Tatham e Black

(2005)
Nunnally e Bernstein (1994)
Malhotra (2001, 2006)
Schwab (1980)
Anderson e Gerbing (1991)
Smith (1999)
Bollen (1989)
Spector (1992)
Chin (1998)
2
246
Como pode ser observado na Tabela 2, a obra mais citada foi Estudo de caso,
de Robert K. Yin, em suas edies de 2001 e 2005. Esse resultado possivelmente
est relacionado incidncia de estudos de caso entre as pesquisas revisadas. No
livro citado, o autor aborda os critrios de validade de construto, interna, externa,
e confiabilidade para estudos de caso. A segunda obra mais citada foi Anlise multivariada de dados, de Hair Jr., Anderson, Tatham e Black, de diferentes edies.
Essa obra costuma ser empregada por estudos quantitativos que aplicam estatstica
multivariada e aborda os critrios de validade de contedo, de construto (convergente e discriminante), de critrio (concorrente e preditiva). Entre as obras mais
citadas nos estudos revisados, destaca-se, ainda, o artigo Index construction with
formative indicators, de Diamantopoulos e Winklhofer, publicado, em 2001, no
Journal of Marketing Research. O artigo apresenta formas pelas quais a qualidade de medidas de formao pode ser avaliada: especificao do escopo da varivel
latente, colinearidade dos indicadores, multicolinearidade e validade externa.
Na Tabela 3, expem-se os tipos de critrios de validade mais empregados

nos artigos revisados, distribudos em mtodos de pesquisas utilizados, quantidade e porcentagem.
Tabela 3
TIPOS DE CRITRIOS DE VALIDADE MAIS EMPREGADOS

Critrios de validade
mais empregados
Artigos
quantitativos
Artigos
qualitativos
Artigos
quantitativos e
qualitativos
Convergente
16
30,19%
11,32%
1,89%
23
43,40%
Discriminante
17
32,08%
9,43%
22
41,51%
Contedo
13
24,53%
7,55%
3,77%
19
35,85%
Construto
15,09%
13,21%
15
28,30%
Externa
5,66%
7,55%
1,89%
15,09%
Interna
3,77%
5,66%
1,89%
11,32%
Preditiva
5,66%
3,77%
9,43%
Critrio
3,77%
3,77%
7,55%
Nomolgica
5,66%
1,89%
7,55%
Concorrente
1,89%
3,77%
5,66%
Substantiva
3,77%
1,89%
5,66%
Aparente
1,89%
1,89%
Total
Constata-se, na Tabela 3, que as configuraes de validade mais empregadas

versam sobre a validade convergente, indicada em 43,40% dos artigos; a validade discriminante, indicada em 41,51%; a validade de contedo, assinalada em
35,85%; e a validade de construto, apontada em 28,30%. Na sequncia da classificao dos critrios mais aplicados, destacam-se as validades externa (15,09%),
interna (11,32%), preditiva (9,43%), de critrio (7,55%), nomolgica (7,55%), concorrente (5,66%) e substantiva (5,66%), empregadas em propores menores.
Do mesmo modo, observa-se que a validade aparente apresenta o critrio com
menor ndice de aplicao (1,89%).

247
248
Como destacado na reviso de literatura, os critrios de validade convergente e discriminante integram a validao do construto. Assim, se agregados os
resultados desses trs critrios (construto, convergente e discriminante), tem-se
o total de 34 artigos que realizaram a validao de construto, o que corresponde
a 64,15% dos artigos analisados. Do mesmo modo, os critrios de validade concorrente e preditiva fazem parte da validao de critrio. No caso de agregao
desses trs critrios (critrio, concorrente e preditiva), obtiveram-se sete artigos
(13,20%). A partir dessa nova configurao dos dados, tem-se, portanto, como
validaes mais empregadas, a de construto (64,15%), seguida da de contedo
(35,85%).
O elevado emprego da validao de construto indica que as medidas empregadas esto alinhadas com os construtos tericos que pretendem mensurar (SELLTIZ; WRIGHTSMAN; COOK, 1987; BREWER; HUNTER, 2006; MALHOTRA,
2006). Alm disso, um nmero razovel de estudos preocupa-se, portanto, com
a validade de contedo, o que busca garantir a eliminao de erros resultantes da
utilizao de medidas irrelevantes ou insuficientes. Contudo, essa uma condio prvia, no eliminando a possibilidade de ocorrncia de outros erros, o que
demanda a adoo de outros critrios (BREWER; HUNTER, 2006). Assim, pode
ser problemtico o fato de poucos estudos terem realizado a validao de critrio,
a qual avaliaria se a medida pode estimar ou prever uma situao externa e relacionada ao construto em questo (COOPER; SCHINDLER, 2003).
Percebe-se, ainda, que os critrios de validade discriminante, convergente,
de contedo e de construto, ou seja, as validaes de construto (unio dos critrios de validade de construto, discriminante e convergente) e de contedo, foram
as mais utilizadas pelas pesquisas quantitativas. Por outro lado, as pesquisa qualitativas empregaram mais os critrios de validade de construto, convergente,
discriminante, de contedo e externa, o que corresponde s mesmas validaes
dos estudos quantitativos com acrscimo da validao externa. Isso pode estar
relacionado ao emprego, entre os estudos de caso, da obra de Yin (2005), a qual
indica a validade externa como um dos critrios de validao aplicveis aos estudos de caso por meio da generalizao analtica. Percebe-se, assim, uma preocupao com a generalizao dos dados encontrados para outros contextos (COOPER; SCHINDLER, 2003; YIN, 2005).
Por fim, nos estudos qualitativos e quantitativos, foram empregados os
critrios de validade de contedo, convergente, externa, interna e substantiva. Tem-se, ainda, que nenhuma pesquisa quantitativa empregou o critrio de
validade aparente, o que pode estar relacionado ao fato de essa ser uma avaliao mais subjetiva, normalmente realizada por especialistas que verificam se a
medida/escala mensura o desejado (SELLTIZ; WRIGHTSMAN; COOK, 1987;
BABBIE, 2005). Alm disso, o critrio de validade substantiva no figurou nos

estudos qualitativos. Esse critrio, que definido por Garver e Mentzer (1999)
como a associao entre os itens de uma varivel, costuma ser obtido por meio do
clculo do coeficiente de validade substantiva (ANDERSON; GERBING, 1991), o
que pode explicar sua ocorrncia em pesquisas quantitativas.
Constatou-se, ainda, que as configuraes das validades simultnea (SELLTIZ; WRIGHTSMAN; COOK, 1987), concluso estatstica (STRAUB; CARLSON, 1989) e construo (BABBIE, 2005), encontradas na literatura, no foram
empregadas nos artigos revisados. Isso pode estar relacionado ao fato de poucos
autores apresentarem esses critrios de validade em relao a outros amplamente presentes na literatura, como contedo, critrio e construto.
Alm do exposto, observou-se que 5,66% dos artigos pesquisados apontaram apenas o uso do clculo do Alfa de Cronbach e Anlise Fatorial como formas
de validao de instrumento de pesquisa. Vale ressaltar que o Alfa de Cronbach
uma medida da confiabilidade de consistncia interna (MALHOTRA, 2006),
da mesma forma que Anlise Fatorial apresenta-se como uma tcnica para analisar os padres de relaes complexas multidimencionais, tendo como principais
objetivos o resumo e a reduo dos dados (HAIR JR.; ANDERSON; TATHAM;
BLACK, 2005).
5 CO N CL U S E S
Este estudo analisou os critrios de validade utilizados em estudos cientficos da rea de estratgia, publicados nos anais do EnAnpad, entre 1997 e 2010.
Constata-se que as validades convergente, discriminante, de contedo e de construto foram os critrios de validade mais empregados nos trabalhos pesquisados,
o que indica o maior emprego das validaes de construto (abrangendo convergente e discriminante) e de contedo. Essas formas de validao tambm so
amplamente abordadas na literatura, a exemplo de Straub e Carlson (1989), Cooper e Schindler (2003), Hair Jr., Anderson, Tatham e Black (2005), Yin (2005),
Brewer e Hunter (2006) e Malhotra (2006).
Outro resultado que despertou ateno foi a validao de critrio (validade
de critrio, concorrente e preditiva) ter sido empregada em menos de 10% dos
artigos revisados, no obstante esses critrios sejam amplamente abordados na
literatura, em especial o critrio de validade preditiva, por autores como Cooper
e Schindler (2003), Hair Jr., Anderson, Tatham e Black (2005), Malhotra (2006),
Selltiz, Wrightsman e Cook (1987) e Brewer e Hunter (2006), e o de validade de
critrio, por Babbie (2005).
249
250
Destaca-se, ainda, o emprego do critrio de validade substantiva em trs artigos, apesar de esse no ter sido identificado previamente na reviso de literatura.
Verificou-se o emprego dessa validade em estudos quantitativos, o que se atribui
ao fato de essa validade normalmente estar associada ao clculo de um coeficiente.
Por outro lado, a validade aparente foi citada apenas em um estudo qualitativo,
possivelmente por consistir em uma forma de avaliao mais subjetiva.
Outra distino entre pesquisas qualitativas e quantitativas identificada foi
o menor nmero de artigos qualitativos que citaram a utilizao de critrios
de validade, o que possivelmente est relacionado ao fato de que esses estudos
podem empregar abordagens epistemolgicas no positivistas, as quais no
pressupem a possibilidade de validao. Infelizmente, a maior parte dos artigos
no cita a perspectiva epistemolgica adotada, o que dificulta esse tipo de anlise.
A partir do apresentado, conclui-se que, na rea de estratgia, so realizadas
pesquisas preocupadas com a validao, mas que esse nmero restrito diante do
nmero de artigos publicados na rea no perodo analisado. Tambm h espao
para explorao de outros critrios de validade, como a validao de critrio, que
pouco utilizada, apesar de amplamente citada na literatura. De forma geral, nota-se que os estudos tm adotado poucos tipos de validao, o que merece ateno,
pois a validao de uma medida deveria atender a diferentes critrios de validade.
De tal forma, recomenda-se que os estudos da rea considerem com maior
cuidado a questo de validao das medidas para garantir que essas contribuam
com o conhecimento sobre estratgia organizacional. Espera-se, portanto, que
este artigo possa contribuir, por meio da divulgao e da orientao a respeito
dos principais critrios de validade, para que os pesquisadores adotem procedimentos voltados validao dos instrumentos de pesquisa.
A respeito das limitaes deste estudo, pode-se destacar a amostra, tendo
em vista que essa amostra utilizou apenas dados de um dos eventos nacionais
da rea de administrao e em um perodo de 14 anos. Portanto, recomenda-se,
para futuras pesquisas, a ampliao da amostra, abrangendo outros eventos e
peridicos, bem como outros perodos. Tambm se recomenda que pesquisadores de outras reas, principalmente daquelas nas quais a proposio e a adaptao de instrumentos de pesquisa so frequentes, desenvolvam estudos voltados
discusso e divulgao de procedimentos de validade.
Alm disso, destaca-se que, diante de a maior parte dos artigos no apresentar a perspectiva epistemolgica adotada, no foi possvel definir se todos
poderiam fazer uso dos critrios de validade apresentados na literatura. Contudo,
como foram analisados apenas artigos que citavam validade em seu contedo,
acredita-se que sejam positivistas e, portanto, poderiam se valer dos critrios
apresentados.

STANDARDS OF QUALITY IN RESEARCH STRATEGY:

AN ANALYSIS IN PAPERS PUBLISHED AT ENANPAD
FROM 1997 TO 2010
A BST RACT
Validity criteria are fundamental elements that make up the methodological rigor
of a scientific study. Thus, this study aimed to examine the validity criteria used
in scientific studies in the area of strategy,
published in the Annals of EnAnpad

between 1997 and 2010. In the literature review, the theoretical approach to
validity criteria is that of Selltiz, Wrightsman and Cook (1987), Straub and Carlson
(1989), Cooper and Schindler (2003), Babbie (2005), Hair Jr., Anderson, Tatham
and Black (2005), Yin (2005), Brewer and Hunter (2006) and Malhotra (2006).
From the literature review, aiming to expand the adoption of validity criteria,
items are proposed so that can help researchers to determine the adequacy of
their studies to the main criteria. We performed a literature and bibliometric
analysis of 53 articles in the field of strategy and content analysis was made of the
theoretical articles; data were submitted to descriptive analysis of frequency and
percentual use of validation as of the type of research (quantitative, qualitative
and the two approaches mixed), the types of validation criteria employed, and
the most cited works in addressing validation. It was found that the convergent,
discriminant, content and construct validities were the most employed criteria
in the studies reviewed and criterion validity (criterion validity, concurrent and
predictive), although widely discussed in the literature, was used in less 10% of
these studies. Among the results, even if it has, in the area of strategy,
conducted
surveys that show concern for validation, that number is still small considering
the number of articles published in the field, in the period analyzed. So, there
is room for exploring other validity criteria, such as criteria validation. This
study can contribute, through the dissemination and guidance regarding the
main validity criteria, so that research can adopt procedures aimed at validating
research instruments.
KEYWO RD S
251
Quality; Validity criteria; Strategy; Scientific papers; Bibliometric.

CRITERIOS DE VALIDEZ EN INVESTIGACIONES

EN ESTRATEGIA: UN ANLISIS EN ARTCULOS
PUBLICADOS EN EL ENANPAD DE 1997 A 2010
RESU M E N
Los criterios de validez son elementos fundamentales que componen el rigor
metodolgico de un estudio cientfico. Por lo tanto, este estudio tuvo como objetivo examinar los criterios de validez utilizados en los estudios cientficos en
el rea de estrategia, publicados en la revista Annals of EnAnpad entre 1997 y
2010. Al revisar la fundamentacin terica, los criterios de validez adoptados son
los de los autores Selltiz, Wrightsman y Cook (1987), Straub y Carlson (1989),
Cooper y Schindler (2003), Babbie (2005), Hair Jr., Anderson, Tatham y Black
(2005), Yin (2005), Brewer y Hunter (2006) y Malhotra (2006). A partir de la
revisin bibliogrfica, con el objetivo de ampliar la adopcin de criterios de validez, se proponen temas que pueden ayudar a los investigadores a determinar la
adecuacin de los estudios a los criterios principales. Se realiz una bsqueda
bibliogrfica y bibliomtrico con 53 artculos en el campo de anlisis de la estrategia y el contenido se hizo de los artculos tericos; los datos fueron sometidos
al anlisis descriptivo de frecuencia y el porcentaje de uso de la validacin para
el tipo de investigacin (cuantitativos, cualitativos y mixtos de los dos enfoques),
los tipos de criterios de validacin empleado, y las ms citadas obras en el tratamiento de validacin. Se encontr que la validez convergente, discriminante, de
contenido y de constructo son los criterios que ms se emplearon en los estudios
revisados y que la validez de criterio (validez de criterio, concurrente y predictiva), aunque ampliamente discutida en la literatura, se utiliz en menor que 10%
de estos estudios. Incluso, entre los resultados, en el mbito de la estrategia, se
realizan investigaciones que muestran preocupacin por la validacin, pero ese
nmero es an pequeo teniendo en cuenta el nmero de artculos publicados
en el campo en el perodo analizado. Por lo tanto, hay espacio para explorar otros
criterios de validez, como la validacin de criterio. Se espera que este estudio
puede contribuir, a travs de la difusin y orientacin sobre los principales criterios de validez, por lo que las bsquedas adopten procedimientos de investigacin
encaminados a la validacin de instrumentos de investigacin.
252
PA L ABRAS CL AV E
Validez; Criterios de validacin; Estrategia; Artculos cientficos; Bibliometra.

REFER N CIAS
ANDERSON, J. C.; GERBING, D. W. Predicting the performance of measures in a confirmatory
factor analysis with a pretest assessment of their substantive validities. Journal of Applied Psychology,
v. 76, n. 5, p. 732-740, 1991.
BABBIE, E. Mtodos de pesquisas de survey. Belo Horizonte: UFMG, 2005.
BAROUDI, J. J.; ORLIKOWSKI, W. J. The problem of statistical power in MIS Research. MIS
Quarterly, v. 13, n. 1, p. 87-106, Mar. 1989.
BREWER, J.; HUNTER, A. Foundations of multimethod research. Thousand Oaks: Sage, 2006.
BOUDREAU, M.-C.; GEFEN, D.; STRAUB, D. W. Validation in IS research: a state-of-the-art
assessment. MIS Quarterly, p. 1-24, Mar. 2001.
CAMPBELL, D. T.; FISKE, D. W. Convergent and discriminant validation by the multitrait-multimethod matrix. Psychological Bulletin, v. 56, p. 81-105, 1959.
CERVO, A.; BERVIAN, P. Metodologia cientfica. 5. ed. So Paulo: Prentice Hall, 2004.
COHEN, J. Statistical power analysis for the behavioral sciences. New York: Academic Press, 1969.
COHEN, J. Statistical power analysis for the behavioral sciences. Revised Edition, New York: Academic
Press, 1977.
COOPER, D. R.; SCHINDLER P. S. Mtodos de pesquisas em administrao. Porto Alegre: Bookman, 2003.
CRONBACH, L. J.; MEEHL, P. E. Validade de construto em testes psicolgicos. Psychological
Bulletin, v. 52, p. 281-302, 1955.
CRONBACH, L. J.; MEEHL, P. E. Test validation. In: THORNDIKE, Robert L. (Ed.). Educational
measurement. Washington: American Council on Education, 1971. p. 443-507.
GARVER, M. S.; MENTZER, J. T. Logistics research methods: employing structural equation
modeling to test for construct validity. Journal of Business Logistics, v. 20, n. 1, p. 33-57, 1999.
GIL, A. C. Mtodos e tcnicas de pesquisa social. 6. ed. So Paulo: Atlas, 2009.
GRESSLER, L. A. Introduo a pesquisa: projetos e relatrios. So Paulo: Loyola, 2004.
HAIR JR., J. F.; ANDERSON, R. E.; TATHAM, R. L.; BLACK, W. C. Anlise multivariada de dados.
Porto Alegre: Bookman, 2005.
HAIR JR., J. F.; BABIN, B.; MONEY, A. H.; SAMOUEL, P. Fundamentos de mtodos de pesquisa em
administrao. Porto Alegre: Bookman, 2005.
MACIAS-CHAPULA, C. A. O papel da informetria e da cienciometria e sua perspectiva nacional e
international. Cincia da Informao, v. 27, n. 2, p. 134-140, maio/ago. 1998.
MALHOTRA, N. K. Pesquisa de marketing: uma orientao aplicada. Porto Alegre: Bookman, 2006.
OLLAIK, L. G.; ZILLER, H. Distintas concepes de validade em pesquisas qualitativas. In:
ENCONTRO DA ASSOCIAO NACIONAL DOS PROGRAMAS DE PS-GRADUAO EM
ADMINISTRAO, 35., 2011, Rio de Janeiro. Anais... Rio de Janeiro: Anpad, 2011.
OLIVEIRA, S. R. de; PICCININI, V. C. Validade e reflexividade na pesquisa qualitativa. Cadernos
EBAPE.BR, v. 7, n. 1, p. 90-98, mar. 2009.
SELLTIZ, C.; WRIGHTSMAN, L. S.; COOK, S. W. Research methods in social relations. New York:
Holt, Rinehart and Winston, 1976.
SELLTIZ, C.; WRIGHTSMAN, L. S.; COOK, S. Mtodos de pesquisas nas relaes sociais. 4. ed. So
Paulo: Editora Pedaggica e Universitria, 1987.

253

STRAUB, D. W.; CARLSON, C. L. Validating instruments in MIS research. MIS Quarterly, p. 147169, June 1989.
WALTER, S. A.; BAPTISTA, P. P.; AUGUSTO, P. O. M. Viso baseada em recursos: uma anlise dos delineamentos metodolgicos e da maturidade dessa abordagem na rea de estratgia do
EnAnpad 1997-2007. In: ENCONTRO DA ASSOCIAO NACIONAL DOS PROGRAMAS DE
PS-GRADUAO EM ADMINISTRAO, 32., 2008, Rio de Janeiro. Anais... Rio de Janeiro:
Anpad, 2008.
YIN, R. K. Estudo de caso: planejamento e mtodos. 3. ed. Porto Alegre: Bookman, 2005.
254


Oliveira Walter Bach 2012 Criterios-De-Validade-em-pesqu 9127

Uploaded by

Document Information

Copyright

Available Formats

Share this document

Share or Embed Document

Sharing Options

Did you find this document useful?

Is this content inappropriate?

Copyright:

Available Formats

Oliveira Walter Bach 2012 Criterios-De-Validade-em-pesqu 9127

Uploaded by

Copyright:

Available Formats

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Ed. Especial SO PAULO, SP NOV./DEZ.

Z. 2012 ISSN 1518-6776 (impresso) ISSN 1678-6971 (on-line)

critrios de validade em pesquisas

SILVANA ANITA WALTER

TATIANA MARCEDA BACH

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

critrios de validade em pesquisas em estratgia

PA LAV RAS -CH AVE

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

No sentido apontado, esta pesquisa tem por objetivo analisar os critrios de

Brewer e Hunter (2006) ressaltam que a mensurao, em cincia social,

critrios de validade em pesquisas em estratgia

do tempo (COOPER; SCHINDLER, 2003) ou que suas diferenas em escores

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

critrios de validade em pesquisas em estratgia

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

nveis simultaneamente classificao do previsor. Assim sendo, um mtodo de

critrios de validade em pesquisas em estratgia

natureza do construto e do relacionamento deste com os demais (MALHOTRA,

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

qualquer convergncia encontrada nos resultados das medidas dificilmente ser

critrios de validade em pesquisas em estratgia

Babbie (2005) tambm apresenta dois tipos de validade diferentes: aparente

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Contedo: grau por meio do qual

Construto: identificao dos

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

critrios de validade em pesquisas em estratgia

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Discriminante: avalia at que ponto

Contedo/face validity: envolve uma avaliao

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Concorrente: ocorre quando os

Aparente: processo subjetivo, analisado por um grupo de

A concordncia fornece evidncia da

Discordncia uma evidncia de

Multitraos-multimtodos: tabela de correlaes que

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

critrios de validade em pesquisas em estratgia

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Convergente: determinada por meio da comparao

Contedo/face: difcil de ser verificada porque o universo

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

DENISE DE OLIVEIRA SILVANA ANITA WALTER TATIANA MARCEDA BACH

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Multitraos-multimtodos: a validade de construto pode

Contedo: grau por meio do qual uma medio cobre a

Construto: medidas operacionais adequadas para os

RAM, REV. ADM. MACKENZIE, V. 13, N. 6, Edio Especial

critrios de validade em pesquisas em estratgia

CONFIGURAES DE VALIDADE CITADAS

Diferentes tipos de validade

Para sintetizar as informaes apresentadas e visualizar os critrios mais

CRITRIOS DE VALIDADES CITADOS PELOS AUTORES