Escolar Documentos
Profissional Documentos
Cultura Documentos
Osmar Arouck
Braslia DF
2011
Osmar Arouck
Braslia DF
2011
CDD 658.403
Agradecimentos
Faculdade de Biblioteconomia, do
Instituto de Cincias Sociais Aplicadas, da
UNIVERSIDADE FEDERAL DO PAR, alma mater.
Ao Programa de Ps Graduao em Cincia da Informao, da
Faculdade de Cincia da Informao, da
UNIVERSIDADE DE BRASLIA.
Aos professores doutores
DOMINGOS DE OLIVEIRA e
MARC BOUISSET
da Universit du Qubec Montral.
professora doutora
SUELI ANGLICA DO AMARAL
da Universidade de Braslia,
orientadora desta dissertao.
venervel memria do
Coronel OSMAR AROUCK FERREIRA e da
Professora BALSAMINA CARMO FERREIRA,
a quem dedico este trabalho.
Rudyard Kipling
Resumo
Pesquisa exploratria identifica e define, por meio da tcnica de anlise de contedo,
os atributos de qualidade da informao presentes em um corpus formado por
artigos de peridicos e atas de eventos cientficos da rea de Cincia da Informao
em lngua inglesa, relacionados gesto de sistemas e servios de informao,
publicados entre 1974 e 2009. Para seleo dos artigos de peridicos, identifica o
ncleo de peridicos que melhor representa a produo cientfica sobre qualidade da
informao. Apresenta reviso da literatura sobre qualidade da informao, avaliao
da qualidade de sistemas de informao e modelos de avaliao da qualidade de
servios de informao. Foram identificados 101 atributos de qualidade da
informao, dos quais 40 com mais de uma ocorrncia no corpus. A categorizao
dos atributos com mais de uma ocorrncia, que foram sistematizados segundo suas
semelhanas, foi proposta de acordo com os trs nveis do problema da
comunicao indicados por Shanon e Weaver. Foi elaborada uma lista com os 40
atributos de qualidade identificados nos documentos analisados, agrupados de
acordo com as trs categorias propostas: meio, contedo e uso. A categoria meio
agrupou
16 atributos: acessibilidade, aparncia, clareza, conciso, formato,
legibilidade, localizabilidade, mensurabilidade, ordem, quantidade, segurana,
simplicidade, singularidade, tempestividade, tempo de resposta e volume. Na
categoria contedo foram agrupados 13 atributos: abrangncia, atualidade,
coerncia, completude, confiabilidade, correo, credibilidade, imparcialidade,
inequivocidade, logicidade, preciso, validade e veracidade. A categoria uso agrupou
11 atributos: compatibilidade, compreensibilidade, convenincia, importncia,
interpretabilidade, pertinncia, relevncia, significncia, suficincia, utilidade e valor
informativo. Alm da proposta apresentada possvel investigar outras formas de
agrupamentos para diferentes atributos de acordo com as relaes e influncias que
as categorias propostas possam ter entre si. Conclui-se que a identificao de
atributos de qualidade da informao permitir a utilizao destes atributos como
variveis em diversos momentos da gesto de sistemas, servios e produtos de
informao: no planejamento, no desenvolvimento, na manuteno, na reformulao
e na avaliao. As variveis estudadas mantm entre si relaes de significao e de
mtua influncia, havendo necessidade de pesquisarem-se essas relaes e essa
influncia entre elas.
Abstract
This exploratory research identifies and defines the attributes of information quality in
a corpus composed of articles from journals and proceedings minutes of scientific
events written in English in the area of Information Science and related to system
management and information services, published from 1974 to 2009. It identifies the
group of journals that best represent the scientific production on information quality. It
reviews the specialized literature on information quality, quality assessment of
information systems, and models of quality assessment of information services. Of
the 101 attributes of information quality identified, 40 were registered more than once
in the corpus, and they were systematized according to their similarity and
categorized following Shannon and Weavers three levels of communication
problems. This proposal resulted in three categories: medium, content and use. The
first category consists of the attributes accessibility, appearance, clearness,
conciseness, format, readability, locatability, quantitativeness, orderliness, quantity,
security, simpleness, uniqueness, timeliness, response time, volume. The second
category is composed of comprehensiveness, currency, consistency, completeness,
reliability, correctness, credibility, freedom from bias, unambiguousness, logicalness,
accuracy, validity, truthfulness. The last category consists of compatibility,
understandability, convenience, importance, interpretability, relevance, significance,
meaningfulness, sufficiency, usefulness, informativeness. We concluded that it is
possible to investigate other adequate forms of grouping the distinct attributes, and to
verify the relationships and influences they have upon one another. The identification
of the attributes of information quality will allow their use as variables in the following
phases during the management of systems, services and information products:
planning, development, maintenance, reformulation and assessment. The variables
studied present relationships of signification and have mutual influence upon one
another, which must be objects for future research.
Keywords: Quality attributes, information management, information quality, quality
management, quality assessment, non-functional requirement.
Lista de tabelas
Tabela 1 Eficcia de sistemas de informao nas pesquisas SIM/MIRSC ........................ 35
Tabela 2 Nveis e dimenses para avaliao de sistemas de informao ......................... 39
Tabela 3 Corpus de anlise ............................................................................................. 46
Tabela 4 Impacto dos peridicos utilizados ...................................................................... 49
Tabela 5 Impacto dos artigos analisados ......................................................................... 50
Tabela 6 Unidades de registro identificadas no corpus ..................................................... 55
Tabela 7 Unidades de registro com mais de uma ocorrncia ............................................ 59
Tabela 8 Termos em portugus com mais de uma ocorrncia, aps consolidao de
sinonmias e parassinonmias ........................................................................ 64
Tabela 9 Termos identificados nos documentos da dcada de 1970 ................................ 67
Tabela 10 Termos identificados nos documentos da dcada de 1980 .............................. 68
Tabela 11 Termos identificados nos documentos da dcada de 1990 .............................. 70
Tabela 12 Termos identificados nos documentos da dcada de 2000 .............................. 73
Tabela 13 Categorias de atributos identificadas no corpus ............................................... 88
Tabela 14 Categorias e atributos por ordem de ocorrncia ............................................... 91
Tabela 15 Categoria meio 93
Tabela 16 Categoria contedo .......................................................................................... 94
Tabela 17 Categoria uso ................................................................................................... 95
Lista de quadros
Quadro 1 Unidades de registro com apenas uma ocorrncia............................................ 60
Quadro 2 Sinonmias e parassinonmias entre termos identificados no corpus ................. 62
Quadro 3 Unidades de registro com apenas uma ocorrncia, aps consolidao de
sinonmias e parassinonmias ........................................................................ 65
Quadro 4 Categorias dos atributos de qualidade da informao ....................................... 91
Quadro 5 Lista alfabtica dos atributos de qualidade da informao por categoria ........... 97
Sumrio
INTRODUO ...................................................................................................... 13
1.1
1.2
2.1
2.2
2.3
METODOLOGIA .................................................................................................... 44
3.1
3.2
3.3
3.4
3.5
4.6.24
4.6.25
4.6.26
4.6.27
4.6.28
4.6.29
4.6.30
4.6.31
4.6.32
4.6.33
4.6.34
4.6.35
4.6.36
4.6.37
4.6.38
CONCLUSO ....................................................................................................... 96
6.1
13
1 INTRODUO
A anlise da qualidade de sistemas e servios de informao supe a
identificao de variveis que permitam a composio de indicadores de qualidade.
A qualidade da informao um aspecto relevante no processo de avaliao desses
sistemas, produtos e servios. Portanto, as variveis que permitam a mensurao
qualitativa da informao so essenciais anlise e gesto de servios, produtos
e sistemas de informao.
Esta dissertao busca identificar e definir operacionalmente os atributos de
qualidade
da
informao,
variveis
necessrias
para
procedimentos
de
Deste
modo,
busca-se
apresentar,
partir
de
publicaes
1.1
14
Elle a pour objet l'tude des proprits gnrales de l'information (nature, gense, effets), cest--dire plus
prcisment: lanalyse des processus de construction, de communication et dusage de linformation; et la
conception des produits et des systmes qui permettent sa construction, sa communication, son stockage et
son usage.
15
16
17
de
atributos
de
qualidade
da
informao:
acessibilidade,
18
utilidade,
suficincia,
coerncia,
acessibilidade,
legibilidade,
19
1.2
Objetivos da pesquisa
20
2 REVISO DA LITERATURA
Esta reviso de literatura busca a fundamentao terica para o estudo dos
atributos de qualidade da informao.
As leituras agrupam-se nos seguintes enfoques: qualidade da informao;
avaliao da qualidade de sistemas de informao; modelos de avaliao da
qualidade de servios de informao.
Sobre qualidade da informao, os artigos de Richard Mason (1978) e Robert
Zmud (1978, 1979) so referncias iniciais, depois de breve abordagem sobre
informao e Cincia da Informao, que mostra os trabalhos de Harold Borko
(1968), de Peter Keen (1980) e o editorial do peridico ACM Journal of Data and
Information Quality (MADNICK; LEE, 2009) demarcam temporalmente o interesse
acadmico sobre informao e sistemas de informao.
As revises da Annual Review of Information Science and Technology (ARIST)
permitem traar o panorama inicial dos estudos sobre avaliao de sistemas de
informao. Destacam-se, alm das j mencionadas publicaes do ARIST, os
relatos do Cranfield Research Project (CLEVERDON, 1956, 1960; WARBURTON et
al., 1961; CLEVERDON, 1962; AITCHISON; CLEVERDON, 1963; CLEVERDON;
KEEN, 1966; CLEVERDON et al., 1966a, 1966b; CLEVERDON, 1968), as revises
de Galletta e Lederer (1989), de Conrath e Mignen (1990), de DeLone e McLean
(1992), de Myers et al. (1997) e de Grover et al. (1996).
No grupo de leituras sobre modelos de avaliao da qualidade de servios de
informao, o Modelo de Sucesso de Sistema de Informao de DeLone e McLean
(DeLone and McLean Information Systems Success Model) isolou, para efeito de
estudo, seis dimenses de sistema de informao e dentre elas incluiu a qualidade
da informao. Outro destaque neste grupo de leituras so os trabalhos
desenvolvidos a partir do Programa de Qualidade Total de Dados, do Massachusetts
Institute of Technology (MIT Total Data Quality Management Program), iniciado em
1992 (WANG; STRONG, 1996; LEE et al., 2002; MADNICK et al., 2009).
21
2.1
Qualidade da informao
22
I.
II.
III.
IV.
V.
VI.
VII.
VIII.
IX.
(LAUDON;
23
processo
organizado
de
transformao que
utiliza os
recursos e os
organizacional
baseado
em
computador
que
fornece
suporte
24
uma
25
2.2
As leituras dos trabalhos de Borko (1968), Keen (1980) e Madnick e Lee (2009)
permitiram lanar um olhar histrico sobre o tema avaliao de sistemas de
informao no contexto da Cincia da Informao.
Pode-se afirmar que a avaliao de sistemas de informao que era tema de
interesse para a Cincia da Informao na dcada de 1960, alcana o status de
campo de pesquisa acadmica no primeiro decnio do sculo XXI.
As pesquisas desenvolvidas por Cleverdon e sua equipe no Projeto de Pesquisa
de Cranfield (Cranfield Research Project), conhecidos como Testes de Cranfield
(SARACEVIC, 2008), permitem situar o incio dos esforos acadmicos para
compreender o tema da avaliao de sistemas de informao no final da dcada de
1950, com seu desenvolvimento nos anos subsequentes.
A proposta de pesquisa comparativa sobre a eficincia de sistemas de
recuperao da informao foi apresentada em 1956 pelo bibliotecrio Cyril
Cleverdon (CLEVERDON, 1956). Em 1957 a National Science Foundation concedeu
verbas para a Association of Special Libraries and Information Bureaux (ASLIB) para
26
1970;
CLEVERDON,
1971;
DEBONS;
MONTGOMERY,
1974;
Cranfield College of Aeronautics tornou-se, em 1969, Cranfield Institute of Technology e, em 1993, converteuse na Cranfield University. Disponvel em: http://www.cranfield.ac.uk/
27
para
atender
necessidades
especficas.
No
Dicionrio
de
28
29
de
reestruturao
de
sistemas
de
informao
demandam
30
engenharia
anlise
de
valor
(value
II.
III.
IV.
V.
31
VI.
VII.
revocao,
custo,
estudos
de
usurios,
educao,
material
impresso,
32
33
34
eficiente
dos
recursos
de
informao
para
tornar
organizao
35
Kahn, Strong et al. (2002) advertem que qualidade da informao uma cincia
inexata, em termos de avaliao e estudos comparativos. Apesar de vrios aspectos
da qualidade da informao j terem sido pesquisados, ainda permanece a
necessidade de metodologias que mensurem como e com que qualidade as
organizaes esto oferecendo produtos e servios de informao a seus clientes
(KAHN et al., 2002).
A Society for Information Management (SIM) e o MIS Research Center (MISRC)
realizaram no perodo de 1982 a 1996 cinco pesquisas para determinar as questes
mais crticas na rea de sistemas de informaes gerenciais. A avaliao da eficcia
de sistemas de informao esteve sempre presente como um dos temas de
interesse. Nos anos 1980 esta questo manteve-se entre as dez mais importantes,
caindo para 16 lugar em 1990; tendo subido para o 11 lugar na ltima pesquisa,
conforme pode ser visto na Tabela 1, a seguir.
Tabela 1 Eficcia de sistemas de informao nas pesquisas SIM/MIRSC
Ano
Posio
Autores
Expresso adotada
1982
BALL e HARRIS
1984
1987
BRANCHEAU e WETHERBE
Measuring effectiveness
1991
16
IS effectiveness measurement
1996
11
36
2.3
37
Qualidade do sistema
Uso
Impacto individual
Qualidade da
informao
Impacto organizacional
Satisfao do usurio
38
Qualidade da
informao
Inteno
de uso
Uso
Qualidade do
sistema
Benefcio lquido
Satisfao do usurio
Qualidade do servio
39
so
agrupadas
nos
nveis
correspondentes,
conforme
foram
1992
2003
Autor
Shannon e
Weaver
Mason
DeLone e
McLean
DeLone e
McLean
Nveis e dimenses
Nvel tcnico
Nvel semntico
Produo
Produto
Qualidade do
sistema
Qualidade da
informao
Qualidade do
sistema
Qualidade da
informao
Qualidade do servio
Nvel de eficcia
ou impacto
Recepo
Influncia no receptor
Influncia no sistema
Uso
Satisfao do usurio
Impacto individual
Impacto organizacional
Satisfao do usurio
Inteno de uso / uso
Benefcio lquido
40
41
contextual
(contextual),
representacional
(representational),
42
43
44
3 METODOLOGIA
Apesar de haver estudos sobre qualidade da informao, so poucos os que
sistematizam os atributos de qualidade da informao. Dada esta lacuna, optou-se
pela realizao de pesquisa exploratria, considerando-se a definio dada por Uma
Sekaran:
Um estudo exploratrio realizado quando no se sabe muito sobre a
situao em questo, ou quando no temos nenhuma informao sobre
como problemas ou questes de pesquisa similares foram resolvidos no
passado. Em tais casos, preciso um trabalho preliminar extenso para
adquirir-se familiaridade com os fenmenos de dada situao e para
entender o que ocorre, antes de desenvolver um modelo e propor um
projeto de pesquisa preciso e abrangente. Em essncia, os estudos
exploratrios so feitos para melhor compreender a natureza do problema,
j que bem poucos estudos foram realizados a respeito do fenmeno a ser
entendido. (SEKARAN, 1992, p. 95)
45
3.1
Corpus de anlise
www.endnote.com
46
Quantidade
1970
1980
15
11
1990
2000
Total
36
47
O Portal de Peridicos Capes uma biblioteca virtual que rene e disponibiliza um acervo aproximado de 15
mil ttulos com texto completo, 126 bases referenciais, seis bases dedicadas exclusivamente a patentes, alm
de livros, enciclopdias e obras de referncia, normas tcnicas, estatsticas e contedo audiovisual. Acessvel
em: http://novo.periodicos.capes.gov.br
48
Country Rank10 e a base ISI Web of Knowledge11 por meio do Journal Citation
Report12. Os dados foram tabulados e registrados no ms de maro de 2010.
A Tabela 4 apresenta os dados que permitem verificar o grau de influncia dos
peridicos adotados para esta anlise. Os indicadores so apresentados conforme
se descreve a seguir.
a) pas de origem indica o pas em que o peridico publicado. Dos 11
peridicos analisados, 7 so publicados nos Estados Unidos e 4 na
Europa (dois no Reino Unido e dois na Holanda);
b) quantidade de artigos utilizados indica o nmero de artigos
analisados naquele peridico;
c) citao por documento - 2 anos (Cites per doc -2y) esta mtrica
corresponde ao clculo do Fator de Impacto (Impact Factor) da
Thomson Reuters. O Fator de Impacto de determinado peridico
definido como a razo entre o nmero de citaes feitas no corrente
ano a itens publicados neste peridico nos ltimos dois anos e o
nmero de artigos (itens fonte) publicados nos mesmos dois anos pelo
peridico em anlise (STREHL, 2005; The Thomson Reuters Impact
Factor, 2010);
d) SJR este indicador mede a influncia de um artigo mdio em um
dado peridico. Esta mtrica expressa quo central um artigo mdio
deste peridico para o debate cientfico. (Description of Scimago
Journal Rank Indicator, 2007);
e) SJR Q (SJR indicator Quartiles) refere-se ao posicionamento do
peridico em sua rea de especialidade. So quatro quartis (Q1, Q2,
Q3, Q4), sendo que um peridico pode ocupar diferentes quartis em
diferentes reas de especialidade.
10
SCImago Journal & Country Rank um portal mantido pelo SCImago Research Group, com dados oriundos da
base Scopus. Disponvel em: http://www.scimagojr.com
11
SM
12
49
Pas
Artigos
utilizados
Citao por
documento
(2 anos)
SJR
SJR Q
Estados Unidos
5,813
0,087
Q1
Estados Unidos
2,214
0,064
Q1
Estados Unidos
2,71
0,058
Q1, Q213
Decision Sciences
Reino Unido
2,617
0,57
Q1
Reino Unido
3,025
0,077
Q1, Q214
Holanda
1,899
0,056
Q1, Q215
Holanda
2,94
0,061
Q1
Estados Unidos
2,283
0,06
Q1
Estados Unidos
2,062
0,058
Q1
Management Science
Estados Unidos
2,68
0,072
Q1
MIS Quarterly
Estados Unidos
5,32
0,098
Q1
13
Em duas reas o peridico posiciona-se no primeiro quartil (Q1), e em trs reas est no segundo quartil (Q2)
14
Em uma rea o peridico posiciona-se no primeiro quartil (Q1), e em uma rea est no segundo quartil (Q2)
15
Em trs reas o peridico posiciona-se no primeiro quartil (Q1), e em trs reas est no segundo quartil (Q2)
50
Artigos
Diez; McIntosh, 2009
Michnik; Lo, 2009
DeLone; McLean, 2003
D'Ambra; Rice, 2001
Wixom; Watson, 2001
Ballou et al., 1998
Klein et. al., 1997
Palvia, 1996
Saarinen, 1996
Wand; Wang, 1996
Wang; Strong, 1996
Goodhue; Thompson, 1995
Rainer Jr.; Watson, 1995
DeLone; McLean, 1992
Iivari; Koskela, 1987
Mahmood, 1987
Miller; Doyle, 1987
Ballou; Pazer, 1985
Mahmood; Medewitz, 1985
Rivard; Huff, 1985
Srinivasan, 1985
Bailey; Pearson, 1983
Olson; Lucas, 1982
Total
2
1
0
2
12
22
25
4
156
3
14
20
12
4
14
60
127
16
494
2000
0
0
2
3
4
2
18
0
38
1
4
0
2
0
1
4
23
0
102
2001
0
0
3
0
0
2
6
5
14
1
35
0
2
3
1
1
0
4
24
0
101
2002
0
3
0
1
0
2
6
4
11
4
41
0
0
1
6
2
0
4
20
0
105
2003
2
8
9
5
2
4
8
10
14
26
2
59
0
0
4
5
3
0
8
29
0
198
2004
9
6
6
4
0
3
3
10
19
21
1
61
0
2
4
3
0
0
4
23
0
179
2005
38
3
13
4
1
3
7
17
25
32
6
94
0
2
3
8
1
1
11
40
1
310
2006
69
4
19
10
4
9
9
11
36
48
2
127
2
3
5
5
0
0
11
47
2
423
2007
96
5
19
9
1
8
11
20
24
70
5
150
1
1
5
5
0
0
9
35
1
475
2008
137
9
29
11
2
7
12
18
47
72
2
191
0
0
3
13
1
0
7
51
0
612
2009
0
1
134
4
21
12
1
6
7
23
47
71
5
172
1
1
2
7
0
0
6
42
0
563
2010
1
0
18
0
5
1
0
2
1
2
5
12
0
31
0
0
1
2
1
0
3
6
1
92
Total
1
1
503
39
124
61
13
44
67
139
250
420
32
1.155
8
29
51
69
13
16
131
467
21
3.654
51
3.2
Formulao de objetivos
3.3
52
3.4
que
no
desenvolvimento
da
pesquisa
foi
necessrio
fazer
MultiTes (http://www.multites.com)
53
3.5
dados
coletados
foram
agrupados
por
aproximao
semntica
e,
54
55
Autores dos
documentos
1974
Gallagher
1974
Swanson
1978
Zmud
1980
Ahituv
1980
Larcker e Lessig
1982
Kantor
1982
Olson e Lucas
1983
Bailey e Pearson
1983
King e Epstein
1984
Blaylock e Rees
1985
Ballou e Pazer
1985
Mahmood e
Medewitz
Rivard e Huff
1985
Srinivasan
1985
Continua...
56
Ano
1986
Autores dos
documentos
Jones e
McLeod Jr.
1987
Iivari e Koskela
1987
Mahmood
1987
Miller e Doyle
1992
Delone e McLean
1995
Goodhue
1995
1995
Goodhue e
Thompson
Rainer Jr. e
Watson
1996
Palvia
1996
Saarinen
1996
Wang e Strong
Continua...
57
Ano
Autores dos
documentos
1996
Wand e Wang
1997
Jarke e Vassiliou
1997
Klein et al.
1998
2001
Ballou et al.
D'Ambra e Rice
2001
Wixom e Watson
2003
DeLone e
McLean
2003
Haider e Koronios
2004
Cappiello et al.
2009
Michnik e Lo
2009
Diez e McIntosh
4.1
58
59
Termos (Portugus)
Preciso
Tempestividade
Completude
Pertinncia
Atualidade
Confiabilidade
Acessibilidade
Coerncia
Clareza
Legibilidade
Compreensibilidade
Utilidade
Importncia
Significncia
Suficincia
Clareza
Compatibilidade
Conciso
Convenincia
Formato
Interpretabilidade
Localizabilidade
Preciso
Tempo de resposta
Validade
Suficincia
Aparncia
Credibilidade
Abrangncia
Correo
Livre de preconceitos (imparcialidade)
Valor informativo
Logicidade
Ordem
Mensurabilidade
Quantidade
Pertinncia
Segurana
Relevncia
Simplicidade
Veracidade
Inequivocidade
Singularidade
Atualidade
Utilidade
Volume
Ocorrncias
23
18
15
12
9
9
6
6
5
5
5
5
4
4
4
3
3
3
3
3
3
3
3
3
3
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
60
Termos (Portugus)
Aceitabilidade
Segurana do acesso
Preciso do processamento
Preciso dos relatrios
Aplicabilidade
Quantidade adequada
Assistncia
Autenticidade
Autoridade
Disponibilidade
Confiana
Comparabilidade
Interpretabilidade conceitual
Representao concisa
Representao coerente
Contedo
Comodidade de acesso
Credibilidade
Credibilidade da fonte de dados
Pertinncia para a deciso
Tempo de espera
Densidade
Dinamismo
Facilidade de operao
Facilidade de uso do hardware
Facilidade de uso do software
Eficcia
Factualidade
Fidelidade
Frequncia
Projeto grfico
Utilidade
Capacidade de instruo
Integridade
Falta de confuso
Pormenorizao
Interpretabilidade lingustica
Materialidade
Significado
Mensurabilidade dos dados
Meio
Necessidade
No-volatilidade
Continua...
61
Termos (Portugus)
Objetividade
Ordem de arranjo
Originalidade
Personalizao
Preciso de arranjo
Apresentao
Qualidade de formato
Razoabilidade
Recentidade
Confivel
Periodicidade de relatrio
Tempo de espera de relatrio
Reputao
Sensatez
Adequabilidade
Interpretabilidade tcnica
Oportunidade de formato
Fidelidade
Utilidade para a identificao e definio de problemas
Utilidade para seleo entre alternativas
Utilidade da sada
Validade dos mtodos
Variedade
Volatilidade
62
Atualidade
Clareza
Conciso
Credibilidade
Formato
Ordem
Pertinncia
Relevancy
(SAARINEN, 1996; JARKE; VASSILIOU, 1997)
Relevance
(SWANSON, 1974; ZMUD, 1978; AHITUV, 1980; LARCKER; LESSIG,
1980; BAILEY; PEARSON, 1983; SRINIVASAN, 1985; MILLER; DOYLE,
1987; DELONE; MCLEAN, 1992; RAINER JR; WATSON, 1995; PALVIA,
1996; WANG; STRONG, 1996; DELONE; MCLEAN, 2003)
Preciso
Accuracy
(GALLAGHER, 1974; SWANSON, 1974; ZMUD, 1978; AHITUV, 1980;
LARCKER; LESSIG, 1980; OLSON; LUCAS, 1982; BAILEY; PEARSON,
1983; BALLOU; PAZER, 1985; SRINIVASAN, 1985; MAHMOOD, 1987;
MILLER; DOYLE, 1987; DELONE; MCLEAN, 1992; GOODHUE, 1995;
RAINER JR; WATSON, 1995; PALVIA, 1996; SAARINEN, 1996; WANG;
STRONG, 1996; JARKE; VASSILIOU, 1997; KLEIN et al., 1997; WIXOM;
WATSON 2001; DELONE; MCLEAN, 2003; HAIDER; KORONIOS, 2003;
CAPPIELLO et al., 2004)
Precision
(BAILEY; PEARSON, 1983; DELONE; MCLEAN, 1992; SAARINEN, 1996)
Continua...
63
Portugus
Suficincia
Sufficiency
(GALLAGHER, 1974; ZMUD, 1978; KING; EPSTEIN, 1983; DELONE;
MCLEAN, 1992)
Adequacy
(SRINIVASAN, 1985; PALVIA, 1996)
Utilidade
Usefulness
(ZMUD, 1978; MAHMOOD; MEDEWITZ, 1985; RIVARD; HUFF, 1985;
DELONE; MCLEAN, 1992; JARKE; VASSILIOU, 1997)
Usableness
(BLAYLOCK; REES, 1984; DELONE; MCLEAN, 1992)
Helpfulness
(ZMUD, 1978)
64
Ingls
Accuracy, precision
Timeliness
Completeness
Relevance, relevancy
Currency, up-to-dateness, recentness
Reliability
Clearness, clarity
Usefulness, usableness, helpfulness
Sufficiency, adequacy
Consistency
Accessibility
Readability
Understandability
Meaningfulness
Importance
Validity
Response time
Locatability
Interpretability
Format, quality of format
Credibility, believability
Convenience
Conciseness, concise representation
Compatibility
Volume
Truthfulness
Informativeness
Uniqueness
Simpleness
Security
Significance
Quantity
Orderliness, orderliness of arrangement
Quantitativeness
Logicalness
Unambiguousness
Freedom from bias
Correctness
Appearance
Comprehensiveness
Ocorrncias
26
18
15
14
12
9
8
8
6
6
6
5
5
4
4
3
3
3
3
3
3
3
3
3
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
2
65
Termos (Ingls)
Acceptability
Access security
Accuracy of processing
Accuracy of reports
Applicability
Appropriate amount
Assistance
Authenticity
Authority
Availability
Belief
Comparability
Conceptual interpretability
Consistent representation
Content
Convenience of access
Credibility of data source
Decision relevance
Delay
Density
Dynamism
Ease of operations
Ease of use of hardware
Ease of use of software
Effectiveness
Factuality
Faithfulness
Frequency
Graphic design
Instructiveness
Integrity
Lack of confusion
Level of detail
Linguistic interpretability
Materiality
Meaning
Measurability of data
Medium
Needfulness
Non-volatility
Objectivity
Originality
Personalization
Precision of arrangement
Presentation
Reasonability
66
Continua...
Continuao do Quadro 3 Unidades de registro com apenas uma ocorrncia,
aps consolidao de sinonmias e parassinonmias
Termos (Portugus)
Confivel
Periodicidade de relatrio
Tempo de espera de relatrio
Reputao
Sensatez
Adequabilidade
Interpretabilidade tcnica
Oportunidade de formato
Fidelidade
Utilidade para a identificao e definio de
problemas
Utilidade para seleo entre alternativas
Utilidade da sada
Validade dos mtodos
Variedade
Volatilidade
Termos (Ingls)
Reliable
Reporting cycle
Reporting delay
Reputation
Sensibleness
Suitability
Technical interpretability
Timeliness of format
Trustworthiness
Usefulness for identifying and defining
problems
Usefulness for selecting among alternatives
Usefulness of output
Validity of methods
Variety
Volatility
4.2
67
Termo (Portugus)
Preciso
Clareza
Legibilidade
Tempestividade
Completude
Atualidade
Logicidade
Pertinncia
Confiabilidade
Simplicidade
Suficincia
Veracidade
Validade
Aplicabilidade
Confiana
Conciso
Convenincia
Eficcia
Factualidade
Utilidade
Capacidade de instruo
Materialidade
Significncia
Necessidade
Ordem
Ordem de arranjo
Preciso de arranjo
Quantidade
Razoabilidade
Confivel
Sensatez
Relevncia
Singularidade
Utilidade
Ocorrncias
3
3
3
3
2
2
2
2
2
2
2
2
2
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
68
(quantidade),
reliability/timeliness
(confiabilidade/tempestividade),
4.3
Termos (Portugus)
Preciso
Tempestividade
Pertinncia
Completude
Importncia
Confiabilidade
Tempo de resposta
Compreensibilidade
Utilidade
Volume
Acessibilidade
Preciso do processamento
Preciso dos relatrios
Ocorrncias
8
6
5
3
3
3
2
2
2
2
1
1
1
Continua...
69
Termos (Portugus)
Suficincia
Aparncia
Disponibilidade
Clareza
Clareza
Abrangncia
Interpretabilidade conceitual
Coerncia
Credibilidade da fonte de dados
Atualidade
Pertinncia para a deciso
Tempo de espera
Densidade
Formato
Livre de preconceitos (imparcialidade)
Frequncia
Projeto grfico
Valor informativo
Interpretabilidade lingustica
Significncia
Mensurabilidade dos dados
Meio
Ordem
Preciso
Qualidade de formato
Mensurabilidade
Quantidade
Legibilidade
Recentidade
Periodicidade de relatrio
Tempo de espera de relatrio
Relevncia
Suficincia
Interpretabilidade tcnica
Oportunidade de formato
Inequivocidade
Utilidade
Utilidade para a identificao e
definio de problemas
Utilidade para seleo entre
alternativas
Validade dos mtodos
Ocorrncias
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
trs
timeliness
70
4.4
Termos (Portugus)
Preciso
Tempestividade
Completude
Atualidade
Pertinncia
Confiabilidade
Acessibilidade
Credibilidade
Clareza
Compatibilidade
Conciso
Coerncia
Formato
Interpretabilidade
Localizabilidade
Preciso
Pertinncia
Compreensibilidade
Atualidade
Utilidade
Segurana do acesso
Suficincia
Ocorrncias
8
7
6
5
4
4
3
2
2
2
2
2
2
2
2
2
2
2
2
2
1
1
Continua...
71
Termos (Portugus)
Aparncia
Quantidade adequada
Assistncia
Autoridade
Clareza
Comparabilidade
Representao concisa
Representao coerente
Contedo
Convenincia
Comodidade de acesso
Correo
Credibilidade
Facilidade de operao
Facilidade de uso do hardware
Facilidade de uso do software
Livre de preconceitos (imparcialidade)
Importncia
Valor informativo
Falta de confuso
Pormenorizao
Significado
Significncia
No-volatilidade
Objetividade
Apresentao
Mensurabilidade
Legibilidade
Reputao
Tempo de resposta
Segurana
Suficincia
Inequivocidade
Singularidade
Utilidade
Utilidade da sada
Volatilidade
Ocorrncias
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
72
proposto pelos autores e atualizado dez anos depois (DELONE; MCLEAN, 2003) e
tem servido de referencial terico para diversas pesquisas no campo da avaliao
de sistemas de informao. Os 24 termos relativos qualidade da informao
indicados por DeLone e McLean (1992) so oriundo de extensa reviso de literatura.
Wand e Wang (1996) analisaram a qualidade de dados com base em
inconformidades entre duas vises do mundo real: a viso obtida pela observao
direta e a viso inferida pelo sistema de informao. A anlise gerou 4 dimenses
intrnsecas de qualidade de dados. Estas dimenses especificam se os dados so
completos, sem ambiguidades, significativos e corretos.
Os artigos de Wang e Strong (1996) e de Ballou, Wang et al. (1998) so oriundos
da produo do MIT Total Data Quality Management Program, lanado em 1992
(MADNICK et al., 2009). Wang e Strong (1996) sistematizaram os atributos de
qualidade e identificaram as dimenses-chave da qualidade de dados. As
dimenses propostas pelos autores foram organizadas em quatro categorias de
qualidade
de
dados:
accessibility
(acessibilidade),
contextual
(contextual),
73
4.5
Termos (Portugus)
Preciso
Completude
Coerncia
Acessibilidade
Tempestividade
Aceitabilidade
Autenticidade
Compatibilidade
Abrangncia
Convenincia
Correo
Atualidade
Dinamismo
Fidelidade
Integridade
Interpretabilidade
Localizabilidade
Significncia
Originalidade
Personalizao
Pertinncia
Segurana
Adequabilidade
Fidelidade
Compreensibilidade
Validade
Variedade
Ocorrncias
4
4
3
2
2
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
1
74
comprehensiveness
(abrangncia);
consistency
(coerncia);
completeness (completude).
DeLone e McLean (2003) apresentam uma atualizao do modelo proposto por
eles em 1992 (DELONE; MCLEAN, 1992), onde a dimenso qualidade de servio
introduzida.
Haider e Koronios (2003) enfatizaram o aspecto da autenticidade (authenticity) da
informao no ciberespao, relacionando este atributo a outros: completeness
(completude);
correctness
accuracy
(correo),
(preciso);
validity
trustworthiness,
(validade),
integrity
faithfulness
(fidelidade),
(integridade);
originality
de
completeness
dados:
accessibility
(completude);
(interpretabilidade);
timeliness
(acessibilidade);
consistency
(tempestividade).
accuracy
(coerncia);
Os
autores
(preciso);
interpretability
enfatizaram
75
4.6
2001;
DELONE;
MCLEAN,
2003;
HAIDER;
KORONIOS,
2003;
76
adota-se
nesta
dissertao
termo
preciso
como
termo
correspondente a accuracy.
4.6.2 Atributo tempestividade
Tempestividade (timeliness) a propriedade
77
DELONE;
MCLEAN,
2003);
relevancy
(SAARINEN,
1996;
JARKE;
78
79
(sufficiency,
adequacy)
propriedade
que
se
refere
80
81
82
83
84
85
86
da
informao,
que
podem
influenciar na
apreciao
esttica
da
87
88
Autor
Categorias (Ingls)
Gallagher
1978
Zmud
1996
Wand e Wang
1996
Wang e Strong
1997
Jarke e Vassiliou
1974
Completeness, unambiguousness,
meaningfulness, correctness.
Accessibility, contextual,
representational, intrinsic.
Interpretability, usefulness,
accessibility, believability.
Categorias (Portugus)
Quantidade, formato,
confiabilidade, tempestividade .
Pertinncia, preciso,
factualidade, quantidade,
confiabilidade/tempestividade ,
arranjo, legibilidade,
razoabilidade.
Completude, inequivocidade,
significncia, correo.
Acessibilidade, contextual,
representacional e intrnseca.
Interpretabilidade, utilidade,
acessibilidade, credibilidade.
89
90
5.1
Categorias propostas
II.
III.
91
Atributos
Meio
Contedo
Acessibilidade, aparncia,
clareza, conciso, formato,
legibilidade, localizabilidade,
mensurabilidade, ordem,
quantidade, segurana,
simplicidade,
singularidade,tempestividade,
tempo de resposta, volume.
Abrangncia,
atualidade, coerncia,
completude,
confiabilidade,
correo, credibilidade,
imparcialidade,
inequivocidade,
logicidade, preciso,
validade, veracidade.
Uso
Compatibilidade,
compreensibilidade,
convenincia, importncia,
interpretabilidade,
pertinncia, relevncia,
significncia, suficincia,
utilidade, valor informativo.
Portugus
Preciso
Tempestividade
Completude
Pertinncia
Atualidade
Confiabilidade
Utilidade
Clareza
Suficincia
Coerncia
Acessibilidade
Compreensibilidade
Legibilidade
Importncia
Significncia
Compatibilidade
Convenincia
Interpretabilidade
Credibilidade
Validade
Conciso
Formato
Localizabilidade
Tempo de resposta
Relevncia
Valor informativo
Ingls
Accuracy, precision
Timeliness
Completeness
Relevance, relevancy
Currency, up-to-dateness, recentness
Reliability
Usefulness, usableness, helpfulness
Clearness, clarity
Sufficiency, adequacy
Consistency
Accessibility
Understandability
Readability
Importance
Meaningfulness
Compatibility
Convenience
Interpretability
Credibility, believability
Validity
Conciseness, concise representation
Format, quality of format
Locatability
Response time
Significance
Informativeness
Ocorrncias
26
18
15
14
12
9
8
8
6
6
6
5
5
4
4
3
3
3
3
3
3
3
3
3
2
2
Continua...
92
Portugus
Abrangncia
Correo
Imparcialidade
Inequivocidade
Logicidade
Veracidade
Aparncia
Mensurabilidade
Ordem
Quantidade
Segurana
Simplicidade
Singularidade
Volume
Ingls
Comprehensiveness
Correctness
Freedom from bias
Unambiguousness
Logicalness
Truthfulness
Appearance
Quantitativeness
Orderliness, orderliness of arrangement
Quantity
Security
Simpleness
Uniqueness
Volume
Ocorrncias
2
2
2
2
2
2
2
2
2
2
2
2
2
2
permite identificar os
quatro
atributos
na
categoria
meio
(tempestividade,
corpus,
clareza,
93
Ingls
Timeliness
Clearness, clarity
Accessibility
Readability
Response time
Locatability
Format, quality of format
Conciseness, concise representation
Volume
Uniqueness
Simpleness
Security
Quantity
Orderliness, orderliness of arrangement
Quantitativeness
Appearance
Ocorrncias
18
8
6
5
3
3
3
3
2
2
2
2
2
2
2
2
94
atualidade,
coerncia,
completude,
confiabilidade,
correo,
Ingls
Accuracy, precision
Completeness
Currency, up-to-dateness, recentness
Reliability
Consistency
Credibility, believability
Validity
Comprehensiveness
Correctness
Freedom from bias
Unambiguousness
Logicalness
Truthfulness
Ocorrncias
26
15
12
9
6
3
3
2
2
2
2
2
2
95
Ingls
Relevance, relevancy
Usefulness, usableness, helpfulness
Sufficiency, adequacy
Understandability
Importance
Meaningfulness
Compatibility
Convenience
Interpretability
Significance
Informativeness
Ocorrncias
14
8
6
5
4
4
3
3
3
2
2
96
6 CONCLUSO
A partir da tcnica de anlise de contedo, foram identificados 101 atributos de
qualidade da informao, dos quais 40 termos com mais de uma ocorrncia.
Procedeu-se ao agrupamento desses 40 atributos em trs categorias: meio,
contedo e uso.
A adoo da tcnica de anlise de contedo mostrou-se adequada para a
identificao e categorizao dos atributos de qualidade da informao e possibilitou
a consecuo dos objetivos especficos como se apresenta a seguir.
a) Identificao do ncleo de peridicos da rea de Cincia da
Informao em lngua inglesa, relacionados gesto de sistemas e
servios de informao, que melhor representam a produo
cientfica sobre qualidade da informao.
97
termos com apenas uma ocorrncia, totalizando 101 termos utilizados como
variveis referentes qualidade da informao, nos artigos de peridicos e nas atas
de eventos cientficos selecionados.
Aps a identificao, os 40 termos com mais de uma ocorrncia foram
sistematizados segundo suas semelhanas, de acordo com os procedimentos
metodolgicos adotados nesta dissertao.
d) Proposta de categorias para agrupar os termos identificados como
atributos de qualidade da informao.
Ingls
Categoria Meio
Acessibilidade
Aparncia
Clareza
Conciso
Formato
Legibilidade
Localizabilidade
Mensurabilidade
Ordem
Quantidade
Segurana
Simplicidade
Singularidade
Tempestividade
Continua...
Accessibility
Appearance
Clearness, clarity
Conciseness, concise representation
Format, quality of format
Readability
Locatability
Quantitativeness
Orderliness, orderliness of arrangement
Quantity
Security
Simpleness
Uniqueness
Timeliness
98
Ingls
Categoria Contedo
Comprehensiveness
Currency, up-to-dateness, recentness
Consistency
Completeness
Reliability
Correctness
Credibility, believability
Freedom from bias
Unambiguousness
Logicalness
Accuracy, precision
Validity
Truthfulness
Abrangncia
Atualidade
Coerncia
Completude
Confiabilidade
Correo
Credibilidade
Imparcialidade
Inequivocidade
Logicidade
Preciso
Validade
Veracidade
Categoria Uso
Compatibility
Understandability
Convenience
Importance
Interpretability
Relevance, relevancy
Significance
Meaningfulness
Sufficiency, adequacy
Usefulness, usableness, helpfulness
Informativeness
Compatibilidade
Compreensibilidade
Convenincia
Importncia
Interpretabilidade
Pertinncia
Relevncia
Significncia
Suficincia
Utilidade
Valor informativo
Fonte: Organizado pelo autor.
uma
nomenclatura
sobre
atributos
de
qualidade
com
99
100
101
presente
dissertao
pretende
colaborar
especificamente
no
102
6.1
Pesquisas futuras
103
104
REFERNCIAS
AHITUV, N. A systematic approach toward assessing the value of an information
system. MIS Quarterly, v. 4, n. 4, p. 61-75, 1980.
AITCHISON, J.; CLEVERDON, C. W. A report on a test of the index of metallurgical
literature of Western Reserve University. Cranfield: College of Aeronautics, 1963.
(ASLIB Cranfield Research Project). 270 p.
AMARAL, S. A. D. Marketing da informao: entre a promoo e a comunicao
integrada de marketing. Informao & Sociedade: Estudos, v. 18, n. 1, p. 31-44,
jan./abr. 2008.
AROUCK, O. Avaliao de sistemas de informao: reviso da literatura.
Transinformao, v. 13, n. 1, p. 7-21, Jan-Jun 2001.
ASSOCIAO BRASILEIRA DE NORMAS TCNICAS. ABNT NBR ISO 9001:2008 Sistema de gesto da qualidade: requisitos. Associao Brasileira de Normas
Tcnicas, 2008. 28 p.
BAILEY, J. E.; PEARSON, S. W. Development of a tool for measuring and analyzing
computer user satisfaction. Management Science, v. 29, n. 5, p. 530-545, 1983.
BALL, L.; HARRIS, R. SMIS members: a membership analysis. MIS Quarterly, v. 6,
n. 1, p. 19-38, 1982.
BALLOU, D. P.; PAZER, H. L. Modeling data and process quality multi-input multioutput information systems. Management Science, v. 31, n. 2, p. 150-162, 1985.
BALLOU, D. P. et al. Modeling Information Manufacturing Systems to Determine
Information Product Quality. Management Science, v. 44, p. 462-484, 1998.
BARDIN, L. Anlise de contedo. Lisboa: Edies 70, 2009. 281 p.
BATESON, J. E. G.; HOFFMAN, K. D. Marketing de servios. 4. ed. Porto Alegre:
Bookman, 2001. 495 p.
BELKIN, N. J. Some Soviet Concepts of Information for Information-Science. Journal
of the American Society for Information Science, v. 26, n. 1, p. 56-64, 1975.
______. Information Concepts for Information-Science. Journal of Documentation, v.
34, n. 1, p. 55-85, 1978.
BERRY, L. L. et al. The service-quality puzzle. Business Horizons, v. 31, n. 5, p. 3543, 1988.
______. Ten lessons for improving service quality. Cambridge, Massachusetts:
Marketing Science Institute, 1993. (93-104). 25 p.
105
106
107
108
FUJINO, A. Servios de informao no processo de cooperao universidadeempresa: proposta de um modelo de mediao institucional para micro e pequenas
empresas. (2000). 272 f. Tese (Doutorado) - Escola de Comunicaes e Artes,
Universidade de So Paulo, So Paulo, 2000.
GALLAGHER, C. A. Perceptions of the value of a management information system.
Academy of Management Journal, v. 17, n. 1, p. 46-55, 1974.
GALLETTA, D. F.; LEDERER, A. L. Some cautions on the measurement of user
information satisfaction. Decision Sciences, v. 20, n. 3, p. 419-438, 1989.
GILMOUR, L. (Ed.) Collins essential canadian english: dictionary and thesaurus. 2.
ed. London HarperCollins Publishers, 2006. 915 p.
GOODHUE, D. L. Understanding user evaluations of information systems.
Management Science, v. 41, n. 12, p. 1827-1844, 1995.
GOODHUE, D. L.; THOMPSON, R. L. Task-Technology Fit and IndividualPerformance. MIS Quarterly, v. 19, n. 2, p. 213-236, Jun 1995.
GREIMAS, A. J.; COURTS, J. Dicionrio de semitica. So Paulo: Contexto, 2008.
543 p.
GRNROOS, C. Marketing: gerenciamento e servios. 2. ed. Rio de Janeiro:
Elsevier, 2003. 482 p.
GROVER, V. et al. Information systems effectiveness: the construct space and
patterns of application. Information & Management, v. 31, p. 177-191, 1996.
GUIMARAES, T. et al. Evolving a comprehensive measure for system quality.
International Conference on Information Quality, 11
Cambridge, MA: Massachusetts Institute of Technology, 2006.
HAIDER, A.; KORONIOS, A. Authenticity of information in cyberspace: IQ in the
Internet, web, and e-business. In: EPPLER, M. J.; HELFERT, M. (Ed.). International
Conference on Information Quality, 8. Cambridge, MA: Massachusetts Institute of
Technology, 2003. p. 121-132.
HAMILTON, S.; CHERVANY, N. L. Evaluating information system effectiveness - part
I: comparing evaluation approaches. MIS Quarterly, v. 5, n. 3, p. 55-69, 1981.
HARTER, S. P.; HERT, C. A. Evaluation of information retrieval systems:
Approaches, issues, and methods. Annual Review of Information Science and
Technology, v. 32, p. 3-94, 1997.
HILDRETH, C. R. Accounting for users' inflated assessments of on-line catalogue search
performance and usefulness: an experimental study. Information Research, v. 6, n. 2,
2001.
109
110
111
112
113
114
em:<http://thomsonreuters.com/products_services/science/free/essays/impact_factor
/>. Acesso em: 20.3.2010.
THONG, J. Y. L.; YAP, C. S. Information systems effectiveness: A user satisfaction
approach. Information Processing & Management, v. 32, n. 5, p. 601-610, Sep 1996.
115
Examining the dimensionality and measurement of userperceived knowledge and information quality in the KMS context. Journal of
Information Science, v. 35, n. 1, p. 94-109, 2009.
WARBURTON, B. et al. Report on the first stage of a test on the Library catalogue of
The English Electric Co. Ltd., Whetstone. Cranfield, 1961. (ASLIB Cranfield
Research Project). 41 p.
WATSON, R. T. et al. Measuring information systems service quality: lessons from
two longitudinal case studies. MIS Quarterly, v. 22, n. 1, p. 61-79, 1998.
WIXOM, B. H.; WATSON , H. J. An empirical investigation of the factors affecting
data warehousing success. MIS Quarterly, v. 25, n. 1, 2001.
ZAVAGLIA, C. Um significado s pouco: dicionrio de formas homnimas do
portugus contemporneo do Brasil. Rio de Janeiro: Cincia Moderna, 2010. 422 p.
ZEITHAML, V.; BITNER, M. J. Marketing de servios: a empresa com foco no
cliente. 2. ed. Porto Alegre: Bookman, 2003. 536 p.
ZMUD, R. W. An empirical investigation of the dimensionality of the concept of
information. Decision Sciences, v. 9, n. 2, p. 187-195, 1978.
______. Individual differences and MIS success: a review of the empirical literature.
Management Science, v. 25, n. 10, p. 966-979, 1979.
116
1980
Continua...
117
2000