Escolar Documentos
Profissional Documentos
Cultura Documentos
Oeste Mineiro
2020;10:e3900
DOI: 10.19175/recom.v10i0.3900
www.ufsj.edu.br/recom
RESUMO
Objetivo: Analisar as estratégias metodológicas utilizadas para a validação de tecnologias educacionais em teses e dissertações de
enfermagem no Brasil. Método: Trata-se de um estudo documental bibliométrico. A busca foi realizada no catálogo de Teses e Dissertações
da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. O mapeamento considerou o perfil das produções e das tecnologias
educacionais, as estratégias de validação e a aplicação da lei de Zipt. A análise foi realizada com o Statistical Package for the Social Sciences
21.0 e o IRaMuTeQ 0.7 alpha 2. Resultados: Obtiveram-se 156 produções. O perfil das produções foi de dissertações de mestrado acadêmico,
consideradas estudos metodológicos, estando a maioria desenvolvida na região Nordeste do País. As tecnologias educacionais
corresponderam a materiais impressos ou audiovisuais, direcionados à comunidade e à área de enfermagem médico-cirúrgica. O processo
de validação ocorreu, em sua maioria por concordância, com participação de juízes especialistas e da população-alvo, com uso de
instrumentos validados e aplicação do Índice de Validação de Conteúdo. A partir da aplicação da Lei de Zipt, destacaram-se validação, juiz e
estudo metodológico. Conclusão: O mapeamento propiciou a visibilidade da produção científica, indicando um conhecimento com
distribuição desigual no que tange à região onde se produz tal capital intelectual.
Descritores: Estudo de Validação; Tecnologia educacional; Enfermagem; Bibliometria; Dissertação Acadêmica.
ABSTRACT
Objective: To analyze the methodological strategies used for the validation of educational technologies in nursing theses and dissertations
in Brazil. Method: This is a bibliometric documentary study. The search was carried out in the catalog of Theses and Dissertations of the
Coordination for the Improvement of Higher Education Personnel. The mapping considered the profile of productions and educational
technologies, validation strategies and the application of the Zipt's law. The analysis was performed in the Statistical Package for the Social
Sciences 21.0 and IRaMuTeQ 0.7 alpha 2. Results: A total of 156 productions were obtained. The profile of the productions was of academic
master's dissertations, considered methodological studies, mostly developed in the Northeast region of the country. The educational
technologies corresponded to printed or audiovisual materials directed to the community and the medical-surgical nursing area. The
validation process took place, mostly by agreement, with the participation of expert judges and the target population, using validated
instruments and applying the Content Validation Index. With the application of the Zipt's Law, validation, judge and methodological study
stood out. Conclusion: The mapping provided the visibility of the scientific production, indicating knowledge with an unequal distribution
regarding the region where such intellectual capital is produced.
Descriptors: Validation Study; Educational technology; Nursing; Bibliometric; Academic Dissertation.
RESUMEN
Objetivo: Analizar las estrategias metodológicas utilizadas para validar las tecnologías educativas en tesis y disertaciones de enfermería en
Brasil. Método: Este es un estudio bibliométrico documental. La búsqueda se realizó en el catálogo de Tesis y Disertaciones de la Coordinación
para la Mejora del Personal de Educación Superior. El mapeo consideró el perfil de las producciones y tecnologías educativas, las estrategias
de validación y la aplicación de la ley de Zipt. El análisis se realizó con el Paquete Estadístico para Ciencias Sociales 21.0 e IRaMuTeQ 0.7 alpha
2. Resultados: Se obtuvieron 156 producciones. El perfil de las producciones fue de disertaciones de maestría académica, consideradas
estudios metodológicos, la mayoría de los cuales se desarrolló en la región noreste del país; las tecnologías educativas correspondían a
materiales impresos o audiovisuales, dirigidos a la comunidad y en el área de enfermería médico-quirúrgica; El proceso de validación se
realizó principalmente mediante un acuerdo con la participación de jueces expertos y la población objetivo, utilizando instrumentos validados
y aplicando el Índice de Validación de Contenido. De la aplicación de la Ley Zipt, se destacó la validación, el juez y el estudio metodológico.
Conclusión: El mapeo proporcionó la visibilidad de la producción científica indicando conocimiento con una distribución desigual con
respecto a la región donde se produce dicho capital intelectual.
Descriptores: Estudio de Validación; Tecnología Educacional; Enfermería; Bibliometría; Tesis Académica.
¹Doutoranda em Enfermagem pela Universidade Federal do Rio Grande do Norte - UFRN. 2Doutorando em Enfermagem pela UFRN. 3Doutoranda em Enfermagem pela
UFRN. 4Doutoranda em Enfermagem pela UFRN. 5Pós-doutorado em Sociologia pela Universidade de Coimbra. Pós-doutorado Senior em Enfermagem pela Universidade
do Estado do Rio de Janeiro. Docente Permanente do Mestrado Profissional de Enfermagem em Saúde Pública da Universidade do Estado do Amazonas e do Mestrado
Profissional em Saúde da Família da Universidade do Estado do Amazonas. 6Doutora em Enfermagem. Docente da graduação e pós-graduação em Enfermagem da UFRN.
www.ufsj.edu.br/recom - 2
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
A leitura crítica dos estudos selecionados foi autores com o Microsoft Excel, o qual continha as
guiada por um banco de dados, elaborado pelos variáveis de interesse do estudo. As variáveis
www.ufsj.edu.br/recom - 3
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
relacionadas ao perfil das Teses e Dissertações utilizado avalia a ocorrência dos termos, em
foram: origem, ano e região geográfica; as trechos de 60 palavras, em média e forma
referentes ao perfil das tecnologias educacionais agrupamentos dos fenômenos mais relevantes do
foram: finalidade, área de conhecimento da trecho. Os dados relativos à análise lexical foram
enfermagem, tipologia e referencial utilizado para apresentados em forma de figuras, do tipo gráfico
a produção. Quanto às estratégias do processo de e nuvem de palavras. Tal análise visa atender à lei
validação das tecnologias educacionais, de zipt, a terceira lei da bibliometria, a qual
investigaram-se as seguintes variáveis: referencial relaciona a frequência de palavras utilizadas na
metodológico, número de juízes especialistas e do área de pesquisa, de modo a identificar
público-alvo, critérios de seleção dos juízes, nomenclaturas para os fenômenos ou variáveis de
número de rodadas Delphi, instrumentos destaque ao estudo. Infere-se que uma pequena
utilizados, valor mínimo de Índice de Validação de quantidade de palavras pode ser utilizada em
Conteúdo (IVC), tipo de estudo realizado com o grande frequência, indicando o assunto principal
público-alvo e técnicas de análise dos dados. do documento(6).
O conteúdo do banco de dados, em relação
ao perfil das produções, das tecnologias RESULTADOS E DISCUSSÃO
educacionais e das estratégias de validação, foi Perfil das Produções e Tecnologias Educacionais
analisado com uso do Statistical Package for the Validadas
Social Sciences (SPSS) 21.0 para o cálculo da A maior porcentagem das produções 114
estatística descritiva com frequência relativa e (73,1%) correspondeu a pesquisas oriundas de
absoluta. Os dados foram apresentados de forma dissertações, seja mestrado acadêmico 81 (51,9%)
descritiva por meio de gráficos, com o objetivo de ou profissional 33 (21,2%), enquanto 42 (26,9%)
facilitar a compreensão dos resultados. foram oriundas de teses. Observou-se
O conteúdo global das produções, com vista crescimento exponencial, ao longo das duas
a criar um corpus textual, foi analisado pelo uso do últimas décadas, iniciando em 2011, com oito
IRaMuTeQ 0.7 alpha 2. A matriz-base para trabalhos, até alcançar o número de 45 em 2018,
produção do corpus foi o resumo das como pode ser observado na Figura 2.
metodologias de cada trabalho. O software
Figura 2 - Teses e dissertação sobre validação de tecnologias educacionais publicadas por ano. 2019.
www.ufsj.edu.br/recom - 4
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
www.ufsj.edu.br/recom - 5
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
www.ufsj.edu.br/recom - 6
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
www.ufsj.edu.br/recom - 7
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
termos de evidência, quando compatíveis com os utilizado nas pesquisas em saúde, no entanto
objetos de estudos, a exemplo de pesquisas diferentes valores mínimos de referência são
quase-experimentais e ensaios clínicos. adotados pelos estudos. Apesar da variedade,
Dos instrumentos utilizados, 98 (62,8%) uma taxa inferior a 0,78 não é recomendada,
foram validados e adaptados ao contexto da sendo o valor de 0,80 o maior utilizado, assim
tecnologia em questão. Mas, também, em 58 (37, como verificado nos estudos desta pesquisa
2%) os autores optaram por elaborar seus bibliométrica(13).
instrumentos. O contato com os participantes, Além do IVC, outras medidas foram
juízes ou sujeitos do público-alvo, foi realizado de utilizadas no processo de validação, tais como: alfa
forma on-line e por abordagem individual em 82 de cronbach, em 14 (8,9%) pesquisas; índice de
(52,6%), apenas on-line em 44 (28,2%) ou por legibilidade de flesch, em sete (4,4%); SAM, em
abordagem individual em 30 (19,2%) trabalhos. seis (3,8%); índice kappa, em quatro (2,5%); e o
Para a etapa de coleta de dados, é Coeficiente de Correlação Interclasses (CCI), em
recorrente que os autores façam uso de quatro (2,5%). Adicionalmente, nos estudos que
instrumentos e questionários previamente envolveram a validação clínica, análises
validados, a exemplo do Suitability Assessment of inferenciais foram empregadas, a exemplo dos
Materials (SAM), mas que sejam adaptados, de testes qui-quadrado, em 17 (10,8%) trabalhos; t
acordo com as especificidades do estudo em student, em 15 (9,6%); wilcoxon, em 13 (8,3%);
questão, principalmente, no que diz respeito às mann-whitney, em 11 (7,0%); ANOVA, em sete
características da população(13). (4,4%); mcNemar, em seis (3,8%); fisher, em seis
A análise dos dados foi realizada com (3,8%); pearson, em cinco (3,2%); tukey, em
técnicas variadas, com predomínio da estatística quatro (2,5%); kolmogorov-smivorv, em dois
descritiva, na qual todos os trabalhos utilizaram a (1,2%); razão de chance, em dois (1,2%); e
aplicação de frequências relativas e absolutas. friedman, em 1(um) (0,6%) estudo.
Uma das medidas empregadas com maior
frequência foi o IVC, aplicado em 127 (81,4%) Corpus Textual
análises, cujos valores de referência foram Quanto à terceira lei de zipt, foi possível
diversificados, com maior emprego do valor identificar que, nas 156 produções, foram
mínimo de 0,80 em 71 (55,9%) estudos. A média utilizadas 3.627 palavras, das quais 686 eram
do IVC, obtida pelas pesquisas analisadas, foi de termos distintos e 422 (61,5%) surgiram uma única
0,90, com mínimo de 0,70 e máximo de 1,00. A vez (hapax). Portanto, de forma inversamente
abordagem qualitativa foi utilizada em 112 (71,7 proporcional, houve menor número de palavras
%) trabalhos, como estratégia para a análise das que foram citadas com maior frequência,
sugestões dos juízes, especialmente, nas situações enquanto um significativo número de palavras
em que o IVC obteve valor abaixo da referência citadas poucas vezes.
adotada. Na Figura 4, observam-se, em destaque na
O IVC corresponde a um método que mede, nuvem de palavras, os termos com maior
a partir de uma escala tipo likert, a porcentagem frequência de citação: validação (151), juiz (91) e
de juízes que concordam sobre determinados estudo metodológico (81), enquanto as palavras
aspectos e itens da tecnologia, obtendo-se uma subjacentes, a exemplo de conteúdo (76),
valoração quantitativa de sua validade. Por esse especialistas (72), público-alvo (54) e aparência
motivo, tem sido amplamente recomendado e (42) tiveram menor frequência.
www.ufsj.edu.br/recom - 8
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
Figura 4 - Nuvem de palavras que compõem o corpus textual das teses e dissertações. 2019.
www.ufsj.edu.br/recom - 9
Cassiano AN, Silva CJA, Nogueira ILA, et al. Revista de Enfermagem do Centro-Oeste Mineiro 2020; 10/3900
www.ufsj.edu.br/recom - 10