SCIENCE MAPPING

(BIBLIOMETRIA) COM R
STUDIO, BIBLIOMETRIX
E ÍNDICES
INTERNACIONAIS
ROQUEMAR BALDAM
ROQUEMAR3@GMAIL.COM
(+55) 27 – 99223-1561
COPE.UFES.BR
1
Bibliometria (Science Mapping) com R Studio e
Ordinatio
O que é preciso para participar do Workshop?

1. Instalar versão atual do R: https://cran.r-project.org/bin/windows/base/

2. Instalar versão atual do RStudio: https://www.rstudio.com/products/rstudio/download/

3. Excel instalado no seu computador.

4. Baixar os arquivos do workshop em uma pasta de seu computador, ou digite

https://bit.ly/2XF1m7p

2
cope.ufes.br
Para citar este trabalho
• BALDAM, Roquemar. Science Mapping (Bibliometria) with R Studio,
Bibliometrix and international indexes. Ufes: Vitória, 2021.
Disponible: http://cope.ufes.br. Access: 12/05/2021.

3
 Qual a meta?
Science Mapping
(Bibliometria)
Keywords Bibliometria
Critérios de seleção e
Protocolo de Pesquisa Papers mais relevantes

Informações típicas obtidas com o Science Mapping:

• Periódicos mais relevantes em sua área de estudo.
• Papers mais citados e os que possuem maior Fator de Impacto.
• Autores mais produtivos.  
• Palavras-Chave mais relevantes.
• Países e Instituições mais produtivas.
• Produção na área por ano, país.
• Clusters e redes de pesquisa na área.
• ... 4
cope.ufes.br
Onde se encaixa a Science Mapping
(Bibliometria)?
Usualmente na Revisão Sistemática
Revisão de
Literatura

Revisão Narrativa Revisão

(Tradicional) Sistemática

Com Meta- Sem Meta-

análise análise 5
cope.ufes.br
Porque a Science Mapping
(Bibliometria)?

Por possuir o potencial de introduzir um processo de revisão

sistemática, transparente e reproduzível, com base na medição
estatística da ciência, dos cientistas ou da atividade científica.

(BROADUS, 1987; DIODATO, 1994; PRITCHARD, 1969)

6
cope.ufes.br
POR QUE FAZER UMA SCIENCE MAPPING
(BIBLIOMETRIA)?
• Há anos o número de publicações acadêmicas está aumentando a um
ritmo acelerado.

• Ênfase nas contribuições empíricas resultou em fluxos de pesquisa

volumosos e fragmentados.

• Bibliometria guia o pesquisador para os trabalhos mais importantes.

7
cope.ufes.br
Razões para executar Science Mapping
Mais comuns:
• Conhecer o que há de mais qualificado/recente na área
de interesse (estado da arte).
• Quem e onde a pesquisa no tema está sendo executada
em maior intensidade.
• Identificar lacunas na pesquisa atual, a fim de sugerir
áreas para uma investigação mais aprofundada.
• Fornecer uma estrutura / plano de fundo para
posicionar adequadamente novas atividades de
pesquisa.
• Resumir as evidências existentes sobre um método,
tratamento, tendência ou tecnologia, para resumir a
evidência empírica dos benefícios e limitações de um
método específico.
8
cope.ufes.br
CRITÉRIO DE AVALIAÇÃO
DA CAPES PARA
AVALIAÇÃO DE
PROGRAMAS DE PÓS-
GRADUAÇÃO,
INTERNACIONALIZAÇÃO, ..
.

LINK

9
cope.ufes.br
Critérios Capes
Palestra do Prof. Paulo Jorge
Santos (UFPE) é muito
esclarecedora
Novo Qualis (SANTOS, 2020)
https://www.youtube.com/wat
ch?v=HCcGSMF1-ms

10
cope.ufes.br
Tipos de
Revisão
Sistemática
mais comuns

(MUNN, 2015)
11
cope.ufes.br
Passo essencial:
Protocolo da
Systematic
Review
Exemplo de Protocolo para
Systematic Review

Aqui entra a
bibliometria
12
cope.ufes.br
 MÉTODOS BIBLIOMÉTRICOS
• Empregam uma abordagem quantitativa para a descrição, avaliação
e monitoramento de pesquisas publicadas.
• Processo sistemático, transparente e reproduzível.
• Mapeia o campo de pesquisa sem viés subjetivo.
• Utilizam dados bibliográficos de trabalhos produzidos por outros
cientistas .
• Quando esses dados são agregados e analisados, geram insights sobre:
– Estrutura do campo de pesquisa.
– Redes sociais entre cientistas.
– Tendências.
– Subcampos de pesquisa. 13
cope.ufes.br
Referência
principal para o
Bibliometrix,
usado neste
Workshop.
14
cope.ufes.br
 15
cope.ufes.br
 Web of Science (WoS)

(via Periódicos Capes)

1 - Gerar arquivos com dados

Dimensions
Cochrane
Pubmed
brutos de papers selecionados,

Scopus
* Apenas um exemplo de quantitativo de papers obtidos.
em função dos critérios do
Protocolo, nas bases de dados
Protocolo da Systematic
Total de 1.869 papers (Scopus (1546) e WoS (323))* PPGGP - Cope
Review emitido

R Studio com Bibliometrix

Ϯ – Obter dados conjuntos das bases :

(R, Bibliometrix, Ordinatio e filtros)- R17

- Mesclar dados do Scopus e Wos (ou outras) em base única.
- Extrair duplicatas.
- Gerar relatório bibliométrico básico dos dados brutos.
Visite o site da
- Gerar arquivo de dados CSV para tratamento na planilha Ordinatio. disciplina
- Gerar gráficos Bibliométricos dos dados brutos. 1.643 (foram retirados os repetidos)*
Realizar Bibliometria

Biblioshiny ()

ϯ – Analisar Bibliometria no
browse Biblioshiny() e obter
1.643*
dados bibliométricos primários
Excel com Ordinatio

5 - Excluir papers de acordo 8 - Excluir papers após

4 - Importar dados do arquivo CSV no R com critérios complementares 6 - Excluir papers leitura do texto, obtendo
(Planilha)

Studio, ajustar dados e classificar do protocolo (Ex.: número de após leitura de lista de papers que irão
conforme Ordinatio citações, somente papers, FI Título e Resumos compor o portfolio final
no JCR, valor de Ordinatio) da Systematic Review Dados
bibliométricos
1.643* 280* 42*
35* obtidos
Periódicos Capes,
Google Scholar e

7 - Baixar papers
outros

selecionados 42*

16
cope.ufes.br
1 - Gerar arquivos com
dados brutos de
papers selecionados,
em função dos
critérios do Protocolo,
nas bases de dados

17
cope.ufes.br
Palavras chave complementares – Busca em inglês
https://journalfinder.elsevier.com/
Excelente ajuda a encontrar palavras chaves corretas!!!!

Ao começar a
digitar uma
Keyword, ele
começa a listar se
há em sua base as
Keywords
equivalentes

18
cope.ufes.br
Palavras chave e critérios
i. Agrupar cada conjunto de termos com o identificador AND
"risk"
AND
"risk management" OR "Risk variation" OR "Risk-based"
AND
"lean" OR "Operation" OR "Business Process*" OR "macroprocess*" OR "Process
Classification"
AND
"Public Administration*" OR "Public Management" OR "Public Sector Management"
OR "public service*" OR "Public Organization*"
AND  
DOCTYPE ( ar )   Últimos 2 anos:
AND   • 2019 a 2021 (parece 3 anos)
PUBYEAR  >  2019  • 2021 ainda está a ser criado.
20
cope.ufes.br
 Que bases podem ser utilizadas no Bibliometrix?
Periódicos
Periódicos Capes
Capes

Periódicos
Capes

Cadastrando
Via script e API seu projeto na
Em geral , acesso às bases é pago... do Bibliometrix base
Mas podemos ter acesso... Free... cope.ufes.br
21
Outras bases
•Nativamente só há scripts no Bibliometrix para as cinco bases indicadas.

•Considerar fortemente:
• Não há nenhuma indicação de recusa dos periódicos em aceitar estas cinco bases
propostas.
• Estas cinco são inclusive as bases fonte para outras bases.
• A maior parte de outras bases não possuem dados bibliométricos completos.

•Lembrar:
• Conversor: Seria possível criar um conversor de outras bases (por exemplo de Scielo
para Scopus) para importar. Mas convém? Os dados bibliométricos estão completos
nestas bases?
• Internacionalização é um dos objetivos aqui. Quanto temos bases que privilegiam
periódicos de um só país, esta ideia é derrubada. 22
Link : https://www.periodicos.capes.gov.br/

Apenas se estiver fora da Ufes ou do Ifes

23
cope.ufes.br
Apenas se estiver fora da Ufes ou do Ifes

24
cope.ufes.br
Apenas se estiver fora da Ufes ou do Ifes

25
cope.ufes.br
BASE 1 – WEB OF SCIENCE

Ou

26
cope.ufes.br
 27
cope.ufes.br
Selecionando artigos adequados

2 3

4 5

8
6

28
cope.ufes.br
7
1
2

29
 • Limite de 500

• Se tiver mais de 500

resultados, gerar dois ou
1 mais arquivos

2
Muito importante:
marcar sempre Registro
3 completo e referencias
citadas

Salvar arquivo: será gerado um arquivo

“savedrecs.bib” na área de downloads 30
cope.ufes.br
Artigo completo: como obter??? (Web of Science)
Pode existir outros locais para baixar.

Escolha o link de texto Baixe o arquivo completo

31
BASE 2 – SCOPUS

32
cope.ufes.br
 33
cope.ufes.br
Selecionando artigos adequados 1 – Que parte deseja localizar?
2 – Que textos deseja?
3 – Pretende adicionar novas grupos de palavras?
4 – Controlar períodos de interesse.
5 – Indique período.

1 2

4
3

6
34
1
2

35
cope.ufes.br
 36
cope.ufes.br
 • Limite de 2.000

• Se tiver mais de 2.000

resultados, gerar dois ou
mais arquivos

Muito importante: marcar todas

as opções de informação Salvar arquivo

Salvar arquivo: será gerado um arquivo

“scopus.bib” na área de downloads 37
cope.ufes.br
Artigo completo: como obter??? (Scopus)
Escolha o link de texto Baixe o arquivo completo

38
BASE 3 – PUBMED
Execute o Script “Pubmed - Extrair dados.R”, disponível nos arquivos baixados para
este workshop.

39
cope.ufes.br
BASE 4 – COCHRANE

40
cope.ufes.br
1

41
cope.ufes.br
1

3
2
42
cope.ufes.br
 43
cope.ufes.br
 2
1

44
cope.ufes.br
 1

3
2

É gerado na sua área de download um arquivo “citation-export.bib”

45
cope.ufes.br
Web of Science: até 500 registros por vez.

Scopus: até 2.000 registros por vez.

O que fazer quando tenho mais registros que isso para exportar?

Dividir em várias exportações e depois juntar os arquivos BibTex em

único arquivo (são arquivos texto editáveis com bloco de notas).

Cuidado! Se gerou tantos resultados assim:

• Pode ser que sua consulta não esteja restritiva o suficiente! Poderia
melhorar sendo mais restritivo?
• Seleção muito ampla implicará que depois você terá que retirar muita
coisa, pois é inviável ler milhares de papers!
46
cope.ufes.br
Colocar bases de dados brutos em local
adequado
1. Crie uma pasta para guardar os arquivos da bibliometria:
“c:\bib”.
2. Copie da área de download de seu computador os arquivos
“scopus.bib” e “savedrecs.bib” para a pasta que acabou de
criar ( “c:\bib”).

47
cope.ufes.br
2 – Obter, com R
Studio e
Bibliometrix, os
dados conjuntos do
Scopus e WoS

48
cope.ufes.br
1

2 Área para escrever os comandos

Objetos (Dados)

Imagens, Ajuda

Resultado dos comandos

49
cope.ufes.br
Copiar o texto do arquivo de script
“Bibliometria.txt” e colar aqui
(Arquivos do workshop)

50
cope.ufes.br
 Primeiro escolha opção 1 e
1 tecle aqui (Rum)
2
Repita o procedimento para
opção 2 à 9, cada vez apertando
3 o Run
4

6
7

9
51
 Após executar este comando:

8 É executado o relatório de dados.

52
cope.ufes.br
3 – Analisar
Bibliometria no
browse Biblioshiny()
e obter dados
bibliométricos
primários

53
cope.ufes.br
Para visualizar os resultados via
web-interface (browser)

Execute esta linha.

54
cope.ufes.br
Muitas opções de dados e
gráficos

O que eu preciso obter de dados primários??

55
cope.ufes.br
Versão de ajuste: Análise dos dados com Biblioshiny()
1. Importante, O Biblioshiny() só roda com o Bibliometrix carregado no R Studio.
2. Execute a linha “Biblioshiny()” na área de script do R Studio. Será aberta uma interface de browser Web.
3. Carregue os arquivos de análise, conforme mostrado nas opções de figura abaixo.
4. Nesta versão atual só funciona com dados de “Web of Science” e “Scopus”. Não sabemos, por enquanto, quando será acertado.
5. Divirta-se!!!

Arquivo WoK 1 Arquivo Scopus 2

1
1

2
2

3 Este arquivo foi gerado

3 em C:\bib\scopus.bib
Este arquivo foi gerado 4
4 em C:\bib\savedrecs.bib
5
5 56
cope.ufes.br
Depois, para escolher os gráficos (exemplos):

2. Acesso à Bradford´s
1. Acesso à
law: Algumas opções
Callaboration
não precisam
WordMap
escolher a opção
Apply! Opção de artigo
Opção de artigo

Escolher ativar opção

57
cope.ufes.br
4 - Importar dados
oriundos do arquivo
CSV do R Studio,
ajustar dados e
classificar conforme
Critérios

59
cope.ufes.br
1. Abra a sua planilha “arquivo.csv” que está em “c:\bib\”
2. Copie todos os dados do arquivo, com exceção da 1ª linha.
1

Se não abrir assim, siga estes passos:

Abrir nova planilha --> Dados> De texto ou Csv --> Carregar com delimitador "virgula"
60
cope.ufes.br
1. Abra o arquivo 060 – Science Mapping

2. Copie todos os dados do “arquivo.csv”, sem o

títulos, e cole na célula A3 da aba “Papers”

61
cope.ufes.br
Ao classificar em ordem decrescente pelo Ordinatio, você terá a classificação de todos os papers.

62
cope.ufes.br
O que é a Equação InOrdinatio*?
Método de MCDA (Multiple Criteria Decision Analysis) para classificação de papers.

InOrdinatio = α* FI + β * [10-(Ano da Pesquisa – Ano da Publicação)] + γ*Ci

Onde:
α = Peso que se deseja dar ao Fator de Impacto. Originalmente 1.
FI = Fator de Impacto no JCR do periódico onde o paper foi publicado.
β = Peso que se deseja dar ao quanto mais recente é a publicação. Usualmente 1, variando
de 1 a 10 (sugestão dos autores).
γ = Peso que se deseja dar à quantidade de Citações do paper. Originalmente 1.
Ci = Quantidade de Citações do paper. *Equação do Methodi Ordinatio 63
(PAGANI; KOVALESKI; RESENDE, 2015)

cope.ufes.br
Recomendações de dados de fontes de artigos
• JCR

• Scopus

• Google Scholar

• Capes Qualis (Melhor não usar! Muito atrasado!)

64
 Ajuste no Excel
JCR - WoS - Índices
Periódico Capes: Clarivate.com --> Web of Science --> Journal Impact Factor

2 - Escolha Journal
Citation Reports - JCR

3 - para pegar lista de JCR

1 - Escolha
esta Base

6 - Saída de lista 8 – Lista produzira

5- Ano desejado

4 - Modo
7 - Lista de Excel ou
outra (CSV)
65
 Ajuste no Excel
Scopus - Índices
Periódico Capes

1 – Periódico
Capes

a ixado
3 b
rq uivo
4 –A
66
Google Schopus Ajuste no Excel
Avaliação de publicações
Acesse
https://scholar.google.com.br/citations
?view_op=top_venues&hl=em

Sempre temos de atualizar base de

dados necessários

67
Google Scholar Ajuste no Excel
Avaliação de publicações

Se desejar um grupo de área:

• Indica aqui á área
• Aqui a extração dos dados

68
Capes Qualis Ajuste no Excel
https://sucupira.capes.gov.br/sucupira/public/consultas/coleta/veiculoPublicacaoQualis/listaConsultaGeralPeriodicos.jsf

4 69
 ESCOLHER OS PAPERS
CONFORME ESCOLHA NO EXCEL

70
5 - Excluir papers de acordo
com critérios
complementares do protocolo
(Ex.: número de citações,
somente papers, FI no JCR, ...)

6 - Excluir papers após

leitura de Título e Resumos
Fe i t o e xcl us i va men te c om
r ec urs o s d a Pla ni lh a no Excel 71
cope.ufes.br
7 - Baixar papers
selecionados

Feito nos moldes tradicionais,

baixando nas bases:
- Periódicos Capes
- Google Scholar
- Sites dos periódicos

72
cope.ufes.br
8 - Excluir papers após
leitura do texto, obtendo lista
de papers que irão compor o
portfólio final da Bibliometria

Fe i t o e xcl us i va men te c om
r ec urs o s d a Pla ni lh a no Excel 73
cope.ufes.br
Finalizando...

74
cope.ufes.br
 Web of Science (WoS)

(via Periódicos Capes)

1 - Gerar arquivos com dados

Dimensions
Cochrane
Pubmed
brutos de papers selecionados,

Scopus
* Apenas um exemplo de quantitativo de papers obtidos.
em função dos critérios do
Protocolo, nas bases de dados
Protocolo da Systematic
Total de 1.869 papers (Scopus (1546) e WoS (323))* PPGGP - Cope
Review emitido

R Studio com Bibliometrix

Ϯ – Obter dados conjuntos das bases :

(R, Bibliometrix, Ordinatio e filtros)- R17

- Mesclar dados do Scopus e Wos (ou outras) em base única.
- Extrair duplicatas.
- Gerar relatório bibliométrico básico dos dados brutos.
Visite o site da
- Gerar arquivo de dados CSV para tratamento na planilha Ordinatio. disciplina
- Gerar gráficos Bibliométricos dos dados brutos. 1.643 (foram retirados os repetidos)*
Realizar Bibliometria

Biblioshiny ()

ϯ – Analisar Bibliometria no
browse Biblioshiny() e obter
1.643*
dados bibliométricos primários
Excel com Ordinatio

5 - Excluir papers de acordo 8 - Excluir papers após

4 - Importar dados do arquivo CSV no R com critérios complementares 6 - Excluir papers leitura do texto, obtendo
(Planilha)

Studio, ajustar dados e classificar do protocolo (Ex.: número de após leitura de lista de papers que irão
conforme Ordinatio citações, somente papers, FI Título e Resumos compor o portfolio final
no JCR, valor de Ordinatio) da Systematic Review Dados
bibliométricos
1.643* 280* 42*
35* obtidos
Periódicos Capes,
Google Scholar e

7 - Baixar papers
outros

selecionados 42*

75
cope.ufes.br
 Quantidade típica de referências em Revisão Sistemática nas áreas de
Business e Computer Science (2018 à 10/3/2020)
Busca no Scopus:( TITLE-ABS-KEY ( "systematic review*" OR "systematic Literature review" OR "systematic mapping stud*" ) AND DOCTYPE ( ar )
AND PUBYEAR > 2017 AND ( LIMIT-TO ( SUBJAREA , "COMP" ) OR LIMIT-TO ( SUBJAREA , "BUSI" ) )
Quantidade : 1.927 papers. Destes, 420 com até 50 referências.
Média: 86 referências (máx. de 245) Desvio padrão: 46 Moda: 63

76
cope.ufes.br
Referências
ARIA, Massimo; CUCCURULLO, Corrado. Bibliometrix: An R-tool for comprehensive science mapping analysis.
Journal of Informetrics, v. 11, n. 4, p. 959–975, 2017.
BALDAM, Roquemar. Science Mapping (Bibliometria) with R Studio, Bibliometrix and international indexes. Ufes:
Vitória, 2020. Disponible: http://cope.ufes.br. Access: 10/06/2020.
FERREIRA, Adésio. Notas de aula Programação em R. Alegre: Ufes, 2020.
KITCHENHAM, Barbara; CHARTERS, Stuart. Guidelines for performing systematic literature reviews in software
engineering. Technical report, Ver. 2.3 EBSE Technical Report. EBSE, 2007.
MUNN, Zachary et al. What kind of systematic review should i conduct? A proposed typology and guidance for
systematic reviewers in the medical and health sciences. BMC Medical Research Methodology, v. 18, n. 1,
p. 1–9, 2018.
PAGANI, Regina Negri; KOVALESKI, João Luiz; RESENDE, Luis Mauricio. Methodi Ordinatio: a proposed
methodology to select and rank relevant scientific papers encompassing the impact factor, number of
citation, and year of publication. Scientometrics, v. 105, n. 3, p. 2109–2135, 2015.
SANTOS, Paulo. Novo Qualis Periódicos - Palestra (2020). Disponível em: https://www.youtube.com/CPGSS.
Acesso em: 20/08/2020.
TARDIN, Matheus. Bibliometrics: Class Notes. Vitória: Ufes, 2018. 77
cope.ufes.br
Fim do Workshop

Muito Obrigado

ROQUEMAR BALDAM
ROQUEMAR3@GMAIL.COM
(55) 27 – 99223-1561
COPE.UFES.BR

78