Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics.

Esta é a versão do autor que não foi totalmente editada e

Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO 1

Estudando a Influência de Estímulos Multissensoriais em

um Ambiente Virtual de Treinamento de Combate a Incêndio
David Narciso, Miguel Melo, Susana Rodrigues, João Paulo Cunha, Member, IEEE, José
Vasconcelos-Raposo e Maximino Bessa

Resumo—A forma como percebemos e experimentamos o mundo ao nosso redor é inerentemente multissensorial. A maior parte da literatura de
Realidade Virtual (RV) é baseada nos sentidos da visão e da audição. No entanto, existe um grande potencial para a integração de estímulos
adicionais em Ambientes Virtuais (VEs), especialmente em um contexto de treinamento. A identificação dos estímulos relevantes para a obtenção de uma
experiência virtual perceptivamente equivalente a uma experiência real levará os utilizadores a comportar-se da mesma forma em todos os ambientes, o
que acrescenta um valor substancial para várias áreas de formação, como bombeiros. Neste artigo, apresentamos um experimento com o objetivo
de avaliar o impacto de diferentes estímulos sensoriais no estresse, fadiga, cybersickness, presença e transferência de conhecimento dos usuários
durante um treinamento de VE de bombeiro. Os resultados sugerem que o estímulo que impactou significativamente na resposta do usuário foi o uso
de uniforme de bombeiro e a combinação de todos os estímulos sensoriais estudados: calor, peso, uniforme e máscara. Os resultados também
mostraram que o AV não induziu o cybersickness e foi bem-sucedido na tarefa de transferir conhecimento.

Termos de indexação —computação gráfica, realidade virtual, treinamento profissional, biofeedback

—————————— • ——————————

1 INTRODUÇÃO

T formação de profissionais é uma área amplamente explorada

na literatura de Realidade Virtual (RV), o que não surpreende,
pois foi um dos propósitos iniciais que levaram à sua
desenvolvimento [1]. A RV oferece várias vantagens sobre o
treinamento tradicional, sendo a mais relevante a redução de custos
e riscos [2], [3]. Para bombeiros e outros serviços de emergência, o
potencial da RV é muito elevado, dada a necessidade que têm de
treinar frequente e repetidamente para obter e manter as suas
competências, algo que nem sempre é possível com a formação
tradicional [4].
Uma limitação da literatura atual é que o componente multissensorial
é frequentemente deixado de lado. A maioria dos trabalhos aborda o
treinamento de profissionais com RV utilizando apenas estímulos
visuais e auditivos. No entanto, a entrega de um ou mais estímulos
específicos pode ser a chave para desencadear uma resposta
emocional e fisiológica semelhante à exibida no mundo real. Estudar
o impacto de diferentes estímulos sensoriais no treinamento de
Ambientes Virtuais (EV) contribui
à literatura, permitindo que trabalhos futuros aprimorem o
conhecimento obtido e alcancem AVs que possam formar
profissionais com a mesma eficácia do mundo real.
Este artigo apresenta os resultados de um estudo com usuários cujo
objetivo foi avaliar a influência de diferentes estímulos sensoriais,
entregues individualmente e em combinação, no estresse mental,
fadiga mental, cybersickness, senso de presença e transferência de
conhecimento do usuário
————————————————
durante um Ambiente Virtual (AV) de um exercício de treinamento
de bombeiro. Para avaliar a influência dos estímulos nas variáveis,
foram utilizadas métricas subjetivas, nomeadamente questionários,
e uma métrica objetiva, a Heart Rate Variability (HRV) do utilizador.
O objetivo do HRV foi avaliar objetivamente o estresse do usuário
em diferentes períodos do experimento. A VFC foi extraída dos
eletrocardiogramas (ECG) registrados durante o experimento, e sua
avaliação foi baseada na análise de cinco parâmetros da VFC. Esta
análise consistiu em calcular a diferença percentual dos valores dos
parâmetros entre dois períodos e verificar a tendência de cada
parâmetro, ou seja, se aumentou ou diminuiu entre os dois períodos.
A Tabela 1 descreve os cinco parâmetros da VFC considerados e
sua tendência sob estresse, segundo Castaldo et al. metanálise [5].
O principal objetivo deste trabalho foi identificar o impacto de
diferentes estímulos na resposta do utilizador durante um treino de
EV de bombeiros. Os autores focaram no usuário
resposta ao estresse porque o exercício de treinamento normalmente
gera estresse em seus participantes. O aumento do estresse causado
pela adição de estímulos multissensoriais é considerado um resultado
positivo, pois torna a resposta do usuário no EV mais próxima da do
mundo real. Em um cenário ideal,
seríamos capazes de recriar o mesmo tipo de estresse do mundo
real. Isso possibilitaria ao usuário repetir o treinamento quantas vezes
quisesse, ficando repetidamente exposto ao estresse até chegar a
um ponto em que se acostuma e aprende a lidar melhor com ele.

• D. Narciso, J. Vaconcelos-Raposo e M. Bessa são da Universidade de Trás-os-

O estudo de caso deste artigo é um exercício de formação para
Montes e Alto Douro (UTAD). Quinta de Prados 5000-801 Vila Real - Portugal. bombeiros cujo objetivo é demonstrar diferentes situações de incêndio
Email: davidnarciso@utad.pt, jvraposo@utad.pt, maxbes sa@utad.pt que podem ocorrer em incêndios urbanos e industriais.
Este é um exercício que costuma causar estresse, pois exige que os
• Todos os autores são do Instituto de Engenharia de Sistemas e Computadores,
Tecnologia e Ciência (INESC TEC). Rua Dr. Roberto Frias 4200-465 Porto – participantes estejam próximos ao perigo do incêndio.
Portugal. E-mail: mcmelo@inesctec.pt, susa Adicionalmente, este exercício é realizado com bombeiros em formação, o que
na.c.rodrigues@inesctec.pt, contribui para a geração • JP Cunha está na Faculdade de Engenharia da
Universidade do Porto de stress por ser a primeira vez que enfrenta uma situação
de incêndio pela (FEUP). Rua Dr. Roberto Frias 4200-465 Porto – Portugal. E-mail: jpcu
Uso licenciado autorizado limitado a: UNIVERSIDADE FEDERAL DE SAO
PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas. nha@fe.up.pt
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
xxxx-xxxx/0x/$xx.00 © 200x IEEE Publicado pela IEEE Computer Society
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

2 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

TABELA 1. DESCRIÇÃO DAS VARIÁVEIS DE VFC UTILIZADAS E SUA TENDÊNCIA SOB ESTRESSE [5]

Domínio Variável Descrição Tendência sob estresse (N = 758)

Tempo AVNN Média de intervalos de distância de tempo de batimento normal a normal (NN) (ms) ÿ
SDNN Desvio padrão dos intervalos NN (ms) ÿÿ
RMSSD Raiz quadrada média das diferenças de intervalos NN sucessivos (ms) ÿ
pNN20 Proporção de variações de NN acima de 20 ms (%) ÿ
Frequência LF / HF Relação das bandas de potência de frequência LF e HF ÿ

muitos. Devido à logística envolvida na realização do exercício, geralmente
é realizado uma vez ao ano para treinar os recrutas. No entanto, sua
realização não é garantida, resultando em
recrutas que terminam o treinamento sem ter o primeiro contato com uma
situação de incêndio urbano.
Com este artigo, os autores esperam contribuir para a criação de
ferramentas de RV que possam ajudar não só os bombeiros, mas os
serviços de emergência, em geral, a estarem melhor preparados e a
aumentar a sua prontidão operacional.
uma moda individual ou combinada (por exemplo, [10]–[12]). Em relação
à resposta do participante, a maioria dos trabalhos usa o senso de
presença do usuário (ou seja, o senso psicológico de estar no AV e modos
de comportamento correspondentes [13]) ou o desempenho do usuário
em uma determinada tarefa como forma de avaliar o impacto de um ou
mais estímulos sensoriais [14]. Neste trabalho, focamos no senso de
presença dos usuários para avaliar o impacto dos diferentes estímulos
porque é o padrão atual na literatura para avaliar a eficiência ou qualidade
de um EV [15], [16].

2 TRABALHO RELACIONADO
Na literatura, nenhum estudo inclui um número semelhante de estímulos
e estuda sua influência individual e combinada na sensação de presença
e na resposta cardíaca do participante. Para facilitar a contextualização
da literatura, a inclusão de trabalhos relacionados é separada em dois
temas principais que reunimos neste trabalho: estimulação multissensorial
em VEs e a influência de um VE na Frequência Cardíaca (FC) ou VFC
dos participantes.
Antes dos trabalhos relacionados com a estimulação multissensorial,
consideramos relevante referir dois trabalhos recentes que abordam o
estado das tecnologias de RV no treino de bombeiros. O primeiro é
Engelbrecht et al. [6], onde foi realizada uma análise dos pontos fortes,
fracos, oportunidades e ameaças no domínio da RV para a formação de
bombeiros. Nesta análise, os autores mostraram que, embora a RV tenha
várias vantagens no treinamento de bombeiros e a literatura apresente
achados promissores, ainda existem limitações que precisam ser
abordadas. A tecnologia ainda enfrenta limitações técnicas e mais
pesquisas são necessárias para estabelecer métodos de transferência de
habilidades de VR para cenários da vida real. Ainda assim, os autores
argumentam que, devido à baixa barreira de entrada, a tecnologia está a
caminho de encontrar aplicações em departamentos ao redor do mundo.
O segundo trabalho relevante é de Wheeler et al. [7], onde os autores
revisaram
a RV de última geração aplicada ao treinamento de bombeiros com foco
em fatores humanos e resultados de aprendizagem. Embora o número
de trabalhos incluídos tenha sido pequeno, os autores mencionam que a
RV tem alta validade ecológica, o que é promissor para fins de pesquisa
e treinamento. Os autores defendem ainda que os desenvolvimentos nos
últimos anos no espaço imersivo da RV permitem ultrapassar algumas
das limitações identificadas nos trabalhos existentes e que, em linha com
a análise feita por Engelbrecht et al. [6], são necessárias mais pesquisas
sobre a eficácia do treinamento usando tecnologias de RV.
Até onde sabemos, Dinh et al. [17] foi o primeiro trabalho na literatura a
investigar o efeito de estímulos multissensoriais sobre a resposta do
participante em um AV. Os autores realizaram um experimento com 322
participantes cujo objetivo foi avaliar o impacto das pistas táteis, olfativas,
auditivas e visuais na sensação de presença e memória de objetos do
participante em um AV. Os resultados indicaram que o aumento de
estímulos afetou positivamente a percepção de Presença e a memória
de objetos no AV. A adição de pistas auditivas e táteis mostrou um efeito
significativo, enquanto a adição de pistas olfativas mostrou uma tendência
não significativa, mas positiva. Surpreendentemente, a qualidade das
pistas visuais não teve impacto na percepção de Presença dos
participantes. Considerando os resultados, Dinh et al. [17]
concluiu que a adição de estímulos sensoriais, exceto para estímulos
visuais, parece funcionar em um flash aditivo direto no sentido de
Presença. Outro estudo sobre estimulação multissensorial em EVs é o
de Fröhlich e Wachsmuth [18]. Para entender o efeito dos estímulos
multissensoriais no senso de presença dos participantes, os autores
conduziram um estudo no qual 80 participantes foram divididos em quatro
grupos, cada um representando uma combinação diferente de estímulos
multissensoriais em um ambiente virtual imersivo. Esses estímulos foram
audiovisuais e hápticos (vento e objetos estáticos), sendo a Presença
avaliada subjetivamente, por meio de questionário, e objetivamente, por
meio da FC e condutância cutânea. Tanto os resultados do questionário
quanto as respostas fisiológicas sugerem uma redução da Presença com
a adição de apenas um estímulo (auditivo
ou háptico) e um aumento na Presença com a adição de todos os
estímulos. Fröhlich e Wachsmuth [18] argumentaram que adicionar apenas
um estímulo pode ter aumentado as expectativas dos usuários, causando
um efeito negativo na Presença. Além disso, os resultados sugerem que
a adição de estímulos multissensoriais pode não funcionar de maneira
aditiva direta, como Dinh et al. [17] concluiu.

Mais recentemente, temos os trabalhos de Shaw et al. [19]

A inovação deste trabalho, além do relativo e Guilherme et al. [20]. O primeiro apresentou um grande número de estímulos em estudo, é o individual e
imment com 43 usuários cujo objetivo era explorar o
estudo combinado do impacto de diferentes estímulos por influência da adição de estímulos (calor e cheiro) nas respostas dos participantes. A maioria
dos trabalhos no comportamento do usuário litera durante uma evacuação de incêndio VE. Os resultados concentram-se na influência de um único
estímulo (por exemplo, [8], mostrou que as ações dos usuários foram influenciadas pelo addi [9]). Aqueles que abordam mais de um estímulo o fazem
SAO
em PAULO.
Uso licenciado
Baixadoautorizado
em 27 delimitado
julho dea:2023
UNIVERSIDADE
às 00:06:32 UTC
FEDERAL
do IEEE
DEXplore. Restrições aplicadas. © 2023 IEEE. O uso pessoal é permitido, mas a
republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO 3

Figo. 1. Ilustração da linha do tempo do experimento e como o ambiente e o momento dos IVs são distribuídos.

ção de estímulos, levando os autores a concluir que a adição de várias estudos.

modalidades sensoriais tem um potencial significativo neste tipo de O uso bem-sucedido da FC em um VE foi demonstrado por Meehan et al.
treinamento. Este último realizou uma experiência com 37 participantes [16]. Neste estudo, 95 participantes foram expostos a VE indutor de
cujo objetivo foi estudar o impacto de estímulos multissensoriais no estresse, que apresentou uma situação de poço virtual, para estudar a
sentido de Presença e cybersickness, medido através de questionários, influência de exposições múltiplas, tiques táteis passivos e taxa de
num VE credível. Os participantes foram divididos em três condições: quadros na FC dos participantes. Os resultados mostraram que a RH foi
audiovisual (controle), audiovisual mais háptico passivo (objeto estático) capaz de distinguir participantes de diferentes condições, apoiando assim
e multissensorial, onde além dos estímulos audiovisuais, foram o uso da RH para monitorar as respostas dos usuários aos AVs
adicionados estímulos hápticos (objeto estático, vento e vibração) e estressantes. Com 11 participantes e dois VEs, um demonstrando um
olfativos. Os resultados mostraram que a condição multissensorial cenário de direção e outro de voo, Jang et al. [24] realizado
aumentou significativamente o envolvimento (uma subescala de Presença)
e que nenhuma das condições mostrou diferenças significativas na um experimento onde a VFC dos participantes foi comparada entre os
doença cibernética. Com base nos resultados, Gonçalves et al. [20] dois ambientes. Apesar de não haver diferenças significativas entre os
levantou a hipótese de que o aumento da Presença em um VE confiável ambientes, os resultados mostraram que ambos causaram um aumento
pode ser menos perceptível do que em um VE não confiável e concluiu significativo no parâmetro LF/HF. Jang et ai. [24] argumentaram que esse
que a adição de estímulos multissensoriais em um AV confiável não aumento foi causado pela exposição a um novo estímulo e, como tal,
influencia o cybersick dos participantes poderia ser usado para monitorar as reações dos usuários aos VEs.
Resultado semelhante foi obtido por Zimmons et al. [25]. Os autores
expuseram 55 participantes a A literatura é limitada em relação a estudos
ness. multissensoriais no mesmo ambiente estressante de [16] para estudar a
estimulação ry em VEs. Além disso, os que existem mostram influência da qualidade visual na FC dos participantes. Os re resultados bastante
diferentes, o que dificulta a elaboração de resultados, não mostraram diferenças significativas entre as conclusões conclusivas sobre este tópico.
Duas edições recentes de revisões de literatura. No entanto, causou um aumento significativo em [14], [21] sobre a influência de estímulos sensoriais
na experiência de RV na FC em comparação com uma fase anterior do experimento, onde as experiências revelam que, apesar do aumento dos
custos e da complexidade, os participantes realizaram uma tarefa de maneira não -Estressante VE.

ty, a adição de estímulos sensoriais parece ter uma posição usando um AV que apresentou uma cena barulhenta, Slater et al.
impacto positivo em VEs imersivos. Ambas as revisões também con [26] conduziram um estudo com 20 participantes para investigar se os estímulos
hápticos são os mais explorados após o áudio se a FC e a VFC de um participante podem ser usadas para sinalizar os ovisuais, o que é consistente
com outros estudos nas mudanças em um VE. Os resultados mostraram que a literatura de FC e HRV [11] e que estímulos olfativos e gustativos
distinguiam com sucesso diferentes momentos da experiência são pouco explorados, mas podem trazer valor significativo à aplicação, levando os
autores a argumentar que os cátions do usuário de RV.
a resposta cardíaca pode ser usada para monitorar sua reação a VE.
Para investigar a influência de um VE não estressante na resposta ac, a literatura apresenta alguns estudos onde a VFC dos participantes, Brogni et
al. [27] realizaram um estudo sobre a influência de um VE na VFC dos participantes ou simplesmente FC
com 40 participantes onde foi estudada a VFC dos participantes. O
primeiro trabalho que encontramos sobre o assunto foi uma comparação entre diferentes condições visuais do Dillon et al. [22]. Os autores realizaram
um experimento VE e entre diferentes momentos do experimento. onde o formato e o conteúdo da mídia apresentados em Similar a Jang et al. e
Zimmons et ai. [24], [25], alt VE variou entre 119 participantes. Durante a experiência,
embora a VFC não tenha sido capaz de mostrar diferenças entre a FC
dos participantes foi medida, tendo mostrado condições, foi capaz de mostrar diferenças significativas entre os
conteúdos de mídia, mas não entre mim entre os diferentes momentos do experimento. Os formatos au dia, levando os autores a concluir que os
usuários argumentaram que esse foi um resultado positivo porque a plenitude dessa medida era limitada. Também visando partidários sugeriu que
HRV pode ser usado para monitorar os participantes
ipants' HR, Wiederhold et al. [23] realizaram um estudo de comportamento em um VE.
quais 79 participantes foram expostos a um VE que simula Para estudar o impacto do realismo de um VE nos participantes
ed um vôo de avião. Os autores buscaram uma VFC percentual, Slater et al. [28] realizaram um estudo com 33 participantes com alteração na FC
entre participantes fóbicos e não fóbicos. O nível de realismo foi variado com calças de raios recursivas. No entanto, os resultados mostraram que a
FC não casting e ray tracing, duas técnicas de iluminação. O VE distingue entre
os grupos e que a FC dos participantes apresentou uma situação estressante semelhante a [16], sendo que os valores foram menores quanto maior a
sensação de Presença. Os resultados mostraram que a VFC variou significativamente entre Esses resultados levaram os autores a mencionar que
condições mais sensíveis, indicando um maior nível de estresse com as medidas rativas, como a VFC, devem ser usadas em técnicas de iluminação
de rastreamento semelhantes. A fim de fornecer mais Autorizado uso licenciado limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em
27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

4 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

Com base nesses resultados, um segundo estudo com 21
participantes foi realizado [29]. Teve como objetivo verificar se o
aumento de tensão foi causado pela técnica do raio ou pelos efeitos
dinâmicos proporcionados na condição de ray tracing. Desta vez,
os autores usaram um VE não estressante, apresentando um
cenário de biblioteca, e ambas as técnicas de iluminação forneceram
os mesmos efeitos dinâmicos (sombras e reflexos). Os resultados
não mostraram diferenças significativas entre as condições, levando
os autores a concluir que o estresse no primeiro estudo foi causado
pela adição de efeitos dinâmicos e não pela técnica de iluminação.
objetivos específicos: comparar a VFC dos participantes (estresse
mental medido objetivamente), estresse percebido (estresse mental
medido subjetivamente), fadiga percebida, doença cibernética,
senso de Presença e transferência de conhecimento entre diferentes
condições multissensoriais do VE; e comparar as mesmas variáveis
(exceto Presença) entre dois momentos diferentes do experimento.
Este último objetivo foi inspirado por alguns dos trabalhos
relacionados apresentados nesta seção [25]–[27], onde HR e HRV
foram capazes de mostrar diferenças entre diferentes momentos da
experiência.

Com um VE que apresentava um cenário de direção, Deniaud et al.

[30] realizaram um estudo com 14 participantes para estudar a
influência do realismo visual e do grau de visibilidade na VFC dos
participantes. Os resultados mostraram diferenças significativas na
VFC entre os diferentes níveis de realismo visual, mas não entre os
diferentes graus de visibilidade.
Um último trabalho relacionado que desejamos incluir é o de Egan
et al. [31]. Os autores realizaram um estudo com 33 participantes
para avaliar a influência do método de visualização na FC dos
participantes. Neste estudo, dois métodos foram comparados, RV
vs não RV. Os resultados mostraram que a FC não apresentou
diferenças significativas entre as condições.
Este resultado é consistente com Dillon et al. [22] porque o RH não
parece ser capaz de distinguir diferentes formatos de mídia. A
resposta cardíaca dos usuários, ou seja, HR ou HRV, pode ser
usada para monitorar sua reação a um VE. Além disso, a literatura
sugere que melhores resultados são obtidos quando o VE apresenta
uma situação estressante, como em um cenário de cava virtual [16].
3 MATERIAIS E MÉTODOS
Este artigo apresenta um estudo transversal comparativo que segue
um desenho de sujeitos mistos, conforme descrito a seguir.
3.1 Etiquetas
As variáveis independentes (IV) deste estudo são Estímulos,
Ambiente e Momento. O estímulo é um fator intersujeito composto
por seis níveis: audiovisual, audiovisual + cheiro, audiovisual + calor,
audiovisual + peso, audiovisual + uniforme, audiovisual + máscara
e audiovisual + estímulos combinados. Escolhemos focar na
influência de diferentes estímulos sensoriais separadamente, em
vez de uma abordagem cumulativa. Com base nos objetivos e
abrangência do estudo, consideramos mais relevante estudar a
influência dos estímulos escolhidos para cada grupo face ao setup
mais comum nos sistemas de RV – o audiovisual, e também para
evitar efeitos de confusão criados por a interação de diferentes
estímulos.

O trabalho que aqui apresentamos surge no decurso de um trabalho O ambiente e o momento são fatores internos aos sujeitos. A
de investigação mais alargado que temos vindo a desenvolver sobre variável de ambiente inclui a linha de base e o VE do exercício,
a influência dos estímulos multissensoriais no treino de bombeiros. enquanto o momento inclui três níveis: início, meio do experimento
Em trabalho anterior, Narciso et al. [32] compararam o VE e o e pós-experimento. Ambos os IVs Ambiente e Momento referem-se
exercício de treinamento utilizado neste estudo com o mesmo a períodos diferentes do experimento. Figo. 1 apresenta uma linha
treinamento no Ambiente Real (RE). Ele também usou os participantes do tempo que ilustra como eles são distribuídos ao longo do
HRV, complementada com questionários, para avaliar a influência experimento.
dos ambientes. Os resultados sugeriram que ambos os ambientes Ambiente refere-se aos períodos em que foi realizada a análise da
influenciaram positivamente o conhecimento adquirido, nenhum VFC e momento refere-se ao preenchimento dos questionários.
deles influenciou o estresse percebido ou a fadiga e que os
participantes exibiram sinais de estresse em ambos, As variáveis dependentes (DV) são estresse (observado através dos
embora com menor intensidade no VE. Além disso, os resultados parâmetros de VFC AVNN, SDNN, RMSSD, pNN20 e LF/HF; ver
mostraram que, em geral, o senso de presença era alto e que não Tabela 1), estresse percebido, fadiga percebida, cybersickness,
havia sintomas de cybersickness. Presença e transferência de conhecimento. A presença DV
Com base nisso, concluímos que o VE proporcionou um treinamento compreende quatro subescalas: Presença espacial, realismo,
eficaz, embora menos eficaz que o ER. Em nosso estudo anterior, envolvimento e Presença geral. O cybersickness DV consiste em
precisávamos usar bombeiros para que fosse possível realizar o quatro subescalas: náusea, desconforto oculomotor, desorientação
e, acima de tudo, cybersickness. Para referência, o máximo teórico
exercício em um ambiente real.
No entanto, uma limitação do estudo foi a impossibilidade de reunir de cada subescala de cybersickness é o seguinte: náusea –
uma amostra tão grande de bombeiros para estudar a influência dos
200,34; desconforto oculomotor – 159,18; desorientaçao -
estímulos individualmente. Para atingir esse objetivo, realizamos o
presente estudo, retirando o RE e, 292,32; ciberdoença geral - 235,62.
portanto, a necessidade do uso de bombeiros. Para tanto, utilizamos
3.2 Amostra
a VFC dos participantes e uma situação estressante, um exercício
A amostra foi inicialmente composta por 98 participantes, 14 por
de treinamento de combate a incêndio. Este trabalho pretende
condição. No entanto, 7 participantes foram solicitados a interromper
responder à questão de investigação: “Qual o impacto individual e
o experimento devido à configuração incorreta de defeitos no
combinado dos estímulos multissensoriais na resposta dos
registro dos ECGs.
participantes durante um treino de AV de bombeiro?”. Para ajudar a
responder
licenciado a essa pergunta,
autorizado limitado definimos as seguintes
a: UNIVERSIDADE spe UsoDE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restri
FEDERAL
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO 5

cise;
4. Uma versão portuguesa [35] do Igroup Presence Questionnaire
(IPQ) [36], um questionário de 14 itens que mede a Presença
dos utilizadores numa AV utilizando quatro subescalas:
Presença espacial, realismo experienciado, envolvimento e
Presença global;
5. Finalmente, uma versão em português do Simulator Sickness
Questionnaire (SSQ) [37], um questionário de 16 itens que
mede o cybersickness dos usuários usando quatro
subescalas: náusea, desconforto oculomotor, desorientação
e cybersickness geral. Os cálculos originais foram usados
para calcular cada subescala, conforme descrito em [38].

Figo. 2. Distribuição dos participantes pelas condições.
A amostra resultante compreendeu 91 participantes (55 homens, 36
mulheres) com idades compreendidas entre os 18 e os 44 anos (M =
24,31, DP = 4,84). Todos os participantes relataram visão normal (N =
52) ou corrigida para normal (N = 39), e todos os participantes
relataram audição normal. Dos 91 participantes, 37 relataram ter
concluído o ensino médio e 54 relataram ter concluído o ensino
superior. Em relação à experiência com o computador, 3 relataram
sua experiência como básica, 18 como intermediária, 47 como boa e
23 como excelente. Em relação à experiência anterior com RV, 14
relataram sua última experiência há menos de uma semana, oito
entre uma e duas semanas antes, dois entre duas semanas e um mês
antes, 47 há mais de um mês e 20 relataram nunca ter experimentado
RV. Nenhum dos participantes era bombeiro ou tinha treinamento de
bombeiro.
Houve o cuidado de equilibrar os grupos quanto ao número e ao
sexo. A distribuição resultante é mostrada na Fig. 2.
3.3 Instrumentos
Sete instrumentos foram usados para medir as variáveis dependentes
deste estudo:
1. Um conjunto de parâmetros de VFC para avaliar objetivamente
estresse dos participantes em diferentes momentos do
experimento;
2. Visual Analogue Scales (VAS) [33], [34] (escalas de um item,
para avaliar a percepção momentânea de fadiga e estresse;
3. Um questionário de conhecimento, um questionário de múltipla Todos os participantes realizaram as mesmas tarefas,
escolha de 7 itens que mede a transferência de conhecimento independentemente da condição do estudo. O exercício não envolveu
possibilitada pelo exercício de treinamento
Além disso, um questionário sociodemográfico foi aplicado antes do
experimento para obter dados como idade, sexo e nível de experiência
com RV.
3.4 Ambientes Virtuais
Dois VEs foram usados neste experimento, um para acostumar os
participantes à tecnologia VR e outro para realizar o exercício de
treinamento de combate a incêndio (Fig. 3). A primeira, denominada
"habituação VE", teve duração de cinco minutos. Seu objetivo era
acostumar o usuário à tecnologia, principalmente ao uso do HMD, à
forma de se movimentar no VE e receber instruções (visuais, orais e
textuais).
O segundo, denominado "exercício VE", durou cerca de 20 minutos.
Seu objetivo era replicar um exercício de treinamento de bombeiro do
mundo real para expor os recrutas a condições que comumente
ocorrem em incêndios urbanos e industriais. Este exercício ocorre em
um contêiner de transporte para simular um compartimento fechado.
Durante o exercício, o comandante, juntamente com bombeiros
experientes, controla o incêndio
e dá ordens para que os estagiários mudem de posição para que
todos experimentem a frente de calor e façam pequenas tarefas como
levantar um braço ou sentar para sentir a diferença de temperatura.
Em ambos os VEs, o cenário utilizado foi uma réplica virtual de um
centro de treinamento de combate a incêndio do mundo real. No
ambiente de habituação os participantes atuaram sozinhos e no
exercício VE realizaram o exercício com vários personagens virtuais:
sete estagiários, um comandante e dois bombeiros que auxiliaram no
exercício.
movimento pesado, que é conhecido por influenciar a VFC. o mesmo vir

Figo. 3. Capturas de tela de demonstração do VE de habituação (esquerda) e exercício (direita). As imagens foram manipuladas na exposição para fins ilustrativos.
Uso licenciado autorizado limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

6 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

o corpo inteiro foi usado para cada participante, e apenas o
tamanho foi ajustado com base na altura do participante. No
questionário de conhecimento foi solicitado aos participantes:
que descrevessem um fenômeno de incêndio conhecido como
plano neutro; por que é importante identificá-lo corretamente;
como estão as temperaturas acima do plano neutro; quando a
válvula reguladora deve ser equipada; o que acontece quando
um ataque indireto às chamas é feito; por último, o que
acontece quando a combustão é alimentada com ar fresco e
quando é restringida de ar fresco.
3.5 Materiais e Aparelhos
Diferentes tipos de equipamentos foram usados, alguns dos
quais foram usados em todas as condições, enquanto outros
foram usados em uma condição particular para fornecer um
estímulo específico. O equipamento comum a todas as
condições foi um HTC VIVE HMD, auscultadores Bose
QuietComfort 25 com tecnologia de cancelamento de ruído,
luvas e sapatilhas equipadas com marcadores refletores e
VitalJacket. O HMD de estímulos visuais de fígados e estímulos auditivos
Os refletores nas mãos e nos pés contribuem para os estímulos
visuais, permitem que os membros sejam detectados e seus
movimentos traduzidos no VE por meio de um processo
conhecido como cinemática inversa. Para a detecção dos
refletores, foi utilizado um sistema de captura de movimento
OptiTrack composto por 12 câmeras OptiTrack Prime 13. Por
fim, o Vital Jacket® [23] foi utilizado em todas as condições para em cada condição dos estímulos IV.
coleta de dados fisiológicos. Consiste em uma plataforma de
biomonitoramento vestível na forma de uma camiseta que pode
capturar exames de ECG de nível médico em tempo real.
O equipamento restante foi usado para entregar os diferentes
estímulos. Na condição audiovisual + cheiro, o cheiro foi
entregue através de um sistema de aroma SensoryCo SmX-4D.
O cheiro utilizado é designado pelo fabricante como madeira
queimada. A equipe de pesquisa calibrou esta máquina para
evitar a saturação de odor, resultando em uma entrega de cheiro deexplicou como equipar o VitalJacket® e
Rajadas de 0,5 segundo a cada 30 segundos. Na condição
audiovisual + calor, o estímulo térmico foi fornecido por meio do
ar condicionado da sala experimental e de um aquecedor
ventilado. O ar condicionado da sala foi colocado em sua
temperatura máxima, 29º, e o aquecedor foi colocado em um
local específico da sala experimental para simular
consistentemente a fonte de calor emanada do fogo apresentado
no exercício VE. Na condição audiovisual + peso, o estímulo de
peso foi adicionado solicitando aos participantes que colocassem
nas costas um Aparelho Respiratório Autônomo (SCBA), um
equipamento usado pelos bombeiros para poder ficar perto do
fogo sem inalar os gases tóxicos criado por ele. Este
equipamento consiste em uma mochila que suporta um ou dois
cilindros de oxigênio. Na condição audiovisual + uniforme, o
estímulo consistiu em equipar um uniforme de bombeiro,
incluindo o SCBA. Na condição audiovisual + máscara, o
participante equipou o SCBA e um respirador meia-máscara
MSA Advantage 410, que permitia respirar o ar comprimido dos
cilindros. Uma meia-máscara teve que ser usada, pois a parte
superiordedo
fones
rostodedos
ouvido.
participantes estava coberta pelo HMD.
Além disso, a máscara teve que ser modificada para ser
compatível com o SCBA. Por fim, na condição audiovisual +
combinado, todos os equipamentos foram utilizados
simultaneamente, exceto o sistema de aroma. Os participantes
não seriam capazes de cheirar porque inalaram o oxigênio do
SCBA. Figo. 4 apresenta os diferentes equipamentos utilizados
3.6 Procedimento Experimental
O experimento começou fornecendo ao participante uma breve
explicação do experimento sem revelar seu propósito para evitar
viés. Então, se o participante concordasse em participar, ele
assinaria um termo de consentimento informado declarando
que concordava em participar. Ao assinar, o pesquisador

Figo. 4. Diferentes equipamentos utilizados em cada grupo. Da esquerda para a direita, de cima para baixo, audiovisual (condição de controle), audiovisual + cheiro,
audiovisual + calor, audiovisual + peso, audiovisual + EPI, audiovisual + SCBA, audiovisual + estímulos combinados.
Uso licenciado autorizado limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO 7

guiou o participante para uma sala separada onde eles
iria equipar o colete em sua privacidade.
O participante então preencheria o pré-questionário, composto pelos
questionários sociodemográfico, EVA de fadiga e estresse, cybersickness
e conhecimento.
Preenchido o pré-questionário, o participante realizava a medida basal.
Ele/Ela foi solicitado a permanecer sentado por 15 minutos enquanto
ouvia um clipe de áudio relaxante. O objetivo da linha de base era
comparar os valores de VFC dos participantes em um estado calmo e
relaxado com os apresentados durante o VE, daí a importância de ter
uma duração semelhante.
Após a medida de linha de base, o participante equipou o HMD, fones de
ouvido, envoltórios e luvas e realizou o VE de habituação (descrito na
seção III.D).
Terminada a EV de habituação, o participante retirava o equipamento e
preenchia novamente o questionário VAS e cybersickness para obter sua
percepção de fadiga e estresse antes da EV de exercício. Em seguida, o
participante colocava o equipamento utilizado para o VE de habituação e
equipamentos adicionais de RV dependendo da condição em estudo.
Depois de equipado, o participante realizava o exercício VE. Após o
exercício VE, o participante preencheu um pós-questionário composto
pelos questionários VAS de fadiga e estresse, presença, cybersickness e
conhecimento. Após o preenchimento do questionário, a última tarefa dos
participantes foi retirar o VitalJacket®. O procedimento durou em média
1 hora e 15 minutos por participante.
3.7 Procedimento de VFC
Para extrair os parâmetros de VFC, foi utilizado um software de análise
de ECG da Bio-Devices SA [39]. Este software foi utilizado para detectar
os pontos "R" da forma de onda do ECG e extrair o intervalo RR, ou seja,
o tempo entre dois picos "R" consecutivos no ECG. Os intervalos RR
foram verificados se estavam fisiologicamente corretos, conforme Clifford
et al. [40]. Os intervalos RR com aceitação fisiológica foram denominados
intervalos normais a normais (NN). Por fim, para seguir as diretrizes da
força-tarefa da Sociedade Européia de Cardiologia e da Sociedade Norte-
Americana de Estimulação e Eletrofisiologia [41], diferentes parâmetros
de domínio espectral e tempo de VFC foram usados neste estudo
(consulte a Tabela 1 para lista e descrição dos parâmetros de VFC
utilizados).
Conforme recomendado por [41], os parâmetros da VFC foram calculados
em intervalos de cinco minutos. Isso significa que, para cada participante,
foram calculados três intervalos de cinco minutos na linha de base e
outros três no VE. Embora a EV tenha uma duração maior (cerca de 20
minutos), optamos por fazer uma comparação balanceada, utilizando um
total de 15 minutos de análise para cada momento. A VFC foi analisada
qualitativamente, com base na diferença percentual entre a média de
cada parâmetro durante a linha de base e a média de cada parâmetro
durante o VE, e para verificar se cada parâmetro seguiu sua tendência
sob estresse [5] ou não.
percepção de estresse foram analisadas por meio da realização de
ANOVAs mistas de duas vias. Dois testes estatísticos foram utilizados
para analisar as correlações entre VFC, presença e estresse percebido:
testes de ordem de classificação de Spearman e testes de correlação de Pearson.
Spearman é um teste não paramétrico usado porque a VFC pode variar
significativamente de pessoa para pessoa, resultando em dados que não
são normalmente distribuídos. Este teste foi usado para procurar
correlações entre HRV vs presença e HRV vs estresse percebido.
Pearson é um teste paramétrico e foi usado para procurar correlações
entre presença e estresse percebido.
O cybersickness foi analisado através da realização de uma MANOVA
mista de duas vias. Um design misto foi usado para analisar esses DVs
porque eles consideram estímulos, um fator entre sujeitos, e momento,
um fator dentro dos sujeitos. Nesses testes estatísticos, o teste de
esfericidade de Mauchly foi usado para testar a suposição de esfericidade
para a interação bidirecional entre momento e estímulos. Quando a
suposição de esfericidade foi violada, uma correção de Greenhouse-
Geisser foi usada.
Para analisar a Presença, foi utilizada uma MANOVA unidirecional.
Por fim, dois ANOVAs de um fator e um teste T de amostras pareadas foram
usados para analisar os resultados da transferência de conhecimento.
Todas as premissas para a condução dos procedimentos estatísticos
foram verificadas. Sempre que outliers foram detectados, eles foram
removidos da amostra. Quando testes post hoc, como comparações
pareadas e análise post hoc de Tukey, foram realizados, uma correção
de Bonferroni foi aplicada para ajustar o nível de significância estatística
para comparações múltiplas. Os resultados foram interpretados como
estatisticamente significativos se o p-valor fosse menor que 0,05 e
indicativo entre 0,05 e 0,10. Salvo indicação em contrário, os dados são
apresentados como média ± desvio padrão.
4 RESULTADOS
Na análise da VFC, dez participantes foram retirados da amostra porque
os ECGs não apresentavam qualidade suficiente. A Tabela 2 mostra a
diferença percentual dos parâmetros da VFC do basal para o VE e
identifica se a tendência de estresse foi seguida ou não, conforme [5].
A tendência dos parâmetros da VFC sugere que o estresse foi maior nos
grupos de estímulos audiovisual + uniforme e audiovisual + combinado,
onde quatro dos cinco parâmetros seguiram sua tendência de estresse.
O próximo grupo a obter mais parâmetros seguindo sua tendência de
estresse foi o grupo controle, onde três parâmetros seguiram sua
tendência sob estresse.
Apenas dois dos cinco parâmetros analisados nos grupos restantes
seguiram sua tendência de estresse. Em relação à diferença percentual
nos parâmetros, entre a linha de base e VE, os resultados mostram que,
em geral, o grupo controle teve o menor impacto na VFC dos participantes.
Em contraste, os grupos de estímulos audiovisual + uniforme e audiovisual
+ combinados causaram maior impacto, apresentando diferenças
percentuais claramente maiores do que os outros grupos.

3.8 Procedimento Estatístico

Uma ANOVA mista de duas vias foi realizada para entender Diferentes
procedimentos foram usados para analisar a coluna de dados se houvesse uma interação entre o momento e os estímulos selecionados no
experimento. Percepção de fadiga e por estresse percebido por DV. Um total de 14 outliers foram autorizados, uso licenciado limitado a: UNIVERSIDADE
FEDERAL DE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

8 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

TABELA 2. DIFERENÇA PERCENTUAL DOS PARÂMETROS DE VFC DA LINHA DE BASE AO VE E IDENTIFICAÇÃO SE A TENDÊNCIA DE ESTRESSE É
SEGUIDA OU NÃO (INDICADA AQUI POR UM ASTERISCO).
AVNN SDNN RMSSD pNN20 LF/HF
%diff %diff %diff %diff %diff
Audiovisuais (N = 12) *-0,12 *-1,49 *26,06
0,25 5,60
Audiovisual + cheiro (N = 10) *-4,99 6,39 *7,3319,89 8,81
Audiovisual + calor (N = 11) *-2,95 *-3,63 -14,62
11,51 12,13
Audiovisual + peso (N = 13) *-4,45 2,80 *15,71
25,05 13,00
Audiovisual + uniforme (N = 11) *-13,11 *-30,09 -8,27
*-7,53 *-20,99
Audiovisual + máscara (N = 12) *-7,92 *-10,75 -2,89
15,54 6,93
Audiovisual + combinado (N = 12) *-15,46 *-29,79 *70,00
6,92 *-28,68

TABELA 3. ESTATÍSTICAS DESCRITIVAS DO ESTRESSE PERCEBIDO DV (M1 – TABELA 4. ESTATÍSTICAS DESCRITIVAS DA FADIGA PERCEBIDA (M1 –
INÍCIO, M2 – MEIO DO EXPERIMENTO, M3 – PÓS-EXPERIMENTO). INÍCIO, M2 – MEIO DO EXPERIMENTO, M3 – PÓS-EXPERIMENTO).
*Estresse EVA *Esforço EVA - M1 *IR *IR *IR *IR
– M2 Estresse-M3 Fadiga – M1 Fadiga - M2 Fadiga - M3
M±SD M±SD M±DP M±SD M±SD M±SD

Audiovisuais (N = 12) 3,16±2,48 1,75 ± 1,54 1,91 ± 1,56 Audiovisuais (N = 12) 3,91±1,97 1,91 ± 1,44 2,25 ± 1,35
Audiovisual + cheiro
*Olfato + 1,91 ± 1,44 1,08 ± 1,62 0,91 ± 1,24
(N=10) 2,50 ± 1,77 1,40 ± 1,07 1,40 ± 1,34
audiovisual (N = 12) *Audiovisual + calor
*Audiovisual + calor 4,00 ± 2,63 2,35 ± 1,69 3,00 ± 2,18
(N=14) 4,28 ± 2,46 3,00 ± 2,07 3,71 ± 2,39
(N=14)
+ *Audiovisual + peso
Peso 2,80 ± 2,29 1,1±,87 1,20 ± 1,13
(N=13) 4,46 ± 1,50 2,76 ± 2,12 3,30 ± 1,54
audiovisual (N = 10) * Uniforme +
Uniforme + 3,37±,74 1,75 ± 1,38 2,75 ± 2,43
audiovisual (N = 13) 3,38 ± 2,10 2,76 ± 2,42 4,30 ± 2,46
audiovisual (N = 8) *Audiovisual + máscara
*Máscara + 1,80 ± 1,93 0,50 ± 0,70 0,70 ± 0,82
(N=10) 1,10±,99 0,60 ± 0,84 1,60 ± 0,51
audiovisual (N = 10) Audiovisual +
Audiovisual + combinado 3,54 ± 2,42 0,63 ± 0,80 1,27 ± 1,84
combinado (N = 12) 2,91 ± 2,19 1,50 ± 1,73 3,25±2,73
(N = 11)

TABELA 5. ESTATÍSTICAS DESCRITIVAS DOS QUATRO DVS DE CYBERSICKNESS NOS TRÊS MOMENTOS DO EXPERIMENTO (M1 – INÍCIO, M2 – MEIO DO
EXPERIMENTO, M3 – PÓS-EXPERIMENTO).
*Óculo *Óculo Óculo
Náusea Náusea Náusea motor- motor- motor *Geral *Geral – Geral -
– M1 – M2 – M3 M1 M2 – M3 Desorientação
Desorientação
– M1 – M2 – M1
Desorientação – M3 M2 M3
M±SD M±SD M±SD M±SD M±SD M±SD M±SD M±SD M±SD M± M±SD M±SD
SD
Audiovisuais (N = 4) 2,38 ± 0± 9,47 ± 48,45±40,2
7,15±4,77 4,77 0 18,95±14,519,47±9,53 3,79 13,92±11,3610,44±13,323,48±6,96 149,69±106,183,4±82,43
Audiovisual + 0± 0± 0± 0± 0± 0± 0± 49,85±70,5 0 ± 0±
cheiro (N = 2) 9,54±13,49 0 0 3,79±5,35 0 0 0 0 0 0 0
18,02 5,05 ± 0± 50,61 ±
Audiovisual + 8,48±11,13± 13,47±13,545,35 9,28±9,84 0 4,64±6,96 140,6±120,1652,99 147,74±128,07
calor (N = 9) 14,84±13,58 22,08 16,84±15,05
Audiovisual + 4,77 ± 2,38 ± 2,38 ± 13,92±0 50,28 ±
peso (N = 4) 9,54 4,77 4,77 18,95±7,58 7,58±6,18 11,37±4,37 3,48±6,96 3,48±6,96 140,77±52,4534,95 64,45±11,18
Audiovisual + 4,54 ± 5,56 ± 5,56 ± 18,09 ±
uniforme (N = 10) 5,72±6,67 5,72±8,04 9,54±10,05 12,12±13,933,91 14,4±15,349,73 9,73 25,45 87,59±97,79 59,24±73,53 157,22±177,67
Audiovisual + 4,77 ± 2,38 ± 2,38 ± 1,89 ± 0± 3,79 ± 0± 0± 0± 23,09 ±
máscara (N = 4) 9,54 4,77 4,77 3,79 0 4,37 0 0 0 24,92±49,85 8,91±17,83 30,38
Audiovisual + 2,38 ± 0± 4,77 ± 1,89 ± 0± 0± 0± 0± 0±
combinado (N = 4) 4,77 0 5,5 3,79 0 5,68±7,25 0 0 0 16±18,72 0 39,1±28,7

identificado, conforme avaliado pela inspeção de boxplots para valores 29,42, p < 0,0005, ÿ2 parcial = 0,296. O efeito principal da
estimulação maior que 1,5 comprimentos de caixa a partir da borda da caixa. O li apresentou diferença estatisticamente significativa na
média da amostra resultante e as estatísticas descritivas apresentam estresse percebido entre os grupos, F(6, 70) = 3,50, p = 0,004, na
Tabela 3. parcial ÿ2 = 0,231.
A assimetria variou de -0,82 a 1,53 e a curtose de -1,84 Para entender onde estão as diferenças significativas, pareie até 1,89, indicando
uma distribuição normal dos dados [42]. foram feitas comparações. As comparações pareadas O teste de esfericidade de Mauchly
indicou que a suposição de momento na tensão percebida mostrou diferença significativa de esfericidade foi violada para a interação de
duas vias, diferenças em todas as comparações, a saber: uma diminuição significativa ÿ2(2) = 44,96, p < . 0005. Não houve significância
estatística do início ao meio do experimento (-1,63, IC 95% [-2,22 para a interação cant entre os estímulos e o momento nos usuários
-1,04], p < 0,0005); uma diminuição significativa desde o início até
o estresse relatado, F(8,12, 94,67) = 0,82, p = 0,591, ÿ2 parcial = pós-experimento (-1,26, 95% CI [-1,93 a -0,59], p < 0,0005 ); .065. O
efeito principal do momento mostrou um aumento estatisticamente e significativo do meio do experimento para pós diferença significativa
no estresse médio percebido entre o experimento (0,37, 95% CI [0,051 a 0,69], p = 0,017). O par os diferentes momentos do experimento,
F(1,35, 94,67) = comparações sábias de estímulos no estresse percebido mostraram um Uso licenciado autorizado limitado a:
UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188
NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO
aumento significativo do grupo audiovisual + cheiro para audiovisual
+ calor (1,81, IC 95% [0,13 a -3,50], p = 0,023) e uma diminuição
significativa do grupo audiovisual + calor para audiovisual + máscara
(-2,12 , 95% CI [-3,89 a -,35], p = 0,007). Nenhuma outra diferença
de grupo foi significativa.
Uma ANOVA mista two-way foi realizada para entender se houve
interação entre momento e estímulos na fadiga percebida em DV. Um
total de sete outliers foi identificado, conforme avaliado por inspeção
de boxplots. A amostra resultante e as estatísticas descritivas são
apresentadas na Tabela 4.
A assimetria variou de -.54 a 1 e curtose de -2.28 a .22, indicando
uma distribuição normal dos dados [42].
O teste de esfericidade de Mauchly indicou que a suposição de
esfericidade foi violada para a interação bidirecional, ÿ2(2) = 29,26, p
< 0,0005. Houve uma interação indicativa, mas não significativa,
entre os estímulos e o momento na fadiga percebida pelos usuários,
F(9,09, 116,70) = 1,88, p = 0,061, ÿ2 parcial = 0,128. O principal
efeito do momento mostrou uma diferença estatisticamente
significativa na fadiga percebida entre os diferentes momentos do
experimento, F(1,52, 116,70) = 18,74, p < 0,0005, parcial ÿ2 = 0,196.
O efeito principal dos estímulos mostrou uma diferença estatisticamente
significativa na fadiga percebida entre os grupos, F(6, 77) = 4,27, p =
0,001, parcial ÿ2 = 0,249.
Para entender onde estão as diferenças significativas, comparações
pareadas foram realizadas. As comparações de pares de momento
na fadiga percebida mostraram uma diminuição significativa do início
ao meio do experimento (-1,23, 95% CI [-1,72, -,74], p < 0,0005) e
um aumento significativo do meio do experimento até o pós
-experiência (0,84, IC 95% [0,47, 1,21], p < 0,0005). As comparações
pareadas de estímulos na fadiga percebida mostraram reduções
significativas do grupo audiovisual + calor, audiovisual + peso e
audiovisual + uniforme para o grupo audiovisual + máscara (-2,57, IC
95% [-4,62, -,52], p = 0,004 -2,41, IC de 95% (-4,50, -,33), p = 0,010;
e -2,39, IC de 95% [-4,47, -,30], p = 0,012, respectivamente).
Nenhuma outra diferença de grupo foi significativa.
Passando aos testes de correlação, para verificar se havia relação
entre a VFC e o estresse percebido, utilizamos os testes de Spearman
entre os parâmetros da VFC da linha de base contra os valores da
VAS Stress – M1 e entre os parâmetros da VFC durante o VE versus
os valores de EVA Stress – M3. Os resultados mostraram uma
correlação negativa estatisticamente significativa entre AVNN (linha
de base) e estresse percebido (VAS Stress – M1) rs(81) = -.234, p =
.033, e uma correlação negativa estatisticamente significativa entre
SDNN
(linha de base) e estresse percebido (VAS Stress – M1) rs(81) = -
0,237, p=0,031. Nenhuma outra diferença significativa foi encontrada.
Outro teste de Spearman foi utilizado para buscar relações entre a
VFC durante o VE e a Presença – M3. Os resultados mostraram que
não houve correlações significativas.
Finalmente, os resultados dos testes de Pearson, usados para avaliar 0,147. ANOVAs univariadas de acompanhamento não mostraram
a relação entre presença e estresse percebido (ambos avaliados em
M3), mostraram correlações significativas e positivas entre: EVA
Estresse – M3 e Presença Espacial, r(81) = .464, p < . 01; Estresse
VAS – M3 e Realismo Experimentado, r(81) = 0,509, p < 0,01; EVA
Estresse – M3 e Envolvimento, r(81) = 0,464, p < 0,01; e VAS Stress
– M3 e Uso
FEDERAL licenciado
DE SAO PAULO.autorizado
Baixadolimitado
em 27 dea: julho
UNIVERSIDADE
de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
9
Presença geral, r(81) = 0,513, p < 0,01. Em todos os testes de
correlação, usamos dados de todos os participantes que tinham
ECGs válidos – 81 participantes.
Para entender se houve uma interação entre o momento e os
estímulos nos quatro DVs do cybersickness, foi realizada uma
MANOVA mista de duas vias. Um total de 54 ferramentas foram
identificadas, avaliadas por inspeção de boxplots.
A amostra resultante e as estatísticas descritivas são apresentadas
na Tabela 5. Skewness variou de -2 a 2 e kurtsis de -6 a 4, indicando
uma distribuição normal dos dados [42]. O teste de esfericidade de
Mauchly indicou que a suposição de esfericidade não foi violada para
a interação bidirecional entre náusea e tempo (ÿ2(2) = 5,62, p =
0,06), mas foi violada para a interação bidirecional entre desconforto
oculomotor, desorientação, cybersickness geral e momento (ÿ2(2) =
9,81, p = 0,007; ÿ2(2) = 10,76, p = 0,005; e ÿ2(2) = 10,94, p = 0,004,
respectivamente).
Os resultados não mostraram nenhuma interação estatisticamente
significativa entre os estímulos e o momento em nenhum dos DVs do
cybersickness: Náusea, F(12, 60) = 0,73, p = 0,718, ÿ2 parcial =
0,127; Desconforto oculomotor, F(9,32, 46,62) = 0,63, p = 0,769, ÿ2
parcial = 0,112; Desorientação, F(9,16, 45,80) = 2,07, p = 0,051, ÿ2
parcial = 0,293; Doença cibernética geral, F(9,13, 45,65) = 1,27, p =
0,277, ÿ2 parcial = 0,203.
Os resultados do efeito principal do momento nos quatro DVs de
cybersickness mostraram uma diferença significativa no desconforto
oculomotor (F(1,55, 46,62) = 3,90, p = 0,037, parcial ÿ2 = 0,115) e
cybersickness geral (F(1,52, 45,65) = 3,60, p = 0,047, ÿ2 parcial =
0,107) entre os diferentes tempos do experimento. Além disso, o
efeito principal dos estímulos nos quatro DVs do cybersickness
mostrou uma diferença significativa no desconforto oculomotor entre
os grupos F(6, 70) = 2,43, p = 0,049, parcial ÿ2 = 0,327.
As comparações pareadas de cybersickness e momento mostraram
uma diminuição significativa no desconforto oculomotor do início ao
meio do experimento (-6,35, 95% CI [-11,37 a -1,33], p = 0,010) e
uma diminuição significativa no cybersickness geral do início ao meio
do experimento (-51,95% CI [-90,29 a -11,71], p = 0,008). Em relação
às comparações aos pares de estímulos e cybersickness, embora
tenha sido encontrado um efeito principal dos estímulos no desconforto
oculomotor, as comparações aos pares não mostraram diferenças
significativas.
Uma MANOVA unidirecional foi executada para determinar o efeito
de estímulos multissensoriais no senso de presença dos participantes.
Um total de nove outliers foi identificado, conforme avaliado por
inspeção de boxplots. A amostra resultante e as estatísticas
descritivas são apresentadas na Tabela 6.
A assimetria variou de -1,38 a 0,86 e a curtose de -2,57 a 1,05,
indicando uma distribuição normal dos dados [42].
Os resultados da MANOVA unidirecional mostraram uma diferença
significativa entre os grupos nos DVs combinados de presença,
F(18, 204,13) = 2,09, p = 0,007; ÿ de Wilks = 0,620; parcial ÿ2 =
diferenças significativas na presença espacial de DV (F(6, 74) = 0,82,
p = 0,560, ÿ2 parcial = 0,062) e diferenças significativas no realismo
experimentado de DVs (F(6, 74 ) = 2,27, p = 0,046, parcial ÿ2 =
0,156), envolvimento (F(6, 74) = 3,66, p = 0,003, parcial ÿ2 = 0,229)
e presença geral (F(6, 74) = 3,28, p = 0,006, ÿ2 parcial = 0,210).
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

10 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

TABELA 6. ESTATÍSTICAS DESCRITIVAS DA PRESENÇA DVS PARA O TABELA 7. ESTATÍSTICAS DESCRITIVAS DA QUESTÃO DE CONHECIMENTO
GRUPOS DIFERENTES. NAIRE APLICADO NO INÍCIO E APÓS O EXPERIMENTO E

Espacial Exp. geral DIFERENÇA ENTRE AMBOS (M1 – INÍCIO, M2 – MEIO DO EXPERIMENTO, M3 –
Presença realismo envolvimento Presença PÓS-EXPERIMENTO).

M ± SD M ± SD M ± SD M ± SD Transferência
Conhecimento Conhecimento de conhecimento
Audiovisuais (N = 6)
teste 1 - M1 teste 2 – M3 (teste 2 - teste 1)
4,11±,13 3,83±,2 2,66±,66 3,53±0,18
Audiovisual + cheiro M±SD M±SD M±SD
(N = 12) 4,05±,54 3,25±,6 2,77±,68 *3,35 ± 0,38
Audiovisuais (N = 12)
Audiovisual + calor *4,33 ± 1,30 6,00 ± 0,85 *1,67 ± 1,50
(N = 14) 4,28±,38 3,64±,85 2,8±,72 3,57±,4 audiovisual +
Audiovisual + peso 4,00 ± 1,18 6,27±,65 2,27±1,62
cheiro (N = 11)
(N = 14) 4,03 ± 0,32 3,39 ± 0,78 Audiovisual + uniforme *2,5 ± 0,69 *3,3 ± 0,31 Audiovisual + calor
(N = 9) 3,98 ± 0,38 3,67±,52 6,00 ± 0,00 2,33±,52
(N=6)
3,63 ± 0,62 Audiovisual + máscara (N = 14) 3,11±,13 3,57±,34 Peso audiovisual +

(N = 12) 3,17±1,12 6,58±,67 3,42 ± 1,08

4,17±,5 *3,1 ± 0,79 3,17±,71 3,48±,48 Uniforme +
Audiovisual + 3,92±1,44 5,62±,87 *1,69 ± 1,49
audiovisual (N = 13)
combinado (N = 12) Máscara +
4,25±,5 *4,02 ± 0,8 *3,6 ± 0,78 *3,95 ± 0,54 *2,58 ± 1,17 6,25±,75 *3,67 ± 0,89
audiovisual (N = 12)
Audiovisual +
Uma análise post hoc de Tukey foi realizada para entender onde estão 6,25±,87 2,58 ± 1,98
combinado (N = 12) 3,67 ± 1,92
as diferenças significativas. A análise post hoc de Tukey revelou: um
aumento significativo do grupo audiovisual + máscara para o grupo o teste T de amostras pareadas mostrou que o treinamento VE provocou
audiovisual + estímulos combinados (0,91, IC 95% [0,03 a 1,79], p = um aumento significativo de 2,53 (95% CI [2,17 a 2,88]) nas pontuações
0,037) no realismo experimentado DV; um aumento significativo do de conhecimento, t(77) = 14,3, p < 0,0005.
grupo audiovisual + peso para o grupo audiovisual + estímulos
combinados (1,10, IC 95% [0,30 a 1,91], p = 0,002) no envolvimento de
5 DISCUSSÃO
DV; por último, assina Este trabalho para estudar o impacto de
individualmente e em combinação, no visual + peso dos usuários aumentos
para de estímulos adicionais do audiovisual + olfato e audi li, entregues
presença e grupo de conhecimento (2,97, 95% CI [0,99 a 4,96] e (2,97,o audiovisual + estímulos combinados estresse, fadiga, cybersickness,
4,96], correspondentemente) na presença geral de DV. exercício de 95% CI [0,99 transferência ao usar VR para treinamento, tendo como caso
treinamento.
outras diferenças de grupo foram estatisticamente significativas.
Devido ao volume de dados, os autores criaram a Tabela 8, para Três
testes estatísticos foram realizados com os resultados ajudam a entender
do questionário de conhecimento: dois ANO unidirecionais Começando os resultados e orientam a discussão.
diferenças entre grupos nos parâmetros e a diferença percentual entre com a análise da VFC, ou seja, a tendência dos VAs, um para buscar
primeiro questionário de conhecimento, preenchido no início dos os
para buscar diferenças entre os resultados indicam que os gruposmomentos
com de linha de base e exercício VE do experimento, o experimento, e um
pontuação por estresse foram o audiovisual + uniforme e o audiovisual maior nível de grupos na transferência de conhecimento (diferença na
entre o questionário preenchido no início e + estímulos combinados. Em
ambos os grupos, houve uma clara
após o experimento); e um teste t de amostras pareadas, para diferença
VE nos participantes entre os momentos VE de linha de base e exercício,percentual nos parâmetros de VFC analisados avaliam o impacto geral do
e quatro
conhecimento.
outliers foi identificado, conforme avaliado por in on stress, conforme dos cinco parâmetros mostraram seguir sua tendência. Um total de 13
especificação de boxplots. A amostra resultante e a descrição Em identificado por [5].
apresentadas na Tabela 7. nossa opinião, este é o resultado mais forte das estatísticas experimentais
Skewness variou de -1,46 a 0,97 e curtose de –1,88 porque vai de mento porque ambas as medidas de análise de HRV o suportam e
normal dos dados [42]. A combinação de vários estímulos tem maioracordo com a hipótese de que o com para 1,39, indicando uma distribuição
conhecimento. Esses grupos foram os que tiveram questionário impacto na resposta do usuário A diferença entre grupos no primeiro
estímulos sensoriais. Em p = 0,049; parcial ÿ2 = 0,159. A análiseestatisticamente
post significativo, F(6, 71) = 2,24, apresentaram maior número de
veal apresentou uma diminuição significativa do audiovisual para o hoc de Tukey com relação ao caso do grupo audiovisual + uniforme, o partici
[-3,41 para -.09], p = SCBA e seu peso.No audiovisual + combinadouniforme de bombeiro, que inclui o grupo audiovisual + máscara (-1,75, IC 95%
.033). Nenhuma outra diferença de grupo foi estatisticamente significativa grupo
de estímulos, como o nome indica, o participante não pode nem houve
com a diferença de grupos no segundo questionário de conhecimento. diferenças significativas entre expostos a todos os estímulos simultaneamente,
entre os grupos em relação à meia máscara de transferência de A diferença para o grupo audiovisual + uniforme sendo o uso da diferença
significativa, F(6, 71) = 3,63, p = ,003; quarto mental parcial. conhecimento e o aumento da temperatura no experimento foi estatisticamente

ÿ2 = 0,159, com a análise post hoc de Tukey revelando um Os resultados

remanescentes de audiovisual e audiovisual + uniforme porque há tornam-se mais difíceis de interpretar no aumento dos grupos
menos
3,76], p seguindo sua tendência ao estresse e porque o percentual = parâmetros para o grupo audiovisual + máscara (IC de 2,95% [0,24 a
reais são menores em alguns parâmetros e maiores Nenhuma outra 0,016 e 1,97, IC 95% [0,25 a 3,7], p = 0,015, respectivamente). diferenças
dea:2023
UNIVERSIDADE
às 00:06:32 UTC
FEDERAL
do IEEE
DEXplore.
SAO PAULO.
Restrições
Baixado
aplicadas. diferença foi significativa. Por fim, resulta de Uso licenciado autorizado limitado
em 27 de julho
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO 11

TABELA 8. RESUMO DOS RESULTADOS.

Variável dependente Momento estímulo

RVH N/D - Os resultados indicam que, de todos os grupos, aqueles cujas respostas apresentam
maiores indícios de estresse fisiológico são os grupos audiovisual + uniforme e audiovisual
+ estímulos combinados
Estresse percebido - Diminuição do estresse percebido do início ao meio - Aumento do estresse percebido do grupo audiovisual + cheiro para audiovisual + calor
do experimento
- Diminuição do estresse percebido desde o início até - Diminuição do estresse percebido do grupo audiovisual + calor para audiovisual +
o pós-experimento máscara
- Aumento do estresse percebido do meio do
experimento para o pós-experimento
Cansaço percebido - Diminuição da fadiga percebida do início ao meio do - Diminuição da fadiga percebida do grupo audiovisual + calor para audiovisual + máscara
experimento
- Aumento da fadiga percebida do meio do experimento - Diminuição da fadiga percebida do grupo audiovisual + peso para audiovisual + máscara
para o pós-experimento
- Diminuição da fadiga percebida do grupo audiovisual + uniforme para audiovisual +
máscara
ciberdoença - Diminuição do desconforto oculomotor de Sem diferenças significativas
- Náusea início a meio da experiência
- Desconforto oculomotor - Diminuição da doença cibernética geral do início ao
- Desorientaçao meio do experimento
- Doença cibernética geral
Presença N/D - Aumento do realismo experimentado do grupo audiovisual + máscara para o grupo
- Presença espacial audiovisual + estímulos combinados
- Realismo experiente - Aumento do envolvimento do grupo audiovisual + peso para o grupo audiovisual +
- envolvimento estímulos combinados
- Presença geral - Aumento da presença geral do grupo audiovisual + olfato para audiovisual + estímulos
combinados
- Aumento da presença geral do grupo e audiovisual + peso para o grupo audiovisual +
estímulos combinados
Conhecimento - Aumento na transferência de conhecimento desde o - Diminuição na primeira prova do audiovisual para o audiovisual + máscara
início até o pós-experimento grupo
- Aumento da transferência de conhecimento do audiovisual para o grupo audiovisual +
máscara de HRV e - Aumento na transferência de conhecimento do audiovisual + uniforme
em outros. Isso, junto com o fato de que a fisiologia agrupa. Este resultado contrasta com os resultados
para o cal As respostas variam significativamente entre as pessoas, nos mostra porque é
importante ter uma medida contínua grupo audiovisual + máscara
cautelosos ao interpretá-los. Queremos destacar como VFC para avaliar a resposta do participante sobre um resultado
positivo o fato de que o grupo controle exibiu período de tempo e não apenas em um ponto específico no tempo. as
menores diferenças percentuais entre os dois meses Portanto, postulamos que a diferença entre os mentos do
experimento. Este é um resultado que consideramos resultados é porque uma medida é contínua e objetiva ser positiva
porque indica que alguma das somadas é positiva e a outra discreta e subjetiva. No caso de os estímulos parecerem ter
tido alguma influência na parte da EVA do estresse, os participantes limitaram-se à resposta fisiológica do ipante.
Embora a VFC seja um objeto para avaliar sua percepção de estresse momentâneo, que, na medida cinco, uma
desvantagem é que sua interpretação é no final do exercício, foi menor do que quando iniciaram o mais complexo do
que as respostas a um questionário. Na experiência por já terem realizado o exercício no contexto do trabalho
apresentado, essa complexidade surge cise VE e por saberem que o experimento era ap da dificuldade em quantificar
o impacto de cada abordagem até o seu final. Quanto às diferenças no estímulo perceptivo na resposta do usuário.
Outro ponto que ção de estresse entre os grupos, nossa justificativa é que deve ser observado é que os resultados da
VFC são consistentes principalmente porque diferentes pessoas avaliam com outros trabalhos da literatura no sentido
de que a intensidade do estresse é diferente. Considerando que a VFC média dos ipants pode ser utilizada para
monitorar suas reações aos valores apresentados na Tabela 3, o fato de a escala ser de diferentes fases de um AV [25]–
[27], [43], [44]. 0 a 10, e o fato de a maior diferença entre os grupos de
resultados da percepção do estresse, VAS ter sido de 2,12 pontos, atribuímos essas diferenças a apresentarem uma
redução significativa desde o início até as diferentes avaliações da intensidade do estresse. No meio da experiência e
um aumento significativo de quando os autores gostariam de ver o meio para o final da experiência diferenciado. Em
geral, os valores no grupo de controle, isso não aconteceu. Sobre os valores começaram altos, diminuíram muito após
a linha de base e por um lado isso é um resultado negativo porque não rege a habituação VE foram realizados e
aumentaram novamente, forçam o grupo audiovisual como sendo eficaz como controle embora para valores mais baixos
do que os iniciais, no final do grupo, por outro lado, reforça a hipótese de que o experimento. Acreditamos que os valores
geralmente elevados avançam os autores, que a diferença de valores é pequena
no início do experimento se deve à antecipação e se resume fundamentalmente à diferença em como o estresse
causado pela participação em uma nova experiência com cada pessoa avalia seu nível de estresse.
tecnologia de RV. Quanto ao aumento significativo no per Os resultados da percepção de fadiga no momento IV percepção de estresse do meio para o final da experiência seguiram a mesma tendência que

a percepção de estresse, portanto, postulamos que foi causado pelo exercício VE. redução do início para o meio do experimento Embora tenha ocorrido um aumento no final do experimento e um aumento

no final. Os autores acreditam que este mento, os valores foram inferiores aos valores iniciais em todo o resultado é justificado pela realização da linha de base, onde o uso autorizado e licenciado é

limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas. © 2023 IEEE. O uso pessoal é permitido, mas a
republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

12 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO

os participantes passaram 15 minutos apenas sentados ouvindo esse resultado como sendo uma consequência direta da linha de base,
música relaxante. Além disso, justificam o aumento demonstrado não só nos resultados dos questionários como também pela realização do
VE. Em relação à percepção, mas também verbalmente. Vários participantes relataram que a ação da fadiga nos estímulos IV, mais uma
vez, o controle que cumpriu essa tarefa permitiu que eles relaxassem e descontraíssem o grupo não apresentou valores diferenciados. Dado
um pouco durante os experimentos. Esta tarefa fez com que houvesse diferença de valores, os autores referem que a hipótese foi uma
diminuição de alguns sintomas medidos no cyber que, como o stress, diferentes pessoas avaliam o seu nível de enjôo e consequentemente
causaram a redução que tigamos de forma diferente. Considerando os valores médios apresentados veja na análise estatística.

na Tabela 4, a escala VAS e os valores de diferença (2,41 a Outro resultado positivo que os autores querem destacar 4,47), um resultado
que queremos destacar é a redução clara é que não houve diferenças significativas em nenhum dos ção na percepção de fadiga nas
variáveis audiovisual + máscara no fator estímulo. Ou seja, não havia grupo. Colocamos a hipótese de que essa diferença de redução entre
os grupos em qualquer um dos DVs do cyber foi causada pela inalação de oxigênio no cilindro, enjôo. Embora os estímulos tenham um
efeito principal no oculomo, o que causou a redução da percepção de fadiga por algum desconforto, as comparações entre pares não
mostraram razão significativa. No entanto, mais testes teriam que ser feitos para mostrar as diferenças entre os grupos. Os resultados
obtidos testam esta hipótese.
em consonância com trabalhos relacionados, indicando que a adição
de Quanto aos resultados de correlações entre VFC, estímulos pré-sensoriais não só não afeta a experiência e o estresse percebido, os
resultados não foram positivos, mas até sugerem uma possível redução nos sintomas também VFC . De todos os testes estatísticos
realizados, o único relacionado com cybersickness [20], [45].
relação entre a VFC e as demais variáveis foi A análise dos resultados de presença indicou diferenças
significativas entre os parâmetros da VFC durante a linha de base e diferenças percebidas entre os grupos nos DVs experimentou realismo,
estresse no início do experimento (M1). O envolvimento dos resultados e a Presença geral. Houve significância e as direções das
correlações encontradas são positivas. não pode aumentar do grupo audiovisual + máscara para o Eles indicam que quanto menor o AVNN
e SDNN pa audiovisual + grupo de estímulos combinados nos experimentos DV, maior o estresse percebido. Isso é realismo convicto. Em
uma primeira análise, pode-se pensar que persiste com a tendência de estresse dos parâmetros da VFC. a redução do realismo no grupo
audiovisual + máscara foi No entanto, esperávamos obter maior número de pa devido ao uso de máscara e a inalação de oxigenômetros
mostrando uma relação significativa, principalmente a partir do cilindro de oxigênio. No entanto, em ambas as condições, as relações entre
os parâmetros durante o VE e o participante equipou o SCBA e inalou os valores oxy VAS Stress – M3, mas isso não aconteceu. Nós gen
do cilindro de ar. Um fator que acreditamos poder pressupor que os participantes possam ter atenuado ou influenciado este resultado é o
facto do utilizador sentir valores reportados no final da experiência (M3) devido a alguma incoerência entre o que tinha vestido e o que eram
avaliando a percepção de estresse naquele momento viu no exercício VE, no audiovisual + combinado e não durante o VE. No entanto,
mais testes seriam grupos de estímulos, o participante equipava o uniforme e deveriam ser realizados para testar esta hipótese. Quanto ao
SCBA, que foi consistente com o que os resultados virtuais sobre correlações entre VFC e caráter de presença equiparam. No grupo
audiovisual + máscara, são igualmente insatisfatórios, tendo demonstrado a falta de relação por outro lado, o participante não equipou a
união entre nenhum parâmetro da VFC e nenhuma forma de presença. Essa falta de coerência pode ter influenciado a subescala. Nossa
hipótese mencionada acima é a avaliação de realismo mantida pelo participante.

para este resultado; a nosso ver, os participantes avaliam o Houve um aumento significativo no envolvimento do DV a partir do sentimento
atual, e isso acaba mitigando a percepção do grupo audiovisual + peso para o audiovisual + com ção da intensidade dos sentimentos
durante o VE. Os estímulos cardíacos combinados. Mais uma vez, o aumento foi para a resposta de áudio é uma resposta complexa, e sua
compreensão visual + grupo de estímulos combinados, que é uma necessidade positiva de maior desenvolvimento teórico e prático. Alt sult
porque mostra resultados superiores neste grupo. Já que a resposta VFC apresentou indícios de estresse nos valores reduzidos de
envolvimento no audiovisual + resposta do usuário, não teve impacto suficiente para o grupo de peso, levantamos a hipótese de que o
envolvimento revelava uma relação entre presença e estresse e avaliamos como inferiores porque tiveram que carregar pesado aumentam
nossa confiança nos resultados. O equipamento de teste Pearson que não lhes trouxe nenhum anúncio aparente teve o melhor resultado
dos testes de correlação, tendo vantagem. Por outro lado, quando conectado ao meio mostrou relações significativas e positivas entre
máscara, como no grupo audiovisual + máscara, o estresse percebido combinado relatado em M3 e todas as escalas de presença sub ção
do peso do SCBA e respiração real de oxigênio. Este é um resultado positivo e condizente com o do cilindro de oxigênio, a nosso ver,
contribuiu para a literatura, sugerindo que, no contexto de uma EV estressante, o aumento do envolvimento, tendo se mostrado mais elevado
no sentido de presença está relacionado para a percepção de estresse, valor de evolução após estímulos audiovisuais + combinados com
sensação de presença sendo maior que o grupo percepção (Tabela 6).

de estresse aumenta. Finalmente, houve um aumento do audiovisual + Os resultados do

cybersickness foram geralmente positivos. Dos grupos olfato e audiovisual + peso para o audiovisual apenas os resultados estatisticamente
significativos foram uma redução no grupo + estímulos combinados na presença geral do DV. desconforto oculomotor e cybersickness geral
de Dado que este DV é uma combinação dos outros três do começo ao meio do experimento. Justificamos os DVs de Presença, o que está
27representado nesteàs
de julho de 2023 resultado
00:06:32éUTC
que odoUso licenciado
IEEE autorizado aplicadas.
Xplore. Restrições está limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188

NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO 13

Os valores de presença foram geralmente baixos nos grupos
audiovisual + cheiro e audiovisual + peso. Na análise da Presença,
queremos destacar que em todas as suas VDs, o valor médio foi
maior no grupo audiovisual + estímulos combinados (Tabela 6). Isso
é consistente com os resultados do HRV e outros trabalhos na
literatura no sentido de que estímulos multissensoriais aumentam a
presença do usuário [17], [20].
Ainda, a serem discutidos, temos os resultados dos testes de
conhecimento. A análise estatística mostrou redução significativa
do grupo audiovisual para audiovisual + máscara no primeiro teste
de conhecimento e aumento significativo do grupo audiovisual e
audiovisual + uniforme para audiovisual + máscara na transferência
de conhecimento (teste 2 - teste 1). Atribuímos esse resultado em
parte à sorte e em parte a uma compreensão básica de como os
incêndios se espalham e reagem a certas condições. Nenhum dos
participantes era bombeiro ou tinha formação anterior na área. No
entanto, algumas perguntas podem ser respondidas com base em
uma compreensão básica de como o fogo reage sob certas
condições.
Embora seja possível desenvolver uma hipótese sobre os resultados
obtidos, os autores consideram que a amostra é reduzida para
afirmar que um determinado estímulo tem um impacto positivo ou
negativo na transferência de conhecimento. Os autores consideram
razoável atribuir os resultados a um pouco de sorte/azar ou mesmo
a uma falta de atenção em um teste de formato de múltipla escolha.
O resultado que os autores consideram mais significativo neste VD
é o obtido no momento, o que indica que o AV foi capaz de transferir
conhecimento. Este é um resultado que os autores destacam como
positivo e consistente com a literatura [46], [47].
Para encerrar a discussão, acreditamos ser relevante comparar os
resultados obtidos neste experimento com os resultados de nosso
trabalho anterior [32]. Embora possam não ser diretamente
comparáveis, principalmente devido aos estímulos fornecidos em
cada estudo e à natureza dos ambientes utilizados, ainda
acreditamos que uma comparação empírica dos resultados contribui
para a literatura.
Um resultado consistente entre os dois trabalhos é que existem
indicadores positivos em todas as métricas para o uso de
tecnologias de RV para treinar profissionais. De maneira geral, os
resultados convergem para a conclusão de que o AV tem algum
nível de influência na resposta do usuário. Embora a intensidade
das respostas mostradas em RV não seja comparável àquelas
mostradas no mundo real, elas são interessantes o suficiente para
conduzir a uma investigação mais aprofundada sobre o assunto
para, finalmente, descobrir se podemos obter tal resposta fisiológica.
Outros resultados consistentes e positivos entre os dois trabalhos
são que os usuários relataram níveis satisfatórios de presença, não
apresentaram níveis preocupantes de cybersickness e houve uma
melhora no conhecimento adquirido.
Conforme mencionado, a natureza dos ambientes e os estímulos
fornecidos são as principais diferenças entre os estudos; em nosso
estudo anterior, comparamos um virtual versus um real A pesquisa
enquanto, no presente estudo, comparamos vários VEs do Horizonte que levou a esses resultados recebeu um ambiente de financiamento,
de o VE utilizado no Programa Quadro de Investigação e Inovação 2020 da União Europeia - A UE, cada um consistindo em uma cópia
abrigo do contrato de concessão n.º 833573. Este trabalho estimulado estudo anterior, com o aditamento de diferentes multi 2014-2020, ao
foi parcialmente financiado pelo financiamento Nacional por conteúdoestímulos sensoriais. Apesar de tais diferenças, o audiovisual também
Ciência e a Tecnologia, através dos instrumentos utilizados foram
UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27 de os mesmos. Diante disso, ao uso autorizado e licenciado limitado a:
julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
Juntamente com os resultados de ambos os estudos, inclinámo-nos
para a conclusão de que o VE poderia ser melhorado para obter
uma resposta fisiológica mais próxima do mundo real. Ainda assim,
neste momento, não pode obter tal resposta. Apesar de não
conseguir induzir uma resposta fisiológica tão intensa, os benefícios
e capacidades do VE apresentado não devem ser prejudicados. O
mundo real pode não ser totalmente substituível pela RV ainda.
Ainda assim, como mostram os nossos estudos, existe suporte para
a sua utilização para complementar a formação e consequentemente
contribuir para uma melhor formação dos profissionais.
6 CONCLUSÕES
O principal objetivo deste artigo foi estudar o impacto de diferentes
estímulos sensoriais, entregues individualmente e em combinação,
na resposta do usuário. Mais especificamente, comprometemo-nos
a estudar o efeito da adição de estímulos sensoriais, além da visão
e da audição, no estresse (medido objetiva e subjetivamente),
fadiga, cybersickness, presença e transferência de conhecimento
dos participantes durante um treinamento de bombeiros VE. Para
atingir esse objetivo, comparamos e analisamos os vários DVs entre
diferentes grupos de participantes e em diferentes momentos do
experimento.
Os resultados do experimento apresentado neste artigo foram, em
geral, positivos. O AV provocou estresse nos usuários, não causou
sintomas significativos de cybersickness e
conhecimento transferido com sucesso. Relativamente à
investigação, questão abordada neste artigo, nomeadamente qual o
impacto de diferentes estímulos na resposta do utilizador durante
um treino de VE de bombeiro, o que os resultados indicam é que o
uso de uniforme é um estímulo sensorial relevante pois contribui
para obter uma resposta mais próxima do mundo real. Os resultados
também indicam que a combinação de um maior número de
estímulos sensoriais parece causar um maior nível de estresse no
usuário. Com base nesse resultado, os autores afirmam que a
estimulação multissensorial deve ser privilegiada na criação de EVs
de treinamento. Além disso, como o estímulo que indica maior
impacto nas respostas dos participantes é o único que pode ser
visualizado (pode-se ver o uniforme no corpo virtual, mas não o
cheiro ou o peso), defendemos que a coerência entre o estímulo e
o que é visto no VE também pode influenciar a resposta do usuário.
Por fim, os autores consideram que os resultados são consistentes
com a literatura atual no sentido de que a VFC pode ser utilizada
para monitorar as reações dos usuários a EVs de natureza
estressante e que diferentes estímulos, principalmente os
condizentes com o EV, devem ser utilizados para aumentar a
eficiência de um treinamento VE.
RECONHECIMENTO
do VE, o próprio exercício de formação, e da FCT–Fundação para a
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188
14 IEEE TRANSAÇÕES SOBRE VISUALIZAÇÃO E COMPUTAÇÃO GRÁFICA, ID DO MANUSCRITO
Bolsa de Iniciação Científica SFRH/BD/147334/2019.
REFERÊNCIAS
[1] M. Lombard e T. Ditton, “No coração de tudo: O conceito de
presença,” J. Comput. Comun., vol. 3, não. 2, pág. 1–73, 1997.
[2] ED Ragan, DA Bowman, R. Kopper, C. Stinson, S.
Scerbo e RP McMahan, “Efeitos do campo de visão e complexidade
visual na eficácia do treinamento de realidade virtual para uma
tarefa de digitalização visual”, IEEE Trans. Parafuso. Computador.
Graf., vol. 21, não. 7, pág. 794-807, 2015.
[3] KK Bhagat, W.-K. Liou e C.-Y. Chang, “Um sistema de realidade
virtual 3D interativo de baixo custo aplicado ao treinamento militar
de tiro ao vivo,” Virtual Real., vol. 20, não. 2, pág. 127-140, 2016.
[4] A. Mossel, M. Froeschl, C. Schoenauer, A. Peer, J. Goellner e H.
Kaufmann, “VROnSite: Towards immersive training of first responder
squad leader in untethered virtual reality,” em IEEE Virtual Reality,
2017, pp . . 357–358.
[5] R. Castaldo, P. Melillo, U. Bracale, M. Caserta, M. Triassi e L.
Pecchia, “Avaliação do estresse mental agudo por meio de análise
de VFC de curto prazo em adultos saudáveis: uma revisão
sistemática com meta-análise,” Biomed . Processo de sinal. Controle,
vol. 18, pág. 370-377, 2015.
[6] H. Engelbrecht, R. Lindeman e S. Hoermann, “Uma análise SWOT
do campo da realidade virtual para treinamento de bombeiros”,
Front. Robô. AI, vol. 6, pág. 101, 2019.
[7] SG Wheeler, H. Engelbrecht e S. Hoermann, “Pesquisa de Fatores
Humanos em Treinamento de Bombeiro em Realidade Virtual
Imersiva: Uma Revisão Sistemática,” Front. Virtual Real., p. 80,
2021. See More
[8] E.-L. Sallnäs, “O feedback tátil aumenta a presença social percebida”,
na Conferência Internacional sobre Sensação háptica humana e
aplicativos de computador habilitados para toque, 2010, pp. 178–
185.
[9] BG Munyan III, SM Neer, DC Beidel e F. Jentsch, “Estímulos
olfativos aumentam a presença em ambientes virtuais,” PLoS One,
vol. 11, não. 6, pág. 1–19, 2016.
[10] F. Hülsmann, N. Mattar, J. Fröhlich e I. Wachsmuth, “Simulando
vento e calor em realidade virtual: concepção, realização e avaliação
para um ambiente de caverna,” Virtual Real. Broadcast., vol. 11,
não. 2014, pág. 1–21, 2014.
[11] S. Jones e S. Dawkins, “O sensorama revisitado: avaliando a
aplicação da entrada multissensorial na sensação de presença no
filme imersivo de 360 graus na realidade virtual”, em Realidade
aumentada e realidade virtual, Springer, 2018, pp. 183–197.
[12] D. Narciso, M. Melo, J. Vasconcelos-Raposo e M. Bessa, “O impacto
dos estímulos olfativos e do vento em vídeos 360 usando head-
mounted displays,” ACM Trans . Appl. Percept., vol. 17, não. 1, pág.
1–13, 2020.
[13] M. Slater, V. Linakis, M. Usoh e R. Kooper, “Imersão, presença e
desempenho em ambientes virtuais: um experimento com xadrez
tridimensional”, em Proceedings of the ACM Symposium on Virtual
Reality Software and Technology , 1996 , pág. 163–172.
Uso licenciado autorizado limitado a: UNIVERSIDADE FEDERAL DE SAO PAULO. Baixado em 27imersivo.”,
de julho deIJVR,
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
[14] M. Melo, G. Gonçalves, P. Monteiro, H. Coelho, J.
Vasconcelos-Raposo, e M. Bessa, “Os estímulos multissensoriais
beneficiam a experiência de realidade virtual? Uma revisão
sistemática,” IEEE Trans. Parafuso. Computador. Graf., 2020.
[15] BG Witmer e MJ Singer, “Medir a presença em ambientes virtuais:
um questionário de presença,” Presença, vol. 7, não. 3, pág.
225-240, 1998.
[16] M. Meehan, B. Insko, M. Whitton e FP Brooks Jr, “Medidas
fisiológicas de presença em ambientes virtuais estressantes”, em
transações ACM em gráficos, 2002, vol. 21, não. 3, pág. 645–652.
[17] HQ Dinh, N. Walker, C. Song, A. Kobayashi e LF
Hodges, “Avaliando a importância da entrada multissensorial na
memória e a sensação de presença em ambientes virtuais”, em
Proceedings IEEE Virtual Reality, 1999, pp. 222–228.
[18] J. Fröhlich e I. Wachsmuth, “O Visual, o Auditivo e o Háptico – Um
Estudo de Usuário sobre a Combinação de Modalidades em Mundos
Virtuais”, na Conferência Internacional sobre Realidade Virtual,
Aumentada e Mista, 2013, pp. 159–168, [On-line].
Disponível: http://link.springer.com/chapter/10.1007/978-3-
642-39405-8_19.
[19] E. Shaw, T. Roper, T. Nilsson, G. Lawson, SVG Cobb e D. Miller, “O
calor está ligado: Explorando o comportamento do usuário em um
ambiente virtual multissensorial para evacuação de incêndio”, em
Anais da Conferência CHI de 2019 em Fatores humanos em
sistemas de computação, 2019, p. 1–13.
[20] G. Gonçalves, M. Melo, J. Vasconcelos-Raposo, e M.
Bessa, “Impacto de diferentes estímulos sensoriais na presença em
ambientes virtuais credíveis,” IEEE Trans. Parafuso. Computador.
Graf., vol. 26, não. 11, pág. 3231–3240, 2019.
[21] D. Martin, S. Malpica, D. Gutierrez, B. Masia e A.
Serrano, “Multimodality in VR: A survey,” arXiv Prepr.
arXiv2101.07906, 2021. See More
[22] C. Dillon, E. Keogh, J. Freeman e J. Davidoff, “Presence: Is your
heart in it,” em Proceedings of the 4th Annual International Workshop
on Presence, 2001, pp. 21–23.
[23] BK Wiederhold et al., “An Investigation into Physiological Responses
in Virtual Environments: An Objective Measurement of Presence”,
em Towards Cyberpsychology: Mind, Cognition, and Society in the
Internet Age, 2001, pp. 175–184.
[24] DP Jang, IY Kim, SW Nam, BK Wiederhold, MD
Wiederhold e SI Kim, “Análise da resposta fisiológica a dois
ambientes virtuais: simulação de direção e voo”, CyberPsychology
Behav., vol. 5, não. 1, pág. 11–18, 2002.
[25] P. Zimmons e A. Panter, “A influência da qualidade de renderização
na presença e no desempenho de tarefas em um ambiente virtual”,
em IEEE Virtual Reality, 2003. Proceedings., 2003, pp. 293–294.
[26] M. Slater et al., “Análise de respostas fisiológicas a uma situação
social em um ambiente virtual imersivo,”
Ambiente Virtual de Teleoperadores de Presença, vol. 15, não. 5, pág. 553–
569, 2006.
[27] A. Brogni, V. Vinayagamoorthy, A. Steed e M. Slater, “Respostas
dos participantes durante uma experiência de ambiente virtual
2023vol.
às 00:06:32
6, não. 2,UTC
pág.do1–10,
IEEE Xplore. Restrições aplicadas.
 Este artigo foi aceito para publicação no IEEE Transactions on Visualization and Computer Graphics. Esta é a versão do autor que não foi totalmente editada e
Machine Translated by Google O conteúdo pode mudar antes da publicação final. Informações de citação: DOI 10.1109/TVCG.2023.3251188
NARCISO ET AL.: ESTUDANDO A INFLUÊNCIA DE ESTÍMULOS MULTISSENSORIAIS EM UM AMBIENTE VIRTUAL DE TREINAMENTO DE COMBATE A INCÊNDIO
2007.
[28] M. Slater, P. Khanna, J. Mortensen e I. Yu, “O realismo visual aprimora a
resposta realista em um ambiente virtual imersivo”, IEEE Comput. Gráfico.
Ap., vol. 29, não. 3, 2009.
[29] I. Yu, J. Mortensen, P. Khanna, B. Spanlang e M. Slater, "O realismo visual
aprimora a resposta realista em um ambiente virtual imersivo - parte 2",
IEEE Comput. Gráfico. Ap., vol. 32, nº. 6, pág. 36–45, 2012.
[30] C. Deniaud, V. Honnet, B. Jeanne e D. Mestre, “Uma investigação sobre
as respostas fisiológicas em simuladores de direção: uma medição objetiva
da presença”, na Conferência de Ciência e Informação (SAI), 2015, 2015,
pp. 739–
748.
[31] D. Egan, S. Brennan, J. Barrett, Y. Qiao, C. Timmerer e N.
Murray, “Uma avaliação da frequência cardíaca e da atividade eletrodérmica
como um método objetivo de avaliação de QoE para ambientes imersivos
de realidade virtual”, em 2016, Eighth International Conference on Quality
of Multimedia Experience (QoMEX), 2016, pp. 1–6.
[32] D. Narciso, M. Melo, S. Rodrigues, JP Cunha, J.
Vasconcelos-Raposo e ME Bessa, “Using Heart Rate Variability for
Comparing the Effectiveness of Virtual vs. Real Training Environments for
Firefighters,” IEEE Trans.
Parafuso. Computador. Graph., 2022, doi: 10.1109/TVCG.2022.3156734.
[33] F.-X. Lesage, S. Berjot e F. Deschamps, "Avaliação do estresse clínico
usando uma escala visual analógica", Occup. Med.
(Chic. III)., vol. 62, nº. 8, pág. 600–605, 2012.
[34] RM Sobel-Fox, A.-MM McSorley, SC Roesch, VL
Malcarne, SM Hawes e GR Sadler, "Avaliação da fadiga diária e semanal
entre os sobreviventes de câncer afro-americanos", J. Psychosoc. Oncol.,
vol. 31, nº. 4, pág. 413–429, 2013.
[35] J. Vasconcelos-Raposo et al., “Adaptação e validação do Igroup Presence
Questionnaire (IPQ) numa amostra portuguesa,” Presence Teleoperators
virtual Environ., vol. 25, não. 3, pág. 191-203, 2016.
[36]
T. Schubert, F. Friedmann e H. Regenbrecht, “A Experiência da Presença:
Insights Analíticos de Fatores,” Ambiente Virtual de Teleoperadores de
Presença, vol. 10, não. 3, pág. 266–281, 2001.
[37] RS Kennedy, NE Lane, KS Berbaum e MG
Lilienthal, “Questionário de doença do simulador: um método aprimorado
para quantificar a doença do simulador”, Int. J. Aviat.
Psychol., vol. 3, não. 3, pág. 203–220, 1993.
[38] H. Walter, R. Li, J. Munafo, C. Curry, N. Peterson e T.
Stoffregen, “estudo de acoplamento APAL 2019 - SSQ Scoring,” 2019, doi:
https://doi.org/10.13020/XAMG-CS69.
[39] Biodevices, “Biodevices - Soluções de Engenharia Biomédica,” 2019. http://
www.vitaljacket.com (acessado em 15 mar. 2021).
[40] GD Clifford, F. Azuaje e P. McSharry, Eds., Métodos e ferramentas
avançadas para análise de dados de ECG. Norwood, MA, EUA: Artech
House, Inc., 2006.
[41] AJ Camm et al., “Variabilidade da frequência cardíaca: padrões de medição,
interpretação fisiológica e uso clínico.
Força Tarefa da Sociedade Européia de Cardiologia e o Uso licenciado
autorizado limitado a: UNIVERSIDADE
Sociedade FEDERAL
Norte-Americana DE SAO PAULO.
de Estimulação Baixado em 27 de julho de 2023 às 00:06:32 UTC do IEEE Xplore. Restrições aplicadas.
e Eletrofisiologia”,
© 2023 IEEE. O uso pessoal é permitido, mas a republicação/redistribuição requer permissão IEEE. Consulte https://www.ieee.org/publications/rights/index.html para obter mais informações.
15
Trânsito, roubo. 93, nº. 5, pág. 1043–1065, 1996.
[42] D. George e P. Mallery, SPSS para Windows passo a passo: um guia
simples e referência. 2003.
[43] BK Wiederhold, DP Jang, SI Kim e MD
Wiederhold, “Monitoramento fisiológico como uma ferramenta objetiva na
terapia de realidade virtual,” CyberPsychology Behav., vol. 5, não. 1, pág.
77–82, 2002.
[44] BK Wiederhold et al., “Uma investigação sobre respostas fisiológicas em
ambientes virtuais: uma medida objetiva de presença”, em Towards
CyberPsychology: Mind, Cognitions and Society in the Internet Age, IOS
Press, 2001, pp. 175–184.
[45] A. Gardé et al., “Os efeitos de uma experiência multissensorial vibrocinética
em movimento veicular sentado passivo em um contexto de realidade
virtual”, em Resumos Estendidos da Conferência CHI de 2018 sobre
Fatores Humanos em Sistemas de Computação, 2018, pp. 1–6.
[46] A. Gupta, J. Cecil e M. Pirela-Cruz, “A Virtual Reality Enhanced Cyber
Physical Framework to Support Simulation based Training of Orthopaedic
Surgical Procedures,” na IEEE 14ª Conferência Internacional sobre Ciência
e Engenharia de Automação, 2018, pp. . 433–438.
[47] Y. Pulijala, M. Ma, M. Pears, D. Peebles e A. Ayoub, "Eficácia da realidade
virtual imersiva no treinamento cirúrgico - Um estudo de controle
randomizado", J. Oral Maxillofac.
Cirurg., vol. 76, nº. 5, pág. 1065–1072, 2018.
David Narciso é aluno de doutoramento na Universidade de Trás
os-Montes e Alto Douro (UTAD). A sua investigação é financiada
por uma bolsa da FCT e é desenvolvida no MASSIVE Virtual Reality
Laboratory do INESC TEC. Seus interesses de pesquisa são
Computação Gráfica e Realidade Virtual Multissensorial.
Miguel Melo é investigador de pós-doutoramento no INESC TEC,
especializado em Computação Gráfica. Ele é o gerente do
Laboratório de Realidade Virtual MASSIVE, e seus interesses de
pesquisa são Computação Gráfica, HDR e Realidade Virtual
Multissensorial.
Susana Rodrigues é investigadora de pós-doutoramento no INESC
TEC. Suas atividades de P&D estão focadas principalmente em
saúde ocupacional e psicofisiologia. Ela é uma Chartered
Psychologist, com especialização em psicologia clínica e da saúde
e membro internacional da American Psychological Association.
João Cunha é Professor Associado, com agregação, no
Departamento de Engenharia Electrotécnica e de Computadores
da Faculdade de Engenharia da Universidade do Porto (FEUP),
Portugal e investigador sénior do INESC TEC.
Professor. Cunha é membro sênior do IEEE (2004), onde ingressou
na Engineering in Medicine and Biology Society (EMBS) em 1986
como membro estudante.
José Vasconcelos-Raposo é Professor Catedrático do
Departamento de Educação e Psicologia da UTAD. É investigador
sénior do INESC TEC e os seus interesses de investigação
estão no uso da tecnologia para melhorar o desempenho humano,
aplicada no esporte e na saúde.
Maximino Bessa é Professor Auxiliar, com agregação, no
Departamento de Engenharia da UTAD. É investigador sénior do
INESC TEC desde 2009 e Diretor do Laboratório de Realidade
Virtual MASSIVE. É membro da Eurographics Association desde
2003.