Psico acústica e Síntese de Sinais Musicais

Prof. Rafael Santos Mendes

DCA/FEEC/UNICAMP

Psico acústica e Síntese de Sinais Musicais 1

Psico acústica e Síntese de Sinais Musicais 2
 violonc e lo s ulC - ff- E b4
0.4

0.3

0.2

0.1
amplitude

-0.1

-0.2

-0.3
0 0.5 1 1.5 2 2.5 3 3.5
te m po

Psico acústica e Síntese de Sinais Musicais 3

 violoncelo s ulC - ff- Eb4

0.3

0.2

0.1
amplitude

-0.1

-0.2

1.49 1.492 1.494 1.496 1.498 1.5 1.502 1.504 1.506 1.508 1.51
tempo

Psico acústica e Síntese de Sinais Musicais 4

 c larineta e m mi b - mf - A3
0.1

0.08

0.06

0.04

0.02
e
d 0
ut
i
pl
m -0.02
a

-0.04

-0.06

-0.08

-0.1
0 0.5 1 1.5 2 2.5 3
tempo

Psico acústica e Síntese de Sinais Musicais 5

 clarineta em mi b - mf - A3

0.08

0.06

0.04

0.02
amplitude

-0.02

-0.04

-0.06

-0.08

1.49 1.492 1.494 1.496 1.498 1.5 1.502 1.504 1.506 1.508 1.51
tempo

Psico acústica e Síntese de Sinais Musicais 6

Psico acústica e Síntese de Sinais Musicais 7
Psico acústica e Síntese de Sinais Musicais 8
Psico acústica e Síntese de Sinais Musicais 9
Psico acústica e Síntese de Sinais Musicais 10
Psico acústica e Síntese de Sinais Musicais 11
Psico acústica e Síntese de Sinais Musicais 12
Psico acústica e Síntese de Sinais Musicais 13
Psico acústica e Síntese de Sinais Musicais 14
Psico acústica e Síntese de Sinais Musicais 15
Psico acústica e Síntese de Sinais Musicais 16
Psico acústica e Síntese de Sinais Musicais 17
Psico acústica e Síntese de Sinais Musicais 18
Psico acústica e Síntese de Sinais Musicais 19
 Percepção de altura:

•Está intimamente relacionada com a frequência do sinal;

•Se o sinal é (aproximadamente) periódico, isto é, se o sinal é harmônico,

sensação de tom bem definido;

•A altura percebida está relacionada com o período;

•A sensação de intervalo tonal depende do logaritmo da frequência.

Psico acústica e Síntese de Sinais Musicais 20

Psico acústica e Síntese de Sinais Musicais 21
Psico acústica e Síntese de Sinais Musicais 22
 Observação: Se a fundamental estiver ausente, mas for o MDC das har-
mônicas presentes, ela definirá o tom percebido.
fundamental

0.8

0.6
amplitude
0.4

0.2
amplitude

-0.2

-0.4

-0.6

-0.8

0.99 0.992 0.994 0.996 0.998 1 1.002 1.004 1.006 1.008

tempo f0 frequência

Psico acústica e Síntese de Sinais Musicais 23

 2a. e 3a. harmônicas

0.8

0.6
amplitude
0.4

0.2
amplitude

-0.2

-0.4

-0.6

-0.8

0.99 0.992 0.994 0.996 0.998 1 1.002 1.004 1.006 1.008 1.01
tempo 2f0 3f0
frequência

Psico acústica e Síntese de Sinais Musicais 24

 10 harmonicas
0.8

0.6
amplitude
0.4

0.2
amplitude

-0.2

-0.4
...
-0.6

-0.8
0.49 0.492 0.494 0.496 0.498 0.5 0.502 0.504 0.506 0.508 0.51
tempo [s ] f0 2f0 3f0 10f0
frequência

Psico acústica e Síntese de Sinais Musicais 25

 10 harmonicas - fund. aus ente
0.8

0.6
amplitude
0.4

0.2
amplitude

-0.2

-0.4
...
-0.6

-0.8
0.49 0.492 0.494 0.496 0.498 0.5 0.502 0.504 0.506 0.508 0.51 f0 2f0 3f0 10f0
tempo [s ]

frequência

Psico acústica e Síntese de Sinais Musicais 26

Percepção de intervalos - escalas musicais

Psico acústica e Síntese de Sinais Musicais 27

 Escala pitagórica

3n
f (n ) = p n
2

n = ...,−2, −1, 0, 1, 2, ...

pn é um inteiro
tal que 1 ≤ f(n) ≤ 2

Psico acústica e Síntese de Sinais Musicais 28

 Escala equalizada

As 12 notas da escala tem relação entre frequências constante:

1
f i +1 f i +12
= 212 =2
fi fi

n 0 1 2 3 4 5
f(n) 1.0000 1.0595 1.1225 1.1892 1.2599 1.3348

6 7 8 9 10 11 12
1.4142 1.4983 1.5874 1.6818 1.7818 1.8877 2.0000

equalizada equalizada + pitagórica

batimentos!!
Psico acústica e Síntese de Sinais Musicais 29
Psico acústica e Síntese de Sinais Musicais 30
Psico acústica e Síntese de Sinais Musicais 31
Percepção de dois tons ouvidos simultaneamente

Psico acústica e Síntese de Sinais Musicais 32

 batimento: 800 Hz + 802 Hz
1

0.8

0.6

0.4

0.2
amplitude

-0.2

-0.4

-0.6

-0.8

-1
0 0.2 0.4 0.6 0.8 1 1.2 1.4 1.6 1.8 2
tempo

Psico acústica e Síntese de Sinais Musicais 33

 banda crítica: 800 Hz + 820 Hz
1

0.8

0.6

0.4

0.2
amplitude

-0.2

-0.4

-0.6

-0.8

-1
0 0.2 0.4 0.6 0.8 1 1.2 1.4 1.6 1.8 2
tempo

Psico acústica e Síntese de Sinais Musicais 34

 percepção dis tinta: 800 Hz + 951.2 Hz percepção dis tinta: 800 Hz + 951.2 Hz
1

0.8 0.8

0.6 0.6

0.4 0.4

0.2 0.2
amplitude

amplitude
0 0

-0.2 -0.2

-0.4 -0.4

-0.6 -0.6

-0.8 -0.8

-1 -1
0 0.2 0.4 0.6 0.8 1 1.2 1.4 1.6 1.8 2 0.992 0.994 0.996 0.998 1 1.002 1.004 1.006 1.008 1.01
tempo tempo

Psico acústica e Síntese de Sinais Musicais 35

 Percepção de Intensidade

"Just noticeable difference" depende da amplitude

e da frequência.

Psico acústica e Síntese de Sinais Musicais 36

Curva de Fletcher-Munson

Psico acústica e Síntese de Sinais Musicais 37

 Percepção de Timbres

Modelo de Helmholtz: Forma de onda + envoltória + picos formantes

Psico acústica e Síntese de Sinais Musicais 38

Som de trompete analisado por Grey e Moorer:

A complexidade de um som musi-

cal é maior que a prevista no mo-
delo de Helmholtz.

Psico acústica e Síntese de Sinais Musicais 39

 Análise do sinal de um violoncelo

sulC - Eb4 - ff

-3
x 10

1.5

3
0.5
2.5

0 2

0 1.5
200
400
600
800 1
1000
1200
1400 0.5
1600
1800
20000
frequencia [Hz] tempo [s ]

Psico acústica e Síntese de Sinais Musicais 40

 Análise do sinal de um clarinete em mi b

mf - A3

-4
x 10

3
2.5

2
2

1
1.5

0
1
0 200 400 600 0.5
800 1000 1200 1400 1600 1800 2000 0
frequencia [Hz] tempo [s ]

Psico acústica e Síntese de Sinais Musicais 41

 Novos modelos timbrais:

•Julgamento subjetivo da
proximidade timbral

•Escalonamento num espaço

n-dimensional

•Atribuição a-posteriori do
significado dos eixos

Psico acústica e Síntese de Sinais Musicais 42

Experimento realizado em
2 dimensões:

Psico acústica e Síntese de Sinais Musicais 43

Conceito de intervalo timbral

Psico acústica e Síntese de Sinais Musicais 44

 Percepção de sequências

coerência:

fissão ou
segregação:

Psico acústica e Síntese de Sinais Musicais 45

Regiões de coerência e segregação

Psico acústica e Síntese de Sinais Musicais 46

 Relações de intensidade em sequências:

frequência: 1 kHz

duração: 40 ms

tom B: 35 dB spl

Psico acústica e Síntese de Sinais Musicais 47

Percepção de sequências em função de intensidade,
frequência e tempo.

Psico acústica e Síntese de Sinais Musicais 48

Roll: o sinal que sofre oclusão é percebido em "pedaços"
Continuidade: a presença + intensa do sinal oclusivo induz
continuidade no sinal que sofre oclusão

Psico acústica e Síntese de Sinais Musicais 49

Roll: o sinal que sofre oclusão é percebido em "pedaços"
Continuidade: a presença + intensa do sinal oclusivo induz
continuidade no sinal que sofre oclusão

Psico acústica e Síntese de Sinais Musicais 50

O processamento da informação acústica em diferentes níveis
do sistema auditivo

Psico acústica e Síntese de Sinais Musicais 51

 Arquitetura de Sintetizadores

Informação MIDI Para cada instante de tempo

Para cada nota

Decod. MIDI
Lê parâmetros da nota

Seleciona nota (quadro-negro) Algoritmo de

Gera amostra
parâmetros da nota 1 Síntese

Escreve no ... Altera parâmetros

quadro-negro
parâmetros da nota n soma amostra

envia amostra

Placa de áudio
t = t + TS

Psico acústica e Síntese de Sinais Musicais 52

Principais Técnicas de Síntese de Sinais Musicais:

• Síntese Subtrativa

• Síntese Aditiva

• Técnicas de Distorção
• Modulação FM
• Waveshaping

• Amostragem (Sampling)

• Síntese Granular

• Modelagem Física

Psico acústica e Síntese de Sinais Musicais 53

 Diagramas de Blocos

Geração de uma função: Soma ou Produto: Geração de uma envoltória

amplitude
duração

amplitude frequência + ataque decaimento

cos

ou

saída
*

Psico acústica e Síntese de Sinais Musicais 54

 Síntese Subtrativa:

Gerador de Sinal com

espectro rico

Filtragem Envoltória

Psico acústica e Síntese de Sinais Musicais 55

Síntese Aditiva:

f0 n f0

cos
... cos

saída

Psico acústica e Síntese de Sinais Musicais 56

Síntese FM: (sem modulação)

(com modulação)

Psico acústica e Síntese de Sinais Musicais 57

Waveshaping:

Som de clarineta (Risset)

Psico acústica e Síntese de Sinais Musicais 58