Você está na página 1de 11

Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp.

181-191/2013/ISSNe2145-4515 181
Neurobiologia dos efeitos de expectativa e omisso
de reforo sobre o comportamento
*
Neurobiology of expectancy effects and omission of reinforcement on behavior
Neurobiologia de los afectos de la expectativay omisin de refuerzo sobre el comportamiento
JOS LINO OLIVEIRA BUENO
**
DANIELLE MARCILIO JUDICE-DAHER
***
TATIANE FERREIRA TAVARES
****
Universidade de So Paulo, Brasil
Resumo
Os efeitos de omisso do reforo tm sido tradicional-
mente interpretados em termos de: facilitao comporta-
mental aps a omisso do reforo induzida por frustrao
ou supresso comportamental aps a liberao do refor-
o induzida pelo estado ps-consumatrio. Os estudos
revisados indicam que a amgdala est envolvida na
modulao destes efeitos. Porm, o fato de que leses da
amgdala, amplas ou seletivas, podem eliminar, reduzir
ao at mesmo potencializar os efeitos de omisso torna
mais difcil compreender qual a natureza exata do seu
envolvimento. A amgdala est relacionada a uma srie
de funes e cada uma delas depende de suas conexes
com outros sistemas cerebrais. Assim, pode haver ne-
cessidade de se considerar o envolvimento de uma rede
neural mais complexa na modulao dos efeitos de omis-
so do reforo. A conexo de subreas da amgdala com
estruturas corticais e subcorticais pode estar envolvida
nesta modulao, uma vez que tambm esto ligadas a
processos relacionados a recompensas e expectativa.
Palavras-chave: omisso do reforo, complexo basola-
teral da amgdala, ncleo central da amgdala, expecta-
tiva; sinalizao de reforo, frustrao
Abstract
The reinforcement omission effects have been traditio-
nally interpreted in terms of: behavioral facilitation after
reinforcement omission induced by primary frustration
or behavioral suppression after reinforcement delivery
induced by postconsummatory states. The studies re-
viewed here indicate that amygdala is involved in modu-
lation of these effects. However, the fact that amygdala
lesions, extensive or selective, can eliminate, reduce and
enhance the omission effects makes it diffcult to unders-
tand how it is the exact nature of their involvement. The
amygdala is related to several functions that depend on
its connections with other brain systems. Thus, it is ne-
cessary to consider the involvement of a more complex
neural network in the modulation of the reinforcement
omission effects. The connection of amygdala subareas
to cortical and subcortical structures may be involved in
this modulation since they also are linked to processes
related to reward and expectancy.
Keywords: reinforcement omission, basolateral complex
of amygdala, central nucleus of amygdala, expectancy,
reinforcement signalization, frustration
* Correspondncia: Jos Lino Oliveira Bueno, Departamento de Psicologia, Faculdade de Filosofa, Cincias e Letras de Ribeiro Preto,
Universidade de So Paulo, Avenida Bandeirantes, 3900, 14049-901 Ribeiro Preto, SP, Brasil, Phone: 55-16-6023697, Fax number: 55-16-
6335668, e-mail: jldobuen@usp.br
** Filsofo, Livre Docente, Professor Titular em Psicobiologia, jldobuen@usp.br
*** Fisioterapeuta, Doutorado, Ps-Doutoranda, dadatrabalho@yahoo.com.br
**** Psicloga, Doutorado, Ps-Doutoranda, paratatiane@yahoo.com.br
Para citar este artculo: Bueno, J. L. O., Judice-Daher, D. M., & Tavares, T. F. (2013). Neurobiologia dos efeitos de expectativa e omisso de
reforo sobre o comportamento. Avances en Psicologa Latinoamericana, 31 (1), pp. 181-191.
Jos Lino Oliveira Bueno, Danielle Marcilio Judice-Daher, Tatiane Ferreira Tavares
182 Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515
Resumen
Los efectos de la omisin de refuerzo han sido tradi-
cionalmente interpretados en trminos de facilitacin
comportamental despus de la omisin del refuerzo
inducida por la frustracin, o de supresin comporta-
mental despus de la liberacin del refuerzo inducida por
el estado posconsumo. Los estudios revisados indican
que la amgdala est involucrada en la modulacin de
estos efectos. Sin embargo, el hecho de que las lesiones
generales o selectivas de la amgdala puedan eliminar,
reducir, e incluso mejorar los efectos de la omisin, ha-
ce que sea difcil entender cul es la naturaleza exacta
de su participacin en dicho fenmeno. La amgdala
est relacionada con una serie de funciones, cada una
de las cuales depende de sus conexiones con otros sis-
temas cerebrales. Por lo tanto, es necesario considerar
la participacin de una red neuronal ms compleja en la
modulacin de los efectos de la omisin de refuerzo. Las
conexiones de los distintos ncleos de la amgdala con
las estructuras corticales y subcorticales pueden estar
implicadas en esta modulacin, ya que tambin estn
vinculadas a procesos relacionados con la recompensa
y la expectativa.
Palabras clave: omisin de refuerzo, complejo baso-
lateral de la amgdala, ncleo central de la amgdala,
expectativa, sealizacin de refuerzo, frustracin
Quando um animal aprende a esperar a ocorrncia
de um evento apetitivo (reforo) em uma dada si-
tuao, a violao de tal expectativa pode resultar
na induo, manuteno, facilitao e supresso
de uma variedade de comportamentos. Assim, a
omisso no esperada de um reforo resulta em
uma srie de efeitos que podem coletivamente ser
referidos como emocionais e de ativao (arousing)
(Papini & Dudley, 1997).
No contexto da psicologia experimental, omis-
ses podem envolver eliminao completa do re-
foro, eliminao parcial do reforo, reduo in-
completa da magnitude do reforo ou alterao
da qualidade do reforo (Papini & Dudley, 1997).
Quando h eliminao parcial do reforo, ou seja,
quando um comportamento previamente reforado
deixa de ser reforado parcialmente, os animais
apresentam efeitos da omisso do reforo (EORs).
Os EORs so avaliados atravs da comparao
entre os nveis de uma determinada atividade com-
portamental aps os eventos seguidos de reforo e
de omisso de reforo. Observa-se que os nveis
comportamentais so mais altos aps a omisso do
que aps a liberao do reforo.
Amsel e Roussel (1952), por exemplo, relata-
ram que ratos correm mais rpido em uma segunda
pista imediatamente aps a omisso de um reforo
na caixa alvo da primeira pista, do que aps a apre-
sentao de um reforo nesta mesma caixa alvo. Os
autores sugeriram que esta facilitao comporta-
mental aps a omisso do reforo seria decorrente
de um efeito de frustrao, e explicaram-no como
uma reao emocional frente omisso no espe-
rada do reforo. Amsel e Roussel (1952) sugeriram
que a facilitao comportamental aps a omisso
do reforo seria uma garantia de que houve uma
ativao do estado emocional do organismo.
A hiptese de que os EORs seriam decorrentes
de uma facilitao comportamental ou de uma ati-
vao do estado motivacional do organismo no
apoiada por vrios autores. De acordo com Seward,
Pereboom, Butler e Jones (1957), os EORs podem
aparecer no pelo fato dos animais correrem mais
rpido aps a omisso do reforo, mas por ele co-
rrerem mais devagar aps a liberao do reforo.
O consumo do alimento (reforo) poderia induzir
uma supresso comportamental induzida pelo es-
tado ps-consumatrio.
De acordo com Staddon e Innis (1969), os EORs
podem ser explicados em termos de efeitos discri-
minativos de reforamento. Segundo estes autores,
quando animais so submetidos a esquemas peri-
dicos de reforamento como, por exemplo, esque-
mas de intervalo-fxo, o padro comportamental
apresentado uma pausa ps-reforo seguida por
um aumento na frequncia de resposta at a prxi-
ma liberao do reforo. Assim, o animal aprende
a responder quando o reforo no est disponvel e,
por um condicionamento temporal, aprende a no
responder no intervalo imediatamente posterior
liberao do reforo. Consequentemente, o refor-
o adquire propriedades que exercem um controle
inibitrio temporal no organismo. Deste modo, o
aparente aumento nas taxas de respostas seguidas
da omisso do reforo seria o resultado da remoo
Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515 183
Neurobiologia dos efeitos de expectativa e omisso de reforo sobre o comportamento
das propriedades inibitrias do reforo que exer-
cem este controle e no decorrentes de processos
motivacionais; os animais simplesmente conti-
nuam com taxas de respostas elevadas durante o
prximo intervalo (Matzel, 1985; Staddon & Innis,
1969). De acordo com Staddon (1974), o controle
inibitrio temporal dependeria de processamentos
relacionados ateno e memria: a represen-
tao codifcada de experincias passadas afeta a
ateno seletiva, que opera num contexto temporal
composto por estmulos intercalados, tais como
reforamento e no-reforamento.
Assim, enquanto alguns autores concordam que
os EORs so decorrentes da frustrao e, portanto,
de uma condio motivacional, outros autores su-
gerem que os processos envolvidos no podem ser
atribudos exclusivamente a componentes motiva-
cionais, e que podem estar associados a processos
mnemnicos e atencionais. Nesta perspectiva, Bue-
no (1977) realizou um experimento para examinar
os EORs sobre o repertrio comportamental de
ratos num contexto de reforo no-contingente.
Cada tentativa consistiu da apresentao de 20 seg
de um estmulo sonoro e na liberao do reforo
no 19 seg da apresentao do estmulo. Quando
o reforamento parcial foi introduzido, a anlise
do repertrio comportamental durante os pero-
dos sinal e ps-sinal, aps a liberao do reforo,
mostrou que os ratos apresentaram um aumento da
freqncia de respostas dirigidas ao bebedouro e
uma diminuio das respostas do tipo exploratrias.
Por outro lado, a anlise do repertrio comporta-
mental durante o perodo ps-sinal, aps a omisso
do reforo, mostrou que os ratos apresentaram n-
veis de atividade do tipo exploratrio maiores que
aqueles apresentados nos perodos ps-sinal aps
a liberao do reforo. Portanto, aps a omisso
do reforo, os ratos no apresentaram um aumento
de respostas dirigidas ao bebedouro, nem conti-
nuaram a responder como antes do reforamento.
Segundo Bueno (1977), estes efeitos no podem
ser apontados por um mesmo ndice genrico de
estado motivacional, uma vez que podem estar se
referindo a fenmenos motivacionais distintos,
que exigem anlise especfca. Deste modo, pa-
rece que h necessidade de se considerar tanto as
propriedades motivacionais e emocionais quanto
as propriedades atencionais para a compreenso
dos EORs.
Como os EORs foram descritos como deco-
rrentes de estados motivacionais e /ou emocionais,
vrios pesquisadores investigaram o papel de estru-
turas do sistema lmbico na modulao dos EORs
(Henke, 1974, 1977; McDonough & Manning,
1979). Entretanto, o envolvimento da amgdala nos
ROEs, em especial, tem atrado o interesse de um
maior nmero de estudos (Bueno, Judice-Daher, &
Tavares, 2010, 2012; Henke, 1973, 1977; Henke &
Maxwell, 1977; Judice-Daher, Tavares, & Bueno,
2012; McDonough & Manning, 1979). Assim, nos
estudos revisados aqui, os efeitos das leses da
amgdala sobre os EORs sero enfatizados.
Envolvimento do complexo amigdaloide
na modulao dos EORs
O envolvimento da amgdala nos EORs tem sido
demonstrado h dcadas. A maioria dos resulta-
dos dos estudos mais antigos (Henke 1973, 1977;
Henke & Maxwell, 1973) mostrou que a leso de
todo o complexo amigdaloide elimina os EORs.
Henke e Maxwell (1973) e Henke (1977), por
exemplo, mostraram que ratos com leso do com-
plexo amigdaloide, ao contrrio de ratos com leses
fctcias da amgdala, no exibiram um aumento
da velocidade da corrida na segunda pista aps a
omisso do reforo na primeira caixa-alvo. Assim,
Henke e Maxwell (1973) sugeriram que leses bila-
terais na amgdala eliminam o efeito de frustrao,
como defnido por Amsel e Roussel (1952).
Resultados semelhantes aos de Henke (1977)
e Henke e Maxwell (1973) foram mostrados por
Henke (1973) a partir de um estudo envolvendo
procedimentos de condicionamento operante. O
efeito da leso do complexo amigdaloide sobre os
EORs foram avaliados em ratos submetidos a es-
quemas de intervalo-fxo (FI 120 seg; Experimento
1) e a esquemas de razo-fxa (FR 25; Experimen-
to 2). Os resultados do Experimento 1 mostraram
que os ratos lesados responderam de uma maneira
similar nos intervalos seguidos de reforo e de
omisso do reforo, enquanto os ratos do grupo
com leses fctcias da amgdala apresentaram um
aumento signifcativo das taxas de respostas nos
Jos Lino Oliveira Bueno, Danielle Marcilio Judice-Daher, Tatiane Ferreira Tavares
184 Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515
intervalos seguidos de omisso. Similarmente, os
resultados do Experimento 2 mostraram que os
ratos do grupo com leses fctcias da amgdala,
mas no os ratos do grupo com leso do complexo
amigdaloide, apresentaram um aumento das taxas
de respostas durante o perodo de intervalo vazio
(timeout) imediatamente aps a omisso do reforo.
Segundo Henke (1973), estes dados indicam que
o efeito motivacional imediato aps a omisso do
reforo foi maior nos ratos do grupo controle do
que nos ratos lesados, o que indica que a leso no
complexo amigdaloide reduz o vigor do desem-
penho normalmente ocorrido imediatamente aps
a omisso do reforo.
Apesar dos estudos de Henke (1973, 1977) e
Henke e Maxwell (1973) terem mostrado que ratos
com leso do complexo amigdaloide eliminaram os
EORs, outros estudos no encontraram os mesmos
resultados. No estudo de McDonough e Manning
(1979), os EORs foram avaliados em ratos com
leso do complexo amigdaloide submetidos a um
esquema de intervalo-fxo (FI 60 seg) sinalizado.
Os resultados mostraram que os ratos do grupo
lesado tiveram taxas de respostas mais altas nos in-
tervalos seguidos da omisso do reforo do que nos
seguidos da liberao do reforo, at mais que os
ratos do grupo com leses fctcias da amgdala. En-
tretanto, segundo os prprios autores, esta resposta
exagerada frente omisso do reforo exibida pelos
animais lesados no consistente com os resultados
e interpretaes de estudos anteriormente relatados.
Em geral, a maioria dos estudos que investiga-
ram o papel da amgdala na modulao dos EORs
mostrou que amplas leses eletrolticas do comple-
xo amigdaloide prejudicam ou eliminam os efeitos
de omisso. Estes resultados foram discutidos em
termos de frustrao e mudanas na motivao, e
a ativao da amgdala foi apontada como respon-
svel por tais respostas emocionais/ motivacionais.
Amgdala
A viso de um possvel bloqueio dos EORs in-
duzido pelas leses da amgdala se deve a evidn-
cias sugerindo o envolvimento desta estrutura na
modulao de respostas endcrinas, autonmicas
e comportamentais correlacionadas com estados
emocionais (Salinas, Parent & McGaugh, 1996).
H muito tempo o complexo amigdaloide recon-
hecido como parte de um circuito neural crtico
para a emoo (Gallagher & Chiba, 1996).
Embora esteja bem estabelecido o papel da
amgdala na aprendizagem emocional (positiva e
negativa) e na memria, a natureza exata de seu
envolvimento ainda no totalmente clara. Os
estudos envolvendo aprendizagem aversiva pro-
pem que a informao emocional processada
de maneira serial entre o ncleo central (CN) e o
complexo basolateral da amgdala (BLA) (LeDoux,
2000). Na amgdala, as conexes partem do BLA
(primeiramente do ncleo lateral) e terminam no
ncleo central (CN). Os aferentes de informaes
sobre estmulos condicionados e incondicionados
convergem do neocrtex, tlamo e hipocampo para
o BLA, onde feita a associao entre estes estmu-
los. A informao processada e transmitida para
o CN, o qual fornece vias de sadas diretas pelas
quais as associaes entre estmulos condicionados
e incondicionados transformam-se em respostas
apropriadas. Este o modelo serial das funes de
BLA e CN (Everitt, Cardinal, Parkinson, & Rob-
bins, 2003; Sah, Faber, Armentia, & Power, 2003).
Entretanto, h evidncias recentes que vo con-
tra a viso de um processamento serial na amgdala.
Estudos que investigam o papel da amgdala na
aprendizagem apetitiva sugerem que BLA e CN
no funcionam serialmente, mas sim indepen-
dentemente e em paralelo para mediar aspectos
distintos do processamento emocional (Balleine
& Killcross, 2006). Sugere-se que estas diferentes
regies da amgdala teriam uma funo coordena-
da: elas estabelecem o valor de incentivo de eventos
motivacionalmente signifcantes dentro de dom-
nios funcionais especfcos. A funo do estmulo
relacionado com o reforo, como um incentivo
instrumental, mediada pelo BLA, enquanto a
funo do estmulo como reforamento sinalizado
mediada pelo CN. Desta forma, o BLA est en-
volvido na codifcao das propriedades de incen-
tivo dos estmulos incondicionados pavlovianos
e das conseqncias instrumentais com base nas
caractersticas sensrias especfcas delas; o CN
medeia a infuncia afetiva geral das propriedades
reforadoras destes eventos (Balleine & Killcross,
Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515 185
Neurobiologia dos efeitos de expectativa e omisso de reforo sobre o comportamento
2006; Everitt et al., 2003). Nesta perspectiva, tem
sido comumente sugerido que o BLA e CN funcio-
nam serialmente na aprendizagem aversiva, mas
em paralelo na aprendizagem apetitiva.
De fato, a literatura mais recente que investiga
o papel da amgdala na aprendizagem apetitiva tem
sugerido uma dissociao funcional entre as dife-
rentes regies desta estrutura. Muitos estudos tm
mostrado que vrios aspectos das funes motiva-
cionais no condicionamento pavloviano apetitivo
(Holland & Gallagher, 1999; Holland & Gallagher,
2003) e no condicionamento instrumental apetitivo
(Balleine, Killcross, & Dickinson, 2003; Wang,
Ostlund, Nader, & Balleine, 2005) dependem es-
pecifcamente do BLA. Notavelmente, nenhuma
dessas funes motivacionais adquiridas envolve
o CN ou os eferentes do BLA para o CN (Everitt et
al., 2003). Por outro lado, existem muitos estudos
que mostram que vrias tarefas requerem o CN
(Holland & Gallagher, 2003; Parkinson, Robbins,
& Everitt, 2000), mas no o BLA. Estas evidncias
sugerem um padro de organizao funcional mais
complexo entre estas duas reas, o que apoia uma
viso de processamento paralelo das funes da
amgdala no qual as representaes armazenadas
no CN e no BLA podem afetar o comportamento
diretamente, independente das vias aferentes ou
eferentes. Assim, o envolvimento do CN e do BLA
na aprendizagem apetitiva pode ser dissociado
(Everitt et al., 2003).
Segundo Everitt et al. (2003), o comportamento
emocional, em muitas circunstncias, pode ser uma
combinao coordenada de processamentos feitos
pelos ncleos BLA e CN, refetindo a superim-
posio de um subsistema amigdalar basolateral
flogeneticamente mais recente que codifca e re-
cupera o valor afetivo de estmulos ambientais para
direes complexas e respostas de comportamento
adaptativo dentro de um sistema flogeneticamente
mais antigo, o CN, que apta estruturas corticais a
recrutar sistemas motivacionais de incentivo.
Envolvimento seletivo da amgdala
na modulao dos EORs
Os resultados estudos mais antigos mostraram o
envolvimento da amgdala na modulao dos EORs
(Henke, 1973, 1977; Henke & Maxwell, 1973).
Porm, nestes estudos, as leses da amgdala fo-
ram obtidas por corrente eletroltica ou freqncia
de rdio. Assim, a eliminao dos EORs em ratos
com leses produzidas por estas tcnicas poderia
ser atribuda tanto ao dano extensivo do complexo
amigdaloide quanto destruio das fbras de pas-
sagem (Salinas et al., 1996).
Sabe-se atualmente que as diferentes reas da
amgdala tm papis distintos na modulao do
processamento emocional. Neste contexto, os efei-
tos de leses em um ncleo individual da amgdala
poderiam ser diferentes daqueles obtidos quando
outro ncleo lesado (Salinas et al., 1996). Assim,
estudos mais recentes passaram a explorar os efei-
tos de leses mais seletivas da amgdala, como a
do CN e a do BLA, sobre os EORs, uma vez que
a ativao destas reas parece estar relacionada a
processos aparentemente envolvidos na modulao
dos efeitos de omisso.
Bueno et al. (2010) buscaram verifcar se os me-
canismos subjacentes aos EORs dependeriam das
propriedades motivacionais e atencionais atribu-
das ativao do BLA e do CN, respectivamente.
Assim, Bueno et al. (2010) examinaram os EORs
em ratos com leses seletivas do CN ou do BLA
submetidos a um esquema de intervalo-fxo (FI 60
seg; Experimento 1) e a um esquema de intervalo-
fxo com tempo limitado (limited hold) sinalizados
(FI 8 seg LH 2 seg; Experimento 2). No esquema
de intervalo-fxo, um tempo mnimo deve transco-
rrer antes que uma resposta seja reforada. Em um
esquema intervalo-fxo com uma contingncia de
tempo limitado (limited hold), o reforo est dispo-
nvel apenas em um perodo de tempo limitado aps
transcorrido o FI. Assim, somente a primeira res-
posta durante o tempo limitado (limited hold) tem
como consequncia a liberao de reforo (Black,
Walters, & Webster, 1972; Catania, 1999). Os re-
sultados do Experimento 1 mostraram que os ratos
dos grupos com leso do CN e com leso do BLA,
assim como os ratos do grupo com leses fctcias
da amgdala, apresentaram um aumento da taxa de
resposta nos intervalos seguidos da omisso do re-
foro. Por outro lado, os resultados do Experimento
2 mostraram que embora os ratos dos grupos com
leso do CN e com leso do BLA tenham apresen-
Jos Lino Oliveira Bueno, Danielle Marcilio Judice-Daher, Tatiane Ferreira Tavares
186 Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515
tado um aumento da taxa de resposta nos perodos
seguidos da omisso do reforo, este aumento foi
menor do que aquele apresentado pelos ratos do
grupo com leses fctcias da amgdala. Assim, as
leses seletivas da amgdala interferiram nos EORs
quando o reforamento parcial foi introduzido no
esquema de intervalo-fxo com tempo limitado
(limited-hold) sinalizado, mas no no esquema de
intervalo-fxo. De acordo com Bueno et al. (2010),
embora ambos os procedimentos tenham envolvido
omisso do reforo, a sinalizao extereoceptiva
utilizada no Experimento 2 pode ter aumentado a
expectativa do reforo. Alm disso, a porcentagem
do reforamento omitido foi maior no Experimen-
to 1 (Esquema de Reforamento 50%) do que no
Experimento 2 (Esquema de Reforamento 25%);
uma menor porcentagem de tentativas no refor-
adas podem ter aumentado a surpresa da omisso
do reforo.
Os resultados de ambos os experimentos do es-
tudo de Bueno et al. (2010) no sugeriram uma du-
pla dissociao funcional entre as diferentes reas
da amgdala na modulao dos EORs. De acordo
com Bueno et al. (2010), a ausncia de diferenas
entre o desempenho dos ratos dos grupos com leso
do CN e do BLA aps a omisso do reforo no
permitiu identifcar a associao dos componentes
atencionais e motivacionais envolvidos nos EORs
ativao de ncleos especfcos da amgdala.
Posteriormente, Bueno e Bernardes (submetido)
verifcaram os EORs sobre o repertrio comporta-
mental de ratos com leses seletivas do CN ou do
BLA num contexto de reforo no-contingente.
Foram feitas comparao intra-grupo de cada uma
das 9 categorias comportamentais nos perodos
aps a omisso e aps a liberao do reforo. Os
resultados mostraram que os EORs foram apresen-
tados em um nmero maior de categorias compor-
tamentais nos ratos do grupo com leses fctcias da
amgdala (7 de 9 categorias comportamentais). Este
nmero foi menor para ratos do grupo com leso do
CN (6 de 9 categorias), e menor ainda para ratos do
grupo com leso do BLA (5 de 9 categorias). Estes
dados sugerem que as leses do BLA podem ter
tornado os ratos menos sensveis aos EORs.
Mais recentemente, Judice-Daher et al. (2012)
buscaram verifcar se os mecanismos subjacen-
tes aos EORs dependeriam das diferentes pro-
priedades motivacionais atribudas ativao do
BLA e do CN. Nestes estudos, as leses do CN
abrangeram uma rea maior do que aquela abran-
gida no estudo de Bueno et al. (2010), no qual as
leses foram concebidas para atingir uma sub-
regio do CN relacionada ateno (Holland &
Gallagher, 2003). Judice-Daher et al. (2012) exa-
minaram se leses no BLA ou no CN podem in-
terferir nos EORs quando diferentes magnitudes
de reforos so utilizadas. As sesses de treino
empregaram esquemas de intervalos-fxo com tem-
po limitado (limited-hold) sinalizados (FI 12 seg
LH 6 seg). A resposta correta sempre foi seguida
da liberao de uma dentre duas magnitudes de
reforo (0.05 ou 0.5 ml de gua). Nas sesses de
teste, foi introduzida a omisso parcial do reforo.
Os resultados mostraram que a taxa de reposta dos
ratos dos grupos com leso do BLA e do CN, assim
como a dos ratos de seus respectivos grupos com
leses fctcias do BLA e CN, foi mais alta aps
a omisso do que aps a liberao do reforo de
ambas as magnitudes. Estes dados indicam que as
leses do CN e do BLA no eliminaram os EORs.
Porm, a taxa de resposta dos ratos dos grupos
com leso do BLA e do CN foi mais alta aps a
omisso do reforo de menor magnitude do que
aquela observada nos ratos de seus respectivos
grupos com leses fctcias do BLA e CN. Assim,
as leses do CN ou do BLA interferiram nos EORs
quando o reforo de menor magnitude foi omitido.
Os resultados tambm mostraram que os ratos de
todos os grupos experimentais, exceto os ratos do
grupo com leso do BLA, apresentaram uma taxa
de resposta mais alta aps a omisso do reforo de
maior que de menor magnitude. Segundo Judice-
Daher et al. (2012), a ausncia da variao no des-
empenho dos ratos com leso do BLA em funo
da magnitude do reforo, aps a introduo do
reforamento parcial, no parece estar relacionada
a um dfcit na discriminao entre as duas mag-
nitudes de reforos. Se este fosse o caso, as leses
do BLA teriam prejudicado esta discriminao
antes da introduo do reforamento parcial. Esta
hiptese apoiada por Corbit e Balleine (2005)
que mostraram que o efeito da leso do BLA sobre
a desvalorizao do reforo no pode ser atribu-
Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515 187
Neurobiologia dos efeitos de expectativa e omisso de reforo sobre o comportamento
do inabilidade dos ratos lesados em discriminar
reforos.
Posteriormente, Bueno et al. (2012) verifcaram
se o comprometimento funcional ligado ativao
ampla ou seletiva da amgdala afeta os EORs, em-
pregando um esquema de intervalo-fxo com tempo
limitado (limited-hold) sinalizado (FI 6 seg LH 6
seg). Este estudo mostrou que leses neurotxicas
amplas da amgdala, envolvendo tanto o CN como
o BLA, eliminaram os EORs. Por outro lado, as
leses bilaterais do BLA parecem ter tornado os
ratos mais sensveis omisso do reforo; as taxas
de respostas dos ratos do grupo com leso do BLA
foram mais altas aps a omisso do reforo do que
aquelas observadas nos ratos do grupo com leso
fctcia do BLA. Os resultados deste estudo tambm
mostraram que leses bilaterais do CN no inter-
feriram nos EORs. Segundo Bueno et al.(2012),
as leses bilaterais mais extensas da amgdala,
envolvendo tanto o CN quanto o BLA, elimina-
ram os EORs, pois podem ter comprometido um
nmero maior de conexes entre a amgdala e ou-
tras estruturas que tambm pode estar envolvidas
na modulao dos EORs; estas conexes podem
ter sido preservadas quando o BLA e o CN foram
lesados individualmente.
Embora haja divergncias entre os resultados
obtidos pelos estudos que investigaram o envolvi-
mento seletivo da amgdala nos efeitos de omisso,
estes estudos sugerem que a amgdala, em especial
o BLA e o CN, pode fazer parte de um circuito ce-
rebral que modula os EORs.
Consideraes fnais
Apesar dos estudos sobre os EORs terem se inicia-
do h dcadas, algumas questes ainda permane-
cem em aberto. Enquanto alguns autores (Amsel
& Roussel, 1952; Henke, 1973, 1977; Henke &
Maxwell, 1973; Papini, 2003) apiam a noo de
que os EORs so decorrentes da ativao do estado
emocional do organismo e, portanto, de uma con-
dio motivacional, outros autores sugerem que os
EORs podem estar associados tambm a processos
mnemnicos e atencionais (Bueno, 1977; Staddon
& Higa, 1999; Staddon & Innis, 1969). Apesar de
tais dissociaes, a motivao tem papel funda-
mental na ateno, e a direo da ateno pode ter
infuncia signifcativa no processamento emocio-
nal (Holland & Gallagher, 1999).
A hiptese de que os EORs so causados pe-
la facilitao comportamental induzida por uma
reao emocional frente omisso no esperada do
reforo no vem sendo apoiada por estudos recen-
tes (Bueno et al., 2012; Judice-Daher et al., 2011,
2012). Judice-Daher et al. (2011), por exemplo,
mostraram que as taxas de respostas aps a omisso
foram maiores do que aps a liberao do reforo.
No entanto, estas respostas no foram diferentes
daquelas observadas no perodo imediatamente
precedente. Portanto, no houve um aumento no vi-
gor do desempenho aps o no-reforamento, este
apenas se manteve no nvel em que j estava antes
da omisso do reforo. Alm disso, as taxas de res-
postas aps a liberao do reforo so mais baixas
quando comparadas com aquelas registradas nos
perodos precedentes omisso e/ou liberao do
reforo. Estes resultados apiam a noo de que os
EORs so melhor entendidos em termos de supres-
so comportamental aps o reforamento (Seward
et al., 1957) e de que o reforo adquire controle
inibitrio (Staddon, 1974; Staddon & Innis, 1969).
Embora algumas evidncias apiem cada uma
das teorias propostas para se explicar os EORs,
nenhuma fornece uma abordagem sufcientemente
completa. De acordo com Stout, Boughner e Papini
(2003) e Stout, Muzio, Boughner e Papini (2002),
os EORs podem ser causados tanto pela supresso
comportamental aps a liberao do reforo quan-
to pela facilitao comportamental aps a omisso
do reforo; a extenso com a qual cada processo
contribui para os efeitos de omisso depende dos
parmetros do treino. Assim, os EORs podem no
ser resultado de um nico processo (Judice-Daher
et al., 2011).
Os resultados apresentados pela literatura so-
bre os efeitos da leso da amgdala, seja de regies
especfcas ou do complexo amigdaloide inteiro,
sobre os EORs so divergentes. Henke (1973,
1977) e Henke e Maxwell (1973) mostraram que
leses eletrolticas de todo o complexo amigdaloide
eliminaram os EORs. Similarmente, Bueno et al.
(2012) mostrou que leses neurotxicas seletivas
da amgdala, incluindo tanto o BLA quanto o CN,
Jos Lino Oliveira Bueno, Danielle Marcilio Judice-Daher, Tatiane Ferreira Tavares
188 Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515
eliminaram os efeitos de omisso. Nesta mesma
perspectiva, Bueno et al. (2010) mostraram que
leses seletivas da amgdala, envolvendo o CN ou
o BLA, podem reduzir os EORs.
Por outro lado, McDonough e Manning (1979)
mostraram leses eletrolticas do complexo amig-
daloide no eliminaram os EORs, pelo contrrio,
os ratos lesados responderam mais omisso do
reforo que os ratos do grupo com leses fctcias
da amgdala. Estes resultados foram obtidos por
Judice-Daher et al. (2012) e Bueno et al. (2012),
porm em ratos com leses seletivas do BLA. As-
sim, as leses da amgdala parecem ter tornado os
ratos mais sensveis aos efeitos de omisso.
Os resultados divergentes apresentados pela li-
teratura em relao aos efeitos da leso da amgdala
sobre os EORs podem estar relacionados a inme-
ras variveis, tais como extenso das leses, fase
experimental em que as leses foram produzidas,
procedimento comportamental empregado, por-
centagem do reforamento omitido e momento em
que os EORs so avaliados (ver Tabela 1). Alguns
autores j sugeriram que as peculiaridades de cada
experimento podem infuenciar os resultados.
Apesar da literatura sugerir que o BLA e o CN
funcionam independentemente e em paralelo pa-
ra mediar o processamento emocional durante a
aprendizagem apetitiva, os resultados do estudo
de Bueno et al. (2010) no sugerem uma dupla
dissociao funcional entre as diferentes regies
da amgdala na modulao dos EORs. De acordo
com Amsel (1958) e Papini e Dudley (1997), a
omisso no esperada de um reforo produz uma
reao emocional aversiva com consequncias
comportamentais e fsiolgicas. Inicialmente, a
surpresa causada pela omisso do reforo induz um
estado interno o qual tem consequncias imediatas
no comportamento do organismo, agindo como um
reforador negativo (Papini, 2003). Nesta perspec-
tiva, BLA e CN poderiam operar serialmente para
mediar os EORs.
Em geral, os estudos aqui revisados indicam
que a amgdala est envolvida, de alguma forma,
na modulao dos EORs. Porm, o fato de que as
leses da amgdala, amplas ou seletivas, podem eli-
minar, reduzir ao at mesmo potencializar os EORs
torna mais difcil compreender qual a natureza
exata do envolvimento da amgdala nos EORs. A
amgdala responsvel por uma srie de funes,
porm, cada uma delas depende de suas conexes
com outras estruturas cerebrais. Portanto, h ne-
cessidade de se considerar o envolvimento de uma
rede neural mais complexa nos EORs.
A conexo dos diversos ncleos da amgdala
com estruturas corticais e subcorticais tambm pa-
rece estar ligada a processos relacionados a recom-
pensas e expectativa. Estudos que medem o nvel
de ativao de reas cerebrais em humanos, atravs
da Imagem de Ressonncia Magntica Funcional,
mostraram que o recebimento de recompensas au-
menta a atividade de regies subcorticais (estriado e
amgdala) e corticais (crtex pr-frontal). Por outro
lado, a omisso de recompensas reduz o nvel da
atividade destas mesmas estruturas, a valores nega-
tivos (Breiter, Aharon, Kahneman, Dale & Shizgal,
2001; Knutson, Fong, Adams, Varner & Hommer,
2001). Segundo Giertler, Bohn e Hauber (2003,
2005), a amgdala e o crtex pr-frontal codifcam o
valor de estmulos preditivos e enviam estas infor-
maes via projees glutamatrgicas para o ncleo
accumbens. Este tambm recebe inputs dopaminr-
gicos vindos da rea tegmental ventral e representa
a interface entre estruturas do sistema lmbico e
motor. Portanto, um circuito cerebral que envolve
conexes da amgdala com outras estruturas pode
estar relacionado aos EORs. Assim, os EORs po-
dem refetir o envolvimento de mais processos e de
mais de um sistema neural. Estes efeitos podem ser
resultado de vrios processos comportamentais e
mnemnicos que agem simultaneamente (Salinas
& White, 1998).
Agradecimentos
Estas pesquisas foram fnanciadas com Bolsa de
Produtividade e Auxilio Pesquisa do CNPq para
JLO Bueno, bolsas de Doutorado do CNPq para
DM Judice-Daher e da CAPES para TF Tavares,
e bolsas de Ps-Doutorado da FAPESP para DM
Judice-Daher e para TF Tavares.
Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515 189
Neurobiologia dos efeitos de expectativa e omisso de reforo sobre o comportamento
T
a
b
e
l
a

1

A

t
a
b
e
l
a

m
o
s
t
r
a

q
u
e

o
s

r
e
s
u
l
t
a
d
o
s

d
o
s

e
s
t
u
d
o
s

q
u
e

e
x
a
m
i
n
a
r
a
m

o
s

e
f
e
i
t
o
s

d
a
s

l
e
s

e
s

d
a

a
m

g
d
a
l
a

s
o
b
r
e

o
s

e
f
e
i
t
o
s

d
e

o
m
i
s
s

o

d
o

r
e
f
o
r

o

s

o

d
i
v
e
r
g
e
n
t
e
s
.

E
s
t
a

d
i
v
e
r
g

n
c
i
a

p
o
d
e

s
e
r

d
e
v
i
d
o

a
o
s

p
a
r

m
e
t
r
o
s

e
n
v
o
l
v
i
d
o
s

e
m

c
a
d
a

e
s
t
u
d
o
:

p
r
o
c
e
d
i
m
e
n
t
o

c
o
m
p
o
r
t
a
m
e
n
t
a
l
,

p
o
r
c
e
n
t
a
g
e
m

d
e

r
e
f
o
r

a
m
e
n
t
o

p
a
r
c
i
a
l
,

t
i
p
o

d
e

l
e
s

o

d
a

a
m

g
d
a
l
a

e

r
e
g
i

o

l
e
s
a
d
a
.

F
I

L
H
:

i
n
t
e
r
v
a
l
o
-
f
x
o

c
o
m

t
e
m
p
o

l
i
m
i
t
a
d
o

(
l
i
m
i
t
e
d

h
o
l
d
)
;

B
L
A
:

c
o
m
p
l
e
x
o

b
a
s
o
l
a
t
e
r
a
l

d
a

a
m

g
d
a
l
a
,

C
N
:

n

c
l
e
o

c
e
n
t
r
a
l

d
a

a
m

g
d
a
l
a
;

E
O
R
s
:

e
f
e
i
t
o
s

d
e

o
m
i
s
s

o

d
o

r
e
f
o
r

o
E
s
t
u
d
o
P
r
o
c
e
d
i
m
e
n
t
o

C
o
m
p
o
r
t
a
m
e
n
t
a
l
%

O
m
i
s
s

o

d
o

r
e
f
o
r

o
L
e
s

o

A
m

g
d
a
l
a
E
f
e
i
t
o

d
a

l
e
s

o

s
o
b
r
e

o
s

E
O
R
s
E
l
e
t
r
o
l

t
i
c
a
N
e
u
r
o
t

x
i
c
a
A
u
s
e
n
t
e
E
l
i
m
i
n
o
u
R
e
d
u
z
i
u
P
o
t
e
n
c
i
a
l
i
z
o
u
A
m

g
d
a
l
a
B
L
A
/
C
N
B
L
A
C
N
H
e
n
k
e

(
1
9
7
3
)
E
s
q
u
e
m
a

d
e

F
I

1
2
0

s
e
g
5
0
%
X
-
-
-
-
X
-
-
E
s
q
u
e
m
a

d
e

F
R

2
5
5
0
%
X
-
-
-
-
X
-
-
H
e
n
k
e

e

M
a
x
w
e
l
l

(
1
9
7
3
)
P
i
s
t
a

d
e

c
o
r
r
i
d
a
5
0
%
X
-
-
-
-
X
-
-
H
e
n
k
e

(
1
9
7
7
)
P
i
s
t
a

d
e

c
o
r
r
i
d
a
5
0
%
X
-
-
-
-
X
-
-
M
c
D
o
n
o
u
g
h

e

M
a
n
n
i
n
g

(
1
9
7
9
)
E
s
q
u
e
m
a

s
i
n
a
l
i
z
a
d
o

d
e

F
I

6
0

s
e
g
2
0
%

e

5
0
%
X
-
-
-
-
-
-
X
B
u
e
n
o

e
t

a
l
.
(
2
0
1
0
)
E
s
q
u
e
m
a

d
e

F
I

6
0

s
e
g
5
0
%
-
-
X
X
-
-
-
-
X
X
-
-
-
E
s
q
u
e
m
a

s
i
n
a
l
i
z
a
d
o

d
e

F
I

8

s
e
g

L
H

2

s
e
g
2
5
%
-
-
X
-
-
X
-
-
X
-
-
X
-
B
u
e
n
o

e

B
e
r
n
a
r
d
e
s

(
e
m

p
r
e
p
.
)
C
o
n
t
e
x
t
o

d
o

r
e
f
o
r

o

n

o

c
o
n
t
i
n
g
e
n
t
e
5
0
%
-
-
X
-
-
-
X
-
-
X
-
-
X
-
J
u
d
i
c
e
-
D
a
h
e
r

e
t

a
l
.

(
2
0
1
2
)
E
s
q
u
e
m
a
s

s
i
n
a
l
i
z
a
d
o
s

d
e

F
I

1
2

s
e
g

L
H

6

s
e
g
;

d
u
a
s

m
a
g
n
i
t
u
d
e
s

d
e

r
e
f
o
r

o
.
5
0
%
-
-
X
-
-
-
-
X
-
X
-
-
-
X
B
u
e
n
o

e
t

a
l
.

(
2
0
1
2
)
E
s
q
u
e
m
a

s
i
n
a
l
i
z
a
d
o

d
e

F
I

6

s
e
g

L
H

6

s
e
g
5
0
%
-
X
-
-
-
X
-
-
5
0
%
-
-
X
-
-
-
-
X
5
0
%
-
-
X
X
-
-
-
Jos Lino Oliveira Bueno, Danielle Marcilio Judice-Daher, Tatiane Ferreira Tavares
190 Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515
Referncias
Amsel, A. (1958). The role of frustrative nonreward in
noncontinuous reward situations. Psychological
Bulletin, 55 (2), 102-119.
Amsel, A., & Roussel, J. (1952). Motivational proper-
ties of frustration: I. Effect on a running response
of the addition of frustration to the motivational
complex. Journal of Experimental Psychology,
43, 363-368.
Balleine, B. W., & Killcross, S. (2006). Parallel incen-
tive processing: an integrated view of amygdala
function. Trends in Neurosciences, 29 (5), 272-279.
Balleine, B. W., Killcross, S., & Dickinson, A. (2003).
The effect of lesions of the basolateral amygdala
on instrumental conditioning. The Journal of Neu-
roscience, 23 (2), 666-675.
Black, R. E., Walters, G. C., & Webster, C. D. (1972).
Fixed-interval limited-hold avoidance with and
without signaled reinforcement. Journal of the
Experimental Analysis of Behavior, 17, 75-81.
Breiter, H. C., Aharon, I., Kahneman, D., Dale, A., &
Shizgal, P. (2001). Functional imaging of neural
responses to expectancy and experience of mone-
tary gains and losses. Neuron, 30, 619-639.
Bueno, J. L. O. (1977). Efeitos da sinalizao e do no-
reforamento sobre o repertrio comportamental
do rato. Tese de doutoramento no-publicada, Ins-
tituto de Psicologia, Universidade de So Paulo,
So Paulo, Brasil.
Bueno, J. L. O., & Bernardes, E. F. O efeito da sina-
lizao e da omisso do reforo no repertrio
comportamental de ratos com leses nos ncleo
central e complexo basolateral da amgdala. (Ar-
tigo submetido).
Bueno, J. L. O., Judice-Daher, D. M., & Tavares, T.F.
(2010). Do amygdala lesions affect the reinfor-
cement omission effect? In 7
th
FENS Forum of
European Neuroscience: Vol. 5. FENS Forum
Abstracts (pp. 596). Netherlands: Federation of
European Neuroscience Societies.
Bueno, J. L. O., Judice-Daher, D. M., & Tavares, T. F.
(2012). Role of the amygdala in the reinforcement
omission effect. Psychology & Neuroscience, 5
(2), 265-273.
Bueno, J. L. O., Tavares, T. F., & Judice-Daher, D.M.
(2012). Neurotoxic amygdala lesions impair the
reinforcement omission effects in rats. In Society
for Neurosciences 42th Annual Meeting, New Or-
leans. Washington DC: Society for Neuroscience.
Catania, A. C. (1999). Aprendizagem: Comportamen-
to, Linguagem e Cognio (4 ed). Porto Alegre:
Artmed.
Corbit, L. H., & Balleine, B. W. (2005). Double disso-
ciation of basolateral and central amygdala lesions
on the general and outcome-specific forms of
Pavlovian-instrumental transfer. The Journal of
Neuroscience, 25 (4), 962-970.
Everitt, B. J., Cardinal, R. N., Parkinson, J. A., & Ro-
bbins, T. W. (2003). Appetitive behavior: Impact
of amygdala-dependent mechanisms of emotional
learning. Annals New York Academy Sciences,
985, 233-250.
Gallagher, M., & Chiba, A. A. (1996). The amygdala
and emotion. Current Opinion in Neurobiology,
6, 221-227.
Giertler, C., Bohn, I., & Hauber, W. (2003). The rat
nucleus accumbens is involved in guiding of ins-
trumental response by stimuli predicting reward
magnitude. European Journal of Neuroscience,
18, 1993-1996.
Giertler, C., Bohn, I., & Hauber, W. (2005). Involvement
of NMDA and AMPA/KA receptors in the nucleus
accumbens core in instrumental learning guided
by reward-predictive cues. European Journal of
Neuroscience, 21, 1689-1702.
Henke, P. G. (1973). Effects of reinforcement omission
on rats with lesion in the amygdala. Journal of
Comparative and Physiological Psychology, 84
(1), 187-193.
Henke, P. G. (1974). Persistence of runway performance
after septal lesions in rats. Journal of Comparative
and Physiological Psychology, 86 (5), 760-767.
Henke, P. G. (1977). Dissociation of frustration effect
and partial-reinforcement extinction effect af-
ter limbic lesions in rats. Journal of Comparati-
ve and Physiological Psychology, 91 (5), 1032-
1038.
Henke, P. G., & Maxwell, D. (1973). Lesions in the
amygdala and the frustration effect. Physiology
and Behavior, 10, 647-650.
Holland, P. C., & Gallagher, M. (1999). Amygdala cir-
cuitry in attentional and representational proces-
ses. Trends in Cognitive Sciences, 3 (2), 65-73.
Avances en Psicologa Latinoamericana/Bogot (Colombia)/Vol. 31(1)/pp. 181-191/2013/ISSNe2145-4515 191
Neurobiologia dos efeitos de expectativa e omisso de reforo sobre o comportamento
Holland, P. C., & Gallagher, M. (2003). Double disso-
ciation of the effects of lesions of basolateral and
central amygdala on conditioned stimulus-poten-
tiated feeding and Pavlovian-instrumental transfer.
European Journal of Neuroscience, 17, 1680-694.
Judice-Daher, D. M., Tavares, T. F., & Bueno, J. L. O.
(2011). Infuence of the reinforcement magnitude
on omission effects. Behavioural Processes, 88
(1), 60-62.
Judice-Daher, D. M., Tavares, T. F., & Bueno, J. L. O.
(2012). Involvement of the basolateral complex
and central nucleus of amygdala in the reinfor-
cement omission effects of different magnitudes.
Behavioural Brain Research, 233, 149-156.
Knutson, B., Fong, G. W., Adams, C. M., Varner, J. L.,
& Hommer, D. (2001). Dissociation of reward an-
ticipation and outcome with event-related fMRI.
NeuroReport, 12, 3683-3687.
LeDoux, J. E. (2000). The amygdala and emotion: A
view through fear. In J. P. Aggleton (Ed.), The
amygdala: Neurobiological aspects of emotion,
memory, and mental dysfunction (pp. 289-310).
New York: Oxford University Press.
Matzel, L. D. (1985). Signal properties of reinforcement
and reinforcement omission on a multiple fxed-
ratio schedule. Animal, Learning and Behavior,
13, 187-193.
McDonough, J. H., & Manning, F. J. (1979). The effects
of lesion in amygdala or dorsomedial frontal cor-
tex on reinforcement omission and noncontingent
reinforcement in rats. Physiological Psychology,
7, 167-172.
Papini, M. R. (2003). Comparative psychology of sur-
prising nonreward. Brain, Behavior and Evolution,
62, 83-95.
Papini, M. R., & Dudley, T. (1997). Consequences of
surprising reward omissions. Review of General
Psychology, 1, 175-197.
Parkinson, J. A., Robbins, T. W., & Everitt, B. J. (2000).
Dissociable roles of the central and basolateral
amygdala in appetitive emotional learning. Euro-
pean Journal of Neuroscience, 12 (1), 405-413.
Sah, P., Faber, E. S. L., Armentia, M. L., & Power, J.
(2003). The amygdaloid complex: anatomy and
physiology. Physiological Review, 83, 803-834.
Salinas, J. A., Parent, M. B., & McGaugh, J. L. (1996).
Ibotenic acid lesions of the amygdala basolateral
complex or central nucleus differentially effect the
response to reductions in reward. Brain Research,
742, 283-293.
Salinas, J. A., & White, N. M. (1998). Contributions of
the hippocampus, amygdala, and dorsal striatum
to the response elicited by reward reduction. Be-
havioral Neuroscience, 112 (4), 812-826.
Seward, J. P., Pereboom, A. C., Butler, B., & Jones, R.
B. (1957). The role of prefeeding in an apparent
frustration effect. Journal of Experimental Psy-
chology, 54, 445-450.
Staddon, J. E. R. (1974). Temporal control, attention, and
memory. Psychological Review, 81 (5), 375-391.
Staddon, J. E. R., & Higa, J. J. (1999). Time and me-
mory: Towards a pacemaker-free theory of interval
timing. Journal of the Experimental Analysis of
Behavior, 71, 215-251.
Staddon, J. E. R., & Innis, N. K. (1969). Reinforcement
omission on fxed-interval schedules. Journal of
the Experimental Analysis of Behavior, 12, 689-
700.
Stout, S. C., Boughner, R. L., & Papini, M. R. (2003).
Reexamining the frustration effect in rats: Aftere-
ffects of surprising reinforcement and nonreinfor-
cement. Learning and Motivation, 34, 437-456.
Stout, S. C., Muzio, R. N., Boughner, R. L., & Papini,
M. R. (2002). Aftereffects of the surprising pre-
sentation and omission of appetitive reinforcers
on key-pecking performance in pigeons. Journal
of Experimental Psychology: Animal Behavior
Processes, 28 (3), 242-256.
Wang, S., Ostlund, S. B., Nader, K., & Balleine, B. W.
(2005). Consolidation and reconsolidation of in-
centive learning in the amygdala. The Journal of
Neuroscience, 25 (4), 830-835.
Fecha de recepcin: 1 de agosto de 2012
Fecha de aceptacin: 1 de octubre de 2012

Você também pode gostar