FRED S.

KELLER
Profess()r Emerito · de Psicologia, Columbia University

APRENDIZAGEM:
"
TEORIA DO REFORCO

Tradu~ao de
ROdolpho .Azzi
Lea Zimmerman
Luiz bctavio ·de Seixas Queiroz

1.a rehnprcssao

o~otOG
EDITORA. HERDER
-;_t
SAO J>APLO
1972

.•'
.,
,~"' f r
J
il I
I·
j il
! I!: :
1.

l I
 Tradu~ao brasileira da 2.a edi~ao americana : Learning :
reinforcement theory; second edition, 1969,
- Copyright © 1954, 1969 by Random. House, Inc.

LB 1051 1NDICE

K2q L·P Prefacio da Sekunda Edi~ao . . . . . . . . . . . . . . . . . . . 1

Prefacio . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . 3
'2 . ed. . . Agradecimentos . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5
l'lpt 2. 1. Introdu~ao . . . . . . . . . . . . . . . . . . . . . . . . . .
2. Comportamento operante e respondente . . .
7
9 ·
e. . 2,. 3. Condicionamento respondente .......... ~ . 12
4. Condicionamento operante . . . . . . . . . . . . . . 17
5. Refor~os positivo e negativo . . . . . . . . . . . 20
6. Extin~ao . . . . . . • . . . . . . . . . . . . . . . . . . . . 22
7. Refor~amento intermitente . . . . . . . . . . . . . . 25
8. Comportamento supersticioso . . . . . . . . . . . 28
9. Baixa freqiiencia de resposta: Um exemplo 30
10. Extin~ao e refor~o negativo . . . . . . . . . . . . 33
1_1. Generaliza~o • • • • • • • • • • • • • • • • • • • • • • @ 37
12. Discrimina~ao . . . . . . . . . . . . . . . . . . . . . . . 40 .
13. Diferencia~ao (Modelagem) . • . . . . . . . . . . 47
14. Encadeamento . . . . . . . . . . . . . . . . . . . . . . . 56
15. ·Refor~o condicionado positivo . . . . . . . . . . 66
16. Reforc;o condicionado negativo . . . . . . . . . 75 -
17. P6s:-CfSCrito . . . . . . . . . . . . . . . . . . . . . . . . . 85
Apendice: Curyas acumuladas e registrador acumulado · 87
L.
e1turas sugen'das . . . . . . . . . . . . . . . . . . . . . . . . . . . . 95

© Editora Herder - Sao Paulo - 1970

Impresso na RepUblica Federativa do Brasil
Printed in the Federative Republic of Brazil
 Prefacio da Segunda Edi9ao

Quando o Prof~ssor Hartley, ha quinze anos atras,

pediu-me para escrever uma introdu~ao a teoria do refor~o
para alunos do college, leigos · interessados e professores
que sentiam a necessidade de uma apresenta~ao sUIJlarl-
zada, eu fiquei amedrontado. Despido do acompanha-
mento usual de curvas e tabelas, sem pormenores expe.,.
rimentais e indica~ao bibliogrcifica especializada, com pou-
ca ou nenhuma referenda as fontes hist6ricas e as ques;.
toes discutfveis, seria o resumo algo que valesse a pena
ser lido? 0 que restasse seria suficiente .para envolver o
interesse dessa audiencia ou de qualquer outra?
Parece agora que esses temores eram infundados. A
apresenta~ao abreviada aparentemente mostrou.:.se util em
varios niveis de ensino e para varios tipos de leitores.
Nesta revisao, eu tentei ampliar esse aspecto da utilidade.
Novo material foi inclufdo, especialmente na area de
refor~amento intermitente e foi anexado urn apendiee s&-
bre registro acumulado que e·uma caracteristica impor-
tante ~o estudo do comportamento operante desde o seu
infcio. As Leituras Sugeridas foram ampliadas e atua-
lizadas.

1
 Milhares de experimentos foram realizados desde 1954
na area da teoria cientlfica e da pratica representadas por
este pequeno livro; entretanto, pequena ou nenhuma aten-
~ao sera dada aqui a esses estudos. Os termos basicos,
os conceitos chaves e o esquema amplo do sistema nao·
foram muito alterados, e eles constituem ainda a prin-
cipal . preocupa~ao dessa introdu~ao a aprendizagem do Prefacio
ponto de vista da teoria do refor~o.
i,

~ E muito dificil exagerar a importancia dos processos

I!
p
F. S. K. de aprendizagem na defini~ao do comportamento humano.
[i
'i Estudantes de psicologia nero sempre alcangaram uma
t Kalamazoo, Michigan compreensao adequada desse importante campo. "Es-
I
r:
f
. colas" te6ricas diferentes sugeriram pontos de vista di-
versos, e integraram · seus conceitos numa tentativa de
f unificar a compreensao do comportamento humano. Nos
ultimos anos, porem, nota-se urn numero crescente de
esfor~os sistematicos para elaborar a teoria da aprendi- I
I
zagem como o ponto de. partida para compreender o ho- l
mern. ·Urna das contribuigoes mais estimulantes e a co- I
rnurnente identificada como teoria do refoN;o ou da recom- I
l
pensa.
Neste -livro, o Professor Fred S. Keller apresenta
uma introdugao simples e breve a aprendizagem, ern !
terrnos da teoria do reforgo. Embora simples e breve, I
identifica e 'esclarece todos os principios fundamentais e I
indica suas interrelagoes e possiveis extensoes. E por
isso rnais do que uma pura exposigao de uma · teoria
da aprendizagern; oferece urn ponto de vista de teoria da
aprendizagem para toda a Psicologia. Seu estilo simples

2
 i.~··..,

nao dei:xa de conter a precisao e a cautela cientificas.

. E:ste e, pois, um documento que sera apreciado nao s6 por
estudantes que se iniciam mas tambem poi' profissionais . -
que consideram as exposi~oes costumeiras muito tecnicas
e enfadonhas.
0 autor deste livro ha muito e reconhecido como Agradecimentos
· um te6rico, pesquisador e professor. Muito contribuiu
para o desenvolvimento e a aplica~ao da teoria do refor~o. Os nomes de muito poucas pessoas ·sao mencionados
Nestas paginas ele ajuda a remover o esoterico deste nas paginas que seguem, mas qualquer Ieitor psic61ogo
ponto de vista - e assim torna possfvel a um . maior rapidamente reconhecera meu debito geral ao Professor
grupo de pessoas coi:npreender, criticar, ampliar e auxiliar B. F. Skinner e a seus · colaboradores pela formula~ao
a.desenvolver este importante campo de investiga~ao. da teoria do refor~o aqui apresentada. :£le tambem en-
contrara exemplos de d6bito especlficos a pesquisadores
cuja orienta~ao te6rica provem do Professor Clark L. Hull.
Eugene L. Hartley ldentificara alguns velhos amigos que, de nerihuma forma,
The City College, New York estao ligados a uma teoria. Minha razao para omitir
referencias' pessoais e a mesma em cada caso. :£ste e
um livro para OS que se iniciam. Se eles forem incentiva-
dos a prosseguir nos seus estudos, poderao sanar a faita.
de nomes. .Se nao o forem, nao havera dano por isso.
Eu agrade~o a John V. Keller pela leitura cuidadosa
deste livro em cada estagio· da sua elabora~ao; seus co-
mentarios foram muito uteis. Desejo .tambem agradecer
aos meus colegas Ralph F. Hefferline e Wendell E.
Jeffrey, ·pelas criticas e corre~oes ao manuscrito compl~-
tado. · ·
Anne S. Keller atuou como sujeito no experimento
descrito na Sec~ao 4. Com· um atraso · de quinze anos eu
lhe expresso minha gratidao pela. sua coopera~ao!
Fred S. Keller

4 5
 >If

l
I
J-
1
:r,
.I
I
I 1. Introdu9ao

Sao muitas as situa~oes em que se usa o verbo

aprender em alguma de suas formas. Aprendemos, em
crian~a, a · distinguir uma face de outra, ou uma voz
amiga de outra zangada. Aprendemos, .talvez, que algu-
mas vezes se consegue coisas com manha --- e, mais
tarde, qu-~ .,io. Aprendemos que certos objetos cortam,
queimam, picam ou machucam os dedos se nao .forem
manejados corretamente: Aprendemos a patinar, a dan-
iil
~ar e a esquiar. Aprendemos boas maneiras. a mesa,
jeitos de falar e mesmo maneiras de demonstrar em~ao.
Aprendemos a tabuada e a recitar o discurso de Gettys-
burg pronunciado por Lincoln. Aprendemos a ter medo
.
I~
do som do motor do dentista. Aprendemos a contar a
verdade e a ficar envergonhados quando contamos uma
mentira. Aprendemos o valor do dinheiro, da fOr~a, da
idade, dos tftulos, da hierarquia e das posi~oes. E assim
por diante. A lista apenas come~a, mas ja se pode yer
por que se tern dito que 0 campo da aprendizagem. e tao
amplo quanto o da propria psicologia!
Nao e facil, porem, definir aprendizagem. Exami-
. nemos rapidamente os casos que acabamos de citar. Se-

7
 rao iguais estas aprendizagens? 0 . aprender ·a patinar
sera igual ao aprender a ter vergonha? Ou ao aprender
o valor do dinheiro? Sera como o aprender a esquiat?
Aprender a temer o motor do dentista sera igual a apren-
der a- nao tocar a chama ou se parecera mais com o
aprender a gritar para chamar a aten~ao? Havera uma
unica especie de aprendizagem? . Havera duas? Sete? Ou
havera tantas especies quantos forem os exemplos? Afi.;.
nal, 0 que e exatamente aprendizagem?
Sao perguntas dificeis e nao sao, de forma alguma,
as tlnicas que se pode fazer acerca da aprendizagem. E
sao perguntas que nao podem ser respondidas com uma
. palavra, nem com uma senten~a, nem mesmo com urn
livro. Ainda estamos aprendendo a respeito da apren-
dizagem e ainda, por algum tempo, nao se tera escrito
toda a hist6ria.
Enquanto isso, nao seria certo conchrlr que a situa-
~ao e desesperada. Na verdade, o que ocorre e o .con-
trario, e nunca estivemos tao esperan~osos. Alguns prin-
cipios ou leis gerais emergiram recentemente nos estudos
·modemos da natureza humana. :£stes princlpios e leis
nao sao dificeis ·de serem entendidos e, se bern compreen-
didos, constituem urn poderoso instrumento na analise de
comportamentos de todos OS tipos. Com este auxmo, .sera
posslvel focalizar com nitidez quase todos os casos de
aprendizagem que voce tendera a encontrar na vida dia-
ria. lncl~sive todos os exemplos de aprendizagem men;.,
cionados acima, por mais complexos que pare~am ser.
8 9
2. Comportamento operante e respondente
Antes de falar a respeito dos principios, entretanto,
e preciso distinguir entre dois :~I:~~~~~.~~portamento.
Urn deles e conhecido, ha muito tempo, como compot-
tamento . voluntario,
. . ....
e 0 .............
-~--..
outro
_...,.. .. ... e geralmente
··"-"·-·'--: ____ ...
~·,._ .,~., , -~,·- ,
denominado
----,.......---
, .,.~~·-'···-····---~ .......
T!flexo. . Estas duas grandes classes da atividade huma-
na, juntas, abrangem quase todos os exemplos de com-
portamento em.· que o estudante de aprendizagem estara
interessado.
Voluntario e refleio,. entretanto, sao palavras infeli-
zes · de urn ponto de vista cientifico. A hist6ria do seu
uso nos diz que, com freqiiencia, significaram coisas diver-
sas para diferentes pessoas. De fato, . tern havido muito
desacordo sobre 0 significado destas duas palavras e, para
substitui-las, muitos psic6logos adotaram recentemente os
termos operante f?--~~!_l!__t;mdent!_: Sera proveitoso acompa-
nha.:.los; · na ·esperan~a de evitar discU:ssoes acerca de de-
fini~oes. . Mas o leitor podera ter notado que, para al-
guns psic6logos, operante e respondente quase chegam a
significar ·as mesmas coisas que os correspondentes mais
antigos, vqluntaiio e reflexo. ·
0 comportame}lto respondente {reflexo) inclui todas
as respostas dos seres humanos, e de ~lllitos ~rga_!!!_~mos,
que sa~~l!E!~dES_LE~~duzida.§.:LI?_,or n!9.Qi~jca~oe~ esp~~
ciais de estlmulos do ambiente. _ Manifesta-se sempre que
as pupilas dos olhos se contraem ou se dilatam em respos-
ta a modifica~oes na ilumina~ao do ambiente; sempre que
a boca se enche d'agua ao degustar algum petisco; sempre

que uma lufada de ar frio arrepia a pele; sempre que se
derramam higrimas ao descascar cebolas; sempre que se
perde o folego ao receber no rosto urn inesperado jato
d'agua; e em muitas outras maneiras, algumas das quais
serao mencionadas mais tarde.
0 comport~I!lent~ or.~~r~!?:~__(y~,!-':!!!~~!!~1~~~!~~~~-_uma ·
quantidade ait::~~~-~i~!-~~~~~t!y~~a~~--!J.-~~ana - desde o
espernear e balbuciar do hebe de colo ate as mais subli-
mes perfei~oes das habilidades e do poder de raciocinio
adulto. In~lui todos os movimentos de urn organismo dos
~,_..,.,.,._..,.....,_. ____
quais se possa. dizer, que em algum..._...momento, ~_....-.........,._...
efeito sobre ou fazem algo ao mundo em redor. 0 com-
portamento opeiante____
~-----------·-·
opera sabre 0 -·-~-;ndo, por assim
--·--·--·-·--'··---·------------ ..-........,.. ...
dizer, quer direta, quer indiretamente. Q_uando se apa-
nha urn lapis ou quando simplesmente se pede a alguem
que no,.}o de; quando se faz sinal para 0 onibus, ou nele
se sobe; quando se fala ao telefone; quando se trauteia
uma melodia, ou se olha no rel6gio ·ou se resolve urn pro-
blema de matematica - em todos estes, e em milhares
de outros atos da vida cotidiana, se. esta exemplificando o
comportamento operante.
Algumas vezes o efeit() do comportamento operante
.· sabre 0 mundo exterior e imediato e 6bvio, como quando
se chuta uma bola, se abre _uma porta ou se. escreve uma
carta. As modifica~oes do ·muildo podem ser entao ob-
servadas por quem quer que tenha o trabalho de
procura-las.~m outras ocasioes, no entanto, tal nao e o
caso. Quando- se disca urn numero de telefone e ninguem
atende, quando alguem fala consigo mesmo, em voz alta
ou silenciosamente, nao e facil ver exatamente como 0
10
/
ambiente foi alterado pelo que se fez. 's.6 quando se ob-.
serva a hist6ria destes comportamentos e que se descobre
que, neste ou naquele momenta, alguma forma da resposta
em questao realmente fez com que as coisas acontecessem.
Originariamente alguem foi instigado para a a~ao quando ·
. foi discado o numero do telefone; e, antes que alguem
comece a falar sozinho, e necessaria que a fala tenha tido
r algum efeito sabre 0 comportamento dos outros, ou jamais
teria sido adquirida. t1> '. __ ~· -~ _, 1 , -· _ _
1 ~~t~foi mencio"'
Q--~-~~portamento re~i6'J4~b.'f~~~cbmtd'
tem uin
~-···~~-~----,·-· ~------·-~·"''""
nado, e automaticamen!~--~~~~i-~~?_por ~~ti!l?-ulos_ ~~p~~jai~.
Uma luz forte, projetada no olho acostumado ~o escuro,
.------.
-·---------------~-
produzira inevitavelmente. uma contra~ao pupilar. 0 com-
portamento operante, entretanto, nao e assirri tao automa-
tico, Hio inevitavel, nem tao especifico com rela~ao aos es-
timulos. Suponhamos que se- q'l,Jeira fazer com que uma
pessoa atravesse uma sala, levante a mao acima da cabe~a . ·
ou que apanhe. urn lapis da mesa. Como se faria para
eliciar estas respostas? Empregar-se-ia uma ordem, urn .
pedido ou uma suplica? Tentar-se-ia faze-la executar o
ato, usando forc;a se necessaria? Usar-se-iam atrativos ou
incentives· espedais? E ter-se-ia a mesma certeza dos re-
sultados como quando se projeta luz nos olhos de alguem?
E se a pessoa nao entendesse a nossa lingua, como_ entao
evocar o comportamento?
A diferenc;a entre comportamento operante e respon-
dente podera ficar mais clara se se pensar em suas origens
- nas primeiras ocasi6es em que aparecem. Q~-~~po~-.
dentes, desd~ o comec;o, sao evoc!ldos ..~!£~_§el!~ pr6R!!~s
e..lli._~~~js. Comida na boca produz salivac;ao,
n
 luz nos olhos faz a pupila contrair-se, e assim por diante.
Pode-se dizer que a gente so tern que nascer para que
_·estes estirnulos eliciern estas respostas. No ·caso dos ope: __
rantes, entretanto, nao ha no corne~o nenhuni estirnulo
---:------::;:;;----··-- -----------·----- -.. --
--~--~·-..,....---
espec(fico com os quais se possa evoca-los. Somos corn- .
pelidos-a- esperar" que"' apare~am '. antes 'que ~e possa . fa- .
zer qualquer coisa -corn eles. Simplesrnente nao sa- ·
bernos- quais os estirnulos especificos que fazern com
·que a crian~a fa~a este .ou aquele deterrninado rnovimen-
- to corn o bra~o, pen1a, pe ou. mao ou com que vocalize_
pela primeira vez de uin deterrninado modo. _£ por esta
razao que se fala que (? ~9t.!!l~<?r.!.~l!l:(!,fl,t~_gpe.t;:~nt~-~ emitido
(''p-osto fora'-·) ern vez de eliciado (''tirado de"). Sabernos
nat~;~~~~~t~-q~~-0~--~perant~~to;rt"a;:~e-ligados a esti-
rnulos, como se vera na Sec~ao 12, e como estas ·liga~oes
se estabelecem, mas, mesrno entao, -:era justificado dizer _
que os operantes e os respondentes relacionlirn-se corn os
estirnulos de modo diferente;
Estarnos agora ern condi~oes de falar · acerca dos
principios. E, no que diz respeito ao prirneiro, comece-
mos ·corn alguns exernplos.
Caso I: Suponha que, numa sala aquecida, sua mao
direita seja Iriergulhada nurna vasilha de agua gelada.
Imediatarnente a temperatura da mao abaixar-se-a, devido
ao encolhimento ou constri~ao dos vasos sanguineqs. Isto
e urn exemplo de comportamento respondente. Sera acom-
panhado de uma modifica~ao semelhante, e rnais Htcilmen-
12
te merisuravel, na -mao esquerda, onde ·~ constri~ao vas-
'cular tambem sera induzida. Suponha agora que a sua
-mao direita seja· mergulhada na agua gelada urn certo nu-
rnero de vezes, digamos em intervalos de tres ou quatro
minutos; e, alem disso, que voce ou~a uma c!garra eletrica
pouco antes de cada irn~rsao. La pelo vigesimo parea-
mento do som da cigarra com a agua fria, a mudan~a de
temperatura podera ser eliciada aperzas pelo som - isto
e, sern necessidade de rnolhar uma das rnaos.
Caso II: Imagine _agora uma pessoa seritada diante
de uma pequena tela de cinema em uma sala silenciosa. -
Na tela, durante period6s de urn_ minuto, aparece proje-
tada em intervalos irregulares uma palavra em letra de
forma. · Durante o mesmo periodo de urn minuto, chuma..:
~os de algodao serao colocados Jebaixo da lingua da
pessoa, de 'modo que se embebam de certa quantidade de
saliva, que . sera exatamerite determinada pela diferen~a
de peso do algodao no come~o e no fim de cada minuto.
Entao, na mesma sala, mas sem chuma~os de algodao
que atrapalhem, convidar.-se-a a pessoa para uma serie de
petiscos (sanduiches, pasteis e outros bocados) durante
os quais a palavra continua a ser intermitentemente pro-
jetada na tela ·em frente. Finalmente, sem mais nada-
que comer, fnas com os chuma~os de algodao outra vez
. no Iugar, a palavra intermiterite se.ra outra vez projetada
por outro· minuto - periodo de teste - e a saliva~ao
sera medida como antes. Resultado: a palavra .projetada
elicia agora muito mais saliva do que antes.
Caso III: lml:lgine ainda outro sujeito humano numa
sala de Iaborat6rio. Desta vez, esta usando fones de ou-
13
 vido . e tern eletrodos presos a mao esquerda, de modo
a permitir a aplica~ao de urn choque eletrico. Outros
eletrodos, presos ao t6rax e a perna esquerda, estao liga-
dos a urn cardi6grafo, para prover urn registro das batidas
·do cora~ao. Quando tudo estiver pronto, urn som de al-
tura e tonalidade moderadas chegani ao ouvido do sujeito
durante o perfodo de urn segundo. Seis segundos mais
tarde, urn choque eletrico estimulante sera aplicado a sua
mao. Esta combina~ao d~ som seguido de choque sera
i repetida onze vezes, em intervalos de urn ou dois minutos.
La pelo decimo primeiro pareamento, o batimento car-
J diaco do sujeito caini de quinze a vinte batidas por mi-
I nuto dentro de urn segundo mais ou menos depois de ter
r,.
ouvido 0 som, e antes que 0 choque seja sentido.
~-
:bstes tres casos foram tornados de 'experimentos
l
I reais. Cada urn e urn exemplo de aprendizagem, do mes-
I mo modo que 0 que existe quando se chega a suar ao
simples som da broca do dentista ou a corar ao dizer uma
'I
mentira. Todos eles ilustram o mesmo prindpio basico,
li ja ·conhecido talvez, denominado do "reflexo condiciona-
do". :bste principia foi formulado, nos primeiros anos
deste seculo, pelo filosofo russo Pavlov.. Podera ser enun-
ciado, de modo um pouco simples demais, como se segue:.
Se um estimulo· neutro for pareado um certo numero de
vezes a um estimulo eliciador, este estimulo, previamente
neutro, ira evocar a mesma especie de resposta. 0 esti-
mulo neutro, no primeiro caso, foi a cigarra; no segundo,
a palavra projetada; e no ultimo, o som. Atraves da as-
socia~ao com agua gelada, comida e choque, respectiva-
14
mente, vieram a eliciar, por si sos, a q~eda da tempera-
tura, o fluxo salivar e a mudan~a qe batimento cardiaco.
f:stes condicionamentos ocorreram muito rapida~
mente; so uns poucos pareamentos foram .necessaries em
cada caso. Isto nao teria acontecido se certos fatores
temporais nao tivessem sido observados e se certas pre-
cau~6es nao tivessem sido tomadas. Por exemplo, se em
cada urn dos casos o estimulo eliciador tivess~ vindo mi-
nutos depois, em vez de segundos, o condicionamento
poderia ter sido muito Iento. Ou, se o estfmulo ~eutro
tivesse acompanhado, seguido,. em ·vez de precedido o es-
timulo eliciador, poderia nao ter ocorrido condiciona- -
rriento algum. Alem disso, a. velocidade do condiciona-
mento teria ·sido tambem afetada pelo numero de distra-
~6es presentes, pelo tipo de instru~6es dadas aos sujeitos,
pela intensidade dos estimulos empregados, pelas condi-
~oes fisiologicas do sujeito no momenta do experimento,
etc. Ve-se, portanto, que ha mais coisas no condiciona-
mento do que pode ser dito no enunciado de uma
senten~a ..
Nossa defini~ao e inadequada ainda sob outro as-
pecto. A cigarra, a palavra projetada e o som, nos nos-
sos tres exemplos, so eram "neutros" em urn sentido re-
lativo -·-so por que nao tinham, ao come~ar, o mesmo
efeito sobre 0 comportamento que seus associados, a agua
gelada, o alimento e o choque eletrico. Cada urn deles ti-
nha, provavelmente, algum efeito sobre 0 comportamento
antes da associa~ao, alguma influencia sutil que podemos
mesmo nao ser capazes de observar. Cada urn, pode-se di-
zer, tinha a sua propria resposta reflexa; cada urn era, na
15
 realidade, urn estfmulo eliciador por conta propria. Exami-
ne o seguinte diagrarria em que S refere-se ao estimulo e R
a'resposta:· .
S ( a / i m e . n t . o ) 2 · · R(salivofaC)
. 3 . 0 principia de Pavlov, como ele o formulara, apli-
. 2
S (som) · . R (desconhecida)
Deveriamos dizer, provavelmente, que no condiciona-
mento sao pareados dois reflexos, duas conexoes estimulo-
-resposta, em vez de dois estimulos. 0 condicionamento
requer a forma~ao de urn terc.eiro reflexo, composto do
estimulo "neutro" e da resposta ao estimulo "eliciador".
Pavlov recoilhecia tudo isso. 0 terceiro reflexo era
o seu reflexo condicionado, e referia-se aos dois reflexos
sobre os quais se baseava como "incondicionados". Refe-
ria-se, do mesmo modo, a estimulos condicionados e in-
condicionados. 0 alimento foi denominado estimulo incon-
dicionado para a saliva~ao do cachorro e o estimulo (urn
som), com o qual era associado, tornava-se o estimulo
condicionado para a mesma resposta. (E deveriamos
acrescentar, naturalmente, que o som era urn estimulo in-
condicionado para alguma outra resposta - por exemplo,
urn sobressalto- antes do condicionamento ser iniciado.)
Urn outro dos termos de Pavlov se tornou muito im- ·
portante na psicologia moderna. Ao descrever o efeito
do alimento no condicionamento de urn cachorro a sali-
var ao som de uina campainha, referia-se a ele como "re-
16
for~ador". 0 alimento refor~ava a coilexao entre o esti-
mulo neutro e a saliva~ao. E como o efeito da agua ge-
lada e do choque eletrico nos nossos Casos I e III. Hoje,
de certo modo, ampliamos a significa~ao do termo usando
"refon;amento" tambem como mais ou menos equivalente
a "recompensa;' ou "puni~ao" do comportamento operante.
ca-se especialmente· a atividade glandular, e ele trabalhava
· principalmente com as glandulas salivares. Mas aplica-se
igualmente bern a atividade "muscular lisa", ou da es-
pecie envolvida quando a pupila do olho dilata, ou
os vasos sanguineos se contra em, ou os pelos · da pele se
arrepiam. Todas estas. sao modifica~oes respondentes_ ·
ou reflexas. Alem destas, Pavlov achava que sua lei apli-
cava-se tambem as atividades "motoras" ou "musculatees
estriadas" - movimentos da cabe~a, pernas, dedos, etc.
Hoje, entretanto, adotamos uma visao mais conservadora.
Acreditamos que a lei .trata, nao de operantes, mas exclu- ·
sivamente de respondentes. Urn te6rico moderilo chegou
a afirmar que se aplica principalmente as rea~oes emocio-
nais, dependendo, por isso, do sistema nervoso autonomo.
Isto pode ou nao englobar toda a hist6ria, mas pelo me-
nos, o leitor ja sabe por que a palavra respondente foi in-
cluida no titulo desta sec~ao.
4. Condicionamento operante
Ao apresentar o proximo principia, mais uma vez e
apropriado come~ar com urn exemplo. Desta vez nosso
sujeito e uma crian~a de cerca de dezessete. meses, e a
17
 '<•.
situa~ao experimental e uma sala de visitas comum ligei-
ramente modificada para servir como laborat6rio. Nossas
observa~6es come~am quando a crian~a entra correndo
na sala de visitas, vindo do vestibule, e tenta chamar a
aten~ao · da mae que esta sen tad a perto da janela, lendo.
Falhando nos seus esfor~os, a criari~a volta-se para o outro
lado. A medida que seu olhar ·vagueia pela sala, de re-
pente ilumina-se ao cair sobre urn nov<? ·aspecto. Atraves
de uma estreita fresta da coriina que .separa a sala de
· visitas da de jantar, projeta-se uma pequena ma~aneta
em forma de T .. Logo abaixo da ma~aneta ha uma pe-
quen~ vasilha, ao alcance da crian~a. Aproximando-se
rapidamente destes ol,Jjetos, mas prudentemente, a crian~a
toea a ma~aneta com o dedo, e olha dentro da vasilha.
Quando o faz, cai na vasilha urn pequeno peda~o de cho-
colate, vindo de urn tubo escondido do outro lado da
cortina da sala de visit.as. Assustada com isso, a crian~a
recua momentiineam.ente, mas volta e, apanhando o cho-
colate, come-o. Alguns segundos mais ~arde, segura fir-
memente a ma~aneta e puxa para -baixo cerca de 2 cen-
tfmetros, fazendo com.que urn segundo peda~o de choco-
late caia na vasilha. Daf por diante, com ·eficiencia rapi-
damente crescente, ela opera o mecanismo, comendo cada
peda~o a medida que cai, ate que 0 chocolate deixa de
apetecer.
~ste caso simples ilustra urn poderoso principio do
comportamento. Edward L Thorndike, urn grande psi-
c6logo norte-americano deste seculo, denominava-o Lei
do Efeito, e realizou muitos experimentos para· demons-
18
trar sua importancia no comportamento humano e ani-
mal. Em essencia, esta lei enuncia que um ato pode ser
alterado na sua .for{:a pelas suas consequencias. 0 ato,
no nosso exemplo, foi o de. pressionar a ma~aneta; o re-
forfamento deste ato foi observado no aumento da fre-
qiiencia de seu aparecimento, e a consequencia do ato
foi, naturalmente, o peda~o de chocolate· que cafa na
vasilha.
Muito conhecidos entre os pr6prios estudos de Thorn-
dike -~ao aqueles em que gatos famintos conseguiam
acesso a pedacinhos de alimento sempre que manipulas-
sem o fecho, alavanca,. ou dispositivo apropriado que
abria a porta da "gaiola-problema" em que estavam apri-
sionados. 0 progresso dos gatos nesta tarefa foi medido
·pel a diminui~ao do tempo que demoravam para escapar
e chegar ate o alimento em sucessivas ocasioes de confi-
namento. . Assim, quando o gato resolvia o problema, o
numero de segundos que precisava para operar o meca-
nismo de escape ia diminuindo gradualmente, ate que seu
desempenho se aproximava da perfei~ao.
Hoje, falamos c;omumente desta "aprendizagem por
efeito" como condicionamento "instrumental" ou ope-
rante, e, freqiientemente, medimos a sua for~a em termos
da freqiiencia com que ocorre no tempo quando o orga-
nismo (animal ou humano) e livre para responder a vonta-
de. No caso da nossa crian~a, esperariamos uma resposta
de vez em quando, mesmo na ausencia de qualquer recom-
pensa especial. Mas, quando o chocolate aparecia logo
depois do pressionar da ma~aneta, a probabilidade da
resposta ser repetida aumentou rapidamente - a freqiien-
19
... :
fl
 cia subitamente aumentou. Como a crian~a continuou
obter peda~os de chocolate, naturalmente veio a ocorrer
sacia~ao, e a freqiiencia d.o pressio!lar a ma~aneta dimi-
nuiu. Nao se cometeria entretanto nenhum erro ao supor
que, qu~ndo voltasse a fome por chocolate, o comporta-
mento de pressionar a ma~aneta reapareceria rapidamente.
~ste condicionamento .· operante pode ser representa-
do da seguinte. maneira:
R~s
. ' • . it
R e a resposta (presswnar a ma~aneta); ~ significa "le-
va a", e S e o estimulo refor~ador, o chocolate. Nao ha
necessidade de falar, neste ponto, sobre os estfmulos que
levariam ou nao a pressionar a ma~aneta. Como foi dito
antes, eles seriam muito diffceis de identificar na primeira:
vez que a resposta fOsse feita, e estarlamos em maus len-
~ois se tivessemos de eliciar o pressionar. Mais tarde, en-
tretanto, ver-se-a que a R do nosso diagrama se relaciona
com estimulos do meio e examinaremos as condi~oes em
que esta rela~ao se estabelece. · .~ao. Da mesnia maneira, nos estudos de laboratorio mui.,.
5. Refor9os positivo e negativo
. 0 chocolate nao e, obviamente, 0 unico tipo de es-
timulo refor~ador que pode ser usado para condicionar
uma resposta operante tal como pressionar barra. Na
verdade, e apenas urn dos membros de uma 'grande fami-
lia de refor~adores - a familia dos assim denominados
refor~os "positivos". Esta familia inclui todos aqueles esti-
mulos que, quando apresentados, atuam para fortalecer o
comportamento que os precede. Sob condi~oes apropria-
i. 20
~
l
a das de carencia, muitos outros alimentos (ou bebidas), e
talvez mesmo certos sons e luzes, podem aumentar ~ fre-
qiiencia do pressionar a barra do mesmo modo que o
chocolate.
Mas isto nao e tudo. Assim como ha refor~os posi-
tives, ha refor~os negativos que podem ser usados para ·
condicionar o comportamento operante. Alguns estimu-
los fortalecem a resposta atraves de sua remo~ao. Co-
mumente nao usamos estes estfmulos em experimentos
com crian~as, ou mesmo com adultos, mas ha muitos
exemplos do modo como eles atuam em situa~oes nao-
-experimentais, e em experimentos com animais inferiores.
Quando urn menino tira os sapatos porque eles estao
apertados ou cheios de pedrinhas; quando tira o casaco
porque esta muito quente, ou quando o veste porque
esta rimito frio; quando fecha os olhos ou tapa as orelhas
para eliminar luzes ou ruidos demasiado fortes - em to-
dos estes casos 0 que 0 refor~a e jicar livre cia estimula-
tas vezes se treinam ratos brancos para que pulem, corram,
pression em uma barra, etc. em situa~oes em que .a unica
recompensa e fugir de intensidades incomodas de choque
eletrico ou de outra estimula~ao intensa.
Pode-se entao dizer que urn estimulo refor~ador ne-
gativo e aquele que fortalece a resposta que o remove.
Mas e tambem o estimulo que enfraquece a resposta que
o produz. Suponha-se, por exemplo, que a crian~a que
mencionam06 tivesse recebido, depois de cada pressao a
barra, urn choque eletrico em vez de urn peda~o de choco-
late; e facil adivinhar o que teria acontecido. A freqiiencia
21
 do pressionar a barra teria sido drasticamente afetada. Cai~
ria bern abaixo do nivel de sua ocorrencia incondicionada:
isto e, da freqiiencia com que ocorreria naturalmente, na
ausencia de qualquer efeito especial. Ao menos esta . e
a conclusao a que se poderia chegar na base do senso
comum e dos estudos com animais em que as respostas
operantes foram seguidas de estimulac;~o intensa. De urn
modo geral, foi demonstrado que choques fortes, luzes in-
tensas, ·sons agudos, etc., efetivamente suprimem to do o
comportamento que os produz. A supressao podera nao
durar muito, especialmente se o organismo. fOr deixado
na mesma situa~ao depois de ter sido ·interrompido o re-
fOrc;o negativo, mas nao se poe em duvida a sua exis-
tencia. (Voltar-se-a a este problema na Secgao 10).
~
'
;
i 6. Extin~ao
I E comum que os psic6Iogos sejam consultados sobre
como eliminar comportamentos ja condicionados, ,como
desaprender, como aprender a niio fazer algo. Esta e uma
questao que conduz a muitas direc;oes e, em resposta, ha
muito mais do que. pode ser dito aqui. Mas a for-
mula basica e suficientemente.' simples: a maneira de de-
saprender uma resposta ja condicionada e atraves da ex-
tim;iio - atraves · da SZfspensiio do r'eforf{amento.
Considere, por exemplo, o reflexo condicionado de
Pavlov. £Ie se estabelece fazendo com que o estimulo
!' . "neutro" seja sempre acompanhado do incondiciortado ou
reforgador. Podera ser desfeiio apresentando-s~ o esti"-
mulo condicionado, mas suspendendo o incondicionado.
22
Lembre-se dos exemplos de condicionamento apresenta-
dos. Uma queda de temperatura foi condicionada ao som
de uma cigarra; a secregao salivar foi condicionada a visao
de uma palavra projetada; uma mudanc;a no batimento
cardiaco foi condicionada a urn som de urn segundo de
duragao. Tudo isso ja foi descrito. Entretanto, nao foi
mencionado o fato de que, depois de cada experimento, a
resposta condicionada foi extinguida. No primeiro case,
a cigarra foi tocada repetidamente, mas a mao niio foi
mergulhada na agua; no segundo, a palavra foi varias ve-
zes projetada, .mas nenhum alimento a acompanhou; e, no
ultimo caso, uma serie de sons foram apresentados, mas
niio foram seguidos de choque. 0 resultado em cada urn
dos casos foi o mesmo. A forga da resposta condiciona-
da' declinou, ate que o efeito da associagao se perdesse e
o estimulo condicionado, outra vez, se to masse ".neutro".
£stes sao exemplos de extingao respondente, mas a
mesma regra fundamental se mantem para a extingao
operante. Se o reforc;o for retirado, a resposta voltani,
eventualmente, a sua freqiiencia original incondicionada
(algumas vezes denominada nivei operante). Em alguns·
experimentos, como no caso da crianga que ganhava cho-
colate ·ao pressionar uma barra, a remogao do ·refor<;o e
·causa de consideravel emo<;ao. Respostas rapidas e ex-
. cessivamente vigorosas; e mesmo ataques encolerizados ao
dispositivo. que apresentava a recompensa e que ja nao
funciona, podem altemar..se com periodos de mau humor
e .depressao operante. 0 numero de· respostas de cada
repente vai decrescendo gradualmente e .os periodos de
nao,-resposta vao aumentando cada vez mais. Finalmente,
23
 a for~a cai a urn nivel de rea~ao apatica ocasional; e a ex-
tin~ao ja esta quase completa.
A extin~ao, tanto para operantes como para respon.:..
dentes, e algumas vezes extremamente lenta. Em uns -
poucos casos, investigadores telataram que ela absoluta-
mente -nao ocorre. Isto e urn tanto perturbador. Sugere
que alguns dos nossos comportamentos podem durar mais
tempo d9 que desejamos - que poderemos, talvez a vida
toda, continuar afligidos por ansiedades, · compuls9es e
obsessoes que nao sao faceis de suportar. Teremos de
ter sempre medo de cachorros? Ou de falar em publico?
. ~ . .
Nunca seremos capazes de deixar de fumar? Esta melo-
dia ou este pensamento doloroso nunca nos. abandoriaraO'?
Provavelmente as coisas nao sao assiQ1J8,o ruins.· Por
. ' \( .·$;'" .
exemplo, o alegado fracasso em obter :exfih~ao · de uma _
contra~ao pupilar, de uma secre~ao: saliv.ar, ou de qual-
quer outro respondente condicionado, pode ter uma. ex-
plica~ao diferente. Sabemos que o comportamento ope-
rante pode, as vezes, produzit efeitc;>s .respondentes incon-
dicionados. Isto e freqiientemente citado coino o con..
trole voluntario da a~ao involunttiria. Assim, disten-
dendo certos musculos pode-se prover o estimulo incon-
dicionado. para uma mudan~a na freqi:iencia do pulso; na .
constri~ao de vasos sangiiineos, etc. Pocle bein set que
· tal contrOle operante do comportaniento respondente, es-. .
tabelecido ao mesmo tempo que o respond¢nte/ tenha _~ido . -
condicionado e se .possa manter .. p;te~ptq -depp~{ qu~ :q .
estimulo condicionado .para'o respontlente.:·i~.hti~'J>tt4tdQ},;~: .
todo o efeito. Em outnis. pala~ra~,,-.~ntes ~de_;Jenito~-:~et-, ·
teza de que o respondente · nao se extinghita, ·devemoS
24
_estar ceitos de que- o nosso sujeito nao teftha descoberto,
sem o sabermos e. sem ele mesmo saber, seu proprio ope-
rante especial para produzir o mesmo efeito em uma base
incondicionada - isto e, produzindo ~m si mesmo a es-
timula~ao que ira eliciar a mesma mudan~a respondente.
Tambem os operantes condicionados podem i:esistir
..J
-:;.
a extin~ao, as vezes em urn grau fantastico, de modo que,
segundo todas as_ aparencias, podem ser inextinguiveis.
Experimentos com animais- retratam isso mais vivamente.
I
I,
Por exemplo, urn -pombo pode ser condicionado a bicar I!
urn pequeno disco ou chave na parede de uma camara
experimental. Quando, ap6s urn Iongo treino, come~a a II
extin~ao, o · pombo podera · bicar -·7. 500 vezes durante a
primeira bora, sem qualquer sinal de parar. Nas duas II
II
horas .seguintes podera emitir aproximadamente. o mesmo [I
nufi}ero ·de respostas,_ e a extin~ao estad ainda Ionge --de
se completar. Observando o pombo, poder-se-a dizer que rl
esta incuravelmente vi~iado e:m bicar o 'disco; e poder-se-a
ficar admirado de como nao para de pura exaustao. Pos-
teriormente, e claro, nao mais respondera, mesmo quando
ja estiver descansado- e outra vez faminto do alimento
que o bicar produzia. Mas urn observador impadente
facilmente teria concluido e manteria a opiniao de que
o habito era inquebravel.
7. Refor~amento intermitente
Urn primeiro agente n:a produ~ao de uma grande re-
sistencia a. extin~ao em casos como este e 0 esquema de
rejor~o que esteve previamente em efeito. Quando se re-
25
! '

compensa urn pombo intermitentemente, em vez de em to~
das as ocasioes em que emite a resposta, uma forr_na .de
, comportamento muito semelhante ao de uma ma~mna
ini se desenvolver, depois de urn treino Iongo e cont~nua­
do. Se os refor~amentos forem apresenta~os em. mter-
valos de tempo regulares, digamos cada cmco mmutos,
breves periodos de nao-resposta alternar-se.-ao regular-
, mente com periodos mais longos nos quats o p~mb"o
acelera rapidamente ate uma freqliencia ~uas ou, tres ve-
zes maior por segundo e continua neste ntmo ate a ocor-
·
rencia do proximo refor~amento. . 0 pornb 0 parece "-con-
. .
tar o tempo". Nunca responde diretamente depms de
comer (nunca foi refor~ado por responder nessa ~ca­
siiio), mas volta a bicar intensamente quando se .aproxtma
do momenta do outro refor~amento. " qiiencias podem ser mantidas durante muitas horas em
Os que trabalham em laborat6rio referem-se a :ste
esquema como urn esquema de refOr~o de intervalo flXO,
pois urn certo tempo fixo deve decorret entre os reforca-
mentos. Quando os refor~amentos, entretanto, depende-
rem de o pombo apresentar o mesmo numero de re:.~ost.as
em cada ocasiao, aparecera uma altera~ao na frequencta,
em parte similar. Quando 0 refor~o e apresentado, 0 pom-
bo come os araos, espera urn pouco, e en tao bica o numero
de vezes ex~ido, digamos vinte, num~ seqUencia consta~­
te ~ rapida. Isto e conhecido como urn esquema ~e razao
fixa, neste caso uma razao de vinte-para·um - vm~e res:
postas para .urn refor~amento. (Nao ocorre aqut urn
"discrimina~ao de tempo", pois sabe-se que o pombo nada
obtem parando depois de comer.)
26
Urn quadro diferente de freqtiencia de; resposta emer-
ge quando o refor~amento do pombo ocorre de forma
randomica ou ao acaso, em intervalos variaveis ou de-
pais de urn numero variavel de respostas .·- isto e, em
.urn esque.ma de intervalo variavel ou de raziio varitivel.
Verifica-se uma freqliencia singular e regular de resposta,
interrompida somente quando o pombo para alguns se.,. ·
gundos para comer. Esta freqtiencia pode ser alta ou
baixa, dependendo do tipo de esquema (o esquema de ra-
zao variavel produz, tipicamente, freqtiencias mais altas do
que 0 esquema de intervalo variavel) e do tempo medio
que decorre entre os refor~amentos. Qllando os refor~os
.sao pr6ximos, as bicadas podem ocorrer na propor~ao de
tres para quatro por segundo; quando mais distantes, a fre:-
qiiencia pode ser de tres ou quatro por minuto. EssasJre-
cada dia e durante muitas semanas.
Os efeitos desses esquemas de refor~o diferentes po""
dem ser notados, como se disse no infcio desta sec~ao, no
total de respostas que ocorrem quando o refor~amento
fOr completainente descontinuado - quando ocorre a ex,.
tin~ao. Depois de urn procedimento de refor~amento
continuo, quando cada resposta e refor~ada, pode-se es-
perar que a extin~ao reduza rapidamente a freqiiencia de
respostas com sinais claros de disturbios, ta~ como foi des-
crito na Sec~ao 6. 0 refor~amento intermitente, entretan-
t?, :_mpresta em todos os ca~os uma-~io~ resistencia a ex-
. tm~ao, com menos envolv1mento emoctonal. 0 orga-
tiismo podera. responder, hora ap6s bora, da mesma ma-
neira constante e imperturbada que exibia durante o
27
2 - Keller
/
tremo. Isto e especialmente evidente quando as recom-
pensas eram apresentadas em intervalos irregulares de
tempo - algumas vezes em nipida sucessao e, em outras,
distanciadas urn as das outras. A freqiiencia de respostas, ·
sob este esquema, podeni nao ser distinta da freqiiencia
mantida nas primeiras horas de extin<;ao.
A considera<;ao do efeito dos diferentes esquemas de.
refor<;o sobre 0 responder posterior, nao-refor<;a,do, leva
a conclusao de que urn importante fator responsavel pela
resistencia a extin<;ao e a similaridade das condi<;6es . de
treino com as condi<;6es de extin<;ao. Quando os refor-
<;os sao dados regularmente para cada respost: duran-
te o treino, a mudan<;a das condi<;6es para o nao-refor-
<;amento e drastica. Mas quando o organis~o ja se aco~..,
tumou apassar longos perfodos sem um·refor<;o, as_ condt-
<;6es de .extin<;ao, pelo menos por algum tempo; sao exa-
tamente as mesmas que as condi<;oes de treino. A menos
que 0 organismo possa perceber a diferen~a ent;e as duas
condi<;6es, a freqiiencia do responder contmuara a mesma
de antes. Se esta conclusao for admitida, deve-se pensar
que o comportamento operante esta mais ligado do que
foi sugerido antes nestas paginas co~ os estimulos am-
bientais. ~ste e urn ponto importante e ao qual voltare-
mos em sec<;6es mais adiante.
8. Comportamento supersticioso
i .
Em todos os esquemas de refor<;o descritos na Sec-.
-I'
<;ao 7, 0 sujeito experimental, o pombo, tinha de bicar
uma chave antes de poder obter seus graos; o refor<;a-
28
men to, dizemos, foi contingente a urn ·fipo especifico de
resposta. Isto, talvez, e o que ocorre normalmente em nos- ·
sas vidas, bern como em experimentos com pombos; usual-
mente temos de fazer alguma coisa para obter algo. Mas
nero sempre. As vezes parece que somos pagos por nao
fazer nada.. Que efeito, se e que existe algum, tern o re-
for<;amento sobre n6s?
Considere outro estudo ·com pombos. . A ave esta
novamente faminta na camara experimental, na qual teve
anteriormente uma chance de comer graos em urn alimen-
tador. Niio existe, agora, uma resposta particular que deve
emitir, ou que foi condicionada, mas, a intervalos regula-
. res de quinze segundos, urn alimentador cheio de graos lhe
sen1 apresentado automaticaniente, durante urn periodo
· de cinco segundos. Sera este comportamento afetado de
modo reconhecivel pelo refor<;amento niio-contingente?
A resposta e sim. Nessas condi<;oes, depois de pouco
tempo o pombo desenvolvera uma forma espepial de res-
posta. Pod era· _an dar em circulos dentro da .camara expe-
rimental; podera apoiar-se ora num pe ora no outro; po-
dera alongar seu pesco<;o repetidamente em dire<;ao a urn
angulo da camara; .podera "inclinar-se" e ciscar repetida-
mente, ou apresentar movimentos de bicar o assoalho da
camara. Qualquer uma dessas a<;6es, ou outras, podem
aparecer com uma freqiiencia igual a de bicar urn disco,
embora nunca produzam realmente os graos. A resposta
parece ter sido "colhida" pelo refpr<;amento qu~ ocorreu
~ depois da sua primeira emissao. Antes que tivesse tempo
de se extinguir, urn outro refor<;o. foi. dado; e assim uma
completa "supen;ti<;ao" foi estabelecida, nao diferente do
29
··J
comportamento de urn jogador que fa]a com suas fichas
ou da voltas ao redor da mesa para mudar a sorte.
Para que os resultados sejam como estes, o refor~a­
mento nao-contingente deve ser freqiiente no principia.
Quando isto nao se verifica, a resposta acidentalmente · re-
for~ada sera suficientemente extinta para ser substituida
por outra que, por sua vez, pode ser substituida por uma
outra, destruindo deste modo o efeito ritualistico. 0 com-
portamento. supersticioso desenvolver-se-a, entretanto, ra-
pidamente quando se come~a. com refor~amento pouco
espa~ado. f:sse intervale pode ser gradualmente aumen-
tado, sem causar uma modifica~ao no comportamento,
quando este ja estiver firmemente estabelecido. No caso
do tempo entre os refor~amentos ser sempre o mesmo, de-
senvolver-se-a uma discrimina~ao de tempo, como no ~a­
so da resposta de bicar sob urn esquema de intervale fixo.
Ainda assim, a resposta supersticiosa pode ser dificil de
ser eliminada. Urn pombo pulou de urn Iugar para outro
mais de 10.000 vezes antes de alcan~ar urn ponto pro-
ximo da extin~ao.
9. Baixa freqtiencia de resposta: Uni exemplo
Os psic6logos tentaram, algumas vezes, controlar a
freqiiencia da resposta de outras maneiras diferentes das
acima descritas. Freqiiencias altas foram alcan~adas refor-
~ando-se respostas somente ·quando uma segue logo a
outra, e freqiiencias baixas foram alcan~adas refor~ando­
-se respostas somente quando aparecem distanciadas,
quando 0 "tempo entre-as-respostas" nao e menor do
30
que urn determinado numero de segu~dos ou minutes.
Urn exemplo pode ser interessante.
·Nosso sujeito, urn menino, esta sentado a uma mesa
em sua casa, com urn microfone a sua frente e uma pe-
quena xicara a sua direita. Atn1s dele localiza-se o ex-
perimentador, com urn punhado de moedas e urn crono-
metro. f:Ie acabou de instruir o menino para "pronunciar
· palavras" ao microfone, na velocidade que quisesse, po-
dendo repetir a mesma palavra se quisesse, evitando sen-
ten~as ou outras seqiiencias significativas. A estas instru-
~6es, o experimentador acrescentou; "De vez em quando,
quando voce, estiver fazendo isso, eu depositarei uma moeda
na xicara. Quando o experimento terminar, todas as
moedas. que obtiver serao suas. Tudo o que ·tern a fazer
e pronunciar palavras".
Depois de alguma hesita~ao, as palavras come~aram
a aparecer: microfone, arvore, grama, mesa, jantar, papel
de parede. . . nomes de objetos na sala ou fora dela, e
palavras de referenda mais pessoal. Uma das palavras,
flares, e tomada ao acaso pelo experimentador como a
ocasiao para dar a moeda. Imediatamente e repetida, e
novamente refor~ada, ate cinco moedas terem sido distri-
buidas em rapida sucessao. A resposta do menirto e con-
dicionada; pode entao ser tentado o controle da freqtien-
cia. De agora _em diante, flares sera refor~ada somente
quando· for pronunciada dez segundos ou mais depois da
ultima vez que foi enunciada.
A palavra sofre, a principia, alguma extin~ao, sua
for~a diminui e e pronunciada com menos seguran~a, ate
deixar de ser enunciada. Entao, depois de uma · serie
31
 de outras palavras terem sido emitidas, reaparece; e como
ja se haviam passado os dez segundos, e novamente refor-
~ada:. Depois de alguns minutos de treino, desenvolve-se
uma discrimina~ao de tempo e a maioria das respostas
flares. e refor~ada. (Se uma ocorre antes, naturalmente,
o experimentador simplesmente recoloca seu cronometro
no zero e passa a exigir rim atraso de dez segundos mais
para que a proxima resposta seja bern sucedida.)
Uin dos resultados desse pequeno estudo pode sur-
preender. Entre cada apresenta~ao da palavra flares, o
menino nao permanecia calado, como poderia ter feito. Ao
contrario, preenchia o periodo de dez segundos com ou-
tras palavras, e estas palavras ocorriam completamente
ao acaso. A medida que a pratica continuava, desenvol-
via-se uma sequencia suficientemente regular dessas pa-
, lavras -·.. urn tipo de "encadeamento s-qpersticioso". Ime-
diatamente dep~~s de· receber uma moeda, essas palavras
eram previsiveis mas, quando se aproximava o momento
do proximo refor9amento, as mesmas palavras sempre
apareciam na ordem: navio; mar, bonito, vermelho, flares.
Parece que temos aqui urn out~o .caso de refOr!tamento .
niio-contingente, desde que so a ultima resposta na ca-
. deia era. exigida para· obter a recompensa.
Mas ha mais do que isso. · 0 menino, neste experi-
mento, apresentou uma excelente "discrimina9ao de tem-
po". Raramente respondia, depois do refor9an'lento, em
menos de dez segundos, e .raramente ultrapassava mais
do que dois ou tres segundos. E, no entretanto, ele nao
tinha nenhuma ideia de que o experimento envolvia tem-
po! ~le "pensava" que tinha de aprender uma serie de
32
res post as e, .quando o experimento termfnou, desculpou-se
por nao ter sido bern sucedido, dizendo: "Sinto muito, mas
eu nao pude dizer todas as palavras que voce queria que
eu dissesse". Tais resultados colocam quest6es interes-
santes relativas a parte desempenhada pelo nosso proprio
comportamento quando estamos discriminando "tempo".
0 encadeamento superticioso de respostas atrapalhou ou
auxiliou na contagem inconsciente de tempo? Mais ge-
ralmente, quando discriminamos o tempo sem urn relo-
gio, a_ que respondemos?
nste experimento poderia nos levar a duas dire96es.
Poderiamos discutir estudos similares mais formais do que,
tecnicamente, e conhecido como diferencia~iio de baixa
freqilencia de resposta (abreviadamente, drl), com ani-
mais, crian9as e estudantes de college como. sujeitos ex-
perimentais. Ou poderiamos passar diretamente para .o
topico de encadeamento estimulo-resposta. A primeira al-
temativa nos conduziria a uma especializa9ao maior do
que aque]a que deveria ser incluida em urn Iivro como este
e a segunda sera melhor compreendida depois de termos
preparado mais completamente o caminho. Portanto, vamos
agora mudar de assunto simplesmente passando para uma
questao, ou pelo menos urn aspecto de uma questao, que
tern preocupado · a humanidade desde os primeiros ,dias
- a questao da puni~iio e seus efeitos.
I 10. Extin~ao e reforQo negativo
Se Jhe fosse pedido que sugerisse modos de apres-
sar a extin9ao de urn operante fortemente condicionado,
e quase certo que, inais cedo ou mais tarde, voce vma
33
com a proposta de que a puni~iio darla o efeito desejado.
E puni~iio significaria provavelmente algo como urn cho-
que, urn tapa, urn golpe ou outro refor~ador negativo
que pudesse ser aplicado sempre que. a resposta. indese-
jada ocorresse. Se o pressionar a barra da crian~a, na
Sec~ao 4, tivesse sido recompensado por muitos dias, in~ ·
termitenteniente, e · com muitas outras coisas alem do
chocolate, e se voce tivesse agora de extinguir a resposta
tao nipido quando possivel, voce nao sugeriria uma ma-
neira de encurtar o processo, como urn leve choque ou
urn tapinha na mao? Nao seria isso psicologicamente
aconselhavel? Nao foi dito, na pagina 21 deste livro, que.
o comportamento da crian~a ficaria enfraquecido se a·.
cada resposta a barra urn choque fo~se aplicado? E nao
foram os refor~adores negatives definidos, em parte, como
os estfmulos que enfraquecem as respostas que os pre-
cedem?
. A. qu~stao da eficacia do castigo ou da puni~ao "cor-
poral'' ou "fisica'' e multo antiga e nao pode ser respon-
dida com urn simples sim ou nao. £ indubitavelmente ver-
dade que urn refor~ador negativo bern forte pora fim a
quase todas as especies de comportamento operante que se
possa citar; mas isto nao abrange toda a hist6ria. Muitos
pais descobriram por si mesmos · o valor de "!!mas boas
palmadas" para por fim ao mau comportamento cronico
das crian~as; entretanto, nem todos os pais se sentern· in-
teiramente. seguros ace rca dos possiveis efeitos poste-
riores.
Por razoes 6bvias, existem muito poucos,' ou quase
nenhum est~do experimental sobre o efeito de puni~oes
34
severas sobre as rea~oes humanas. Re~·entemente, entre-
tanto, urn born numero de dados vern sendo acumulado
em pesquisas com animais. 0 fruto destas investiga~oes
pode ser resumidamente anotado aqui. Em primeiro Iu-
gar, ja esta bern estabelecido, como se observou acima,
que o efeito de urn choque forte ou de qualquer outro
refor~ador negative sobre urn operante, como o pressionar
a barra, e diminuir a sua freqUSncia de ocorrencia. Isto
e verdade se o estfmulo fOr aplicado durante o refor~a­
mento. positivo regular, durante o refor~amento positivo
intermitente, durante a extin~ao ou antes que tenha ocor-
rido qualquer condicionamento de operante. Alem disso,
dentro de certos limites, quanto mais forte for a puni~ao,
maior sera 0 efeito sobre a freqliencia operante.
Em segundo Iugar, se o animal punido for deixado na
mesma situa~ao de puni~ao por urn periodo de tempo su-
ficientemente Iongo em qualquer uma daquelas condic;oes,
I
mas sem o ·choque ou outro agente punitive, recobrar-se-a
!
dos efeitos. A recupera~ao sera aparentemente mais ra- I
pida se a resposta punida continuar a receber refOr~o
positivo, quer regular quer intermitente, do que se esti-
I
ver sob extin~ao ou em uma situa~ao aparentemente "neu-
tra". Em urn estudo com animais, em que ratos brancos
foram punidos com choque durante os primeiros dez mi- · t
nutos de extin~ao da resposta de pressionar a barra, o efei-. '
to da puni~~o desapareceu quase que inteiramente durante
uma hora na qual os sujeitos estiveram confinados na
situa~ao, mas com a bLlrra ausente. Quase tanto tempo e
quase tantas respostas foram em seguida requeridas antes
que o pressionar a· barra se extinguisse; e os ratos com-
35
 portaram-se como animais que. nunca tivessem recebido
choques antes.
Em terceiro Iugar, parece que as respostas emocio-
nais associadas com o estlmulo punitivo sao condiciona-
l forem satisfeitas, entao o efeito da puni~ao pode parecer
das de modo respondente. Quando, por exemplo, urn
choque for aplicado em Iugar especial, digamos a camara
-1
experimental, o proprio Iugar torna:.se urn estlmulo con-
dicionado capaz de produzir os mesmos efeitos que o
. choque. E, com estas modifica~oes respondentes, ocorre
a depressao de qu:alquer comportamento operante em cur-
so, 0 lugar,. pode-se dizer, provoca medo e 0 medo
poe fim a outras coisas - por exemplo, ao pressionar a
barra. A extin~ao do medo, como qualquer extin~ao res-
pondente, requer que o estlmulo refor~ador incondiciona-
do (o choque) seja suspenso. A medida que a extin~ao
prossegue, e o Iugar perde os seus aspectos atemorizado-
.res, a resposta operante come~a a reaparecer. 0 .animal
volta a atividade, refor~ada ou nao, que prevalecia antes
que o choque fosse aplicado. Se ainda estiver em vigor o
. refor~amento positivo intermitente, 0 animal volta a fre-
qiiencia anterior; se as condi~oes de extin~ao ainda estive~
rem presentes, retoma mais uma vez o responder nao
refor~ado. · A puni~ao podera ter adiado o responoer,
mas nao tera alterado permanenteme:nte a freqiiencia ope-
rante, nem acelerado o processo de extinc;ao o'perante.
S6 se deve esperar este efeito· transit6rio da puni~ao.
se os estlmulos punitivos nao forem mais aplicados e ape-
nas se o sujeito permanecer na /situa~ao punitiva por urn
periodo de tempo suficientemente Iongo - isto e, ate
que o efeito dos estlmulos condicionados emocionais te-
36
( i
\
nham tido oportunidade de se exting~i~~ Se, entretan-
to, o animal, depois de ter sido punido, tiver oportunidade
de escapar para urn ambiente diferente, no qual nao re:.:
ceba mais puni~ao e no qual todas as suas necessidades
nao ser trat;~.sit6rio. 0 resultado da puni~ao sera entao a
esquiva, t6pico sobre. o qual versara a Sec~ao 16·.
11. ·Generaliza~ao
Alguns casos de "a:prendizagem" _nao se qualificam
nitidamente como tal. Representam, ao inv6s, o reapa-
recimento de comportamentos que ja foram bern reforc;ados
sob as mesmas, ou aproximadamente as mesmas, condi-
c;oes. Veja por exemplo, o caso de urn chipanze que apren-
deu a usar uma longa vara de bambu para alcanc;ar urn
fruto fora de sua jaula. Suponha que lhe . sejam dadas,
agora, duas varas menores que ele segura em suas maos;
nenhuma delas alcanc;ara 0 fruto, mas pqderao ser encai-
xadas uma na outra para consegui-lo. Suponha que, ma-:-
nipulando . as duas varas, ele traga a extremidade s6Iida
da mais fina. a uma estreita relac;ao visual com a extremi-
dade tubular da mais grossa. · Nao sendo principiante em
cutucar buracos com peda~os de pau, .pod era rapidamente
inserir uma extremidade dentro da outra. Entao, de pos-
se de uma unica vara comprida, pode voltar-se e, num re-·
lampago, alcan~ar o alimento. Podera ter ocorrido em
tudo isso uma pequena quantidade de ·condicionamento
operante, e o macaco podera, num teste futuro, alcanc;ar
mais rapidamente o objetivo. Mas o aspecto marcante da
37

solu9a0 que deu ao problema e 0 restabelecimento de
dois atos que tinham sido primeiramente condicionados
na presen9a de estimula9ao semelhante.
~stes restabelecimentos de respostas previamente
condicionadas foram tratados por Thorndike, alguns anos
atnis, como exemplos de "respostas por analogia", uma
lei basica do comportamento. Enunciava a lei simples-
mente: "A qualquer situa9ao nova o homem responde
como o faria a uma situa9ao semelhante, ou a urn ele-
mento semelhante dela". Pavlov, pensando exclusivamen-
te no comportamento reflexo, e .mais em cachorros do
que em seres humanos, chegou independentemente a uma
lei similar, que denominava generalizQfiiO. Hoje. usamos
o termo Pavlov e nao o de Thorndike, mas o aplicamos
tanto a respondentes como a operantes e reconhecemos,
mais do que qualquer urn desses pesquisadores, sua im-
portancia te6rica.
lj
IIj! Urn exemplo de generaliza9ao do ·laborat6rio de
I! Pavlov pode ajudar aquL Urn cao foi condicionado a sa-
i! livar ao som de 1.000 ciclos. Quando a resposta ja estava
ld'l bern estabelecida para este tom (0 unico usado durante 0
I]
I· treino), urn certo numero de outros tons foram testados
I
i sosa "tern gosto de quando o meu pe esta dormindo".
no seu efeito sobre a saliva9ao do cachorro. Sem exce-
:! . 9ao, eliciaram a resposta, embora num grau menor do
que o tom original. Os estimulos "generalizaram". Istcf
e, 0 cachorro respondeu a todos eles do mesmo modo,
exceto na quantidade de saliva secretada. Os tons que esta-
vam mais pr6ximos da freqiiencia do estimulo condicio-
nado produziram, em geral, maior fluxo salivar do que
38
·i
os tons que estavani mais afastados na escala de fre-
qliencia.
Pode-se ·entao dizer que, quando urn operante ou
urn respondente foi condicionado em uma dada situa9ao-
-estimulo, podeni ser evocado, sem condicionamento pos-
terior, em uma outra situa9ao-estimulo. A isto se acres-
centa que o poder dos novos estimulos de evocar .a res-
pasta dependera das caracteristicas ffsicas que as situa-
96es tiverem em comum. Indo mais adiante, pode-se
dizer que ha varios continuos ou escalas, ao Iongo dos
quais os estfmulos podem se generalizar. Tons, por exem-
plo, generalizarao ao Iongo da escala de freqiiencia de
vibra96es sonoras (toilalidade), de uma escala de ener.
gia {altura) e possivelmente de outras escalas. Urn conti-
nuo comparavel existe na visao, no tato e nos outros
sentidos.
Na vida diaria, exemplos de generaliza9ao sao tao
comuns que passam despercebidos. Sao talvez mais
obvios nas crian9as, nas quais as vezes sao divertidos.
Os ·pais sorriem quando a crian9a diz "au-au" a vista de
urn cavalo, ,de uma vaca, ou de qualquer outro .quadrupede;
ou podem rir quando ouvirem unia crian9a dizer que a ga-
Podem deixar de perceber que o mesmo principia esta
envolvido quando as respostas sao muito ma:is comuns e
.! menos diamaticas. Podem nao ver que o "galinha" de
uma crian9a diante de uma codoma e, essencialmente,
0 mesmo que 0 ~'passarinho" de outra. 0 fato e
este: uma crian9a ou urn adulto, que foram condicionados
a responder de uma certa maneira a uma dada situa9ao,
39
 .
responderao ainda da. mesma maneira quando cada urn
dos elementos da situa~ao tiver sido alterado ao Iongo de
urn ou mais continuos basicos, ou mesmo quando alguns
elementos. da situa~ao original nao estiverem presentes.
Ha urn outro aspecto deste quadro, que deve ser
indicado brevemente aqui, para preparar a discussao da
proxima sec~ao.' A generaliza~ao pode ocorrer tanto
durante a extin~ao quanto durante o condicionamento~
Urn exemplo de estudo de extin~ao respondente mostrara
. como isso acontece. Suponha que a resposta galvanica
da pele (mudan~a da resistencia eietrica da pele) foi con-
dicionada a· urn estimulo vibrat6rio em cada urn dos qua-
tro pontos seguintes do corpo de rima pessoa - a barriga
da pema, a coxa, o lado e o ombro~ Agora, suponha que,
depois, a ~xtin~ao seja parcial mente conseguida em um dos
quatro lugares, por exemplo, elitimulando a barriga da per-
na s6 com o vibrador, ate que a rea~ao condicionada da
pele tenha sido · grandemente reduzida. Se, neste . estagio
do ,experimento, voce testar o efeito do vibrador nos ou-
tros tres lugares, verificara que, em cada urn deles, a res-
pasta tambem ficou enfraquecida, com o menor efeito na
maior distancia da barriga da .pema. . Posteriormente, e
claro, nenhum dos lugares produzira efeito algum e se po.:
dera entao dizer que a "generaliza~ao da extin~ao" ja
esta completa.
12. Discrimina~ao
Ja se deve ter tornado claroque os operantes, tanto
quanto os respondentes, ficam ligados a estimulos b~m
cedo na vida dos indivfduos. Talvez o leitor possa mesmo
40
ter perguntado se nao fica ligado a estf~ulos demais. Se
a generaliza~ao opera da man~ira aqui descrita, nao iria
uma pessoa passar a vida toda respondendo da mesma
maneira a todos os estimulos visuais, e de outra a todos
os estimulos auditivos, e assim por diante? . Nao iriam
todos os estimulos visuais generalizar-se ate certo ponto
· uns com os outros? E isto nao seria igualmente verdade
para todos os outros sentidos?
Sabemos, e claro, que isto nao acontece. A pergunta
e tola. No · entanto, como ocorre que pessoas fa~am
distin~oes entre as c~isas como o fazem? Por que e que
somos capazes de distinguir, nao s6 entre ·caes e outros
quadrupedes, mas entre varias ra~as ·de caes? E por que
os criadores de caes sao capazes de ver muito mais diferen-
~as do que nos podemos?
Perguntas como estas podem ser respondidas simples-
mente enunciando o princfpio da discrimina~ao. Cone-
xoes entre· esti.mulos e respostfis que se efetuaram por
generaliza~iio, podem ser separadamente rompidas. Ou,
para dizer de outro modo, 0 refor~amento podera ainda
ser mantid~ piua a conexao original, enquanto que se per-
mitira que todas as conexoes derivadas sofram extin~ao.
No fim, a resposta seni exclusivamente, ou quase que ex-
clusivamente, apresentada ao estimulo original;. e, corres-
pondentemente, os estimulos generalizados ficarao sem
efeito.
Lembre-se da crian~a que, ao pressionar a barra, pro-
duzia chocolate. Quando esta resposta fosse bern ·condicio-
nada, a crian~a teria, indubitavelmente, continuado a res-
ponder a barra a despeito de grandes modifica~6es na si-.
41
 ~-r-·----·
cj
tuac;ao-:estfmulo. Mudan~as sensiveis na ilumina~ao da
I
sala, no fundo visual da barra e da vasilha, ou na apa~
rencia da propria barra nao perturbariam. apreciiwelm.ente
o seu comportamento. Isto e, haveria uma consideravel ge-
neralizac;ao de estfmulos. Mas, se o pressionar a barra fosse
reforc;ado somente com grande ilumina~ao, somente quan-
do o fundo visual fOsse de urn certo padrao, ou somente
quando a barra fosse de urn certo tamanho, cor ou lumino-
sidade ter-se_-ia entao formado uma discrimina~ao: a res-
posta ter-se-ia extinguido em todas as situa~oes, exceto num
conjunto muito restrito de condi~oes de estimulos.
0 caso resp;ondente e .similar. 0 cao, no laboratorio
de Pavlov, condicionado a salivar na presen~a de urn som
de 1.000 ciclos, salivani tambem· a sons de outras fre,..
qtiencias, devido a generaliza~ao. Mas se estes outros sons
forem apresentados ·repetidamente, sem ·serem acompanha-
dos de alimento, .e se o refOr~o continuar acompanhando
· o som de 1.000 ciclos, chegara o momenta em que nao
mais eliciarao a salivac;ao, embora o som de 1.000 ciclos
continue a elicia-la.
Isto e urn relato super-simplificado do processo de
discriminac;ao, e obje~oes ja devem ter ocorrido ao leitor.
Por exemplo, e a generaliza~ao da extin~ao mencionada ·
na ultima sec<;ao? No .caso do cao de Pavlov, por que e
que o nao-refOrc;o, associado a sons que nao o de 1.000
~iclos, nao enfraquece a resposta ao proprio som de 1.000
.· ciclos? A resposta e que, de fato, isso acontece, mas o som
de 1.000 ciclos nao perde tanto 0 poder de eliciar quanto
os outros. Cada refor~o associado com o som de 1. 000
ciclos compensa de Ionge a perda devida a genera-
42
;;-;,,
·lizac;ao. Alem disso, o aumento em poder para exct-
tar a resposta dos tons generalizados (atraves do re-
forc;amento do som de 1.000 ciclos) e mais do que anu-
lado pelo efeito direto da extin<;ao sobre estes tons. Gra-
dualmente, por peqtienas adi~oes e subtrac;oes, as duas
cond~~oes de estimula~ao · se separam uma da outra e a
discrimina~ao se estabelece.
:Este processo foi demonstrado repetidas vezes com
animais, e com menor freqiiencia em seres humanos, es-
pecialmente com adultos. Uma razao importante para
explicar porque isso ocorre e a de que a maioria dos seres
humanos, antes de chegar ao laboratorio, ja · traz consigo
·uma historia complicada da func;ao discriminativa. Nao
e sempre que se pode come~ar do infcio e romper uma ge- ·
neralizac;ao. Os estfmulos discriminativos da vida diaria,
em gera1, ja se adiantaram aos nossos procedimentos ex-
perimentais. Alguma melhoria· pode ser possivel; poder-
.-se-a talvez provocar um ligeiro auinento na percentagem
das respostas que serao reforc;adas. Raramente se tern a
possibilidade de limitar suficientemente a amplitude dos
valores do estimulo que produzirao uma dada resposta.
Pode-se, naturalmente, testar ainda a capacidade fi-
nal do sujeito em discriminar. Pode-se determinar, por
exemplo, qual a menor diferen~a que pode existir entre dois
estimulos antes que a probabilidade da resposta correta
seja menor que 50 por cento. Esta e, ha muitos anos, a I
preocupac;ao de um ramo da psicologia denominado psico-
fisica, que tern como sua principal esfera de atividades o I
estudo da sensitividade a diferen~as entre estimulos no
ser humano adulto. Ocasionalmente ·tern preocupado tam- I
i·
43
 bem aqueles que estudam o comportamento de animais e
de crian~as - as vezes com resultados· surpreendentes.
Em urn experimento hoje famoso, Pavlov treinou urn dio
a discriminar visualmente · entre urn circulo e uma elipse.
. Passo a passo, ele aproximou a elipse da forma do circulo.
Por fim, a discrimina~ao se desfez, como seria .de ·se espe-
rar. Com_ as continuadasexigencias feitas, o c~o terminou
"neur6tico", ate o ponto de ser necessario reniove-lo da
situa~ao experimental e dar-lhe urn Iongo descanso, para
proteger sua saude. Em outro experimento russo, uma
crian~a de seis anos foi compelida. a distinguir sucessiva-
mente entre batidas do metronomo de 144 batidas por
minuto e batidas de 92, 108, 120 e 132 por minuto. Nao
houve nenhuma dificuldade em discriminar entre 144 e
92 ou 108 batidas por minuto; a distin~ao se fez facilmente,
em umas poucas tentativas. Mas as dificuldades come~a­
ram quando 0 de 144 foi comparado com 0 de 120 batidas
por rninuto; e, quando foi tentada a discrirnina~ao entre
144 e 132 batidas por rninuto, a crian~a tomou-se seria-
rnente perturbada,. exibindo rudeza, desobediencia, excita-
mento e comportarnento agressivo, bern como sonolenda
na situa~ao experimental.
Ha rnuito mais coisas que poderiam ser aqui in-
cluidas a respeito da discrirnina~ao. Livros inteiros foram ·
escritos sobre este t6pico, em geral com 0 titulo de "sen-
sa~ao" ou "percep~ao". De urn ponto de vista cientifico,
este t6pico esta provavelrnente mais adiantado do que
qualquer outro t6pico em psicologia. No momento, contu-
do, o nosso principal objetivo e cornpreender a "aprendi-
zagem" e o leitor pode ver agora que a discrimina~ao de-
44
. sernpenha urn papel bastante important~·· nesta hist6ria.
Milhares, taivez centenas de rnilhares de discrirnina~oes
devem ser feitas por cada urn de nos para ·eilfrentar as
exigencias do mundo exterior. · 0 cornportarnento operan-
te; para o qual, no inicio, nao .se pode encontrar urn esti-
mulo eliciador, rnais tarde pa'ssa a ser quase que cornpleta-
meilte controlado pelos estirnulos. E isto se verifica ape-
nas porque se dao refor'~os na presen~a de urn estimulo e
se retirarn refor~os na presen~a de outro.
Talvez. o leitor lernbre que, na Sec~ao 3, sobre Con.;.
diciortarnento Respondente, e outra vez na Sec~ao 4; sobre
Condicionamento Operante, foi apresentado urn diagrama
simples, corn o firn de tornar ~sses principios mais cla-
ros. Vejarnos agora que especie de quadro se poderia
usar para reptesentar a discrimina~o. 0 leitor ja sabe an-
tecipadarnente, e Claro, que nada de muito novo sera inclui-
do. Virnos que a generaliza~~o e rnerarnente uma especie
de bonus derivado do condicionamento, e a discrimina~ao
(a que bra de urn a generaliza~ao) e, ern grande parte, uma
questao de extin9ao.
Quando se toma o caso da discrimina~ao respondente,
enfrentamos dificuldades logo de inicio. Porque qualquer
condicionamento respondente · requer certo grau de dis-
cnmma~ao. Por exernplo, o primeiro efeito do parea-
mento de urn ·som de 1.000 ciclos com alimento, para urn
cao preso em arreios na camara experimental, e condi-
cionar a saliva~ao ao som mais a estimula<;ao dos pr6prios
arreios e mais o que possa ver, ouvir e cheirar dentro da
sala. Nao se refor~a, entretanto, na presen~a de todos
estes estimulos, ·a menos que o som esteja presente. As-
45

sim, a resposta e extinta mi' ausencia do som, mas apa-
rece quando o som fOr parte do composto - e isto e
discriminafilo. Mais tarde, naturalmente, pode-se ir mais
alem. Sera possivel refoi'~ar urn som e extinguir outros,
da maneira ja descrita. 0 diagrama que pode indicar esta
outra etapa tera a seguinte aparencia:
Neste . caso, sn {le-se esse-de} representa o estimulo (por
. ~ .
exemplo, o som de 1.000 clclos) que foi selecioriado entre
os outros sons para ser refor~ado. st::.. (le-s~ esse-delta)
representa os sons que nao sao seguidos de alimento e que
perdem, portanto, as conexoes com a resposta.
Do mesmo modo; pode..;se representar uma -discri-
mina~ao operante da seguinte maneira:
sA
~'-----------------R----+5
sA
No diagrama, 0 sD . indica .0 estimulo ao qual 0
operante foi associado e os S6.. indicam os estimulos
generalizados que perderam o poder de evocar a resposta.
Por isso, nao tern nenhuma conexao com o R do diagrama;
(Ao se falar destes dois casos, a palavra "indicio" e
freqiientemente usada como urn sinonimo de sn ou "esti-
mulo discrimitativo", especia!me:nte quando se trata de
46
·t.·
operantes. Seria economico ter uma outra abrevia~ao para
usar com OS respO~dentes, para indicar quando OS esti-
mulos condicionados ja foram discriminados, mas ate
agora nenhuma foi apresentada.)
Ainda urn outro ponto. 0 procedimento de discri-
nrlna~ao acima. mencionado (refor~amento sob sD e ex~
tin~ao sob st::.. ) e, as vezes, considerado como urn caso
especial de esquema de reforfo, denominado esquema mul-
tiplo. Pode-se mostrar uma discrimina~ao nao somente
pela resposta na presen~a de mh estimulo e nao-respos-
ta na prese~~a de outro, mas tambem· pelo padrao di-
ferente de freqiiencia de resposta sob duas (0~ mais) con-
di~oes de estimulO. 0 estimulo A, por exemplo, pode
·. ser apresentado sob urn esquema de refOr~o de intervalo
fixo; o estimulo B pode ser apresentado sob razao fixa;
·e o estimulo C pode ser apresentado sob razao variavel.
Depois de algum tempo, o organismo respondera, em
cada , condi~ao diferente de estimulo, com o padrao de
'j
respostas apropriado ao determinado esquema de .refor~o
ptesente naquele momento.
13. Diferencia~ao (Modelagem)
Ao tratar dos prindpios do condicionamento operan-
' .
te e respondente, da extin~ao e da discrimina~ao, discuti-
mos, em certo sentido, diversas especies de aprendizagem.
A extin~ao, q.uando considerada em si mesma, poderia pa-
recer ·mais uma questao de desaprender, mas· viu-se que e
vital em discrimina~oes, as quais ninguem hesitaria em de-
nominar de aprendizagem, e de uma especie muito impor-
47

tante, Se voltarmos agora aos exemplos que ficarain na
primeira pagina deste trabalho, descobriremos que grande
parte do territ6rio que nos dispusemos a explorar ja foi
coberta .. Mas tambem que ainda nao o exploramos todo.
A se~<rao que agora iniciamos aumentara consideravelmen-
te nossa habilidade de lidar com os exemplos que ainda
faltam e as sec<roes que seguem a aumentarao ainda_ mais.
A palavra diferem;i~iio nao e muito boa para nosso
presente prop6sito, pois e- freqiientemente usada como
se significasse discrimin~iio. Habilidade talvez fosse uma
palavra melhor, se nao incluisse coisas demais, abrangendo
tanto a diferencia<rao como a discrimina<rao. Modelagem
do comportamento e 0 termo (o .termo mais adequado para
isto seria mudan9a) usado mais comumente, mas ele tam-
bern encerra problemas, quando as vezes e usado para sig-
nificar uma mudan<ra no controle de estimulo de alguma
resposta. Assim, vamos preferir o termo diferenci~iio e
tentar fazer com que o seu sentido fique tao claro que
nao seja confundido com nenhuma outra coisa.
Comecemos outra vez com urn exemplo. Ima-
gine-se urn 1aborat6rio no qual a principal pe<ra' de equi-
pamento seja uma destas maquinas .de parque de diver-
soes, cujo funcionamento consiste e1:11 .puxar e soltar a
mola que impulsiona uma bolinha de a<ro, que vai sendo
desviada no seu trajeto sobre urn plano inclinado por uma
serie de pinos, ate que emboque em uma das diversas ca-
vidades que indicam a contagem obtida. £ste aparelho,
entretanto, e urn aparelho especial. Urn biombo oculta
do operador o curso da bola e o impede de ver o quanto
-'
puxa a mola antes de solta-la. Outro anteparo o impede
48
..f'··
de ver dois "quim6grafos". nos quais sao registradas (1)
a freqtiencia com que puxa a mola e (2) a distancia
de cada puxao. Nem pode vera escalade 15 divisoes que
fica paralela ao cabo da mola e que permite outras tantas
15 conexoes eletricas, que controlam o aparecimento de
uma luz vermelha atraves de uma janela na extremidade
. do aparel~o. (Cada ~ntervalo dessa escala esta separado
·,do segriinte por 2,8 milimetros e pode ser disposto de
modo a que' urn puxao na mola ate urn ponto entre qual- _
quer par das divisoes da escala - por exemplo, entre os
pontos 2 e 5 ou entre 10 e 13 - ocasione o aparecimento
da luz vermelha quando a bola chegar ao fim do traj~to).
A unica coisa que o operador, urn aluno de college, vai
saber e que estara participando em urn "estudo das habi-
lidades nao-visuais" e que ele vera uma luz vermelha
-piscar na pequena janela sempre que sua resposta for
correta.
A primei_ra tarefa do sujeito, depois de receber instru-
<rfies, sera a de puxar a mola durante 5 minutos .. Ser-lhe-a
dito que use para puxar a mola uma for<ra e uma freqiien-
cia que lhe pare<ram naturais e confortaveis. Cumprindo
estas instru<r6es respondera, por exemplo, com uma fre-
qtiencia de vinte e dois puxoes -por minuto, isto e, pouco
mais de uma vez cada tres segundos. A distancia media
de cada puxao (nossa medida da for<ra da- sua· resposta)
sera, aproximadamente, de 32 milimetros, mas· alguns pu- _
x6es serao .maiores e outros .
menores. Em. outras palavras,
havera urn certo grau de variabilidade na resposta, mesmo
trabalhando com uma freqtiencia e uma f0r9a 6timas.
49
 Quando este nfvel tiver sido determinado, diremos
ao sujeito que a luz agora passara a funcionar e dispore-
mos os interruptores de modo que s6 puxoes que levem
a posi~oes entre 2 e- 5 da escala produzam o aparecimen-
to d_a luz vermelha. lsto lhe da uma amplitude de 8,4
milfmetros, dentro da qual as respostas serao corretas.
Deixaremos que o sujeito trabalhe ate que tenha assegu-:
rado vinte refor~os, o que conseguira facilmente em trinta
e um puxoes. Entao, sem que tenha conhecimento, mu-
damos a disposi~ao do interruptor de 2-5 para 10-13. A
amplitude e exatamente a mesma que antes, mas colocada
mais acima ao Iongo da _escala. Exigira cerca de 179
puxoes, mais de cinco vezes do que na primeira vez, para
obter os vinte refor~os. Assim, parece que o domfnio da
primeira disposi~ao atrapalha o domfnio da segunda. En-
tretanto, com repetidas mudan~as de 2-5 para 10-13, 0 su-
jeito melhora a rapidez com que se reajusta. 0 nao-re-
fOr~o, depois de uma serie de refor~amentos, passa a ser
sinal para tenta:r algo diferente.
No estagio seguinte de nosso experimento, o sujeito
~onie~a a responder .com o interruptor disposto entre 2-6.
·Depois da obten~ao de vinte refor~os, mudamos a coloca-
~ao, sem o seu conhecimento, para 3-6, diminuindo a am-
plitude de 2,8 milfmetros. Desempenha tao bem nesta
nova disposi~ao quanto antes e assim, outra vez, mudamos
a exigencia, agora para 4-6. Quando a luz tiver acendido
vinte vezes, mudamos outra vez para 5-6. 0 numero
de respostas exigidas para obter vinte refor~os na disposi-
~ao 3-6 foi de 32, o numero exigido em 4-6 foi 47, e o
numero em 5-6 foi 93. Isto e, o numero de respostas
50
aumenta a medida que a amplitude do movimento se torna t
cada vez mais restringida.
Finalm,ente, o sujeito coloca-se em novas sessoes na
disposi~ao 2-5, sob diferentes esquemas de refOr~o: (1)
regular, em que cada uma das respostas sera refor~ada
se satisfizer corretamente o requisito da distancia; e (2)
intermitente, no qual (nosso caso) nao obtera refor~os ate
que tenha emitido 10 respostas corretas. Depois de cada
sessao, suspende-se completamente o refor~amento. e se
cont~ 0 numero de respostas dadas antes que 0 sujeito mu-
de para urn novo nivel de for~a. Resultado: o sujeito muda
mais facilmente depois de urn periodo de refor~amento
regular, como seria de. se esperar, de que depois de urn
periodo de refor~amento intermitente - na realidade, com
uma facilidade quatro vezes maior.
0 que foi narrado e apenas uma pequena parte de
urn experimento efetivamente conduzido com· quatorze
sujei_tos e varios outros procedimentos adicionais, mas a
amostra ja e suficiente para iniciarnios nossa discussao.
Alguns dos principais aspectos da diferencia~ao ja podem
ser nitidamente percebidos. Ha, por exemplo, uma va-
riabilidade inicial da resposta, sem a qual nao poderia
ocorrer nenhuma diferencia~ao. Isto ficou patente nos cin-
co minutos preliminares de puxoes "natura,is", mas ocorreu
tambem no come~o da sessao de teste do sujeito na dispo-
si~ao do interruptor 2-5. A variabilidade apareceu prin-
cipalmente na distancia em· que a mola era puxada e ocor-
reu tambem em rela~ao a freqiiencia, e poderia ter ocor-
rido em rela~ao a durafiio de cada puxao se isto tivesse
sido medido. Poderiamos mesmo ter descoberto diferen-
51
 . \'
1ll ~as na. forma ou '·'topografia" da resposta - na maneira
com que o sujeito segurava o cabo d~ mola em puxoes
sucessivos - mas isto teria sido muito dificil de medir.
Em segundo Iugar, ha urn reforfamento seletivo da
· resposta. Quando a.luz vermelha acompanha apenas as
respostas de amplitude de fOr~a entre os pontos 2-5 ou
10-13 da escala, em vez dos 1-15 original, o sujeito logo
se ajusta com exito. A amplitude da for~a que emprega
diminui abruptamente e, quando o experimentador J?lOdi-
fica as "regras do jogo", o sujeito e capaz de mudar fa-
cilmente de uma amplitude para outra. Se a amplitude. se
toma pequena demais, ha uma queda na acuidade (e se
continuarmos mais alem, podeni desenvolver-se urn
· comportamento "neur6tico"f, e a rapidez da mudan- ·
~a dependera tanto do numero de mudan~as ja feitas,
co~o do esquema de refOr~o - mas ninguem pode duvidar
que o comportamento esta sendo modelado pela presen~a
ou au sen cia da luz que acompanha ·cada resposta. Puxoes
da mola que nao produzem luz diininuem de freqiiencia;
os que a produzem tomam.:.se mais numerosos.
Em terceiro Iugar, quando o experimentador reduz a
amplitude das respostas bern sucedidas de uma faixa am.:.
pia para uma estreita, atraves de pequenos passos de 2-6
para urn de 5-6, ele ilustra a itnportancia das aproxima-
. ~oes sucessivas no processo de modelagem. Se tivesse
passado abruptamente de uma faixa ampla para uma es-
treita, da "facil" para a "dificil", ele teria aumentado con-
sideravelmente os erros e o tempo necessarios para os seus
sujeitos resolverem seus problemas. Refor~ando seletiva-
mente pequenos progressos na dire~ao correta, reduz as
52
chances de insucesso e alcan~a seu obj~tivo sem atraso
desnecessario.
Atraves das aproxirila~oes e no nivel rilais simples,
ratos de laborat6rio podem ser ensinados a erguer grandes
pesos, andar sobre as patas traseiras, mostrar urn tempo
de rea~ao curto, e assim por diante; crian~as podem ·ser
treinadas com maior eficiencia a escrever, falar, e. a desem-
penhar muitas outras fun~oes basicas; ate mesmo a exercer
"auto controle"; e peritos em cada campo de arte e de
habilidade podem ser levados ao maximo da perfei~ao.
Em cada caso, o professor segue a mesma regra: come~a
com variabilidade no comportamento do seti aluno, refor-
~a mudan~as em uma dire~aQ e as extingue em outra, asse-
gura 0 maximo de exito e 0 minimo de insucesso com
aproxima~oes sucessivas ao comportamento que deseja ..
!I
\ Finalmente, a mudan~a no ·comportamento de nosso
sujeito nao depende de modificOfoes no seu .mundo ex-
terior. Nao existem sinais exteriores que lhe digam quan-
do o refor~o e acessfvel ou nao, nem que for~a te-ra de
usar para ganha~Io. Estas liga~oes poderiam ter sido es-
tabelecidas, como logo se vera, mas OS unicos sinais. dis-
criminatiVOS einpregados na diferencia~ao do tipo mais
puro sao os que vern do pr6_prio movimento, em vez de
vir de uma fonte exterior~ 0 sujeito dira, depois de ter
alguma pratica, que pode "sentir" quando as respo.st~s
vao ser bern sucedidas, mas esta "sensa~ao" vem das
· contra~oes de seus pr6prios musculos quando come~am
a agir. Nao e urn estfmulo sobre o qual o experimentador
tenha algum controle direto.
53
 0 exemplo experimental e urn dos muitos que p Jde-
riam ter sido escolhidos. Ha abundantes estudos na lite-
ratura psicologica sobre arremessos de bola e de dardos,
tra~ado de.linhas, ao lado de outros estudos de movimento
em varias situa~6es praticas. Muitos desses casas sao de
difeiencia~ao pura. Ha tambem uma quantidade de ha-
bilidades da vida diaria que se baseiam no mesmo proces-
so. 0 golfista que impulsiona a bola com o seu taco, o
<:estobolista que arremessa a cesta, o arqueiro, o jogador
de malha, de boliche, ·-· sao so algumas de nossas ativi-
dades que podem ser aperfei~oadas em situa~oes inalte-
radas de estfmulos. Menos notorias, mas na verdade mais
importantes, sao as diferencia~oes presentes no dominio
de habilidades universais · tais''como andar, falar, escrever,
cantar e dan~ar.
0 processo basico, em todos estes casas, pode ser re-
tratado, embora de maneira nao muito correta, assim:
Aqui, o RD representa a variante da resposta que
conduz ao refor~amento, e RA (erre-delta) indica uma va-
riante que nao recebe refor~o. 0 RD e o R A corres-
pondem assim ao sn e SA do ·nosso diagrama de discri-
mina~ao.
0 diagrama e inadequado porque, como 0 que repre-
senta o condicionamento (pagina 16), sugere que os esti-
mulos ambientais nao desempenham nenhuril papel no di-
tar de nossas respostas. Leva a -pensar que o pressionar a
54
barra nao tern nada a ver com a presen~ ou a ausencia
de uma barra na situa~ao, que o cestobolista nao necessita
de uma cesta, ou o arqueiro de urn arco. A verdade. e que
os processos de diferencia~ao e de discrimina~ao sao con-
comitantes desde qs inicios do nosso desenvolvimento
comportamental. Em certo momenta, a discrimina~ao po-
de tamar a dianteira, em outro, a diferencia~ao. Quando
uma crian~a quer pegar uma bola, indica que a bola e urn
estimulo discriminativo, mas o progresso que revela na
acuidade do pegar, com as repeti~6es, se deve principal-
mente a diferencia~ao. A mudan~a na resposta ocorre
sem duvida na presettfa do sinal, mas nao depende de
nenhuma modifiC(lfiiO nele.
Quando chegamos a. idade adulta, cada urn de nos
adquiriu urn numero enorme de respostas diferenciadas que
podem ser dadas ou nao a urn numero ainda maior de si-
nais discriminativos. Aiem disso, cada urn de nos tern
a habilidade de mudar suave e rapidamente de uma res-
pasta para outra diante de urn campo de estimulos sempre
mutaveL Observa-se isto de U:ma maneira bern viva quan-
do se olha os participantes de esportes como box, tenis ou
futebol, nos quais movimentos com a rapidez de urn
raio sao necessarios para acOJ:p.padhar as varia~6es de
estimulos produzidos pelos movimentos do oponente.
Mas se pode observar a mesma coisa, se se atentar para
isso, em praticamente todas as esferas da atividade. hu-
mana, em interiores ou ao ar livre, verbais ou nao-verbais,
no entretenimento ou no trabalho. 0 musico que acom-
panha a partitura, o telegrafista que copia o codigo Morse,
a estenografa que toma urn ditado ou datilografa os
55
 siinbolos abreviados que escreveu, o openirio na linha
de montagem -·- nestes exemplos, e em tantos outros,
.pode ser visto o processo._
Nenhuma disposi~ao de linhas e letras pode aspirar a
representar o nipi~o intercambio de estimulo · e resposta
que ocorre nos casos citados, mas o diagrama seguinte
pode ser de alguma ajuda no retratar a mais simples das
combina~oes de sinais discriminativos e operantes diferen-
ciados.
~ RA
so--_.;...-'------- RD --·~ s
sA RA
'E:ste diagrama permite avan~ar pelo menos urn pequeno ·
passo no sentido do nosso projeto de construir urn
quadro unificado do que corretamente, em nossa vida
diaria, tern o nome vago de "aprendizagem".
14. Encadeamento
Ha setenta e cinco anos atras, se alguem pedisse a
urn professor da nova ciencia da psicologia que .falasse
sobre a natureza da "aprendizagem", ele nao teria dito
nada sobre condicionamento, extin~ao, generaliza~ao,. dis-
crimina~ao, diferencia~ao ou refor~amento. Pavlov, que·
nos deu todos estes termos, estava naquela epoca exami-
nando a atividade digestiva de caes, e ·ainda faltavam
dez anos para que ganhasse, por estes traba~os, o Premia
Nobel. Thorndike s6 tinha dezenove anos de idade e
pelo menos ainda dois tinham de se passar antes que
56
empreendesse os estudos com a gaiola!.;problema que le-
variam a sua famosa Lei do Efeito.
·Em -Iugar destes t6picos e desenvolvimento ter-se-ia
ouvido 0 professor. de psicologia discorrer muito sobre
a "associa~ao de ideias" e sobre .as "leis" que governam
aquelas associa~oes, particularmente na forma descrita
pelos eminentes . fil6sofos ingleses dos. seculos XVIII e
XIX. Poder-se-ia tambem ter ouvido o relata de algtim
Iongo e trabalhoso experimento alemao sobre a "me-
moria" e 0 "esquecimento" - experimentos em que OS SU-
jeitos tinham de memorizar series de "silabas sem sentido"
(mib, gop, ruz, ved, etc) em condi~oes muito especiais.
Na melhor_ das hip6teses, ter-se-ia tnitado exclusivamente
de urn relata de assuntos que, agora, cabem em urn s6
cap~tulo do .campo da aprendizagem.
. 0 interesse pela "aprendizabem serial", tanto verbal
como nao-verbal, aumentava no inicio do seculo, quando
os estudos do comportamento · animal come~aram a ex!bir
os labirintos para ratos brancos, e quando certos fisi6logos
influentes come~aram a descrever "composi~oes sucessivas"
de reflexes em animais tao inferiores na escala evolutiva
como o sapo e a minhoca. Em 1914, John B. Watson, o
fundador do "behaviorismo" primitive na psicologia
norte-americana, combinava o que ja se conhecia destes
desenvolvimentos com sua interpreta~ao do principia de
Pavlov, para argumentar que a aprendizagem de silabas
sem sentido e do percurso de Ia:birintos nada mais era do
que a forma~ao de "cadeias" de reflexes condicionados.
Hoje, achamos que Watson estava errado em varias
de suas afirma~oes sobre esta especie de aprendizagem.
57

. .
Temos certeza, por exemplo, de que o percorrer correta-
mente o labirinto e as conexoes sihibicas nao sao exemplos
de condicionamento respondente. Concordamos, entre-
tanto, que Watson estava essencialmente certo ao tentar
explicar tais forma\!6es de habitos referindo-se a co~sas
mais ·fundamentais. E vemos, tambem, que estas c01sas
fundamentais sao diferencia9a0, discrimina9a0 e genera-
liza9a0, que dependem, por sua vez, do condicionamento
e da extin9ao.
Formulamos a no\!aO de encadeamento, hoje, enun-
ciando siinplesmente que uma resposta pode produ:zjr o
estimulo para a seguinte. E reconhecemos, talvez mais do
que antes, que e excepcional o caso em que. as respostas
niio ocorrem em cadeias; f: raro que uma unica resposta
ou conexao estimulo-resposta nao conduza a outra ou nao
se -origine de uma anterior.
0 enunciado essencial do que ocorre em um encadea-
mento pode ser suficientemente hem delineado dobrando
0 diagrama discutido na Ultima sec9a0.
s RD-+ S D - - - - - - - RD ---+-5
sA RA sl:t.. RA
Aqui se ·ve que um estimulo discriminativo pode evoc.a~
uma resposta diferenciada que, por sua vez, prodUZira
o estimulo discriminativo ·para outra resposta diferenciada
que conduz, por sua vez, ao ref0r9~· _
Tomemos como exemplo de encadeamento, nao a
aprendizagem de um labirinto ou de uma serie de silabas
sem sentido, mas o comportamento de um rato branco
58
3 ~
-·--·-·--- -··---·--~--~--------·----··
cham ado Plfnio, -da Universidade de Mi~nesota! * Plfnio
nada fez que urn coati, urn macaco ou uma crian a nao
9
pudessem fazer melhor, mas o fato de que era urn rato,
nao tao complicado ou diversificado em suas maneiras
como estes outros, ajudani a esclarecer o que e essencial
no processo de encadeamento.
0 que Plfn1o fazia resumia-se nisto. Primeiro, pu-
xava uma cordinha que pendia do teto de sua gaiola.
0 puxar fazia com que uma bolinha de vidro, colocada
numa calha acima, caisse na gaiola. Quando a bolinha
caia no chao, Plfnio apanhava-a com as patas dianteiras
e a c~rregava pela gaiola ate um pequeno tubo que se pro-
j~tava verticalmente a cerca de 2,5 em acima do chao da
gaiola. Levantava entao a bolinha ate a borda do tubo
e ·deixava-a cair dentro dele, o que fazia com que uma
· pelota de alimento fOsse automaticamente descarregada
num recipiente acessivei. Plfnio entao se aproximava do
recipiente, apanhava a pelota, comia-a e voltava outra vez
a repetir a sequencia de atos. Desta maneira, Plinio ga-
nhava a vida, dia ap6s dia.
Aqui ha, pois, uma cadeia de operantes, cada urn
induzido pelo seu proprio sinal especifico. (Ve-se com me-
n~s fre~iiencia respondentes encadeados, razao pela qual
nao serao tratados aqui). Os estimulos visuais ou tateis,
provindos da cordinha e circunvizinhan9as, provavelmente
iniciam a resposta de puxa-la. Puxar o cordel coloca em
a9ao outros estimulos, evocados pelo apar.ecimento da
* Uma serie de fotografias das realiza~oes deste animal
foi publicada na revista Llfe de 31 de maio de 1937.
59
Keller

bolinha. ::f.stes constituem o sinal para as respostas de
apanha-la e carrega-la, que colocam o animal na presen~a
de outro composto de estimulos visuais, o tubo .... As
respostas de levantar e deixar cair a bolinha d~ntro ~o
· tubo produzem, por sua vez, o · som do meca~t~mo do
alimentador que conduz a aproxima~ao do rectptente e,
finalmente, do proprio alimento. Com o termino do ~m­
portamento de comer, toda a sequencia come~a de novo.
Exatamente quantas respostas distintas ocorrem na ca-
deia aperfei~oada de PHnio continua a ser uma pergunta,
visto que cada resposta fundia-se quase completamente
com a seguinte. :E razoavelmente certo, entretanto, que
havia mais no come~ do que no fim. Por exemplo, o
animal teve dificuldades consideraveis, de inicio, em deixar
a bolinha de vidro cair depois de te-la levantado ate
a borda do tuba; ergue-la era claramente uma resposta,
Iarga-la o.utra e era-lhe dificil coordenar os dois mo-
vimentos adequadamente. Seu comportamento asseme-
lhava-se ao das crian~as que estao aprendendo a arre-
messar uma bola: ou soltam muito depressa ou seguram
tempo demais. Entretanto, mais adiante no treinamento,
a coordena<;;ao de Plinio estava tao boa e os elementos
tao entrela~ados, que ja nao se podia distinguir onde aca-
bava uma resposta e come~ava a outra. Como acontece
em muitas a~oes humanas, especialmente na linguagem,
as unidades originais, bern distintas de inicio, agrupam-se
em unidades maiores, reduzindo perceptivelmente o nu-
mero de elos ·na cadeia.
Tambem e dificil especificar OS sinais que estiveram
em a~ao no controle do comportamento de Plinio na
60
~d .,.
. .,,
,,
rr cadeia final. E bastante provavel que o numero tenha
!'! diminuido com a pratica - e que Plfnio tenha, no fim,
respondido a mero·s fragmentos dos compostos iniciais.
'1 Outros experimentos indicam que esta redu~ao pode
ocorrer. Mas, na ausencia de verifica~oes especiais, nao
I!
temos meios de dizer que elemento da situa~ao estimula-
I dora, em qualquer estagio da sequencia, foi o que desen-
cadeou a resposta.
0 encadeamento de Plinio, ao contrario dos que
ocorrem na maioria dos estudos humal!OS, requereu urn
longo treino de diferencia~ao para varios elos. As res-
pastas empregadas em carregar,. levantar e deixar cair
a bolinha de vidro, embora modeladas ell' parte na
experiencia anterior em manipular o alimento, tiveram que
receber ;;Iinda muita aten~ao. 0 treinador do rato tinha
de vigiar cuidadosam(mte, e re£or~ar seletivamente, todas
as pequenas mudan~as na resposta que indicavam uma
melhoria. Como em todas as diferencia~oes delicadas~
tinha de evitar passar muito rapidamente de urn estagio
para o seguinte, observando que os. progressos se fi-
zessem de maneira constante e que nao houvesse ocasiao
de ocorrer extin~ao quando uma nova exigencia fOsse in-
troduzida. Se as diferencia~oes ja tivessem sido forma-
das - se as habilidades basicas estivessem bern estabe-
1ecidas - , nao teria havido maior problema com o enca-
deamento em si, para o animal. Cada ato discreto teria
sido facilmente adicionado aos outros, da mesma maneira
· ·que os seres humanos combinam palavras velhas e bern
diferenciadas ao memorizar urn poema. Antes que
tais diferenda~oes sejam feitas, entretanto, pode-se com-
61

parar Plfnio a uma pessoa que, nao familiarizada com
a lingua chinesa, tenha de reagir a uma sucessao de
caracteres escritos nesta lingua, pronunciando cada urn
corretamente no momento em que ocorre!
,A.traves dos an~, muitas quest6es foram propostas
sobre a apren_~izagem serial. A maioria delas foram
quest6es acerca do dominio de series de silabas sem
sentido. Perguntou-se, por exemplo, como a velocidade
dessa aprendizagem se relaciona com o numero de itens da
lista que deve ser aprendida. Ou sobre o tipo de
itens da lista - por exemplo, o seu grau de semelhan~a
com palavras reais ou partes de palavras. Ou ao Iugar
dos itens Iia lista, isto e, se uma parte da lista e apren-
dida mais depressa do que outra. Ou ao dominio anterior
de outras listas, tendo o mesmo conteudo ou conteudo di-
ferente. £stes sao alguns dos problemas formulados. Cada
urn deles foi submetido a muita investiga~ao, discussao e.
teoriza~ao. Mas s6 muito recentemente a sugestao de John
Watson foi seriamente seguida e se fez a tentativa de
relaciomi-los com os principios basicos de condiciona-
mento, extin~ao, discrimina~ao, etc. Estas tentativas fo-
ram, no geral, bastante fecundas e pode valer a pena
examinar alguns exemplos.
Tomemos o assunto do numero de itens da lista
que deve ser memorizada. Os experimentos. com silabas
sem senti do indicam que urn numero notavel pode .ser
agrupado~ Em uma investiga~ao chegou-se ao dominio
de 300, e o limite ainda esta provavelmente Ionge de
ser alcan~ado! Parece, entretanto, que o tempo que. tern
de ser gasto com cada silaba aumenta apreciavelmente a
62
1
;;; medida que o numero de silabas sobe : Pode Ievar urn
j, -~inuto e meio, em media, para se memorizar 12 silabas,
mas requerer 195 minutos a memoriza~ao de 300 silabas,
I que sao apenas 25 vezes 12 silabas.
t Urn fator importante, responsavel pelo aumento da
dificuldade, pode ser a similaridade das silabas escolhidas.
Quando se aprende a recitar uma lista como jid, fap, tev,
wof, pes, yut, zoy, e assim por diante, cada silaba pro-
nunciada fornece grande parte do sinal para a pronuncia-
~ao da seguinte. Mais cedo ou mais tarde, a medida que o
nu_mero de silabas aumenta, come~am a desaparecer as di-
feren~as entre os sinais. Cada nova silaba assemelha-se com
up~a ou mais das outras ja incluidas na lista. Isto quer
dizer, generalizam-se umas com as outras. Isto pode·
acontecer mesmo quando o sujeito agrupa as silabas em
conjuntos maiores como fap-tev ou wof-pes, ou quando
suplementa de algum modo as silabas, fazendo com que
wof-pes vire algo como wolf-pest.
A generaliza~ao pode tambem desempenhar urn papel
na explica~ao das dificuldades que temos em dominar
unia longa serie de numeros. S6 se disp6e de 10 alga-
rismos, de 0 a 9, para construir tais series e, se nao
fosse pelos agrupamentos comuns, como 1492, 5280,
31416, e 1776, bern como varios outros mais pessoais
(numeros de telefone, de chapas de autom6vel, etc.),
teriamos muito mais dificuldades com eles do que com as
silabas sem sentido. 0 agrupar. pode auxiliar por algum
tempo, mas com o tempo esgotam-se as diferen~as entre
. os grupos. Finalmente, chega uma hora em que nenhum
acrescimo pode ser feito sem que haja uma perda cor-
63
respondente. Ate chegarmos aquele diretor de faculdade,
que era tambem ictiologo, e se queixava de que cada vez
que memorizava o nome de urn aluno esquecia o nome
de urn peixe!
P~squisas com animais contam uma historia parecida
sobre a generaliza~ao como o fator que limita o estabele-
cimento de encadeamentos. Experimentos sobre apren-
dizagem de labirinto, usando ratos brancos, mostram
que o dominio do trajeto correto da ·entrada ate a saida
depende, principalmente, dos sinais encontrados nas curvas
sucessivas, onde o animal deve escolher entre dois ou
mais trajetos. As diferen~as entre estes sinais podem
ser reduzidas de algumas maneiras. Orgaos dos sentidos de
importancia critica (por exemplo, os olhos) podem ser
cirurgicamente eliminados; ou cada unidade do aparelho
pode ser construida tao identica as demais quanto fOr
p"ossivel. Em qualquer dos casos, o resultado e o mesmo.
A rapidez com que o animal aprende diminui, e tarnbem
e inferior 0 seu nivel final de desempenho.
Urn caso especial, em que a quantidade de generali-
za<;ao e extrema, e o do labirinto "temporal". Neste ar-
tefato, treinam-se os ratos a passar pelo mesmo ponto de
escolha em ocasi6es sucessivas; se forem, por exemplo,
quatro, virando duas vezes a esquerda e ~epois duas vezes
a direita. A mudan~a de viradas a esquerda para viradas
a direita na terceira escolha e a fonte das maiores di-
ficuldades .. Nao ha mudan~as externas que digam quando
virar a direita em vez de a esquerda, e ha tao pouca
diferen~a nas maneiras de responder na primeira e na se-
gunda volta que o animal nao pode identificar facilmente
64
sinais vindos de seu proprio comportruilento, o que po-
deria acontecer se se lhe permitisse emitir quatro res-
postas distintas em cada volta pelo ponto de escolha.
:£ uma discrimina~ao tao delicada que poucos ratos con- ·
seguem desenvolver 7om exito a sequencia esquerda-es-
querda-direita-direita.
0 que foi descrito e apenas uma introdu~ao ao pro-
blema·, do encadeamento. . Urn relato mais amplo teria
de i~cluir uma exposi~ao dos famosos "experimentos de
associa<;ao", algumas vezes usados na detec~ao de men-
tiras .e na psicoterapia, e nos quais se pede ao sujeito
que responda uma palavra com outra tao depressa quant~
puder~ Ter-se-ia de tratar com a questao dos encadea-
mentos ou elos de cadeias que nao podem ser observados,
que sao encobertos, e que figuram proeminentemente 1}-a
analise do "pensame~to", do "significado" e da "per-
cep~ao". Abrangeria a discussao de dU.Zias de conceitos
e resultados de experimentos, e incluiria muitos pontos
altamente discutiveis. Proveria o leitor de urn grande
conjunto de dados e poderia ate leva-lo a descobrir no-
vos metodos de investiga<;ao e a planejar novas pesquisas
neste campo. Mas nem todas estas questoes podem ser
abordadas aqui. Para OS propositos presentes; sera su-
ficiente que o leitor tenha entendido claramente os prin-
cipios basicos e visto como se relacionam com os que .
ja foram discutidos antes neste livro. Ver-se-a em urn
momento que se. relacionam tambem com a sec<;ao se-
guinte.
65
----,,,
---r--
15. Refor~o condicionado positivo
Alguns estimulos sao_ naturalmente refor~adores quer
' de modo positivo, quer negativo. 0 alimento, para um
organismo faminto, tem uma especie de "capacidade
inata" de refor~ar ·o compo-rtamento. Da mesma forma,
a_ bebida, sob condi~oes de sede. Igualmente, o cho-
. que eletrico e outras formas de estimula~ao intensa
tern, desde o inicio, a propriedade de deprimir o com-
, portamento (ou de refor~ar o comportamento que as
remove). De todos · estes se diz que sao refor~adotes
primarios.
De outro lado, e bastante claro que estes estimulos
constituem apenas uma pequena parte do conjunto das
coisas que refor~am. De fa to, s6 muito. raramente obser-
vam:se condicionamentos, especialmente ao nivel humano,
em que bebida ou choque eletrico desempenham algu~
papel.. Com . muito _mais ·freqii.encia, aparentemente,
. .
as
respostas sao refor~adas ou enfraqul!cidas pela aprova~ao
ou desaprova~ao _de outras pessoas, por promes5as .ou
amea~as, por "Certo!" ou "Errado!". E estes sao eventos
que devem ter adquirido o seu poder refor~ador. Nos
os chamamos de refor~os secundarios ou, algumas vezes,
refor~os condicionados.
0 modo pelo qual os refor~os secundarios adquirem
seu poder foi sugerido por Pavlov nos primeiros anos deste
seculo. Observou que, quando um reflexo condicionado
estiver bern estabelecido em um cao, podeni ser entao
usado como base de um segundo condicionamento. As-
sim, se a batida ·de um metronomo tornou-se urn estimulo
66
condicion~do para a resposta salivar, ·podera entao ser
associado a outro estimulo "neutro", por exemplo, urn
retangulo negro, para formar urn reflexo condicionado de
"segunda -ordem". Isto e, a batida do metronomo so-
zinha servia como estimulo refor~ador para um novo
condicionamento, e o faria por causa da sua associa~ao
previa com o estimulo incondicionado primario, o ali-
mento. Pavlov, contudo nao -Ievou muito Ionge o con-
ceito de refor~o condicionado. S6 nos ultimos anos e que
come~amos a reconhecer a sua importancia tremenda e
a -compreender como o comportamento operante passa
a ser por ele controlado.
Vamos examinar a maneira pela qual isto ocorre -
como o· refor~amento condicionado esta relacionado com a
discrimin(Jfiio, como auxilia a formar os encadeamentos,
e o significado que tem -para o comp<;>rtamento humano
quotidiano. E, como a psicologia, da mesma maneira que
a biologia, tern uma ,atitude democratica em rela~ao as
diferen~as entre as especies, por que ·nao come~ar com
uma amostra do comportamento dos chipanzes?
Nosso sujeito e urn macho de cerca de seis anos. Seu
nome e Moos, e vive em uma pequena colonia de macacos
em uma esta~ao de pesquisas com antrop6ides, onde ja
ha mais de dois anos tern participado de experimentos
psicol6gicos. No experimento a que nos referimos, ha
.outros cinco animais, todos mais jovens e menos traque-
jados. Moos e OS outros ja passaram por varios estagios
de treinamento. Em primeiro lugar, Moos aprend~u a
inserir fichas na fresta de uma destas maquinas de vender
coisas que ha nos Estados Unidos. As fichas eram
67
 brancas e a inser~ao de uma ficha seguia-se imediatamente
do aparecimento de urn bago de uva no recipiente da
maquina de vender. Por causa de sua hist6ria anterior
de sujeito experimental, Moos aprendeu isso facilmente -
bastou _que o experimentador demonstrasse uma vez o
processo. Logo depois, Moos apanhou uma ficha do
chao e, meio sem jeito, inseriu-a na fresta. Mais algumas
tentativas e sua habilidade aumentou consideravelmente.
Isto e1 sua resposta diferenciou-se na dire~ao de urn
. movimento rapido, suave e sem esfor~o para obten~ao da
recompensa. Em segundo Iugar, ele e seus companhei-
ros, foram treinados a discriminar entre fichas brancas
e amarelas. No treinamento, apresentava-se-lhe as duas
especies de fichas em pares sobre uma bandeja que ele
podia alcan~ar de .dentro de sua jaula. Se apanhava
uma ficha branca (SD) para usar na maquina de vender,
obtinha uma uva; mas ·se escolhesse uma amarela (SA) e
a colocasse na fresta, nao aparecia uva alguma. Moos '
resolveu o problema em quatro sessoes de 20 escolhas
cada uma, durante as quais fez urn total de 10 erros, isto
e, 10 respostas em SA •
Por esta altura, uma nova pe~a de equipamento foi
colocada na jaula de Moos: uma maquina· de trabalho.
·Suas caracteri$ticas principais eram (1) uma barra e
(2) urn reservat6rio de fich.as. 0 mover um dos extre-
mos da barra para cima, descrevendo urn arco de 90
graus, fazia com que as fichas viessem a ficar ao alcance
do operador. Com a maquina em posi~ao e com Moos
atento, o experimentador coloca uma ficha branca c~ns­
picuamente no reservat6rio e afasta-se. 0 chipanze apro-
68
xima-se da maquina e come~a a sacudi-la e agita-la repe-
tida e vigorosamente, ate que o experimentador o inter-
rompe por um breve periodo. Depois da pausa, Moos .
• volta a maquina, desta vez empurrando e puxando a
barra. Nao se passa muito tempo antes que consiga des-
crever urn arco de 90 graus, depois do que pega a ficha
do reservat6rio e usa-a imediatamente para conseguir
uma uva na maquina de vender. Em seguida, rapida-
mente retoma a resposta de puxar a barra, obtendo fichas
(e uvas) sem nenhuma dificuldade. .
Dois aspectos deste exp~rimento sao especialmente
dignos de nota. P_rimeiro, formou-se, no segundo estagio
do experimento, uma nitida discrimina~ao em que o S D
era uma ficha branca e o S 6. uma ficha amarela. Na
presen~a da primeira, a resposta manipuladora de Moos
produzia uma uva; na presen~a da segunda, nao. Em se-
gundo Iugar, a ficha branca tomou-se urn refor~ador se-
cundario que, sozinho, foi capaz de fortalecer a resposta
de puxar a barra (mesmo quando, como se demonstrou
em um estagio posterior deste experimento, as fichas nao
podiam ser trocadas por uvas senao depois de urn certo -
tempo). Assim, parece que um estimulo discriminativo
para uma resposta pode ser o reforfador condicionado
de outra.
Experimentos essen.cialmente analogos ao de Moos
foram conduzidos tambem com ratos, gatos, cachorros e
crian~as, para nao citar com pintinhos, e o resultado foi
sempre o mesmo. E hoje quase certo que, se urn estimulo
deve tornar-se urn refor~ador condicionado, e necessario
que, antes, se tome urn estimulo discriminativo. Nao e
69

:
''
·,
bastante dizer que urn estimulo que esteve meramente
:!
presente em todas as ocasioes em que a resposta foi re-
for~ada tornar-se-a ele proprio refor~ador; . 0 estimulo
deve tambem ter estado ausente todas as vezes em que a
resposta nao foi refor~ada.
Talvez se possa ver agora, melhor do que antes, como
se formam os encadeamentos. Na Sec~ao 14, observou-se
que urn encadeamento nao e mais do que uma fileira de
rela~oes S D R D , mas nao se fez nenhuma
men~ao direta ao papel desempenhado pelo refor~amen­
to. Agora deve ter ficado claro que o sinal discriminativo
para uma resposta que obtem refor~o primario torna-se
refor~ador para a resposta que produz este sinal. Em ou-
tras palavras, cada sD na cadeia torna-se urn refor~a­
dor secundario para a resposta que o produz.
Isto significa que, em certo sentido, os encadeamen-
tos sao estabelecidos de tras para diante - que o primei-
ro elo e o ultimo a ser adicionado ao encadeamento. Re-
cordemos o comportamento de Plinio, o rato. 0 primeiro
elo da cadeia, puxar o cordel, nao poderia ter sido forta-
lecido antes que a bolinha de vidro tivesse se tornado
recompensadora; manipular a bolinha de vidro, carrega.-
-la e levanta-la, nao poderia ter sido fortalecido a menos
que o tubo tivesse, de algum modo, se tornado tambem re-
for~ador; deixar cair a bolinha nao poderia ter sido for-
talecido sem o som do alimentador; e, finalmente, o .com-
portamento de aproximar;_se do recipiente de ·alimento de-
pendia da presen~a do refor~ador primario, o alimento.
0 refor~amento condicionado explica tambem o por-
que de as primeiras respostas da serie tornarem-se fortes
70
f
1
quando o refor~amento pnmano, final~ 'fica tao distante
no tempo. Ou, para dize-lo de outra maneira, explica
porque o ref.Or~o primario pode ser "retardado". Na
verdade, o periodo de atraso possivel de urn refor~ado_r
primario e provavelmente muito curto, questao de segun-
dos. Se parece ser mais Iongo, e porque o encadeamento
de respostas, cada uma com o seu refOr~o condicionado
imediato, preenche. a lacuna.
Neste ponto, se tomarmos S" como simbolo do re-
for~o condicionado. e sn como simbolo do refOr~o pri-
mario, 0 diagrama final que servira para representar este
estado de coisas e 0 seguinte:
s•· Rl:l. SA RA
S D - - - - - - RD ~ sro _ _ _ _ _ _ RD-+ SR.
sA R6 sA RA
Temos aqui, como primeiro elo do encadeamento, urn
estimulo discriminativo que da Iugar a uma resposta di-
ferenciada. Esta e acompanhada de urn refor~ador condi-
cionado que e, ao mesmo tempo, o estimulo discriminativo
para a- resposta diferenciada "seguinte no encadeamento; e
esta ultima conduz, finalmente, ao refor~ador primario.
0 primeiro 5D seria, naturalmente, Uffi S" para qualquer
elo adicional que se quisesse somar aos elos ja ligados.
A influencia tremenda do refor~o condicionado sobre
o comportamento humano pode ser observada mais cons-
plcuamente no caso daqueles estimulos ou dos compostos
de estimulos que foram comumente. acompanhados, sem
que houvesse distancia muito grande, de refOr~o primario.
Os mais interessantes, talvez, sao os compostos providos
pelo comportamento de outra pessoa. Por exemplo, des-
71
 de o nascimento ate a morte, o comportamento "atento,
dos outros e comumente a preliminar de refor9adores pri-
marios tais como alimento, bebida, e alivio do desconfor-
t?. A aten~iio torna-se, portanto; para a maioria de nos,
uma_ importante recompensa secundaria, e pode ser a re-
for9adora de toda uma serie de atividades - desde 0 sim-
cples "Olha, papail'' da primeira infancia ate o r~c:ital de
achaques ~~do!.~S que freqiientemente acompanha a
velhice.
A aprova~iio, na forma de urn sorriso, de urn aceno
de cabe9a, de urn "Sim" ou equivalentes (diferentes pes-
soas revelam aprova9ao de maneiras diferentes), e um
outro aspecto do comportamento que e, quase sempre, o
antecessor de coisas mais basicas. Embora nao seja urn re-.
for9ador condicionado tao obvio como a aten9ao, .ainda
assim figura proemiJ;tentemente na maioria de nossos con-
tatos sociais. A "busca de aprova9ao", quando extrema,
nao e muito· bern vista em nossa sociedade, posslvelmente
ainda mais que o procurar "chamar a aten9ao", mas ha
poucos de nos que nao tenhamos sido recompensa~os uma .
vez ou outra pela "boa vontade" dos outros.
0 comportamento afetivo (beijos, caricias, abra9os,.
etc.) da parte de outros e tambem urn freqiiente refor~ador.
para a maioria de nos, presumivelmente porque relacio-
na-se com varias especies de refOr~o primario, incluindo
o sexual e o "maternal". As caracteristicas de estimulo
dSste comportamento, como as da aprova~ao, revelam
muita varia~ao entre individuos e grupos, e pode ser dificil
distinguir o seu padrao do da coqueteria, ou mesmo do da
submissao (ver abaixo). Os "sinais de afei~ao", isto e, o
72
l
proprio comportamento afetivo tambern nao sao exatamen-
te ?S mesmos de pessoa a pessoa. .
Muitas pessoas em nossa sociedade sao refor~adas .. ·
pelo "ceder" dos outros, por fazer as coisas "a seu mo-
do''. Esta submissao ou comportamento submisso e ain-
da mais dificil de identificar como urn padrao especial
do que o padrao de estimulos da afei~ao ou da aprova~ao,
mas qualquer urn pode lembrar de muitos exemplos. "De-
pois do senhor!", "Posso lhe ser util, senhora?", "Pode
ficar com o meu pirulito, Joaozinho.", "Por aqui, senhor,
t~nho uma mesa reservada para o senhor!", "Voce pode
ftcar- de centro-avante"; "Nao foi nada, nao doeu muito".
· Todas estas expressoes derivam seu poder refor~ador do
fato de elas, ou respostas como elas, terem algumas vezes
sinalizado recompensas mais concretas, ou a remo~ao de
obstaculos do caminho que leva a elas. Encorajam 0
desenvolvimento de urn estilo de vida dominante, de auto-
-afirma9ao, "masculine" por parte das pessoas a que se
dirigem.
As pessoas dominantes, por sua vez, comumente con-
cedem favores aqueles que lhes dao prioridade. Aquele
que se afasta para o outro passar pode, pelo menos, rece-
. bet urn agradecimento ou ser encorajado a acompanhar;
o caixeiro sera elogiado pela sua delicadeza; Pedrinho te-
ra uma chance de dar uma volta no velocipede ·do J oao-
zinho; o "maitre" recebera uma boa gorget~; Beltrano
deixara que Sicrano jogue na meia; e o homem cujo pe
foi pisado recebera palmadinhas no ombro. Tudo isso
encoraja a ado9ijo de urn modo de reagir diferente, sub-
serviente ou "feminino" e pode ate resultar no cortejar a
73

dominancia dos outros. Infelizmente, a pessoa cujos re~
. for~os consistem principalmente nas "sobras" pode tam-
bern se tomar presa da ansiedade e do medo.
Aten~ao, aprova~ao, afei~ao, submissao e domina- .
~a~ podem ser dificeis de identifica; como est!~ulos pa-
ra o nosso comportamento, mas ha uma espec1e ~~ re-:-
for~adores condicionados que nao oferece tantas dtftcul-
dades. :£ a classe das "recompensas simb6licas", urn
exemplo das quais foi discutido paginas atras, na forma
da ficha branca de Moos. 0 dinheiro e naturalmente o
principal especime dessas recompensas. :£ dificil supe-
restimar o seu poder refor~ador em nossa socieda~e. ~~s
existem outros, algo menos negociaveis, que sao facets
de destacar. Abrangem desde as estrelinhas douradas,
boletins, premios, bolsas de estudo, men~oes honrosas e
diplomas, ate as lindas ta~as, medalhas, cita~oes;. co~de­
cora~oes ·e notfcias nos jomais sobre as nossas .re~h~a~oes.
Nao sao, em geral, ocasioes para o refor~o pnmano tme~
diato, mas nos levam pela estrada que a isso con~uz.
Nao sao estas as unicas especies de refOr~o "generahza-
do"* que poderiam ser menciori.adas aqui; nem for~m tra-
tadas tao pormenorizadamente quanto. se .podena ~e­
sejar. Se, contudo, ao fazer urn retrospe~to desta sec~ao,
0
leitor concordar que deu urn. passo ad1ante na compre-
ensao da conduta humana, isto tera sido bastante. Se pu-
der ver que o refor~o condicionado se baseia no estabe-
* "Generalizado" eo termo as vezes aplicado a um ref~r-.
~ador. condicionado cuja for~a deriva das. as~~cia~oes que mantem
com mais de um tipo de refor~dor prunano.
74
lecimento de. uma discrimina~ao, e qu&' a ficha branca de
·;
Moos nao dista muito do valor de recompensa do "di-
nheird, for~a, idade, titulos, hierarquia e posi~oes" (pag.
7) nos neg6cios humanos, nao ha necessidade de acres-
centar mais nada.
16. Refor~o condicionado negativo
Cerca de cinqiienta anos atras, Vladimir Bechterev,
um "reflex6logo" russo, descrevia urn metodo de condi-
cionamento que era, na sua. opiniao, muito superior ao
.empregado pelo seu rival, Ivan Pavlov. Podia ser mais
facilmente usado com seres humanos e utilizava o compor-
;
tamento motor em vez do glandular. Requeria apenas que
urn estimulo neutro (tal como urn som) fOsse associado a
urn choque eletrico no pe ou na mao, ate que o primeiro
produzisse o movimento de flexao ou retirada que era a
· resposta incondicionada ao choque. 0 som, em geral, pre-
cedia o choque de urn par de segundos, e o choque nao
era aplicado se o movimento de retirada ocorresse dentro
deste periodo.
John Watson adotou esta tcScnica em 1916 e, desde
enti'io, tern sido muito popular nos laborat6rios norte-ame-
ricanos, tanto em pesquisas com seres humanos como
com animais. S6 recentemente, entretanto, foi plenamen-
tereconhecido o que ali ocorria. Watson acreditava, como
Bechterev e Pavlov tinham acreditado antes dele, que o
procedimento era o mesmo que o empregado no condicio-
namento da resposta salivar no cao. Pois nao era a asso-
75
4 - Keller
cia<;ao de urn estimulo neutro com urn estimulo incondi-
cionado? 0 estimulo neutro nao passava a eliciar a res-
pasta? Segundo todas as aparencias, a resposta e Sim,
mas havia algumas considera<;6es perturbadoras.
Uma delas erani as comunica<;6es que regularmente
vi~. de varios laborat6rios enipenhados em investiga-
coes ~m animais de que as respostas de flexao ao estf-
mulo ciJndicionado eram bern diferentes das respostas ao
estimulo incondicionado, o choque, exceto por urn breve
periodo no inicio do condicionamento. Embora as r~s­
postas fOssem reconhecidamente semelhantes, as . res~os­
tas ao choque eram geralmente descritas como parec1das
com reflexos (respondentes), enquanto que as dadas ao so~
pareciam comportamentos voluntcirios (operante~). A~ pn-
:l
meiras eram urn movimento rapido e .convuls1vo, acar-
retando uma ampla a<;ao muscular; as ultimas, suaves,
deliberadas e de uma forma bastante espedfica de resposta~
Urn segundo fato ·perturbador era o seguinte. Se. o
proceeimento empregad6 fOsse o estritamente ·pavloVIa-
no isto e, se o estimulo neutro fosse regularmente acorn..;
' . .. -
panhado pelo choque, exceto nas sesso~s . .de . venf1ca<ra~,
seria dificil demonstrar nitidamente a ex1stenc1a de condl-
cionamento. S6 quando a resposta ao estimulo condicio-
nado era bern sucedida em evitar ou esquivar o choque
que deveria vir e que se desenvolvia uma resposta m~tora
espedfica diferente de urn· tipo de co~portamento d1fuso
e convulsiyo. · · como os estimulos cuja remo~flo e fortalecedora ou cuja
Os resultados com seres humanos em estudos de re..;
tirada da mao, do pe, de urn dedo tambem eram intrigan-
tes. Crian<;as subnormais no laborat6rio de Bechterev
76
eram mais facilniente condicionadas que crian<;as normais,
men!nas mais facilmente condicionadas que meninos, e
· crian<;as mais jovens mais facilmente que crian<;as mais
velhas; uin choque forte era mais eficiente que urn cho-
que fraco. Os resultados referentes a intensidade do cho-
que foram confirmados nos laborat6rios norte-america-
nos com sujeitos adultos, mas alguns sujeitos, mesmo com
choque intenso nao se condicionaram de maneira alguma.
Comumente, os resultados com animais foram confirmados.
Q responder difuso foi substituido por rea<;6es altamente
espedficas a medida que o condicionamento prosseguia;
a resposta condicionada era evocada. menos rapidamente
do que a incondicionada e o condicionamento era me-
lhor sempre que era possivel esquivar 0 choque. Alem
disso, os resultados com seres humanos eram notoriamen-
te dependentes do tipo de instru<;oes que recebiam · e da
· .. experiencia anterior dos sujeitos em situa<;oes seme-
Jhantes ..
A chave· para a maioria desses problemas se encon-
tra no que pode ser chamado, meio esdri:txulament~, "re-
for<ro condicionado negativo". 0 Ieitor estara lembrado
da distin<;ao, feita na Sec<;ao 5, entre refor<;amento posi-
tivo e negativo. · Os refor<;adores positivos ·foram definidos
como sendo "todos aqueles estimulos que, quando apre-
sentados, agem no sentido de fortalecer o comportamento
que os precede". Refor<;adores negativos foram definidos
apresent~flo e enfraquecedora. Depois; na Sec<;ao 15
aparece a distin<;ao entre· refor<;adores prinuirios e condi-
cionados. Mas todos os refor<;adores condicionados des-
77

critos foram do tipo positivo. Eram estimulos que, atraves
de uma associa~ao especial com os refor~adores positivos,
tomavam-se, eles pr6prios, refor~adores. Nenhuma men-
~ao foi feita a estimulos que, atraves de associa~ao com
refor~a~ores negativos, tivessem assumido uma fun~ao si-
milar.
Esta negligencia sera agora remediada se se conside-
rar um outro experimento simples com um organismo re-
lativamente simples, o rato branco de laborat6rio. Desta
vez, o equipamento e uma camara com uma divisao no
meio e uma porta de Iiga~ao. 0 interior de uma das di-
visoes esta pintado de branco, e tem no chao grades atra-
~
ves das quais e possivel aplicar choques eletricos aos pes
do sujeito. A outra divisao e pintada de pteto, tem o
chao de madeira, e e quase a prova de Iuz. No teto de
cada divisao ha um al~apao que permite colocar ou retirar
o animal da camara. Uma das paredes da divisao branca
e de vidro, 0 que permite ao experimentador observar 0
animal.
0 procedimento no primeiro dia do experimento e
simplesmente colocar o animal na divisao branca, ligar
uma corrente eletrica na grade do chao, deixando que
receba choque ate que salte .atraves da cortina preta da
portinhola para a divisao · preta. .Como se poderia espe-
rar, o rato resolve rapidamente este problema, em ques-
tao de segundos. Dai por diante o ·experimentador, de-
pois de ter dado ao rato alguns minutos de descanso,
experimenta outra vez. E outra vez, ate · que se te-
nham acumulado 60 corridas da divisao branca para a
preta. A esta altura, ninguem vai . discutir a afirma~ao
78
:g,.
de que o choque e urn refor~ador negativo - e que o
correr para a divisao preta foi refor~ado pela remo~ao
do choque. Ninguem duvida tambem que o choque e
urn estimulo eliciador para a atividade "en:10cional". E
pode-se tambem concluir que a divisao branca, . no de-
correr destas tentativas, tornou-se urn estimulo condicio-
nado para esta atividade.
A primeira verifica~ao destas afirma~oes se faz no
dia seguinte. Mais uma vez o stijeito _e colocado na di-
visao branca. As condi~oes sao as mesmas do dia anterior,
exceto pelo fato de (a) a grade do chao ja nao estat ele-
trificada, (b) a portinhola entre as divisoes estar fechada
e trancada. Em quinze minutos de observa~ho toma-se
6bvio que a divisao brarica atua de fato como urn estimulo
emocional condicionado. Observam-se no comportamento
do rato todos os sinais chissicos de medo: mic~ao, defe-
ca~ao, tremores e respira~ao acelerada. Mesmo depois de
urn quarto de bora de confinamento na divisao branca,
quando ja se pode ver alguma melhoria, o animal conti-
nua ainda agachado e tremulo, obviamente desgra~ado.
A segunda verifica~ao e feita no dia seguinte. As
condi~oes sao as mesmas do. dia anterior, is to e, o choque
foi removido da divisao branca mas a porta de passagem
para a divisao preta e destravada e permanece aberta
atras da cortina. 0 rato pode agora correr para a divisao
preta e nela petrnanecer durante mais .ou menos urn mi-
nuto, depois do qual e retirado e recolocado na divisao
branca, onde tern outra chance de fugir .. Isto e repetido
sessenta vezes ou ate que o animal.nao abandone mais a ·
divisao branca. Resultado: no fim do dia, ele estara ainda
79
5 - Keller
 atravessando _a porta com apreciavel velocidade embora
nao tao· dtpidamente quarito a principio. A divisao bran-
ca, apesar de nao mais apresentar choque, e ainda alguma
coisa da qual deve fugir. · A sua "remo~ao" e recompen-
sadora. Devido a associa~ao inicial entre a divisao bran-
ca: e uriJ. refOr~o negativo, o choque, ela t9mou-se urn
refor~ador negativo, ou melhor, urn refOr~o negativo con~
dicionado.
Outros pontos deveriam ser destacados em rela~ao
a este experimento. Urn ponto e que se o animal fosse
co:nfinado na divisao branca por urn perfodo muito Iongo,
no segundo dia ele nao tentaria deixa-la, exceto para al-
gumas explora~oes, no terceiro dia. Ocorreria a extin~ao
da resposta emocional ao estimulo divisao branca (ver Sec-.
~ao 10). Esta divisao teria perdido seu poder de refOr~o
negativo condicionado, de modo que sua remo~ao deixaria
de· ser recompensadora. 0 rato nao fugiria simplesmente
porque nada havia de que· afastar-se.
Urn segundo ponto e que, se se fizer que o rato de
mais de sessenta corridas no terceiro dia, sua velocidade
de correr teni diminuido e, por fim, caido para zero. 0
recolocar repetidamente o animal no terceiro dia na di-
visao branca tera o mesmo efeito- que uma prolongada
exposi~ao no segundo. Nao que o comportamento ope-
rante de correr se tenha extinguido; ao inves disto, sua cau-
sa e que foi eliminada a medida que a divisao branca vai
perdendo sua for~a como refor~ador nega:tivo ou estimulo
emocional condicionado.
Urn terceiro ponto e o seguinte. Poder-se-ia ter de-
monstrado 0 refor~amento "negativo" condicionado qua-
80
se tao facilmente se nao se tivesse permitido que o rato "
escapasse do choque no primeiro dia de treino. Teria
sido possivel aplicar sessenta choques breves enquanto es-
., . tivesse confinado a divisao branca e, no terceiro di'a, te-
-ria sido possivel ensina-lo a correr atraves da portinhola.
0 refor~o, como antes, teria sido a remo~ao da divisao
em que recebeu choques.
Urn outro ponto ainda. Podenamos ter condiciona~
do o rato a remover qualquer outra coisa que nao a divi~
sao branca. Alterando ligeiramente · o. aparelho, poderia-
mos te-lo condicionado a correr de uma divisao para
outra e, aSsim, remover urn determinado fator especial do
estimulo na situa~ao, digamos desligar uma luz forte ou
uma cigarra. Na verdade, poderiamos ter demonstrado
que qualquer especie de estimula~ao que nao fOsse ne-
gativa poderia
.. passar a se-lo - ate mesmo a es-
timula~ao oriunda dos pr6prios movimentos do animal. ·
Se urn choque fOsse apresentado em intervalos de cinco
segundos, a menos que o animal estivesse apoiado s6
sobre as patas traseiras, poderiamos ter logo urn aniinal
que passaria a maior parte do tempo com as patas dian~
...-":. teiras no ar, escapando assim de suas outras maneiras de
. 'I se comportar, todas as quais teriam eventualmente sido
punidas pelo choque.
Se recapitularmos agora o caso do condicionamento
de retirada do dedo, mao ou pe, ele aparece sob uma
luz diferente. Parece agora nao ser muito mais do que
urn comportamento de e<,quiva, como o exibido pelo rato
que escapa de urn ·refor~ador condicionado como urn
compartimento branco, uma cigarra ou uma das suas pr6-
....
81
:f
.(
I
 prias respostas. Se o cachorro levanta a pata diantdra ao
escutar urn som, ~ assim evita um choque eletrico na pata,
seu refor~amento bern pode ser derivado da elimina~ao
de umaparte do composto de estimulos que foi associado
ao choque. Nao se esperaria que este levantar operante
se assemelhasse a rea~ao respondente ao. choque mais do
que esperariamos que a corrida determinada do rato para
o outro compartimento se assemelhasse com os saltos que
dava feito louco, inicialmente, quando a grade 'era ele-
tri,ficada.
Os resultados dos -experimentos sobre a retirada do
dedo nao sao paralelos exatos dos experimentos de esqui-
va. Pode ser, contudo, que experimentos com seres hu-
manos incluam uma situa9ao de conflito que esta ausente
no caso de organismos como o cao e o rato. 0 compor-
tamento de algumas pessoa~, incluindo o relato de como
se "sentem", sugere uma especie de esquiva competitiva.
De um lado,. ha a tendencia a evitar o choque, o que
vern sendo refor~ado pela remo~ao de um som, uma luz,
ou outra amea~a qu~lquer.. De outro lado, ha o que se
poderia chamar uma esquiva de uma esquiva, que foi ori-
ginalmente refor~ada porque recebia aprova~ao social
ou eliminava a desaprova~ao. Quando um sujeito relata
que se sente "envergonhado" ou "meio tolo" por ti-
rar o dedo do eletrodo quando vern o sinal do choque,
isto sugere que no passado suas falhas em "enfren-
tar" tal estimula~ao foi seguida por conseqiiencias pio-
res ainda; e que, efetivamente, o deixar de retirar o
dedo (para esquivar) deve-se a urn contramovimento
que esquiva lsto! Uma explica~ao como esta pelo me-
82
I
I
nos nao contraria a descoberta de que as crian~as anor-
mais adquirem a retirada do dedo inais facilmente que
as normais; que as meninas mais rapidamente que os me-
ninos; que as crian~as menores mais facilmente que as
mais velhas; que com choque forte e mais facil que com
fraco, etc.
· Ja se deu alguma aten~ao antes (Sec~ao 15) ao. papel
do refor~o . positivo condicionado na vida diaria do
homem, e sua importancia no controle do comportamento
ja foi salientada. Os refor~adores condicionados negativos
sao ainda dramaticos e vitalmente importantes. Uma
grande porcentagem de nossos atos, tanto normais como
anormais, parecem ter adquirido qua~e toda sua for~a da
remo~ao de estimulos que adquiriram urn carater aversivo.
Os mais 6bvios sao as respostas que removem sinais exte-
riores de perigo. Muitos jogos e a maioria das ocupa~oes
requerem certo grau de comportamentos de esgueirar-se,
eximir-se, furtar-se e esquivar-se em resposta a sinais do
ambiente. De outro modo, como acontece com o cao
· que deixa de flexionar a pema ao som, pode vir o desastre.
Ha tambem atividades que demandam escape de si-:-
nais providos pelos nossos pr6prios movimentos. Sao im-
portantes nas atividades em que o equilibrio e a postura
desempenham um papel relevante. Esquiar, patinar, an-
.dar de bicicleta, nadar, mergulhar, fazer acrobacias, sao
excelentes exemplos. 0 ziguezaguear e o cai-nao-cai de
quem come~a a andar de esquis mostram vividamente a
maneira pela qual os sinais oriundos de urn movimento
vern a ser "corrigidos" por outro. Por fim, os escapes de
cair sao feitos tao rapida e sutilmente que ja nao sao vis-
83

tos. Nos arabescos e figura~oes do ciclista de circo ha
muito pouco que lembre as esquivas desajeitadas (ou os
tombos e os arranhoes!) do principiante. E para retomar
urn exemplo anterior, nada -lembra no passo elastico do
andaJ;ilho a longa serie de "quase cair" e equilibrar-se que
foram os principais ingredientes de sua "aprendizagem
de andar".
Urn aspecto mais serio deste assunto pode ser aqui
rapidamente. mencionado para encerrar esta sec~ao. Re-
for~adores .negatives, primarios e condicionados, consti-
tuem a maior parte do que chamamos "puni~ao" (Sec~ao
10).. No caso do primario, ha efetivamente "ferimento"
corporal, como quando uma crian~a e espancada, leva
palmadas ou e fisicamente for~ada a submissao. No caso
do condicionado, pode ser .na forma de urn insulto, ca-
~oadas, ironias ou amea~as, entre outras coisas. Em am-
bos os casos, contudo, uma resposta emocional fica con-
dicionada de maneira pavloviana e a situa~ao torna,..se ne-
gativamente refor~adora. A fuga da situa~ao, ou de qual-
quer resposta com ela feiacionada, . torna-se recompen-
sadora.
Urn metodo 6bvio de remoyer estas situa~oes aver-
. _sivas condicionadas e o emprt?gado pelo rato do exemplo
anterior, que abandonava o Iugar em que era punido tao
rapidamente quanto podia.. Assim procedem ocasional-
mente os seres humanos. 0 Iugar em que sofreram uma
perturba~ao emocional torna-se, para eles, um_lugar a que
. nunca querem voltar; desenvolvem uma "fobia" em re-
la~ao a ele e, atraves da generaliza~ao, a lugares que a
ele _se assemelhem. Algumas vezes, entretanto, mecanis-
84
'-h
mos de defesa menos 6bvios sao usados para evitar .0
reaparecimento de sinais ou amea~as de puni~ao. Uma
pessoa pode tornar-se incapaz de "ver" ou "ouvir" aqui- ·
16 que seja negativamente refor~ador, pode nao ser capaz
de fazer urn movimento que, anteriormente, desempenhou
urn papel em produzir refOr~o negativo; ou pode desen-
volver urn comportamento que o mantenha ocupado coni
estimula~oes alternativas, elas pr6prias negativamente re-
for~adoras, mas em ·menor grau.
:E:stes e outros modos de fugir das mazelas ~e nosso
mundo atual· sao interessantes para o estudioso da apren-
dizagem bern como para aqueles cuja principal preocupa-
~ao e com os desajustamentos humanos e com sua cura.
Os problemas envolvidos nao sao simples. Nem de Ionge
tao simples como este apanhado do campo possa ter su-
gerido. Mas hoje se pode ver, melhor do que nunca,
que necessitarao, para uma solu~ao completa, de uma am-
pia compreensao dos principios basicos aos quais o leiter
foi introduzido neste trabalho.
17. P6s-escrito
Na Sec~ao 1, pagina 7, foram mencionados alguns
exemplos de ,aprendizagem, e algumas questoes a respeito
deles foram levantadas. Nao se ofereceu nenhuma defi-
ni~ao do conceito, nem se prometeu uma. Nem seria uma
defini~ao util agora; Deu-se a entender, entretanto, que
a "aprendizagem" passou a incluir grande parte do que _
·se entende hoje pelo nome de "psicologia" e foi prome-
tido que urn conhecimento dos princfpios gerais tratados
85
 nestas paginas permitiria ao Ieitor analisar muitos casos
de apiendizagem na vida diaria, inclusive os que la foram
citados. Assim sendo, seria born se o leitor, agora, relesse .
a primeira sec\!ao, perguntando-se se a promessa foi cum-
. prida 1 completamente ou em parte. Se o foi, melhor! Se
nao, e se 0 leitor tiver sido "aplicado"' entao este trabalho
nao esteve. a altura de seus objetivos. Neste caso, o unico .
. resultado positivo que ainda pode restar e que tenha con-
seguido despertar o interesse na continua\!aO dos estudos.
neste campo, ou no da propria psicologia.
86
Apendice: Curvas acumuladas e registrador
acumulado
Como foi ressaltado em varios pontos ·neste peque-
no Iivro, a partir da Sec\!aO 4, o comportamento e me-
dido,. primariamente, em termos de freqiiencia de ocorren-
cia. Denominamos forte o ato que ocorre. freqiiente-
mente e fraco aquele que ocorre raramente. Uma
crian\!a condicionada a pressionar uma alavanca para ob-
ter pequenos peda\!OS de doce aumentani rapidamente a
freqiiencia das press6es quando ocorrerem os primeiros
refor\!amentos da resposta. Com o tempo, o doce perde
sua atra\!aO e a freqiiencia diminui gradualmente. A prin-
cipio, a resposta foi fortalecida e depois tornou-se fraca.
Pode-se considerar este aspecto em termos de raziio
de respostas - respostas por segundo, respostas por mi-
nuto, ou respostas por hora. A razao das respostas aumen-
ta, no condicionamento, de quase zero respostas por mi-
nuto ate vinte ou trinta. Durante a· sacia9ao, a medida
que o doce conthiua a ser comido, a razao decresce gra-
dualmente .desse valor ate chegar a uma parada completa.
Isto esta graficamente representado nas Figuras 1 e 2
abaixo. A Figura 1 mostra como a freqiiencia da pressao
a barra (0 numero de press6es por minuto) pode mudar
87
 durante urn periodo de condicionamento de tres minQtos.
Nenhuma resposta foi apresentada nos primeiros . trinta
segundos mais ou menos, conforme mostra esse grcifico.
As respostas aparecem e, assim que os refor9os sao apre-
d€Jce, ao inves de ser dado apos cada r~~posta de pressao,
e dado de vez em quando - isto e, intermitentemente. Du-
rante urn periodo de tres minutos, trezentas respostas fo-
l ram apresentadas; numa razao de 100 respostas por mi-
l

sentadqs, a freqiiencia de pressionar dtpidamente au- nuto. Os pequenos riscos ou marcas ao Iongo da linha
menta ate urn valor de cerca de vinte por minuto. (0 lei- indicam quando foram apresentados os refor9os - depois
tor pode verificar isto estitp.ando o numero de respostas de quantas respostas e de quanto tempo.
apresentadas entre as duas linhas verticais ponteadas da
figura.) Uma vez que a freqiiencia aumenta no decorrer 300
I
desse registro, a ·curva mostra uma acelf!r{lfiio positiva..
-
I Ill
-,i I'll
ell
40 0
Q.

- -
ell
....
Ql

-
'Cii'30

·-&.
ell
IU I'll
~ 20 ell
Q. 0 1 2 3
~ 10 Ill
(minutos)
-... 0 1
-·...
Ql

Fig. 3
2 3 0 1 2 3. Seria muito util ter urn aparelho que, automatica-
(minutos) (minutos) mente, produzisse curvas de freqiiencia como estas, no
Fig. 1 Fig.,2 proprio momento em que as respostas sao emitidas. Te-
· N a Figura 2. maior numero de respostas sao repre- riamos economizado o trabalho de acumular respostas du-
sentadas. :Bste gnifico mostra que cerca de 100 respos- rante as sucessivas unidades de tempo. (por exemplo, cada ·
tas foram emitidas em urn periodo de tres niinutos, numa minuto) e evitado elaborar curvas como as das Figuras
razao gradualmente decrescente. Pod~-se con:siderar esta 1, 2 e 3, as vezes muito tempo depois de ter observado 0
curva como urn grcifico do consume) de :~rca de .100 pe·:: comportamento. Assim, se o sujeito do experimento (a
da9os de doce por urna crian9a, durante·· urn perll)do. de menina, do exemplo) construisse seu proprio registro gni-
tres minutos; Uma curva como esta, que mostra urn decres- fico a medida que se comportasse, isto economizaria mui-
cimo da freqiiencia, e negativamente acelerada; to trabalho posterior e informaria em cada momento, du-
Ij A Figura 3 ilustra urn tipo especial de
curva, ·urna cur- .. rante o experimento, exatamente o que estava ocorrendo
va em Jinha reta. :Bste e o tipo de registro obtido quand<? o em termos da freqiiencia da resposta.

88 89
·,..~· /
:t;:sse aparelho existe! E o registrador acumulado,
urn dos instrumentos modernos mais uteis no ·estudo ex-
perimental do comportamento. Produz curvas como aque-
las consideradas acima e muitas . outras.. ;" Faz isso por
simples adifiio ( acumulafiio) de respostas e tempo no re-
gistro gnifico (a curva). Examinemos como isto ocorre.
r cer, suponhamos que ja se tenha desenhado na fOlha de re-
Come~a-se com alguma freqiiencia de resposta que
se quer registrar, como nos exemplos mencionados. Su-
ponha que a resposta seja a de pressionar uma alavanca.
Cada vez que. a alavanca for suficientemente pressionada,
ativa o mecanismo que faz com que a pena percorra ver-
ticalmente urn degrau minimo, em dire~ao a parte superior
da fOlha de papel do. registro. Se nada mais ocorresse,
uma serie dessas respostas formaria uma linha reta no pa-
pel, de baixo para cima, como a linha vertical marcada
Respostas nas Figuras 1, 2 ou 3.
Mas algo mais ocorre. Quando se aciona o aparelho
para registrar a resposta, o papel colocado ·sob a pena cor-
re muito lenta e constantemente para a esquerda, em uma
velocidade de somente alguns milimetros por minuto. Se
este movimento continuasse por algum tempo e nenhuma
resposta fosse apresentada, a pena desenharia uma linha
para a direita, tal como a linha horizontal dos minutos
em cada uma das tres figuras. (Pode-se ver como isto fun-
dona puxando lentamente uma folha de papel para a es-
querda e mantendo urn lapis numa posi~ao fixa mas ligei-
ramente pressionado sobre a superficie do papel.) As
respostas, isoladamente, dariam uma linha vertical; 0 tem-
po, isoladamente, uma horizontal.
90
Quando as respostas sao apresentadas no decorrer do
tempo, o registrador acumulado faz curvas como as dos
exemplos; ou combina~6es dessas curvas. A fim de obter
uma descri~ao pormenorizada de como isto_ pode aconte-
gistro uma linha para Respostas e uma linha para Minutos,
como na Figura 4. Suponhamos tambem que se marquem
pontos em cada 'linha a intervalos regulares, para mostrar
o numero de respostas ou a quantidade de tempo que gas-
tariam. Coloca-se agora a pena do registrador no ponto
zero, onde as duas Iinhas se encontram, e aciona-se o
aparelho. Imagine que, com a passagem do tempo, e
possivel, para alguns organismos, pressionarem uma ala-
van~a, obterem urn refor~o e, automaticamente, registrarem
' .
a resposta. Lembre-se que cada resposta elevara a pena no
papel na altura de urn pequeno degrau e que cada minuto
de tempo sera registrado como uma curta distancia hori~
zontal da pena ao deslocar-se para a direita.
Na Figura 4, parece que a primeira resposta ocorreu
depois de seis minutos, elevando a pena urn degrau acima
da linha de base. Depois de outros tres minutos de a pena
movimentar-se. para a direita, outra resposta ocorreu e a
pena moveu-se urn outro degrau para cima. As duas pr6-
ximas respostas ocorreram aproximadamente no intervalo
de dois minutos e, depois disso, passaram a ocorrer com
constancia e com uma freqiien~ia de quase uma resposta
por minuto, ate quatorze respostas serem . apresentadas.
Entao, gradualmente, aumentou cada vez mais o tempo
entre as respostas. Finalmente, as respostas cessaram e a
linha do tempo continuou paralela a linha de base, ate 0
91
 --..........___

:_&;,:

fim do registro. Foi construida a curva de respostas. A pe- forc;ando cada resposta; a segunda parte poderia represen-
na pode voltar para a linha de base e urn novo registro tar urn periodo cons~ante de respostas e comer o doce, de-
pode ser iniciado. pois de a resposta ser condicionada; e a parte final da
curva poderia ser urn grlifico do decrescimo de respostas
25
decorrente da saciac;ao de doce.
- 20 _ · Dois outros pontos devem ser esclarecidos antes de

-
I ll
CIS
15 encerrar este assunto de registrador acumulado e de suas
I ll
0 operac;oes. Primeiro, a aparencia de linh~ quebrada da ·
Q. 10

-
Ill
41
....
curva de registro acumulado nao e, geralmente, tao
5 6bv1a quanto a da Figura 4. Quando as unidades das
respostas sao muito pequenas e o movimento de tempo
.i 0 5 10 ~0 30 40 50 muito Iento, e dificil distinguir os degraus; a curva pa-
'I (minutos) recera quase tao lisa quanto as das tres primeiras figuras.
:i Fig. 4 (Pode-se, naturalmente, exagerar o efeito de degrau fa-
!
]
t Modificando-se o aspecto de linha quebrada do re- zendo que a pena se mova para mais Ionge em cada res-
gistro obtido, enviesando 0 papel ou colocando-o a dis- posta e acelerando o movimento na direc;ao tempo.) '
L
,I
!
tancia, pode-se reconhecer que a "curva" feita . e, em Segundo, mesmo nos casos de degraus pequenos e
alguns aspectos, semelhante aquelas das Figuras 1, 2 e 3. velocidades baixas, alguns organismos, como pombos, por
A principio, ha uma ligeira acelerac;ao positiva parecida . exemplo,- respondem com alta freqiiencia e, se nada im-
com a que ocorre na l'igura l. Segue-se urn segmento em pedisse a pena, ela ultrapassaria a parte superior do pa-
linha reta, como o da Figura 3, no qual as respostas apa- pel de registro. Por essa razao, os registradores acumu-
recem numa freqiiencia constante. _ E finalmente, uma lados estao equipados com urn mecanismo de reajuste que
acelerac;ao negativa, como a da Figura 2. faz a pena voltar automaticamente a linha de base quan-
Embora a curva da Figura 4- tenha sido construida do alcan~a uma determinada altura do papel de re-
desse modo especial, para mostrar acelerac;ao positiva e gistro (quando urn certo numero de respostas foi apre-
negativa e uma freqiiencia de respostas constante~ os re- sentado). 0 efeito e similar ao apresentado no fim do
sultados nao sao muito diversos dos obtidos eJll urn ex- registro da Figura 4.. Curvas de respostas que se estendem
perimento real. 0 registro poderia representar, primeiro, no tempo, mantendo alta freqiiencia, podem mostrar mui-
o condicionamento de uma resposta de pressionar uma tas voltas e ascenc;oes. (Isto nao significa, naturalmente,
alavanca em uma crianc;a, com bons pedac;os de doce re- que se subtraem respostas do numero das ja apresentadas;

92 93
 as curvas acumuladas, como o nom~ sugere, acumulam
respostas -. somente adicionam. Se se tivesse no papel
de registro todo o espa~o necessario, o registro continua-
ria ate o fim; ·sem qualquer necessidade para recome~ar
- da base.) ·
Leituras sugeridas

As pessoas que desejam ampliar esta breve introdu~ao a

teoria do refor~o e ao problema da aprendizagem, sugerem-se os
seguintes livros, para serem lidos nesta ordem :
HOLLAND, JAMES G., e B. F. SKINNER The analysis of
Behavior. New York: McGraw-Hill, 1961 (frad. bras.: .A.
Analise do Comportamento, Sao Paulo, Herder, 1969).
FERSTER, C. B., e MARY CAROL, PERROT, Behavior Prin-
ciples. New York: Appleton-Century-Crofts, 1968.
SKINNER, B. F., Science and Human Behavior. New York:
Macmillan, 1953.
MILLENSON, J. R., Principles of Behavioral Analysis. New
York: Macmillan, 1967.
Esses livros sao de nivel de introdu!raO, mas diferem muito
no conteudo e na forma. 0 texto de Holland e Skinner e
programado, o primeiro desse tipo publicado em psicologia. E,
em certo sentido, uma versao resumida e simplifica4.a do livro de ,
Skinner, Ciencia e Comportamento Humano, ao flual e uma boa
introdu~ao. 0 livro de Ferster e Perrott foi escrito para ser usado
em urn curso prosramado, mas pode ser lido e com proveito, de
maneira convencional. Foi planejado com a finalidade de "dar
ao leitor proficiencia na analise da complexa intera!riio do
homem com seu meio natural" e estabelece uma constante rela~ao
entre os resultados obtidos em laboratorio e os procedimentos da
vida diaria. Cibzcia e · Comportamento Humano, escrito para

94 95
0 leigo instruido e para 0 estudante universiHirio, e uma ampla
apliCa!riiO dos principios do refOr!ramento na ana.lise pormeno-
rizada do comportamento individual e social da nossa epoca. 0
Prindpios da Amilise do Comportamento de Millenson procura
prover "uma introdu!riio rigorosa e orientada por dados a Psi-
cologia" para o estudante universitario; como conteudo de curso
de uin ano com creditos em crencias naturais ..

':)

96