Zeiler MD (1972) Reinforcement of Spaced Responding in a Simultaneous Discrimination

8/7/2019 Zeiler MD (1972) Reinforcement of Spaced Responding in a Simultaneous Discrimination

1/9

JOURNAL OF THE EXPERIMENTAL ANALYSIS OF BEHAVIOR

REINFORCEMENT OF SPACED RESPONDING IN ASIMULTANEOUS DISCRIMINATION1MICHAEL D . Z E I L E REMORY UNIVERSITY

P i g e o n s w e r e e x p o s e d t o t h r e e s t i m u l i s i m u l t a n e o u s l y w i t h r e s p o n s e s r e i n f o r c e d a c c o r d i n gt o d i f f e r e n t ia l - r e i n f o r c e m e nt - o f - l o w - ra t e s c h e d u l e s . R e s p o n s e s t o o n e s t i m u l u s ( t h e p o s i -t i v e s t i m u l u s ) t h a t w e r e s p a c e d a p p r o p r i a t e l y r e s u l t e d i n f o o d p r e s e n t a t i o n . The v a r i a b l e sm a n i p u l a t e d w e r e t h e t i m e p a r a m e t e r o f t h e s c h e d u l e ( 5 , 1 0 , 2 0 , 3 0 s e c ) a n d t h e c o n s e -q u e n c e s o f r e s p o n d i n g t o t h e o t h e r t w o s t i m u l i ( t h e n e g a t i v e s t i m u l i ) . The p e r c e n t a g e o ft h e t o t a l r e s p o n s e s t h a t o c c u r r e d t o e a c h s t i m u l u s w a s i n d e p e n d e n t o f t h e s c h e d u l e v a l u eb u t w a s d e p e n d e n t o n t h e c o n s e q u e n c e s o f r e s p o n d i n g t o t h e n e g a t i v e s t i m u l i . I f r e s p o n s e st o b o t h r e s e t t h e s c h e d u l e t i m e r , r e s p o n d i n g w a s c o n f i n e d l a r g e l y t o t h e p o s i t i v e s t i m u l u s .I f r e s p o n s e s t o n e i t h e r h a d s c h e d u l e d e f f e c t s , t h e b i r d s w e r e more l i k e l y t o r e s p o n d t o t h o s es t i m u l i . R e s p o n d i n g t o o n e n e g a t i v e s t i m u l u s c o u l d b e s e l e c t i v e l y a t t e n u a t e d b y h a v i n gr e s p o n s e s t o t h a t s t i m u l u s a l o n e r e s e t t h e t i m e r . With t h e s c h e d u l e t i m e v a l u e h e l d c o n -s t a n t , t h e a b s o l u t e r a t e o f r e s p o n d i n g t o t h e p o s i t i v e s t i m u l u s w a s e i t h e r s t a b l e o r d e c r e a s e dw i t h m a i n t a i n e d e x p o s u r e ; i t d i d n o t c h a n g e a s a f u n c t i o n o f i n c r e a s e s o r d e c r e a s e s i nr e s p o n d i n g t o t h e n e g a t i v e s t i m u l i . R a t h e r t h a n i n t e r a c t i n g a n d a f f e c t i n g e a c h o t h e r , r e -s p o n s e s t o t h e t h r e e s t i m u l i w e r e c o n t r o l l e d i n d e p e n d e n t l y b y t h e i r r e l a t i o n t o r e i n f o r c e -m e n t . T h e r e w a s no e v i d e n c e t h a t r e s p o n s e s t o t h e n e g a t i v e s t i m u l i m e d i a t e d t h e s p a c i n go f r e s p o n s e s t o t h e p o s i t i v e s t i m u l u s .

The p r e v a i l i n g s c h e d u l e o f r e i n f o r c e m e n th a s b e e n f o u n d t o i n f l u e n c e t h e a c c u r a c y o fm a t c h i n g - t o - s a m p l e ( D e w s , 1 9 6 3 ; F e r s t e r , 1 9 6 0 )a n d t h e s h a p e o f g e n e r a l i z a t i o n g r a d i e n t s( H e a r s t , 1 9 6 5 ; H e a r s t , K o r e s k o , a n d P o p p e n ,1 9 6 4 ; Thomas a n d S w i t a l s k i , 1 9 6 6 ; Z e i l e r ,1 9 6 9 ) . D a t a f r o m s i m u l t a n e o u s d i s c r i m i n a t i o np r o c e d u r e s ( a s p e c i a l c a s e o f c o n c u r r e n t s c h e d -u l e s i n w h i c h t w o o r more s t i m u l i a p p e a rs i m u l t a n e o u s l y a n d r e s p o n s e s t o o n e a r e c o r -r e l a t e d w i t h a s c h e d u l e o f r e i n f o r c e m e n t w h i l er e s p o n s e s t o o t h e r s a r e c o r r e l a t e d w i t h e x t i n c -t i o n ) , h o w e v e r , h a v e n o t r e v e a l e d t h a t s t i m u l u sc o n t r o l d e p e n d s o n t h e s c h e d u l e u s e d t o p r o -d u c e a n d m a i n t a i n r e s p o n d i n g . N e v i n ( 1 9 6 7 )f o u n d e q u a l a c c u r a c y when r e s p o n s e s t o o n eo f t w o s t i m u l i p r o d u c e d f o o d a c c o r d i n g t od i s c r e t e - t r i a l a n a l o g u e s o f e i t h e r f i x e d - r a t i o o rf i x e d - i n t e r v a l s c h e d u l e s . Z e i l e r ( 1 9 6 8 , 1 9 7 0 )f o u n d r e s p o n d i n g t o b e c o n f i n e d a l m o s t e n -t i r e l y t o t h e s t i m u l u s c o r r e l a t e d w i t h r e i n -f o r c e m e n t when r e s p o n s e s t o o n e o f t h r e e

' T h i s r e s e a r c h w a s s u p p o r t e d b y R e s e a r c h G r a n tG B - 2 5 9 5 9 f r o m t h e N a t i o n a l S c i e n c e F o u n d a t i o n a n db y a g r a n t f r o m t h e U n i v e r s i t y R e s e a r c h C o m m i t t e e o fEmory U n i v e r s i t y . R e p r i n t s a r e a v a i l a b l e f r o m t h ea u t h o r , D e p a r t m e n t o f P s y c h o l o g y , Emory U n i v e r s i t y ,A t l a n t a , G e o r g i a 3 0 3 2 2 .

s t i m u l i r e s u l t e d i n f o o d p r e s e n t a t i o n a c c o r d i n gt o f r e e - o p e r a n t f i x e d - r a t i o o r f i x e d - i n t e r v a ls c h e d u l e s .The p r e s e n t s t u d y e x t e n d e d t h e a n a l y s i s o fr e i n f o r c e m e n t s c h e d u l e s i n s i m u l t a n e o u s d i s -c r i m i n a t i o n s b y i n v e s t i g a t i n g d i f f e r e n t i a l - r e i n -f o r c e m e n t - o f - l o w - r a t e (DRL) s c h e d u l e s . I n aDRL s c h e d u l e , a r e i n f o r c i n g e v e n t o c c u r swhen a r e s p o n s e f o l l o w s t h e p r e c e d i n g r e -s p o n s e b y more t h a n t h e t i m e s p e c i f i e d b y t h ep a r a m e t e r v a l u e . S u c h s c h e d u l e s w e r e o f p a r -t i c u l a r c o n c e r n , b e c a u s e i n s u c c e s s i v e d i s c r i m -i n a t i o n s t h e y p r o d u c e d l e s s s t i m u l u s c o n t r o l( f l a t t e r g e n e r a l i z a t i o n g r a d i e n t s ) t h a n d i d a n yo t h e r ( H e a r s t , e t a l . , 1 9 4 6 ; Z e i l e r , 1 9 6 9 ) . Thee s s e n t i a l a s p e c t o f s i m u l t a n e o u s d i s c r i m i n a -t i o n s i s t h a t t h e s u b j e c t i s f r e e t o r e s p o n d t oa n y o f t w o o r more s t i m u l i a t a n y t i m e , b u tr e s p o n s e s t o o n l y o n e r e s u l t i n a r e i n f o r c i n ge v e n t ( e . g . , f o o d ) . With a DRL s c h e d u l e , r e -s p o n s e s t o o n e s t i m u l u s t h a t a r e s p a c e d a p -p r o p r i a t e l y i n t i m e a r e f o l l o w e d b y f o o d p r e -s e n t a t i o n . The e f f e c t s o f r e s p o n s e s t o t h e o t h e rs t i m u l i m ay b e m a n i p u l a t e d . T w o p o s s i b i l i -t i e s a r e : ( 1 ) t h e y c o u l d h a v e no s c h e d u l e de f f e c t a t a l l , t h a t i s , t h e y c o u l d b e c o m p l e t e l yi r r e l e v a n t w i t h r e s p e c t t o t h e p r e s e n t a t i o n o ff o o d ; o r ( 2 ) t h e y c o u l d b e t r e a t e d s i m i l a r l y t o

4 4 3

1 9 7 2 , 1 8 , 4 4 3 - 4 5 1 NUMBER 3 ( N O V E M B E R )


2/9

MICHAEL D . ZEILERn o n r e i n f o r c e d r e s p o n s e s t o t h e p o s i t i v e s t i m -u l u s i n t h a t t h e y s t a r t t h e DRL i n t e r v a l a n e w .The p r e s e n t p r o c e d u r e s i n v e s t i g a t e d b o t h o ft h e s e a l t e r n a t i v e s .

METHODS t u b j e c t s

T h r e e W h i t e C a r n e a u x p i g e o n s w e r e m a i n -t a i n e d a t 80% o f t h e i r f r e e - f e e d i n g w e i g h t s .None o f t h e b i r d s h a d p a r t i c i p a t e d i n e x p e r i -m e n t s p r e v i o u s l y .A p p a r a t u s

T h r e e t r a n s l u c e n t 0 . 8 - i n . ( 2 c m ) d i a m e t e rr e s p o n s e k e y s ( R . G e r b r a n d s C o . ) , e a c h o p e r -a t e d b y a m in im u m f o r c e o f 1 2 g ( 0 . 1 2 N ) , w e r emounted 3 i n . ( 7 . 6 c m ) a p a r t , c e n t e r - t o - c e n t e r .A 2 - i n . ( 5 . 1 c m ) s q u a r e a p e r t u r e b e l o w t h em i d d l e k e y p r o v i d e d o c c a s i o n a l a c c e s s t oP u r i n a P i g e o n C l h e c k e r s , t h e f o o d u s e d a s t h es t a n d a r d d i e t . W h i t e l i g h t i l l u m i n a t e d t h ea p e r t u r e , a n d t h e k e y s w e r e d a r k d u r i n g t h e4 - s e c m a g a z i n e c y c l e s . C o n t i n u o u s w h i t e n o i s em a s k e d e x t r a n e o u s s o u n ds .A l l o f t h e k e y s c o u l d b e t r a n s i l l u m i n a t e dw i t h p a i r s o f w h i t e , r e d , b l u e , o r g r e e n 7 - wl a m p s . E i t h e r a l l t h r e e k e y s w e r e w h i t e , o re a c h w a s a d i f f e r e n t c o l o r ( r e d , b l u e , o r g r e e n ) .The l o c a t i o n o f t h e c o l o r s c h a n g e d a f t e r f o o dp r e s e n t a t i o n s w i t h t h e s i x p o s s i b l e s p a t i a lo r d e r s o f t h e t h r e e c o l o r s o c c u r r i n g a c c o r d i n gt o a r e p e a t i n g m i x e d s e q u e n c e o f 4 8 s t e p s . O c -c a s i o n a l l y , t w o s u c c e s s i v e s t e p s e s t a b l i s h e d t h es a m e s p a t i a l o r d e r .P r o c e d u r eThe f i v e s e s s i o n s c o n d u c t e d p e r w e e k l a s t e du n t i l e a c h b i r d r e c e i v e d 3 0 f o o d p r e s e n t a t i o n s

o r u n t i l t i m e r e q u i r e m e n t s n e c e s s i t a t e d t e r m i -n a t i o n . S e s s i o n s i n w h i c h 3 0 r e i n f o r c e m e n t sd i d n o t o c c u r l a s t e d f r o m 2 t o 1 6 h r a s t i m ep e r m i t t e d .A c q u i s i t i o n o f s t i m u l u s c o n t r o l . I n i t i a l l y t h ek e y s w e r e w h i t e , a n d a r e s p o n s e o n a n y o p e r -a t e d t h e f e e d e r . The s c h e d u l e w a s t h e nc h a n g e d t o d i f f e r e n t i a l - r e i n f o r c e m e n t - o f - l o w -r a t e ( D R L ) : t h e f i r s t r e s p o n s e o n a n y k e y s e p -a r a t e d f r o m t h e p r e c e d i n g r e s p o n s e o n a n y k e yb y a t l e a s t t h e t i m e p e r i o d s p e c i f i e d p r o d u c e df o o d . T h r o u g h o u t t h e e x p e r i m e n t , t h e i n t e r -v a l w a s a l s o i n i t i a t e d b y t h e e n d o f a f e e d e rc y c l e . R e s p o n s e s o c c u r r i n g b e f o r e t h e e n d o ft h e s p e c i f i e d i n t e r v a l r e s e t t h e DRL t i m e r .

The i n i t i a l DRL v a l u e w a s 5 s e c , b u t i t w a st h e n r a i s e d a b r u p t l y t o 1 0 s e c f o r B i r d 1 2 1 ,2 0 s e c f o r B i r d 1 2 5 , a n d 3 0 s e c f o r B i r d 1 2 2a n d w a s m a i n t a i n e d a t t h o s e v a l u e s f o r 2 2 s e s -s i o n s .I n t h e n e x t 4 2 s e s s i o n s , t h e k e y s w e r e t r a n s -i l l u m i n a t e d w i t h t h e r e d , b l u e , a n d g r e e nl i g h t s , a n d t h e b i r d s o b t a i n e d f o o d a c c o r d i n gt o t h e DRL s c h e d u l e f o r r e s p o n d i n g t o o n e o ft h e t h r e e c o l o r s . T h i s c o l o r , r e f e r r e d t o a s t h ep o s i t i v e s t i m u l u s o r S + , w a s g r e e n f o r B i r d1 2 1 , r e d f o r B i r d 1 2 2 , a n d b l u e f o r B i r d 1 2 5 .O n l y r e s p o n s e s t o S+ a f f e c t e d t h e DRL s c h e d -u l e : r e s p o n s e s t o S+ s e p a r a t e d b y a t l e a s t t h eDRL v a l u e s p e c i f i e d p r o d u c e d f o o d , a n d r e -s p o n s e s t o S+ b e f o r e t h e e n d o f t h e i n t e r v a lr e s e t t h e t i m e r . R e s p o n s e s t o t h e o t h e r t w os t i m u l i ( t h e n e g a t i v e s t i m u l i , o r S i - a n d S 2 - )h a d n o s c h e d u l e d e f f e c t s . The DRL v a l u e w a st h e s a m e a s i n t h e l a s t 2 2 s e s s i o n s w i t h t h ew h i t e k e y s .S t i m u l u s c o n t r o l a n d DRL v a l u e : r e s e t o n l yo n S+ r e s p o n s e s . C o u n t i n g t h e f i r s t s c h e d u l ew i t h t h e t h r e e c o l o r s d e s c r i b e d a b o v e , e a c hb i r d w a s s t u d i e d w i t h f o u r d i f f e r e n t DRLv a l u e s . S c h e d u l e s w e r e c h a n g e d p e r i o d i c a l l y s ot h a t e a c h b i r d h a d DRL 5 - s e c , DRL 1 0 - s e c ,DRL 2 0 - s e c , a n d DRL 3 0 - s e c s c h e d u l e s . Thec r i t e r i o n f o r c h a n g i n g s c h e d u l e s w a s t h a t t h e r eb e a m i n i m u m o f 1 8 s e s s i o n s , t h a t v i s u a l i n -s p e c t i o n r e v e a l e d s t a b l e c u m u l a t i v e r e c o r d s ,a n d t h a t t h e p e r c e n t a g e o f t h e t o t a l r e s p o n s e si n t h e l a s t f i v e s e s s i o n s t h a t o c c u r r e d t o S+w a s w i t h i n f i v e p o i n t s o f t h a t f o r e a c h o f t h ep r e c e d i n g t w o b l o c k s o f f i v e s e s s i o n s w i t h n oc o n s i s t e n t d i r e c t i o n o f c h a n g e . A l l b i r d s w e r es t u d i e d o n a s c h e d u l e u n t i l t h e l a s t b i r ds t a b i l i z e d . T a b l e 1 s h o w s t h e s e q u e n c e o fs c h e d u l e s a n d t h e number o f s e s s i o n s f o r e a c hb i r d . T h r o u g h o u t , r e s p o n s e s t o S+ s e p a r a t e db y a t l e a s t t h e t i m e s p e c i f i e d b y t h e DRLv a l u e p r o d u c e d f o o d ; r e s p o n s e s t o S+ s e p a -r a t e d b y s h o r t e r t i m e s b e g a n t h e DRL i n t e r v a la n e w . R e s p o n s e s t o t h e t w o n e g a t i v e s t i m u l ih a d n o s c h e d u l e d e f f e c t s .S t i m u l u s c o n t r o l a n d DRL v a l u e : r e s e t o na l l r e s p o n s e s . I n t h e n e x t s e t o f c o n d i t i o n s , t h eDRL t i m e r r e s e t o n r e s p o n s e s t o S l - a n d S 2 -a s w e l l a s o n S+ r e s p o n s e s o c c u r r i n g b e f o r et h e e n d o f t h e DRL i n t e r v a l . H e n c e , r e s p o n s e st o S+ t h a t r e s u l t e d i n f o o d p r e s e n t a t i o n w e r es e p a r a t e d f r o m r e s p o n s e s t o a n y s t i m u l u s b ya t l e a s t t h e DRL v a l u e . E a c h b i r d h a d t h ef o u r d i f f e r e n t DRL v a l u e s a s s h o w n i n T a b l e

4 4 4


3/9

SCHEDULE EFFECTS ON SIMULTANEOUS DISCRIMINATIONST a b l e 1

S e q u e n c e o f C o n d i t i o n s , R e s p o n s e R a t e , a n d R e i n f o r c e m e n t F r e q u e n c yB i r d 1 2 1 B i r d 1 2 2 B i r d 1 2 5

R e s p / R e i n f / R e s p / R e i n f / R e s p / R e i n f /C o n d i t i o n s e c a h o u r C o n d i t i o n s e c a h o u r C o n d i t i o n s e C a h o u r S e s s i o n s1 . DRL 1 0 - s e c 0 . 2 6

R e s e t S+2 . DRL 3 0 - s e cR e s e t S+3 . DRL 2 0 - s e cR e s e t S+4 . DRL 5 - s e cR e s e t S+5 . DRL 5 - s e c

R e s e t S + ,S I - , S 2 -6 . DRL 2 0 - s e cR e s e t S + ,S i - , S2 -7 . DRL 3 0 - s e cR e s e t S + ,S i - , S 2 -8 . DRL 1 0 - s e cR e s e t S + ,

S i - , S 2 -9 . DRL 2 0 - s e cR e s e t S+

1 0 . DRL 2 0 - s e cR e s e t S + ,S 2 -1 1 . DRL 2 0 - s e cR e s e t S + ,S i -1 2 . DRL 2 0 - s e cR e s e t S + ,S 2 -1 3 . DRL 2 0 - s e cR e s e t S+1 4 . E x t i n c t i o n

0 . 1 80 . 2 40 . 2 10 . 4 40 . 2 90 . 3 50 . 2 40 . 2 30 . 2 20 . 2 90 . 2 80 . 1 80 . 1 80 . 1 20 . 1 20 . 3 30 . 2 60 . 3 70 . 1 60 . 0 90 . 0 80 . 1 00 . 0 90 . 1 30 . 0 9

1 0 8 1 . DRL 3 0 - s e cR e s e t S+1 . 6 2 . DRL 5 - s e c

R e s e t S+1 . 4 3 . DRL 1 0 - s e cR e s e t S+3 0 0 4 . DRL 2 0 - s e cR e s e t S+3 7 5 5 . DRL 2 0 - s e c

R e s e t S + ,S i - , S 2 -0 . 8 6 . DRL 1 0 - s e cR e s e t S + ,S i - , S a -2 . 3 7 . DRL 5 - s e cR e s e t S + ,

S i - , S 2 -1 8 1 8 . DRL 3 0 - s e cR e s e t S + ,S i - , S 2 -3 . 3 9 . DRL 2 0 - s e c

R e s e t S+1 8 . 3 1 0 . DRL 2 0 - s e cR e s e t S + ,S 2 -5 0 . 0 1 1 . DRL 2 0 - s e cR e s e t S + ,S i -5 0 . 0 1 2 . DRL 2 0 - s e cR e s e t S + ,S 2 -6 5 . 2 1 3 . DRL 2 0 - s e cR e s e t S+

1 4 . E x t i n c t i o n

0 . 1 30 . 1 30 . 1 50 . 1 40 . 2 90 . 1 70 . 3 70 . 1 60 . 1 50 . 1 50 . 1 70 . 1 70 . 2 00200 . 1 50 . 1 41 . 0 60 . 2 00 . 1 90 . 1 60 . 4 20 . 1 60 . 1 90 . 1 80 . 5 80 . 1 8

1 3 . 8 1 . DRL 2 0 - s e cR e s e t S+1 8 8 2 . DRL 1 0 - s e cR e s e t S+

- 4 5 . 5 3 . DRL 5 - s e cR e s e t S+1 5 . 2 4 . DRL 3 0 - s e cR e s e t S+2 3 . 4 5 . DRL 3 0 - s e c

R e s e t S + ,S i - , S 2 -5 7 . 7 6 . DRL 5 - s e cR e s e t S + ,S i - , S 2 -2 5 0 7 . DRL 1 0 - s e cR e s e t S + ,S i - , S 2 -2 . 0 8 . DRL 2 0 - s e cR e s e t S + ,S i - , S 2 -2 1 . 4 9 . DRL 1 0 - s e cR e s e t S+5 . 3 1 0 . DRL 1 0 - s e cR e s e t S + ,

S1 4 . 2 1 1 . DRL 1 0 - s e cR e s e t S + ,S i -7 . 6 1 2 . DRL 1 0 - s e cR e s e t S + ,S2 -

1 9 . 2 1 3 . DRL 1 0 - s e cR e s e t S+1 4 . E x t i n c t i o n

0 . 3 7 1 . 7 4 20 . 3 20 . 8 20 . 2 40 . 6 70 . 4 10 . 3 00 . 2 20 . 2 10 . 2 10 . 3 40 . 3 40 . 2 70 . 2 70 . 2 60 . 2 60 . 6 40 . 1 90 . 3 20 . 2 40 . 1 40 . 1 40 . 1 60 . 1 60 . 1 60 . 1 6

7 1 . 01 2 5

2 73 6

1 . 5 2 91 . 3 1 8

1 6 7 2 4

3 1 . 0 2 3

2 . 2 2 2

7 9 . 07 1 . 4

1 8 8

1 8 8

2 1 4

2 52 0

2 3

2 7

2 01 8

" U p p e r number o f e a c h p a i r i s t h e c o m b i n e d r e s p o n s e r a t e t o t h e t h r e e s t i m u l i . The l o w e r number ( i t a l i c i z e d )i s t h e r e s p o n s e r a t e t o S+ a l o n e .1 . The c r i t e r i a f o r s c h e d u l e c h a n g e s w e r e a sd e s c ri b e d a b o v e .A n a l y s i s o f t h e r e s e t c o n d i t i o n s . A s e r i e s o fc o n d i t i o n s w a s t h e n d e s i g n e d t o e x a m i n e t h ee f f e c t s o f h o l d i n g t h e DRL s c h e d u l e c o n s t a n tw h i l e t h e t i m e r d i d o r d i d l n o t r e s e t on S-r e s p o n s e s . B i r d s 1 2 1 a n d 1 2 2 h a d a DRL 2 0 -s e c s c h e d u l e , a n d B i r d 1 2 5 h a d a DRL 1 0 - s e cs c h e d u l e . T h e s e v a l u e s h a d p r o d u c e d t h e h i g h -e s t p e r c e n t a g e o f r e s p o n s e s t o a n e g a t i v e s t i m -u l u s i n C o n d i t i o n s 1 t o 4 .F i r s t , r e s p o n s e s t o t h e n e g a t i v e s t i m u l i d i dn o t r e s e t t h e t i m e r : t h i s w a s a r e p l i c a t i o n o ft h e p r o c e d u r e o f C o n d i t i o n s 1 t o 4 . N e x t ,

r e s p o n s e s t o S 2 - ( r e d f o r B i r d 1 2 1 , b l u e f o rB i r d 1 2 2 , g r e e n f o r B i r d 1 2 5 ) r e s e t t h e t i m e r ,a n d r e s p o n s e s t o S l - had no s c h e d u l e d e f f e c t s .The f u n c t i o n s o f t h e s t i m u l i t h e n w e r es w i t c h e d : r e s p o n s e s t o S i - r e s e t t h e t i m e rw h i l e r e s p o n s e s t o S 2 - h a d no e f f e c t s . N e x t ,t h e t i m e r a g a i n r e s e t o n S 2 - r e s p o n s e s a n d r e -s p o n s e s t o S l - w e r e i r r e l e v a n t . F i n a l l y , n e i t h e rr e s p o n s e s t o S l - n o r S 2 - r e s p o n s e s h a d s c h e d -u l e d e f f e c t s . The c r i t e r i a f o r c h a n g i n g c o n d i -t i o n s w e r e t h e s a m e a s i n t h e e a r l i e r c o n d i -t i o n s .

E x t i n c t i o n . The e x p e r i m e n t c o n c l u d e d w i t h1 8 s e s s i o n s , e a c h o f 2 - h r d u r a t i o n , i n w h i c h

4 4 5


4/9

MICHAEL D . ZEILER

0p* % 0 d e/& * %4o o A ; -0,

Aa

* 1 2 11 2 2* 1 2 5

2 a I I I I I a . I I I a I1 4Blocks ofF i g . 1 . P e r c e n t a g e o f t o t a l responses o c c u r r i n g t o S+f i r s t p o i n t i s f o r t h e f i r s t s e s s i o n ; s u b s e q u e n t p o i n t s ar es e s s i o n s .

t h e r e w e r e no f o o d p r e s e n t a t i o n s . The s t i m u l ic h a n g e d p o s i t i o n s every 2 m i n .RESULTS

A c q u i s i t i o n o f S t i m u l u s C o n t r o lThe b i r d s f i r s t w e r e e x p o s e d t o t h e r e d , b l u e ,a n d green s t i m u l i a f t e r t h e i r b e h a v i o r h a ds t a b i l i z e d u n d e r DRL s c h e d u l e s ; t h e i n i t i a la d j u s t m e n t t o DRL o c c u r r e d w i t h w h i t e k e y s .F i g u r e 1 s h o w s t h e percentage o f t h e t o t a l r e -

sponses o c c u r r i n g t o S+ i n t h e f i r s t s e s s i o n a n di n s u c c e s s i v e b l o c k s o f t h r e e s e s s i o n s . The t h r e eb i r d s e m i t t e d over 50% o f t h e r e s p o n s e s t o S+i n t h e f i r s t s e s s i o n s . S u b s e q u e n t l y , a l l h a d s e s -s i o n s w i t h over 90% o f t h e responses o c c u r r i n gt o S + . B i r d 1 2 1 r e v e a l e d t h e m o s t f l u c t u a t i o n ,w i t h S+ responses r a n g i n g f r o m 4 2 % t o 94%o f t h e t o t a l . The percentage o f S+ responsesg e n e r a l l y i n c r e a s e d w i t h c o n t i n u e d t r a i n i n g .S t i m u l u s C o n t r o l and DRL V a l u eThe b i r d s w e r e f i r s t e x p o s e d t o t h e f o u rDRL v a l u e s when responses t o t h e n e g a t i v e

7 1 0 1 43 S e s s i o n si n t h e f i r s t c o n d i t i o n o f d i f f e r e n t i a l r e i n f o r c e m e n t . Thet h e p e r c e n t a g e s c o m p u t e d ove r s u c c e s s i v e b l o c k s o f t h r e es t i m u l i h a d no s c h e d u l e d e f f e c t s . The p e r c e n t -age o f t h e t o t a l responses o c c u r r i n g t o S+ i nt h e l a s t f i v e s e s s i o n s o f e a c h c o n d i t i o n r e v e a l e dt h e d e g r e e o f s t i m u l u s c o n t r o l p r o d u c e d ; t h eh i g h e r t h e p e r c e n t a g e , t h e more d i f f e r e n t i a lr e s p o n d i n g w i t h r e s p e c t t o t h e s t i m u l i andh e n c e t h e g r e a t e r c o n t r o l b y S + . T h e r e was noo r d e r l y r e l a t i o n b e t w e e n t h e p e r c e n t a g e o f S+responses a n d DRL v a l u e f o r any b i r d . Thep e r c e n t a g e s w e r e o r d e r e d as f o l l o w s . B i r d 1 2 1 :3 0 - s e c ( 8 8 % ) , 1 0 - s e c ( 6 8 % ) , 5 - s e c ( 6 8 % ) , 2 0 - s e c( 6 7 % ) ; B i r d 1 2 2 : 3 0 - s e c ( 9 7 % / O ) , 5 - s e c ( 9 5 % ) , 1 0 -sec ( 5 8 % ) , 2 0 - s e c ( 4 4 % 0 ) ; B i r d 1 2 5 : 2 0 - s e c( 8 6 % ) , 3 0 - s e c ( 7 3 % ) , 5 - s e c ( 6 2 % ) , 1 0 - s e c ( 2 9 % ) .N e i t h e r w e r e t h e r e c l e a r o r d e r e f f e c t s . A sshown i n t h e f i r s t f o u r p o i n t s o f F i g u r e 2 ,B i r d 1 2 2 had a d e c r e a s i n g percentage o f S+responses over t h e f i r s t f o u r c o n d i t i o n s , b u t t h eo t h e r t w o b i r d s had d i f f e r e n t p a t t e r n s . At t h ee n d o f t h e f o u r t h c o n d i t i o n , t h e t h r e e b i r d sw e r e e m i t t i n g 73% o r f e w e r o f t h e t o t a l r e -sponses t o S + .I n C o n d i t i o n s 5 t o 8 , t h e DRL t i m e r r e s e ton responses t o t h e n e g a t i v e s t i m u l i . T h i s

1 0 0 rC oU )( I )0U )c r

C D0

O L

- 0 - i

8 06 0 p4 0 F2 0 F

4 4 6

O 0 0


5/9

SCHEDULE EFFECTS ON SIMULTANEOUS DISCRIMINATIONS

o e o 1 2 2O L o S+2 4 56810 A40 / A e

20 %-f- ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ c m A&rq-99 -O"%080O 6 040

123456789 10 111213C o n d i t i o n

F i g . 2 . P e r c e n t a g e o f t o t a l r e s p o n s e s o c c u r r i n g t o e a c h s t i m u l u s i n t h e l a s t f i v e s e s s i o n s o f e a c h c o n d i t i o n . Thel e g e n d s a t t h e t o p o f t h e f i g u r e i n d i c a t e t h e r e s p o n s e s t h a t r e s e t t h e DRL t i m e r .meant t h a t t h e s e r e s p o n s e s w e r e a l w a y s s e p a -r a t e d f r o m f o o d p r e s e n t a t i o n b y a t l e a s t t h et i m e i n t e r v a l s p e c i f i e d b y t h e DRL s c h e d u l e .F i g u r e 2 s h o w s t h a t t h e p e r c e n t a g e o f r e -s p o n s e s t o S+ r o s e t o b e t w e e n 96% a n d 100%o f t h e t o t a l a n d r e m a i n e d a t t h a t l e v e l t h r o u g hC o n d i t i o n 8 . I n C o n d i t i o n s 5 t o 8 , a s i n C o n -d i t i o n s 1 t o 4 , t h e r e w a s n o s y s t e m a t i c r e l a t i o nb e t w e e n DRL v a l u e a n d t h e p e r c e n t a g e o f r e -s p o n s e s t o S + ; i n f a c t , t h e r e w e r e m i n i m a ld i f f e r e n c e s amo ng t h e f o u r DRL s c h e d u l e s .The c h a n g e i n t h e d i s t r i b u t i o n o f r e s p o n s e st o t h e t h r e e s t i m u l i i n c o n d i t i o n s 5 t o 8 m ayh a v e b e e n d u e e i t l h e r t o t h e c h a n g e i n t h e c o n -s e q u e n c e s o f r e s p o n s e s t o t h e n e g a t i v e s t i m u l io r t o t h e p r o l o n g e d e x p o s u r e t o d i f f e r e n t i a l

r e i n f o r c e m e n t . To d e t e r m i n e w h i c h o f t h e s ef a c t o r s w a s r e s p o n s i b l e , t h e s c h e d u l e t h a t h a dp r o d u c e d t h e l o w e s t p e r c e n t a g e o f S+ r e -s p o n s e s i n C o n d i t i o n s 1 t o 4 ( B i r d s 1 2 1 a n d1 2 2 : DRL 2 0 - s e c ; B i r d 1 2 5 : DRL 1 0 - s e c ) w a sr e i n s t a t e d . A s i n C o n d i t i o n s 1 t o 4 , r e s p o n s e st o t h e n e g a t i v e s t i m u l i i n C o n d i t i o n 9 h a d n os c l h e d u l e d c o n s e q u e n c e s . F i g u r e 2 s h o w s t h a tt h e p e r c e n t a g e o f S+ r e s p o n s e s d e c r e a s e d t o80% f o r B i r d 1 2 1 , t o 19% f o r B i r d 1 2 2 , a n d t o3 0 % f o r B i r d 1 2 5 . T h e r e f o r e , t h e d i s t r i b u t i o no f r e s p o n s e s t o t h e t h r e e s t i m u l i w a s d e t e r -m i n e d b y t h e c o n s e q u e n c e s o f S- r e s p o n s e sa n d n o t b y p r o l o n g e d e x p e r i e n c e . A s u b s t a n t i a lp e r c e i n t a g e o f t h e t o t a l r e s p o n s e s o c c u r r e d t oe i t h e r o r b o t h S 8 - a n d S 2 - o n l y i f s u c h r e -

4 4 7


6/9

MICHAEL D . ZEILERs p o n s e s d i d n o t r e s u l t i n r e s e t t i n g t h e DRLt i m e r .To a n a l y z e f u r t h e r t h e r e l a t i o n b e t w e e n t h ec o n s e q u e n c e s o f r e s p o n s e s t o S i - a n d S 2 - a n ds t i m u l u s c o n t r o l , t h e c o n s e q u e n c e s w e r e m a -n i p u l a t e d w h i l e t h e DRI s c h e d u l e w a s h e l dc o n s t a n t . F i g u r e 2 s h o w s t h e p e r c e n t a g e o fr e s p o n s e s o c c u r r i n g t o e a c h s t i m u l u s whenr e s p o n s e s t o b o t h s t i m u l i w e r e i r r e l e v a n t ( C o n -d i t i o n s 9 a n d 1 3 ) , when r e s p o n s e s t o S 2 - r e s e tt h e t i m e r a n d r e s p o n s e s t o S l - w e r e i r r e l e v a n t( C o n d i t i o n s 1 0 a n d 1 2 ) , a n d when r e s p o n s e s t oS l - r e s e t t h e t i m e r a n d r e s p o n s e s t o S 2 werei r r e l e v a n t ( C o n d i t i o n 1 1 ) .

A l l o f t h e b i r d s r e v e a l e d s t a b l e b e h a v i o ru n d e r e a c h c o n d i t i o n , a l t h o u g h t w o ( B i r d s 1 2 1a n d 1 2 5 ) r e v e a l e d m e t a s t a b i l i t y ( S t a d d o n ,1 9 6 5 ) . T h e i r b e h a v i o r s t a b i l i z e d e a c h t i m e ac o n d i t i o n w a s i m p o s e d , b u t t h e s t a b l e b e h a v -i o r w a s n o t i d e n t i c a l t o t h a t o c c u r r i n g whent h e c o n d i t i o n h a d b e e n i m p o s e d p r e v i o u s l y .B i r d 1 2 5 i l l u s t r a t e d t h i s m e t a s t a b i l i t y t h e m o s tc l e a r l y . I n C o n d i t i o n s 9 a n d 1 0 , B i r d 1 2 5 r e -s p o n d e d t o t h e n e g a t i v e s t i m u l u s t h a t d i d n o tr e s e t t h e t i m e r ( b o t h S l - a n d S 2 i n C o n d i -t i o n 9 , S l - i n C o n d i t i o n 1 0 ) . H o w e v e r , a f t e rC o n d i t i o n 1 0 e l i m i n a t e d S 2 - r e s p o n s e s a n dC o n d i t i o n 1 1 e l i m i n a t e d S i - r e s p o n s e s , r e -s p o n d i n g i n C o n d i t i o n s 1 2 a n d 1 3 w a s c o n -f i n e d l a r g e l y t o S + .B i r d 1 2 2 w a s a f f e c t e d b y e v e r y c o n d i t i o n .T h i s b i r d r a r e l y r e s p o n d e d t o S l - u n d e r a n yc o n d i t i o n . H o w e v e r , w h e n e v e r r e s p o n s e s t oS 2 - d i d n o t r e s e t t h e t i m e r , B i r d 1 2 2 r e -s p o n d e d t o t h a t s t i m u l u s more o f t e n t h a n t oS + . T h i s r e p r e s e n t e d w h a t S t a d d o n ( 1 9 6 5 )c a l l e d t r u e s t a b i l i t y a s c o n t r a s t e d w i t h m e t a -s t a b i l i t y .I n s u m m a r y , t h e c o n s e q u e n c e s o f r e s p o n d -i n g t o t h e n e g a t i v e s t i m u l i d e t e r m i n e d ho w r e -s p o n s e s w e r e d i s t r i b u t e d . A t l e a s t 96% o f t h er e s p o n s e s o c c u r r e d t o S+ when r e s p o n s e s t ot h e t w o n e g a t i v e s t i m u l i r e s e t t h e DRL t i m e r .I f t h o s e r e s p o n s e s h a d n o s c h e d u l e d c o n s e -q u e n c e s , t h e r e l a t i v e f r e q u e n c y o f S- r e -s p o n s e s i n c r e a s e d t o h i g h s r a n g i n g f r o m 3 3 % / ,t o 81% o f t h e t o t a l i n t h e d i f f e r e n t b i r d s . I fr e s p o n s e s t o o n e S- r e s e t t h e t i m e r , t h e b i r d sh a d a l o w p e r c e n t a g e o f r e s p o n s e s t o t h a t s t i m -u l u s . E v e r y c o n d i t i o n t h a t p r o d u c e d a r e l -a t i v e l y l a r g e p e r c e n t a g e o f r e s p o n s e s t o a n S-a l l o w e d t h o s e r e s p o n s e s t o o c c u r i n c l o s et e m p o r a l c o n t i g u i t y t o f o o d p r e s e n t a t i o n . I fs u c h c o n t i g u i t y w a s n o t p e r m i t t e d ( a n d i n

. 3 0n a . 2 0O c . 1 00C ) Oa i )1 . 8 0a ) _ 4.4

1 2 12 0 - S e cK _ . . ' o w -L. I

1 2 3 4 5 6 7Same DRL V a l u eF i g . 3 . R a t e o f r e s p o n d i n g t o e a c h s t i m u l u s u n d e rt h e s e v e n c o n d i t i o n s h a v i n g t h e s a m e DRL s c h e d u l e .F o r B i r d 1 2 1 , t h e s e w e r e C o n d i t i o n s 3 , 6 , 9 , 1 0 , 1 1 , 1 2 ,1 3 i n T a b l e 1 ; f o r B i r d 1 2 2 , t h e y w e r e C o n d i t i o n s 4 , 5 ,9 , 1 0 , 1 1 , 1 2 , 1 3 ; f o r B i r d 1 2 5 , t h e y w e r e C o n d i t i o n s 2 ,7 , 9 , 1 0 , 1 1 , 1 2 , 1 3 . The c o m p r e s s e d o r d e r s h o w n o n t h ea b s c i s s a i s a s f o l l o w s . 1 : R e s e t S + ; 2 : R e s e t S + , S 1 - , S 2 - ;3 : R e s e t S + ; 4 : R e s e t S + , S 2 - ; 5 : R e s e t S + , S , - ; 6 : R e s e tS + , S _ - ; 7 : R e s e t S + .s o m e c a s e s when i t w a s ) , r e s p o n d i n g w a s c o n -f i n e d l a r g e l y t o S + .R e s p o n s e a n d R e i n f o r c e m e n t R a t e

T a b l e 1 s h o w s t h a t n e i t h e r t h e r a t e o f r e -s p o n d i n g t o S+ n o r t o t h e t h r e e s t i m u l i c o m -b i n e d h a d a n o r d e r l y r e l a t i o n t o DRL v a l u ewhen t h e t i m e r d i d n o t r e s e t on r e s p o n s e s t ot h e n e g a t i v e s t i m u l i . W he n t h e t i m e r d i d r e s e ton r e s p o n s e s t o S l - a n d S 2 - , B i r d s 1 2 2 a n d1 2 5 d e c l i n e d i n r a t e a s t h e DRL v a l u e i n -c r e a s e d . B i r d 1 2 1 , i n c o n t r a s t , r e s p o n d e d a tt h e h i g h e s t r a t e u n d e r t h e DRL 2 0 - s e c s c h e d -u l e a n d t h e l o w e s t r a t e u n d e r t h e DRL 1 0 - s e cs c h e d u l e .F i g u r e 3 s h o w s t h e r e s p o n s e r a t e i n t h e s e v e nc o n d i t i o n s i n v o l v i n g t h e s a m e DRL s c h e d u l e( B i r d s 1 2 1 a n d 1 2 2 : DRL 2 0 - s e c ; B i r d 1 2 5 :DRL 1 0 - s e c ) b u t d i f f e r e n t c o n s e q u e n c e s o f S-r e s p o n s e s . R e s p o n s e s t o a n S- o c c u r r e d a t as u b s t a n t i a l r a t e o n l y i f t h e y d i d n o t r e s e t t h e

. 1 4 8


7/9

SCHEDULE EFFECTS ON SIMULTANEOUS DISCRIMINATIONSt i m e r . E v e r y i n s t a n c e o f e l e v a t e d r e s p o n s er a t e t o a n S- o c c u r r e d when r e s p o n s e s t o t h a ts t i m u l u s h a d n o c o n s e q u e n c e s .F o r B i r d s 1 2 1 a n d 1 - 2 5 , t h e r a t e o f r e s p o n d -i n g t o S+ t e n d e d t o d e c r e a s e w i t h s u c c e s s i v ec o n d i t i o n s ; n o t e t h a t t h e C o n d i t i o n s l a b e l l e d1 , 3 , a n d 7 i n F i g u r e 3 w e r e a l l t h e s a m e , b u tt h a t t h e r a t e t o S+ d e c r e a s e d f r o m o n e t o t h en e x t . B i r d 1 2 2 h a d a n e a r l y c o n s t a n t S+ r a t eu n d e r a l l c o n d i t i o n s . T h i s s t a b i l i t y ( f o r B i r d1 2 2 ) o r f a i r l y s t e a d y d e c r e a s e ( f o r B i r d s 1 2 1a n d 1 2 5 ) o c c u r r e d d e s p i t e s u b s t a n t i a l f l u c t u a -t i o n s i n t h e r a t e o f r e s p o n d i n g t o e i t h e r S-o r S 2 - . T h e s e d a t a s u g g e s t t h a t t h e r e s p o n s er a t e t o S+ w a s i n d e p e n d e n t o f t h e r a t e o f r e -s p o n d i n g t o t h e o t h e r s t i m u l i . The v a r i o u sm a n i p u l a t i o n s a f f e c t e d t h e o v e r a l l r a t e , b u tt h e S+ r a t e d e p e n d e d upon t h e DRL v a l u ee i t h e r i n c o n j u n c t i o n w i t h o r i n d - e p e n d e n t o fho w l o n g t h e b i r d s h a d b e e n e x p o s e d t o i t .T h i s w a s a l s o t h e c a s e e v e n i m m e d i a t e l y a f t e ra t r a n s i t i o n f r o m o n e c o n d i t i o n t o a n o t h e r :t h e r a t e o f r e s p o n d i n g t o S+ w a s n o t d i s t u r b e di n t h e f i r s t s e s s i o n o f t h e n e x t c o n d i t i o n d e -s p i t e t h e n e w l y c h a n g e d c o n s e q u e n c e s o f S-r e s p o n s e s a n d t h e a t t e n d a n t c h a n g e i n r e -s p o n d i n g t o e i t h e r o r b o t h S- a n d S 2 - . Ther e s p o n s e r a t e t o S+ i n t h e f i r s t s e s s i o n w a sa l w a y s w i t h i n t h e r a n g e e n c o m p a s s e d b y t h eS+ r a t e s i n t h e l a s t f i v e s e s s i o n s o f t h e p r e c e d -i n g c o n d i t i o n .On e p o s s i b l e b a s i s f o r r e s p o n d i n g t o t h en e g a t i v e s t i m u l i w o u l d b e i f s u c h r e s p o n d i n gr e s u l t e d i n m o r e e f f i c i e n t b e h a v i o r , t h a t i s , i fi t h e l p e d t h e p i g e o n s t o s p a c e t h e i r r e s p o n s e st o S+ a p p r o p r i a t e l y ( c . f . , L a t i e s , W e i s s , a n dW e i s s , 1 9 6 9 ) . H o w e v e r , T a b l e I s h o w s t h a t t h ef r e q u e n c y o f r e i n f o r c e m e n t w a s n o t i n f l u e n c e ds y s t e m a t i c a l l y b y w h e t h e r o r n o t r e s p o n s e s t ot h e n e g a t i v e s t i m u l i r e s e t t h e t i m e r . The a b -s e n c e o f c o n s i s t e n t c h a n g e s i n r e i n f o r c e m e n tf r e q u e n c y t h a t w e r e c o r r e l a t e d w i t h c h a n g e si n s t i m u l u s c o n t r o l s u g g e s t s t h a t r e s p o n s e s t oS l - a n d S 2 - i n C o n d i t i o n s 1 t o 4 a n d 9 t o 1 3d i d n o t o c c u r b e c a u s e t h e y i n c r e a s e d t h ef r e q u e n c y o f r e i n f o r c e m e n t . A n o t h e r m e a s u r eo f r e i n f o r c e m e n t d e n s i t y i s t h e p r o b a b i l i t y o fr e i n f o r c e m e n t , t h a t i s , t h e number o f r e i n -f o r c e d r e s p o n s e s d i v i d e d b y t h e t o t a l numbero f r e s p o n s e s . W h e t h e r t h e d e n o m i n a t o r w a st h e number o f r e s p o n s e s t o a l l t h r e e s t i m u l i o rt h e number o f r e s p o n s e s t o S + , t h e p r o b a b i l -i t y o f r e i n f o r c e m e n t ( a n d r e i n f o r c e m e n t f r e -q u e n c y a s w e l l ) w a s i n v e r s e l y r e l a t e d t o DRL

v a l u e b u t n o t s y s t e m a t i c a l l y r e l a - t e d t o t h e p e r -c e n t a g e o f t h e t o t a l r e s p o n s e s t h a t o c c u r r e d t oS + . The p r o b a b i l i t i e s ( e i t h e r p e r r e s p o n s e o rp e r S+ r e s p o n s e ) r a n g e d f r o m h i g h s o f 0 . 3 7 t o0 . 4 5 u n d e r DRL 5 - s e c t o l o w s o f f e w e r t h a no n e f o o d p r e s e n t a t i o n p e r 1 5 0 0 r e s - p o n s e s a tDRL 3 0 - s e c , i n d e p e n d e n t o f t h e c o n s e q u e n c e so f r e s p o n s e s t o t h e n e g a t i v e s t i m u l i . T h e r e w a sn o e v i d e n c e , t h e r e f o r e , t h a t r e s p o n s e s t o t h o s es t i m u l i s e r v e d a s m e d i a t i n g b e h a v i o r t h a t i ns o m e w a y i n c r e a s e d t h e e f f i c i e n c y o f DRL p e r -f o r m a n c e .E x t i n c t i o n

F i g u r e 4 s h o w s t h e o v e r a l l r a t e o f r e s p o n d -i n g a n d t h e p e r c e n t a g e o f r e s p o n s e s o c c u r r i n gt o e a c h s t i m u l u s i n t h e 1 8 s e s s i o n s o f e x t i n c -t i o n . R e s p o n s e r a t e d e c l i n e d w i t h s u c c e s s i v es e s s i o n s , a l t h o u g h f o r B i r d s 1 2 1 a n d 1 2 5 e x -t i n c t i o n i n i t i a l l y i n c r e a s e d r a t e . R a t e d e c r e -ment d i d n o t y i e l d c o r r e s p o n d i n g d e c r e m e n t si n s t i m - u l u s c o n t r o l . The p e r c e n t a g e o f t h et o t a l r e s p o n s e s o c c u r r i n g t o S+ n e v e r f e l l b e -l o w 68% a f t e r S e s s i o n 1 . B i r d 1 2 2 came t or e s p o n d a l m o s t e x c l u s i v e l y t o S + , w h i l e B i r d

1 . O 0 1 2 1 1 6 mC O 60 o v, 4 C O20 0 0 t sI,0 o (C l 60 0

0 , 1 0 o 0- 0 4 8 4 XV ) 40 . - 6 2 0C~~~~~

o20 0 *3O . a kA A 0

X l 1 0 0 40 a6 s o * 1 2 1 2 040 1 2 5 c o0 - 0 0%40- 1 M2 0 - A 25 0

1 5 1 0 1 SS e s s i o nF i g . 4 . P e r c e n t a g e o f t o t a l r e s p o n s e s o c c u r r i n g t o S+( f i l l e d p o i n t s ) a n d o v e r a l l r a t e o f r e s p o n d i n g ( o p e np o i n t s ) i n e a c h s e s s i o n o f e x t i n c t i o n . The f i r s t p o i n ti s f o r t h e d a t a o f t h e l a s t s e s s i o n u n d e r a DRL s c h e d u l e .

4 4 9


8/9


9/9

SCHEDULE EFFECTS ON SIMULTANEOUS DISCRIMINATIONS 4 5 1f a c i l i t a t e d t h e s p a c i n g o f r e s p o n s e s t o t h ef i r s t s t i m u l u s , i f t h e y w e r e n o t r e q u i r e d t h e yw e r e n o t m a i n t a i n e d .The w l h o l l y p r e d i c t a b l e a s p e c t o f s t i m u l u sc o n t r o l u n d l e r DRL s c h e d u l e s i s t h a t i f r e -s p i o n s e s t o t h e p o s i t i v e s t i m u l u s ar e r e i n f o r c e dw l h i l e r - e s p o n s e s t o o t l h e r s t i m u l i r e s e t t h e DRLt i m e r , r e s p o n s e s a r e c o n f i n e d t o t h e p o s i t i v es t i m u l u s . I f r e s p o n s e s t o t h e o t h e r s t i m u l ih a v e I n o s c l h e d u l e d e f f e c t s , t h e r e s p o n s e s may o rm ay n o t o c c u r . A d e g r e e o f u n p r e d i c t a b i l i t ya l s o c l h a r a c t e r i z e s r e s p o n s e r a t e s u n d e r DRLs c l h e d u l e s : t h e i r r e g u l a r r e l a t i o n b e t w e e n r e -s p o n s e r a t e a n d t h e t i m e p a r a m e t e r o f t h es c l h e d u l e f o u n d i n t h e p r e s e n t e x p e r i m e n tr e p l i c a t e d t h a t f o u n d b y S t a d d o n ( 1 9 6 5 ) . S t a d -d o n w e n t o n t o s l h o w t h a t t h e s o u r c e o f t h ei r r e g u l a r i t y i s t h a t r e s p o n s e r a t e a t a p a r t i c u -l a r DRL v a l u e d e p e n d s b o t h on t h e p i g e o n ' sh i s t o r y a n d o n t h e p r e v a i l i n g s c h e d u l e . A l -t l h o u g l h t h e r a t e b e c o m e s s t a b l e u n d e r e a c h e x -p o s u r e t o a g i v e n DRL v a l u e , t h e r a t e on t h en e x t e x p o s u r e t o t h a t v a l u e c a n c h a n g e d e -p e n d i n g o n w h a t o t h e r DRL s c h e d u l e s h a v eb e e n i n t e r p o l a t e d . T h u s , u n d e r s o m e c o n d i -t i o n s , m e t a s t a b i l i t y o c c u r s w i t h r e s p e c t t o r e -s p o n s e r a t e a s w e l l a s w i t h r e s p e c t t o s t i m u l u sc o n t r o l when s p a c e d r e s p o n s e s t o a s t i m u l u sp r o d u c e f o o d .

REFERENCESB r u n e r , A . a n d R e v u s k y , S . H . C o l l a t e r a l b e h a v i o r i nh u m a n s . J o u r n a l o f t h e E x p e r i m e n t a l A n a l y s i s o fB e h a v i o r , 1 9 6 1 , 4 , 3 4 9 - 3 5 0 .C a t a n i a , A . C . a n d C u t t s , D . E x p e r i m e n t a l c o n t r o lo f s u p e r s t i t i o u s r e s p o n d i n g i n h u m a n s . J o u r n a l o ft h e E x p e r i m e n t a l A n a l y s i s o f B e h a v i o r , 1 9 6 3 , 6 ,2 0 3 - 2 0 8 .D e w s , P . B . B e h a v i o r a l e f f e c t s o f d r u g s . I n S . M.F a r b e r a n d R . H . L . W i l s o n ( E d s . ) , C o n f l i c t andc r e a t i v i t y . New Y o r k : M c G r a w - H i l l , 1 9 6 3 . P p . 1 3 8 -1 5 3 .

F e r s t e r , C . B . I n t e r m i t t e n t r e i n f o r c e m e n t o f m a t c h i n gt o s a m p l e i n t h e p i g e o n . J o u r n a l o f t h e E x p e r i -m e n t a l A n a l y s i s o f B e h a v i o r , 1 9 6 0 , 3 , 2 5 9 - 2 7 2 .H e a r s t , E . A p p r o a c h , a v o i d a n c e , a n d s t i m u l u s g e n -e r a l i z a t i o n . I n D . I . M o s t o f s k y ( E d . ) , S t i m u l u s g e n -

e r a l i z a t i o n . S t a n f o r d : S t a n f o r d U n i v e r s i t y P r e s s ,1 9 6 5 . P p . 3 3 1 - 3 5 5 .H e a r s t , E . , K o r e s k o , M. B . , a n d P o p p e n , R . S t i m u l u s

g e n e r a l i z a t i o n and t h e r e s p o n s e - r e i n f o r c e m e n t c o n -t i n g e n c y . J o u r n a l o f t h e E x p e r i m e n t a l A n a l y s i s o fB e h a v i o r , 1 9 6 4 , 7 , 3 6 9 - 3 8 0 .L a t i e s , V . G . , W e i s s , B . , a n d W e i s s , A . B . F u r t h e r o b -s e r v a t i o n s on o v e r t " m e d i a t i n g " b e h a v i o r a n d t h ed i s c r i m i n a t i o n o f t i m e . J o u r n a l o f t h e E x p e r i m e n t a lA n a l y s i s o f B e h a v i o r , 1 9 6 9 , 1 2 , 4 3 - 5 7 .M c M i l l a n , D . E . R e i n f o r c e n m e n t c o n t i n g e n c i e s m a i n -t a i n i n g c o l l a t e r a l r e s p o n d i n g u n d e r a DRL s c h e d -u l e . J o u r n a l o f t h e E x p e r i m e n t a l A n a l y s i s o f B e h a v -i o r , 1 9 6 9 , 1 2 , 4 1 3 - 4 2 2 .N e v i n , J . A . E f f e c t s o f r e i n f o r c e m e n t s c h e d u l i n g ons i m u l t a n e o u s d i s c r i m i n a t i o n s . J o u r n a l o f t h e E x -p e r i n m e n t a l A n a l y s i s o f B e h a v i o r , 1 9 6 7 , 1 0 , 2 5 1 - 2 6 0 .S c h w a r t z , B . a n d W i l l i a m s , D . R . D i s c r e t e - t r i a l s s p a c e dr e s p o n d i n g i n t h e p i g e o n : t h e d e p e n d e n c e o f e f f i -c i e n t p e r f o r m a n c e on t h e a v a i l a b i l i t y o f a s t i m u l u sf o r c o l l a t e r a l p e c k i n g . J o u r n a l o f t h e E x p e r i m e n t a lA n a l y s i s o f B e h a v i o r , 1 9 7 1 , 1 6 , 1 5 5 - 1 6 0 .S t a d d o n , J . E . R . Some p r o p e r t i e s o f s p a c e d r e s p o n d -i n g i n p i g e o n s . J o u r n a l o f t h e E x p e r i m e n t a l A n a l -y s i s o f B e h a v i o r , 1 9 6 5 , 8 , 1 9 - 2 7 .T h o m a s , D . R . and S w i t a l s k i , R . W . A c o m p a r i s o n o fs t i m u l u s g e n e r a l i z a t i o n f o l l o w i n g v a r i a b l e r a t i o a n dv a r i a b l e i n t e r v a l t r a i n i n g . J o u r n a l o f E x p e r i m e n t a lP s y c h o l o g y , 1 9 6 6 , 7 1 , 2 3 6 - 2 4 0 .Z e i l e r , M. D . S t i m u l u s c o n t r o l w i t h f i x e d - r a t i o r e i n -f o r c e m e n t . J o u r n a l o f t h e E x p e r i m e n t a l A n a l y s i so f B e h a v i o r , 1 9 6 8 , 1 1 , 1 0 7 - 1 1 5 .Z e i l e r , M. D . R e p e a t e d m e a s u r e m e n t s o f r e i n f o r c e -ment s c h e d u l e e f f e c t s o I n g r a d i e n t s o f s t i m u l u s c o n -t r o l . J o u r n a l o f t h e E x p e r i m e n t a l A n a l y s i s o f B e -h a v i o r , 1 9 6 9 , 1 2 , 4 5 1 - 4 6 1 .Z e i l e r , M. D . F i x e d - i n t e r v a l s t i m u l u s c o n t r o l . J o u r n a lo f t h e E x p e r i m e n t a l A n a l y s i s o f B e h a v i o r , 1 9 7 0 , 1 4 ,2 9 1 - 2 9 9 .Z u r i f f , G . E . C o l l a t e r a l r e s p o n d i n g d u r i n g d i f f e r e n t i a lr e i n f o r c e m e n t o f l o w r a t e s . J o u r n a l o f t h e E x p e r i -m e n t a l A n a l y s i s o f B e h a v i o r , 1 9 6 9 , 1 2 , 9 7 1 - 9 7 6 .

R e c e i v e d 2 4 A p r i l 1 9 7 2 .( F i n a l a c c e p t a n c e 2 8 J u n e 1 9 7 2 . )

Documents

Zeiler MD (1972) Reinforcement of Spaced Responding in a Simultaneous Discrimination