Forsterkning, betingede forsterker, straff



Like dokumenter
Forelesning basert på interteaching om grunnleggende forsterkningsskjemaer MALKA212

Forelesning basert på interteaching om grunnleggende forsterkningsskjemaer MALKA212

Skal man fortsatt opprettholde skillet mellom positiv og negativ forsterkning

Undervisning basert på interteaching MALKA211_Del 2

Slope-Intercept Formula

Raten av forsterkning

Kontingensfeller og atferdsfeller To sider av samme sak eller radikalt forskjellige?

Sammensatte Forsterkningsskjemaer

Forelesning basert på interteaching om forsterkningsskjemaer MALKA212

Sammensatte Forsterkningsskjemaer

Forsterkningsskjema MALKA212

Kontiguitet og kontingens

ARBEID MED FORSTERKNING

Quiz om positiv forsterkning - basert på Catania (2000)

Unit Relational Algebra 1 1. Relational Algebra 1. Unit 3.3

Om atferdstaksonomi. Catania (2007) MALKA211 V-09. Erik Arntzen HiAk

Molare forsterkningsbetingelser

Om grunnleggende begreper Basert på interteaching kapitler i Cooper et al. (2007) og Baldwin og Baldwin (2001)

Forsterkerkartlegging

5 E Lesson: Solving Monohybrid Punnett Squares with Coding

Ønsker fra Cooper et al. (2007)

Innføring i atferdsanalyse

DRO - en forsterkningsprosedyre? Problemer med å forstå DRO som en forsterkningsprosedyre har blitt behørig omtalt i litteraturen (bl.a. Catania,1996,

Kristin J. Harila, seminaroppgave om betydning av forsterkning for læring

KROPPEN LEDER STRØM. Sett en finger på hvert av kontaktpunktene på modellen. Da får du et lydsignal.

Relational Frame Theory

Neural Network. Sensors Sorter

Ole Isak Eira Masters student Arctic agriculture and environmental management. University of Tromsø Sami University College

Dynamic Programming Longest Common Subsequence. Class 27

Enkel og effektiv brukertesting. Ida Aalen LOAD september 2017

Han Ola of Han Per: A Norwegian-American Comic Strip/En Norsk-amerikansk tegneserie (Skrifter. Serie B, LXIX)

Om atferdstaksonomi Forelesning basert på interteaching sekvenser fra Catania (2007) MALKA211 V-2010

Om atferdstaksonomi Forelesning basert på interteaching sekvenser fra Catania (2007) MALKA211 V-09

Ønsker fra Cooper et al. (2007)

Om atferdstaksonomi. Catania (2007) MALKA211 V Erik Arntzen HiAk

Motivasjon. Martin og Cathrine Olsson

PATIENCE TÅLMODIGHET. Is the ability to wait for something. Det trenger vi når vi må vente på noe

Databases 1. Extended Relational Algebra

GYRO MED SYKKELHJUL. Forsøk å tippe og vri på hjulet. Hva kjenner du? Hvorfor oppfører hjulet seg slik, og hva er egentlig en gyro?

STILLAS - STANDARD FORSLAG FRA SEF TIL NY STILLAS - STANDARD

Examination paper for (BI 2015) (Molekylærbiologi, laboratoriekurs)

Hvor mye teoretisk kunnskap har du tilegnet deg på dette emnet? (1 = ingen, 5 = mye)

Hvor mye teoretisk kunnskap har du tilegnet deg på dette emnet? (1 = ingen, 5 = mye)

Justeringsanvisninger finnes på de to siste sidene.

Habituering. Kristin Utgård Glenne regionale senter for autisme. Habituering- definisjon

Endelig ikke-røyker for Kvinner! (Norwegian Edition)

Perpetuum (im)mobile

En Oversikt over Hovedpoenger i Relational Frame Theory. Erik Arntzen. HiOA H-2012 MAJOR FEATURES

FIRST LEGO League. Härnösand 2012

UNIVERSITETET I OSLO ØKONOMISK INSTITUTT

Exercise 1: Phase Splitter DC Operation

Trigonometric Substitution

En praktisk innføring i team-basert læring

Språkleker og bokstavinnlæring

EN Skriving for kommunikasjon og tenkning

Emneevaluering GEOV272 V17

Hvor mye praktisk kunnskap har du tilegnet deg på dette emnet? (1 = ingen, 5 = mye)

Emnedesign for læring: Et systemperspektiv

C13 Kokstad. Svar på spørsmål til kvalifikasjonsfasen. Answers to question in the pre-qualification phase For English: See page 4 and forward

GEOV219. Hvilket semester er du på? Hva er ditt kjønn? Er du...? Er du...? - Annet postbachelor phd

Den som gjør godt, er av Gud (Multilingual Edition)

GEO231 Teorier om migrasjon og utvikling

Moving Objects. We need to move our objects in 3D space.

EKSAMENSOPPGAVE I BI2034 Samfunnsøkologi EXAMINATION IN: BI Community ecology

SAMPOL115 Emneevaluering høsten 2014

Selvskading og låseatferd: Funksjonelle relasjoner og eksempler på behandling

Elektronisk termostat med spareprogram. Lysende LCD display øverst på ovnen for enkel betjening.

UNIVERSITETET I OSLO

stjerneponcho for voksne star poncho for grown ups

Du må håndtere disse hendelsene ved å implementere funksjonene init(), changeh(), changev() og escape(), som beskrevet nedenfor.

Vekeplan 4. Trinn. Måndag Tysdag Onsdag Torsdag Fredag AB CD AB CD AB CD AB CD AB CD. Norsk Matte Symjing Ute Norsk Matte M&H Norsk

The regulation requires that everyone at NTNU shall have fire drills and fire prevention courses.

Dean Zollman, Kansas State University Mojgan Matloob-Haghanikar, Winona State University Sytil Murphy, Shepherd University

Mannen min heter Ingar. Han er også lege. Han er privatpraktiserende lege og har et kontor på Grünerløkka sammen med en kollega.

0:7 0:2 0:1 0:3 0:5 0:2 0:1 0:4 0:5 P = 0:56 0:28 0:16 0:38 0:39 0:23

TEORI OG PRAKSIS. Kjønnsidentitet og polaritetsteori. En kasusstudie av en samtalegruppe med transpersoner

Uke 5. Magnus Li INF /

Appendix B, not for publication, with screenshots for Fairness and family background

Physical origin of the Gouy phase shift by Simin Feng, Herbert G. Winful Opt. Lett. 26, (2001)

Kritikk: Hvordan kan adferdsanalyse trene alle ferdighetene som kreves for et funksjonelt hverdagsliv?

Information search for the research protocol in IIC/IID

Økologisk og kulturell dannelse i økonomiutdanningen

Good Behavior Board Game

Ønsker fra Catania kap.. 2:

Independent Inspection

Trådløsnett med. Wireless network. MacOSX 10.5 Leopard. with MacOSX 10.5 Leopard

Call function of two parameters

Negativ straff i form av response cost og DRO i behandling av problematferd

Dialogkveld 03. mars Mobbing i barnehagen

Sitronelement. Materiell: Sitroner Galvaniserte spiker Blank kobbertråd. Press inn i sitronen en galvanisert spiker og en kobbertråd.

Windlass Control Panel

Education 436. September 14, 2011

Newtons fargeskive. Regnbuens farger blir til hvitt. Sett skiva i rask rotasjon ved hjelp av sveiva.

Macbeth: Frozen Scenes

Dagens tema: Eksempel Klisjéer (mønstre) Tommelfingerregler

HVA ARBEIDER VI MED? Innføring i atferdsanalyse NAFOs årsmøteseminar KRITERIER FOR ATFERDSVITENSKAP (Skinner, 1953) RADIKAL BEHAVIORISME

Brukerkrav og use case diagrammer og -tekst 19. januar Agenda. Brukerkrav og use case. Diagrammer Tekst.

UNIVERSITETET I OSLO ØKONOMISK INSTITUTT

Transkript:

Forsterkning, betingede forsterker, straff MALKA212 V-2011 Erik Arntzen HiAk 1 1 Treterms kontingensen For å kunne formulere interaksjonen mellom en organisme og dens omgivelser må det ifølge Skinners spesifiseres 1) Den foranledning en respons opptrer under - S D 2) Selve responsen - R 3) De forsterkende konsekvenser - S R Forholdet mellom disse kalles: Forsterkningsbetingelsene eller forsterkningskontingensene. S D : R - S R 2 2

Fra Pierce og Cheney (2008) 3 3 Different operant chambers 4 4

Et operant kammer for duer. 9.03.2011 EA 5 5 Cumulative Recorder 9.03.2011 EA 6 6

From Ferster (1953) 7 7 Kymograph 8 8

From Lattal (2004) 9 9 From Lattal (2004) 10 10

From Asano and Lattal (2008) 11 11 From Asano and Lattal (2008) 12 12

From Catania (2007) 13 13 Cumulative Record skjematisk 14 14

Effektivitet ved en forsterker eller forsterkning Rate Kvalitet Magnitude Delay Det er den tidsperioden mellom responsen som har produsert forsterkeren og til forsterkeren faktisk blir presentert. 15 15 Immediacy of Reinforcment Direct effects or reinforcement is based on temporal relation between behavior and consequence (Michael, 2004.) The less delay, the more effective the reinforcement. Behavior closest to reinforcement is strengthened. 16 16

Delayed consequences Do not reinforce behavior directly Affect behavior through instructional control and rule following Rule: verbal description of a behavioral contingency Rule governed behavior: If behavior occurs because of a rule rather than direct effect of reinforcement. 17 17 Etablering av responser og delay Thorndike (1911) fant blant annet at det var en negativ relasjon mellom responservervelse og delay av konsekvensene. 18 18

Varianter ved bruk av delays Delays med en distinkt eller bestemt stimulus Brukt ofte lys av Variasjoner i farge på lys Spaker som trekkes tilbake Delays med ikke-tilbakestilte intervaller eller med tilbakestilling av intervallene. Delays med fast eller variabel varighet 19 19 Den vanligste måten studere effektene av delay på. Avhengig av kontekst så kan delay of reinforcement øke eller redusere atferd, eller ikke ha noen effekt sammenlignet med umiddelbar forsterkning. Det mest vanlig er at man iverksetter en prosedyre med delayed reinforcement etter en periode med umiddelbar forsterkning. Dette fører typisk til at responsraten reduseres noe. 20 20

Differensiering av operante responser med delayed reinforcement Skinner (1938) var den første som differensierte operante responser med delayed reinforcement. Han gjorde blant annet et eksperiment med rotter og viste at det var mulig å etablere spaktrykk med et delay opp til 8 sekunder. Delayet var ikke signalisert. 21 21 Shaping med delay Prosedyren var ikke-tilbakestillende usignalisert delay Sammenligning av umiddelbar forsterkning, 1 s delay og 10 s delay Resultatene viste at det var ingen nevneverdige forskjeller mellom umiddelbare og 1 s delay. Ved 10 s delay var det ikke mulig. Duene fortsatte å vise masse forskjellig type atferd i intervallet 22 22

Innføring av et delay etter steady state responding Ferster (1953) antok at effektene av signaliserte delays ville bli mindre påvirket dersom det ble benyttet en titreringsprosedyre. Resultatene viste at responderingen ble opprettholdt på et VI 60 s skjema med 120 s delay Ferster og Hammer (1956) viste i en studie med bavianer at intervallet kunne strekkes gradvis opp til 24 timer. 23 23 Anvendelse av delay etter at atferden er oppretthold på umiddelbar forsterkning Korte intervaller på rundt 0.5 sekunder i usignaliserte og i tilbakesettende delays ofte fører til at responderingen relativt til hva som er funnet ved umiddelbar forsterkning. Når det er sagt så er det viktig å presisere at den mest typiske effekten ved delayed reinforcement brukt etter umiddelbar forsterkning er at man får en reduksjon i responsraten relativt til hva som er observert ved umiddelbar forsterkning. 24 24

S K2 S K { Ulike termer A - B - C { SD : R - SR SE (Setting hendelser) EO/MO (Etablerende eller motivasjonelle operasjoner) 25 25 Fire grunnleggende forhold mellom stimuli som etterfølger atferd og effekt på atferd: Operasjon: Effekt på atferd Stimulus som følger etter atferden Økning Reduksjon Presentasjon Positiv forsterkning Type 1 punishment Fjerning Negativ forsterkning Type II punishment 10.03.2010 EA 26 26

Fra Cooper et al. (2007) 10.03.2010 EA 27 27 Viktige forhold ved den atferdsanalytiske opplæringsmodellen Etablering av ny atferd Endre stimuluskontrollen for atferden Generalisering av atferd over tid (opprettholdelse), situasjoner og atferdskategorier 28 28

Vanskeligheter med å lage gode nok fagmiljøer for å behandle alvorlige atferdsproblemer Difficult or controversial programming for very difficult behavior problems should be limited to those settings in which the necessary expertise and environmental support are available (Foxx, 1982). 29 29 Viktige hovedmål Økt grad av selvstendighet Bredest mulig atferdsrepertoar Etablering av alternative atferdstopografier for å redusere problematferd 30 30

Tre viktige forhold for å skille ut hva som er problematferd:!atferden ekskluderer klienten i å delta i sosiale situasjoner.!atferden er uforenelig med opplæring av nye viktige ferdigheter.!atferden er skadelig for klienten og/eller andre. 31 31 Klassifikasjon av atferd Overskuddsatferd. Kategorien referer til atferd som er for høyfrekvent eller for intens i forhold til normene som gjelder for situasjonene den forekommer i. Underskuddsatferd. Denne kategorien omfatter for lavfrekvent og for lite intens atferd i forhold til de situasjonene den forekommer i. Mangelatferd. Atferd som klienten ikke har i sitt atferdsrepertoar, men som det er ønskelig at han skal lære. Atferd under feil stimuluskontroll. Denne kategorien omfatter atferd som er lite funksjonell i forhold til de situasjoner den forekommer under. 32 32

Eksemplifisering av typer av problematferd " Selvskadende atferd " Selvstimulerende atferd " Tvangsmessig atferd " Utagerende atferd " Mangel på oppmerksomhet " Mangel på språklig atferd " Mangel på korrekt toalettatferd " Manglende typer av selvstendighetsatferd 33 33 Ulike former for problematferd:! Selvskadende atferd! Aggressiv og ødeleggende atferd! Stereotyp atferd! Selvstimulerende atferd! Tvangsmessig atferd! Passivitet! I tillegg en del som kan kategoriseres som mangelatferd (grising med avføring, enurese etc.) 34 34

Definisjon av selvskading (SIB) Initiert av personen selv Repeterende Har som resultat at responsene påfører individet skade. Selvskadende atferd regnes som enhver atferd initiert av individet selv, som direkte resulterer i fysisk skade på det individet. Fysisk skade antas å innbefatte "gul og blå", istykkerriving, blødninger (indre eller ytre), brudd- og brist av bein, og annen vevødeleggelse (Murphy & Wilson, 1985). 35 35 Definisjon av låsing Vanlige topografier ved låsing ( self-restraint ) er innvikling av lemmer i klær, møbler eller deler av kroppen; disse responsene er vanligvis inkompatible med individets selvskading og blir sett på som at de forhindrer de selvskadende responsene. 1992) (Smith, Iwata, Vollmer, & Pace, 36 36

Ulike topografier ved selvskading! hodedunking! slag mot hodet! biting på kroppsdeler! trykking mot øye! hårnapping! riving og kloring! slag mot andre kroppsdeler! negleutdraging! skjære seg! sparke seg! gniing av to kroppsdeler mot hverandre! hoppe på stive bein! pica! ruminasjon! provoserte brekninger! hyperventilering! provoserte kramper 37 37 Paradigmeskifte innen anvendt atferdsanalyse Prinsippet om minst restriktive alternativ Least Restrictive Alternative (LRA) Fra å være en diskusjon om aversive vs. ikke-aversive behandling til å være en diskusjon om funksjonell vs. ikke-funksjonell behandling LRA-modellen forfekter at behandlingen skal være basert på funksjon og ikke topografi. Kunnskapen om atferdens funksjon har gitt mer nøyaktige behandlingsopplegg, samt at en del nye prosedyrer er framkommet. 38 38

Minst restriktive prosedyre Prinsippet om bruk av den minst restriktive prosedyre har vært et anerkjent prinsipp innen atferdsanalyse over lang tid. Det innebærer at andre mindre restriktive prosedyrer skal prøves ut først og dersom disse viser seg å være ineffektive, så kan man diskutere bruken av straffeprosedyrer. 39 39 Et mulig tiltakshierarki Funksjonsbasert Ikke-funksjonelle forsterkningsbaserte prosedyrer Prosedyrer som innebærer bruk av restriktivitet 40 40

Rangering fra liten til stor grad av restriktive prosedyrer: 1) Etablering av ferdigheter 2) Differensielle forsterkningsprosedyrer og NCR 3) Ekstinksjon 4) Reprimander 5) Positiv praksis 6) «Time-out» - ikke-ekskluderende 7) «Time-out» - ekskluderende 8) «Response Cost» 9) Restitusjonsprosedyrer 10) Presentasjon av aversive stimuli kontingent på atferd - ikke-smertefulle stimuli 11) Presentasjon av aversive stimuli kontingent på atferd - smertefulle stimuli 41 41 I henhold til bruk av aversive virkemidler er det vanlig å dele slike prosedyrene inn i fem kategorier: 1) aversive lyder 2) aversiv smak 3) aversive lukter 4) fjerning eller fordreining av visuelle stimuli 5) uvanlig aversiv fysisk berøring 42 42

Kontinuerlig atferdstrøm Private og offentlige hendelser Hendelsene kan da både være atferd og stimuli Skille er bestemt av tilgang til disse hendelsene. Kan være en del av en atferdskjede Private and public events have the same kind of physical dimensions. The skin is not at all that important as boundary (Skinner, 1969). (Skinner, 1963, p. 953) 43 43 Fra Cooper et al. (2007) Generelt kan en si at atferd er aktiviteten hos levende organismer. Atferd brukes for å referere til en større klasse av responser som deler visse typer topografiske dimensjoner eller funksjoner. Respons referer til en spesifikk tilfelle av en atferd. Responstopografi referer til en fysisk form av atferd. En responsklasse er en gruppe responser som varierer i topografi, men som produserer den samme effekten på miljøet. Et repertoar refererer til alle typer av atferd som en person kan framvise eller til et sett av typer av atferd som er relevant i en type setting eller oppgave. 44 44

En respons En respons er en bit av atferdsstrømmen som er avgrenset ved at forekomst av liknende atferdsbiter er funksjonelt relatert til bestemte stimuli. 9.03.2010 EA 45 45 En stimulus En stimulus er hendelse som er avgrenset ved at liknende hendelser er funksjonelt relatert til bestemte typer responser. 9.03.2010 EA 46 46

Viktige begreper ved forsterkning Begrep Forsterker (substantiv) Forsterkende (adjektiv) Forsterkning (substantiv) Å forsterke (verb) Restriksjoner En stimulus En egenskap ved en stimulus En prosedyre eller en prosess En prosedyre eller en prosess 10.03.2010 EA 47 47 Forsterkere virker på atferd og de er definert ut fra økning av responsraten og ikke om man liker dem eller ikke Reinforcers do not work because they make the organism feel good or because the organism likes them (Catania, 1992, p.81) 48 48

En positiv forsterker En positiv forsterker er en hvilken som helst stimulus som blir presentert (tilført) umiddelbart på en respons, og som øker sannsynligheten for liknende type av responser i framtiden. 9.03.2010 EA 49 49 Eksempel med bruk av positiv forsterkning 50 50

Nok et eksempel på det samme 51 51 En negativ forsterker En negativ forsterker er en hvilken som helst stimulus som blir terminert (fjernet) umiddelbart på en respons, og som øker sannsynligheten for liknende type av responser i framtiden. 9.03.2010 EA 52 52

En litt annen definisjon, men ikke akkurat helt korrekt! Fra en eksamensoppgave på profesjonsstudiet i psykologi: Negativ forsterkning er akkurat det samme, bortsett fra at man øker styrken av responsen ved å unngå forsterkning. 53 53 Forsterkning er navnet på relasjonen mellom responser og miljøet. Denne relasjonen inkluderer minst tre komponenter: 1. Responsen må ha konsekvenser. 2. Økt sannsynlighet for at liknende responser forekommer i framtida. 3. Økningen må forekomme fordi responsene har disse konsekvensene og ikke for noen annen grunn. 54 54

Kontigens vs. Uavhengighet Kontingens A B Uavhengighet A B 10.03.2010 EA 55 55 Typer av forsterkere: Ubetingede forsterkere (noen ganger også betegnet som primær forsterkere) er hendelser eller stimuli som har en åpenbar biologisk betydning for organismen, for eksempel mat og vann. Betingede forsterkere er hendelser eller stimuli som gjentatt ganger blir paret med stimuli som allerede er effektive forsterkere, for eksempel ros, smil. Dersom betingede forsterkere er paret med en rekke andre forsterkere i en rekke situasjoner blir disse generaliserte betingede forsterkere, for eksempel penger, tegnøkonomibrikker 56 56

57 57 58 58

59 59 Betinget forsterkning S-S forklaring på betinget forsterkning Klassisk betinging Diskriminativ stimulus forklaring på betinget forsterkning Operant betinging Stimulusen må være diskriminativ for å bli en betinget forsterker. 60 60

Generaliserte betinget forsterkning En generalisert betinget forsterker er enhver hendelse eller stimulus som er korrelert med eller utbyttbar med mange kilder til ubetinget forsterkning. Generalisert betinget forsterkning er ikke avhengig av deprivasjon eller metning av en spesiell forsterker. Generalisert sosial forsterkning. Tegnøkonomibrikker og penger som generaliserte betingede forsterkere. Fra Pierce og Cheney (2008) 61 61 Betingede forsterkere og kjeding Tradisjonelt: S D R S R Trykkerespons! klikkelyd for vannmekanisme! vann Molekylært nivå: S D R1 S R Synet av spaken! trykkerespons! klikkelyd fra vannmekanismen S R /S D R2 S R Klikkelyd fra vannmekanisme! går til vannluka! vann 62 62

Baklengs kjeding 63 63 Skinner (1953): A conditioned reinforcer is generalized when it is paired with more than one unconditioned reinforcer. The generalized reinforcer is useful because the momentary condition of the organism is not likely to be important. The operant strength generated by a single reinforcement is observed only under an appropriate condition of deprivation when we reinforce with food, we gain control over the hungry man. But if a conditioned reinforcer has been paired with reinforcers appropriate to many conditions, at least one appropriate state of deprivation is more likely to prevail upon a later occasion. A response is therefore more likely to occur. When we reinforce with money, for example, our subsequent control is relatively independent of momentary deprivations. (p. 77) 64 64

To motsatte prosesser 65 65 Ekstinksjon Ekstinksjon som prosedyre er at den forsterker som tidligere etterfulgte/ opprettholdt en bestemt type respons blir holdt tilbake eller ikke gjør det lenger. Ekstinksjon som prosess refererer til at hyppigheten av denne type respons først øker noe for deretter å avta som et resultat av ekstinksjonsprosedyren. 9.03.2010 EA 66 66

Ekstinksjon vs. glemsel I løpet av ekstinksjonen så avtar atferden over tid Glemsel er kun et resultat av tiden har gått. Skinner (1938) Markowitz et al. (1975) Gå fram 67 67 Extinction vs. forgetting Gå tilbake 68 68

Effektene av ekstinksjon 69 69 Responding during extinction 70 70

Extinction 71 71 Satiation 72 72

Reinforcement and extinction 73 73 Fra Catania (2007) 74 74

Extinction from Catania (2007) 75 75 Spontaneous Recovery 76 76

Spontaneous recovery Catania (2007) 77 77 Mechner notation system 78 78

Mechner notation system 79 79 Probabilities from Catania (2007) 80 80

Klassebegrepet En operant er en klasse av responser som er under kontroll av de samme diskriminative stimuli og forsterkende hendelser 81 81 Classes of behavior 82 82

Descriptive vs. Functional operant 83 83 Definisjon av shaping Forming (shaping) av en bestemt respons-topografi består av at kriteriet for hvilke responsformer som leder til forsterkning endres gradvis i en bestemt retning. 9.03.2010 EA 84 84

Eksempel 85 85 86 86

Shaping A means of reinforcing the behavior as it becomes closer to the desired outcome. Reinforce successive approximations of the behavior 87 87 Fading vs. Shaping Fading is used to bring an already learned behavior under the control of a different stimulus. Shaping is used to teach a new behavior The behavior itself does not change when fading is used; only the antecedent stimulus varies. In shaping the behavior itself is changed In fading, the teacher manipulates antecedents. In shaping, consequences are manipulated 88 88

89 89 Sample Task Analysis 1. Locate the phone 2. Find the phone number 3. Choose correct change 4. Pick up the receiver with left hand 5. Put receiver to ear and listen to dial tone 6. Insert first coin 7. Insert second coin 8. Dial seven-digit number 9. Wait for ring a minimum of 5 times 10. If someone answers, initiate conversation 11. If busy, hang up phone and collect money 90 90

Response Chaining Used to link a series of functionally related responses, each associated with a particular stimulus condition 91 91 Example of a response chain Go to first stop sign CUE Turn right First response See yellow house on left Reinforcer + cue Go two stop lights Second Response 92 92

Forward Chaining Procedure where all the steps are performed in sequence, but only the first task step is instructed and reinforced. 93 93 Shaping A means of reinforcing the behavior as it becomes closer to the desired outcome. Reinforce successive approximations of the behavior 94 94

Boy, have I got this guy trained: every time I press the lever, he gives me a piece of cheese 95 95 Operant betinging # Responser blir emitted # En stimulus kontrollerer responsen i den forstand at sannsynligheten for responsen endres når en spesiell stimulus, som hvis nærvær tidligere har ledet til forsterkning, er tilstede. # Kontingens Vi sier at det er en kontingent (avhengig av) forhold mellom spaktrykk og mat. Dersom det er et kontingent forhold mellom to hendelser A og B, så betyr det at B bare forekommer og bare dersom A forekommer. På den måten er B avhengig av A eller sagt på en annen måte at A predikerer B, ettersom når A forekommer, så forekommer B. Dersom A ikke forekommer, så vil B ikke forekomme. Mat (B) er kontingent i forhold spaktrykk (A) eller sagt på en annen måte er mat (B) en konsekvens av spaktrykk (A). 9.03.2010 EA 96 96

Fortsetter # Forandringer i atferd som et resultat av en respons blir utsatt forsterkning: $ raten av responsen øker relativt til baseline nivå. $ raten av responsen øker relativt til raten av andre responser som forekommer i situasjonen. $ mønsteret eller sekvensen forandrer seg til en sløyfe som hele tiden gjentar seg. $ formen eller topografien av responsen blir mer stereotyp og krever et minimum av anstrengelse forandring i responsvariabilitet og blir influert av individets biologiske forberedthet til å utføre de responsene som konsekvensene er arrangert for. 9.03.2010 EA 97 97 Fortsetter Arbitræritet " i den forstand at ingen er spesielt interessert i spaktrykk som sådan. " at responser kan bli modifisert ved sine konsekvenser. " spaktrykk eller trykking på en tast er valgt ettersom de er lette å observere og registrere. " kan lett utføres med ulik frekvens og med forskjellig mønster. 9.03.2010 EA 98 98

From Tolman 99 99 A fourteen-unit T-maze 100 100

From Tolman and Honzik (1930) 101 101 Cognitive Map The animal develops a picture of the environment in his mind by moving about in this environment. Once the lay of the land is developed the animal can reach its goal from any direction, individual responses, even individual routes to goal do not matter. 102 102

Expectations During the development of the cognitive map the animal develops expectations on where to find the goal. Tentative expectations early on in cognitive map development are called hypotheses. An expectation that is consistently confirmed is called means-end readiness. 103 103 104 104

105 105 Catania (2007) 106 106

107 107 From Statton (1897) When I moved my head or body so that my sight swept over the scene, the movement was not felt to be solely in the observer, as in normal vision, but was referred both to the observer and to objects beyond! I did not feel as if I was visually ranging over a set of motionless objects, but the whole field of things swept and swung before my eyes. (p. 342) 108 108

From Skinner (1953) Events which are found to be reinforcing are of two sorts. Some reinforcements consist of presenting stimuli, of adding something for example, food, water, or sexual contact to the situation. These we call positive reinforcers. Others consist of removing something for example, a loud noise, a very bright light, extreme cold or heat, or electric shock from the situation. These we call negative reinforcers. In both cases the effect of reinforcement is the same the probability of response is increased. We cannot avoid this distinction by arguing that what is reinforcing in the negative case is the absence of the bright light, loud noise, and so on; for it is absence after presence which is effective, and this only another way of saying that the stimuli is removed. (p. 73) 109 109 Michael (1975) Confusion between negative reinforcement and punishment If stimuli are presented or removed depend on the context. 110 110

Problems raised with respect to such a distinction Aversive stimulus vs. negative reinforcer Difficulties with distinguishing stimulus changes which are presentations from those which are removals or withdrawals. 111 111 Iwata (2006) In many cases stimulus changes involve pre- and postchange conditions in which it is possible to determine if the relevant stimulus is present or absent Prechange and postchange conditions % facilitates the development of effective contingencies 112 112

Fra Hineline The addition of one event is the removal of another, and vice versa: Adding heat is removing cold; adding food is decreasing deprivation; adding a smile removes a frown. However, there is a fundamental asymmetry, for if a stimulus or situation is to be reducible or removable by some response, that response must occur in its presence. In contrast, positively reinforced responses necessarily occur in the absence of the stimuli upon which reinforcement is based. (pp. 496-497) 113 113 On the distinction between positive and negative reinforcement Catania (2007) 114 114

Variability One possibility is that the strengthening effects of positive and negative reinforcement are in some important way different from one another The two kinds of reinforcement involve underlying physiological structures or processes. 115 115 Stereotypy From Schwartz (1982). Four left and four right presses in any order were required. He found that both pigeons and college students developed a stereotyped pattern of responding. 116 116

Variability Critic raised by Neuringer: Response requirements in the Schwartz study resulted in response stereotypy. Furthermore, Neuringer and co-workers have done experiments showing the opposite results of Schwartz (1982): Experiments have shown that pigeons show variability when reinforcement contingencies were arranged for such behavior (Page and Neuringer, 1985). Other experiments by Neuringer (2002, 2004) with humans have shown that reinforcement contingencies may generate novel behavior. 117 117 Positiv straff. 1) Skinner definerer straff som presentasjon av en negativ forsterker kontingent på en respons, 2) Azrin definerer straff som en hvilken som helst stimulus som blir presentert (tilført) kontingent (avhengig av) på en respons, og som minsker den framtidige sannsynligheten for liknende typer responser. 118 118

Negativ straff. 1) Skinner definerer straff som er fjerning av en positiv forsterker kontin-gent på en respons. 2) Azrin definerer straff som en hvilken som helst stimulus som blir terminert (fjernet) kontingent (avhengig av) på en respons, og som minsker den framtidige sannsynligheten for liknende typer responser. 119 119 To definisjoner av straff 1. Azrin og Holz (1966) Straff er en prosedyre der a) responser har konsekvenser b) hyppigheten av disse responsene synker c) nedgangen i responshyppigheten skjer forsi responsene har disse konsekvensene, og ikke av andre grunner. 2. Skinner Straff er en prosedyre der responser etterfølges av enten Fjerning av en positiv forsterker, eller Presentasjon av en negativ forsterker (aversiv stimulus) Positive og negative forsterkere må på forhånd være identifisert i henholdsvis positive og negative forsterkningsprosedyrer. 120 120

121 121 Foranledning Si navnet på en kjøttetende dinosaur Atferd Fra Cooper et al. 2007 Tyrannosaurus Rex Konsekvens Supert Framtidig frekvens av atferd i lignende situasjoner Operasjon/prosedyre Positiv forsterkning Fæl lukt under kjøkkenbenken Tar ut søpla Den fæle lukta forsvinner Negativ forsterkning Glatt vei Spørsmål i popup boks på skjermen: Vil du varsles dersom du sletter uleste beskjeder? Kjører i normal hastighet Klikker på Nei Kjører inn i bilen foran Viktig e-post beskjeder blir slettet Positiv straff Negativ straff 122 122

123 123 Escape and Avoidance 124 124

125 125 Negativ forsterkning Det er atferd som øker i frekvens når den etterfølges av at en stimulus blir fjernet. På samme måte som positiv forsterkning øker denne frekvensen av atferd og den er benevnt som negative fordi den involverer fjerning To typer: Flukt Responsen framkommer i nærvær av den aversive stimulusen og derav fjerner denne Atferd fjerner stimulusen fra situasjonen Unngåelse Responsen forhindrer den aversive stimulusen Atferd gjør at hendelsen unngås. Postponement og deletion prosedyrer 126 126

Nondiscriminated avoidance 127 127 Avoidance paradox Murray Sidman (1989) Successful avoidance meant that something the shock did not happen, but how could something that did not happen be a reinforcer? 128 128

Discriminated avoidance 129 129 Sidman (1953) To klokker styrer formidlingen av elektrisk støt En klokke tiden mellom støtene SS intervall En klokke tiden mellom respons og støt RS intervall Støt kan unngås fullstendig ved avoidance responser Støtene er også av så kort varighet at det ikke er mulig med noe fluktrespons. 130 130

Spaktrykking hos en rotte i en Sidman avoidance prosedyre 131 131 Lenker http://www.psychology.uiowa.edu/faculty/ Wasserman/Glossary/ reinforcement.html#positive%20reinforcer http://www.youtube.com/watch? v=wfrabsz9gx4 http://psych.athabascau.ca/html/prtut/ reinpair.htm 132 132

Eksempler 1. Ei rotte blir plassert i et operant kammer og får umiddelbart et mildt elektrisk støt i beina. Rotta trykker på en spak og støtet opphører. Rotta får et nytt støt og trykker spaken igjen, støtet opphører på nytt. Rottas spaktrykkeatferd er styrket ved konsekvensen at støtet opphører. 2. Å kjøre i kø er en negativ betingelse for de fleste av oss. Du kjører hjemmefra en morgen og dermed slipper unna køen. Neste morgen drar du også tidligere hjemmefra og igjen unngår du køen. Atferden din å dra tidlig hjemmefra er forsterket ved at du unngår kø. 133 133 Eksempler Stimulus Innsektsbitt som klør Øyne som klør For sterkt lys Kaldt luftdrag For mye støy Atferd som blir forsterket Klør på det. Gnir dem. Skygger for Lukker vindu Skrur ned høreapperatet For nye syting Kjedelig undervisning Bekymre seg for en test Overdøve sytingen med radioen eller gi etter og dem hva de vil Dagdrømme, tegne kruseduller, lukke ute Se på tv eller studere for å lindre dårlig samvittighet Hodepine Ta en smertelindrende tablett Puste dypt, Nervøs 9.03.2011 avslapningsøvelser EA 134 134