Om grunnleggende begreper

Transkript

1 Om grunnleggende begreper Forelesning basert på interteaching sekvenser fra Cooper et al. (2007) og Catania (2007) MALKA211 V-08 Erik Arntzen HiAk EA 1 Temaer som var ønsket fra Catania kap. 2: Køhlers eksperiment Fixed action pattern Niko Tinbergens funn Thorndike sine forsøk Clever Hans Operasjoner og prosesser Ulike typer av operasjoner Signalisering av konsekvenser Etablerende operasjoner EO vs. SD Forskjeller i begrepene elicited, evoked og emitted Tretermskontingensen Forskjeller SD og SK Ulike typer av operasjoner Suksessiv og simultan diskriminasjon EA 2

2 Ønsker fra Cooper et al. (2007) Setting events og etablerende operasjoner Betingede og ubetingede forsterkere/straff Relative effekter Kontingenser Kompleksitet ved menneskelig atferd Responsklasser Grunnleggende begreper i respondent betinging og operant betinging EA 3 Evolusjon av læring to variabler som determinerer et individs id atferd: Fylogenese som refererer til den evolusjonsmessige historien til den enkelte (dvs. seleksjonspresset opererer på forfedrene). Ontogenese som er et hvert enkelt individs historie i forhold til interaksjon med miljøet. Selection by consequences is causal mode found only in living things, or in machines made by living things. (Skinner, 1981, p. 501) EA 4

3 Tre metoder som brukes av etologer Ethogram Som er en oversikt eller en komplett detaljert beskrivelse av en organisme sin atferd i naturlig tilstand Isolasjonsstudie Det er et forsøk på å oppdra eller undersøke en organisme i fravær av variasjoner i miljømessige erfaringer. Modeller EA 5 Bruk av modeller EA 6

4 Supernormale stimuli EA 7 Supernormale stimuli EA 8

5 Supernormale stimuli EA 9 Fixed action pattern (FAP) Effektiviteten av en såkalt sign stimulus avhenger av dens evne til å produsere et ekstremt t stereotypt t t atferdsmønster. t Etologer har da benevnt dette stereotype atferdsmønsteret for FAP EA 10

6 Fixed action pattern EA 11 Kroppens ulike reseptorsystemer Exteroceptors Påvirkes av ytre stimuli og gjør oss i stand til: se høre lukte smake kjenne hudberøring Interoceptors Som er sensitive for stimulering fra innvoller (mageknip) Proprioceptors Reagerer på kinestetiske og vestibulare bevegelser og balanse EA 12

7 Stimulus hendelser Stimulus forandringer, ikke statiske betingelser Disse hendelsene kan være definert i forhold til: Formale fysiske form Tid når de forekommer i forhold til atferd Funksjon effekt på atferd EA 13 For example, in respondent conditioning the conditioned stimulus may be referred as a tone. However, the relevant event is actually a change from the absence of tone to the tone sounding, and although this is usually understood without having to mentioned, it can be overlooked in the analysis of more complex phenomena. Operant discriminative stimuli, conditioned reinforcers, conditioned punishers, and conditioned motivative variables are usually important as stimulus changes, not static conditions. (Michael, 2004, pp. 7-8) Gå tilbake EA 14

8 Formale dimensjoner ved stimuli Som størrelse, farge, intensitet, vekt og posisjon i forhold til andre stimuli. Ikke-sosiale eller sosiale EA 15 Tidsmessig plassering av stimuli Foranledninger Konsekvenser EA 16

9 Fra Cooper et al. (2007) EA 17 Stimulus forandringer kan gi: Umiddelbare effekter Utsatte effekter EA 18

10 Fra Cooper et al. (2007) EA 19 I. P. Pavlov ( ) Han studerte magesekresjon som responser hos hunder når han oppdaget at kun synet av mat førte til at hunden begynte å salivere. En nøytral stimulus som gjentatte ganger har blitt paret med en ubetinget stimulus (US), utløste en ubetinget respons (UR). På basis av denne betingingen blir den nøytrale stimulusen etter hvert en betinget stimulus (BS) og vil utløse den betingede respons (BR). Ekstinksjon Spontaneous recovery Han mente at betingede reflekser kunne forklare hvordan hjernen fungerte Nobelprisen i EA 20

11 EA 21 Pavlov som studerer spyttsekresjon hos hunder EA 22

12 Respondent conditioning EA 23 Fra Cooper et al. (1987) EA 24

13 Fra Cooper et al. (2007) EA EA 26

14 Fra Cooper et al. (2007) EA EA 28

15 Tre grunnleggende reflekslover Lov om terskel vil si at det er et punkt under hvor ingen responser blir utløst og det er et punkt over hvor responsen alltid blir utløst. Lov om intensitet og størrelse sier at dersom det er stor intensitet av US så vil størrelsen på UR øke. Lov om latens sier at dersom intensiteten av US øker, vil dette føre til latenstiden tid før UR utløses avtar. Pierce og Cheney (2004) EA 29 Spontaneous recovery EA 30

16 Hvilke typer av atferd er det som blir respondent betinget? Atferd som blir respondent eller klassisk k betinget er de som involverer læring av ufrivillige responser responser som den som målpersonen ikke har noen kontroll over eller som den responderer refleksivt eller automatisk. Eksempler på dette er da en hund som saliverer i nærvær av lyden av en middagsbjelle, en hest som prøver å slippe unna eller stikker av når et papir blåser i luften, eller at noen blir kvalme ved synet av kremliknende mat når majones engang har gjort dem syke EA 31 Hvordan øker du atferd gjennom klassisk betinging? Ved respondent betinging skjer dette på to måter: Repetert praksis som innebærer flere paringer av nøytrale stimuli med ubetingede stimuli. Sterkere ubetingede stimuli, for eksempel traumatiske hendelser produserer sterkere betinging EA 32

17 Hvordan minsker du atferd gjennom klassisk eller respondent betinging Det er flere måter å minske uønskede betingede responser: utslokking: den ubetingede stimulus følger ikke lenger. counterconditioning: erstatte en betinget respons men en ny, mer fordelaktig respons EA 33 Edward Lee Thorndike ( ) Læring ved prøving og feiling (eller selecting and connecting ) g) Bruk av puzzle box Forskningen fokuserte på hendelser og konsekvenser som etterfulgte atferd Læring foregikk gradvis og ikke innsiktsfullt Antakelse om at et nevrale bånd (connections) holdt stimulus og respons sammen Mange forskjellige typer lover, hvorav effektloven er den viktigste. Denne loven fastslår at styrken ved en forbindelse ble influert av konsekvensene ved responsen. Før 1930 antok Thorndike at behagelige konsekvenser styrket denne forbindelsen, mens plagsomme eller ubehagelige konsekvenser svekket denne forbindelsen. Etter 1930 hevdet Thorndike at det kun var de behagelige konsekvensene som hadde en effekt på styrken av denne forbindelsen EA 34

18 Thorndikes problembur hvor han studerte instrumentell atferd hos katter EA 35 Stamping in stamping out The cat that is clawing all over the box in her impulsive struggle will probably claw the string or loop or button so as to open the door. And gradually all other non-successful impulses will be stamped out and the particular impulse leading to the successful act will be stamped in by resulting pleasure, until after many trials, the cat will, when put in the box, immediately claw the button or loop in a definite way. (Thorndike, 1911, p.40) EA 36

19 Ulike labyrinter EA 37 Edward Chance Tolman ( ) Studere atferd i store, meningsfylte mønstre hvor atferden er rettet mot et mål. En kognitiv teori om læring. S-S framfor S-R psykologi. Læring var en pågående prosess som ikke trengte noen form for motivasjon. Mellomliggende variabler var elementer eller konstrukter som var mellom uavhengig og avhengig variabel. Disse er med på å forklare hvorfor læring skjer. Latent læring som ikke gir seg utslag i utførelse. Kognitive kart Innsiktslæring ble videreført EA bl.a. av Wolfgang Köhler. 38

20 Køhlers aper EA 39 Unik interesse for rotter I believe that everything important in psychology (except perhaps such matters as the building of a super-ego, ego that is, everything save such matters as involve society and words) can be investigated in essence through the continued experimental and theoretical analysis of the determiners of rat behavior at a choice-point in a maze. (Tolman, 1938, p.34) EA 40

21 Falsifisering og Kloke Hans EA 41 B.F. Skinner ( ) 1990) Skiller mellom to typer av atferd, respondent og operant atferd. Videre to typer betinging, S betinging (respondent betinging) og R betinging (operant betinging). Forsterkningsbetingelser eller treterms kontingensen Det er aldri snakk om atferd blir kontrollert, men av hva og hvem. Operant kammer eller også kalt Skinnerboks Analyser av verbal atferd er kanskje det viktigste bidraget Seleksjon Rate (antall/tid) Induktiv metode Empiriske data først og så ved induksjon avlede generelle prinsipper eller funksjonelle relasjoner mellom hendelser Erstattet teoritesting med prediksjon og kontroll EA 42

22 Prosedyre/operasjon versus prosess Prosedyre vil si de manipuleringer som gjøres i forhold til organismen av eksperimentator eller terapeut. Prosess vil si de atferdsmessige forandringene som finner sted hos organismen som et resultat av prosedyren EA 43 Grunnleggende prosedyrer (fra Catania, 2007) EA 44

23 Begreper Elicited = utløst, brukes i forbindelse med respondent betinging g Emitted = frambrakt, gir anledning for, brukes i forbindelse med operant betinging Evoked = igangsettende, vekket, brukes i forbindelse med å beskrive effektene av etablerende operasjoner EA 45 Fra Cooper et al. (2007) Unøyaktigheter i begrepsbruk EA 46

24 Variabler som kan forklare atferd: Konsekvenser Diskriminanter Etablerende operasjoner Settingfaktorer S D : R - S R EO EA 47 A - B - C S K2 S K S D : R - S R SE (Setting hendelser) EO/MO (Etablerende eller motivasjonelle operasjoner) EA 48

25 Typer av diskriminasjon Diskriminasjon kan deles inn i: suksessiv og simultan diskriminasjon EA 49 Responsklasser EA 50

26 Andre foranledninger enn diskriminanter i i Setting events Et begrep som Kantor (1959) benyttet seg av. Vi snakker her om en hendelse som påvirker forholdet mellom atferd og konsekvenser på en mer generell måte en etablerende operasjoner. Etablerende operasjoner EO har i følge Michael (1982, 1993) to effekter (1) De endrer den forsterkende eller straffende effekten av hendelser, og (2) endrer sannsynligheten for atferd som er forbundet EA med disse hendelsene. 51 Ulike typer setting events I forhold til fysiologiske setting events (Kennedy & Itkonen, 1993), biologiske setting events (Thompson et al., 1991) og sosiale setting events (Touchette et al., 1985) EA 52

27 Ulike typer etablerende operasjoner Ubetingede etablerende operasjoner (UEO) Betingede etablerende operasjoner (BEO) Effekten på forsterkerverdien er lært Effekten på en evokative funksjonen er lært Atferd er operant Typer av BEO er (definert avhengig av hvorledes hendelsen ble en BEO) Betingede etablerende operasjoner Surrogate BEO: en nøytral stimulus blir korrelert med UEO (uavhengig av responsen) Refleksive BEO: en nøytral stimulus blir korrelert med en stimulusforandring som fungerer som EO (for eksempel starten på en ubehagelig stimulering) i en operant relasjon Transitive BEO: en nøytral stimulus blir korrelert med korrelasjonen mellom en annen stimulus og forsterknings eller straffekontingenser EA 53 EO vs. SD Begge er foranledninger Sannsynligheten for at konsekvensene inntreffer dersom responsen forekommer er den samme enten EO er tilstede eller ikke Sannsynligheten for at konsekvensene inntreffer dersom responsen forekommer endrer seg avhengig av nærvær/fravær av SD EA 54

28 Etablerende operasjoner motivasjonelle operasjoner Det senere skjedd en endring slik etablerende operasjoner (EO) har blitt erstattet av en mer generisk term, motivasjonelle operasjoner (MO). Dette er en mer nøyaktig nyansering ettersom det er to typer av motivasjonelle operasjoner. En av dem er den etablerende operasjonen (EO). Den andre er den avskaffende operasjon (AO) EA 55 Hva er egentlig en motivasjonell operasjon Det er en forandring i miljøet som forandrer effektiviteten av en forsterker eller straffer, og som samtidig endrer den øyeblikkelige frekvensen av atferd som tidligere har gått forut for forsterkeren eller strafferen EA 56

29 To typer av motivasjonelle operasjoner Etablerende operasjon (EO) Forsterker Effektiviteten av forsterkning atferd (evokativ/vekkende) Straffer Effektiviteten av straff atferd (abative) Avskaffende Effektiviteten it t av forsterkning Effektiviteten it t av straff operation (AO) atferd (abative) atferd (evokativ/vekkende) EA 57 Den mest vanlige MO er deprivasjon fra primær forsterkning I rottelab n så er rottene deprivert for vann, og på den måten så vil dette øke sannsynligheten for at spaktrykking bli frambrakt. Når du ikke har spist på en stund så er det større sannsynlighet for at du vil gå innom en restaurant for å bestille mat eller lage deg noe mat selv. Dette er etablerende operajoner EA 58

30 På den annen side, det kan bli for mye av det gode Metning oppstår når rotta har fått nok vann slik at de biologiske behovene er tilfredsstilt. Det å drikke vann fører faktisk til at det reduserer effektiviteten av vann som forsterker og reduserer effektiviteten av typer av atferd som har blitt forsterket av vann tidligere. Dette er en AO EA 59 Treterms kontingensen For å kunne formulere interaksjonen mellom en organisme og dens omgivelser må det ifølge Skinners spesifiseres 1) Den foranledning en respons opptrer under - S D 2) Selve responsen - R 3) De forsterkende konsekvenser - S R Forholdet mellom disse kalles: Forsterkningsbetingelsene eller forsterkningskontingensene. S D - R - S R EA 60

31 Kontinuerlig atferdstrøm (Karlsen, 1976) Private and public events have the same kind of physical dimensions. (Skinner, 1963, p. 953) EA 61 Fra Cooper et al. (2007) Generelt kan en si at atferd er aktiviteten hos levende organismer. Atferd brukes for å referere til en større klasse av responser som deler visse typer topografiske dimensjoner eller funksjoner. Respons referer til en spesifikk tilfelle av en atferd. Responstopografi referer til en fysisk form av atferd. En responsklasse er en gruppe responser som varierer i topografi, men som produserer den samme effekten på miljøet. Et repertoar refererer til alle typer av atferd som en person kan framvise eller til et sett av typer av atferd som er relevant i en type setting eller oppgave EA 62

32 En respons En respons er en bit av atferdsstrømmen som er avgrenset ved at forekomst av liknende atferdsbiter er funksjonelt relatert til bestemte stimuli EA 63 En stimulus En stimulus er hendelse som er avgrenset ved at liknende hendelser er funksjonelt relatert til bestemte typer responser EA 64

33 Viktige begreper ved forsterkning Begrep Forsterker (substantiv) Forsterkende (adjektiv) Forsterkning (substantiv) Å forsterke (verb) Restriksjoner En stimulus En egenskap ved en stimulus En prosedyre eller en prosess En prosedyre eller en prosess EA 65 Forsterkere virker på atferd og de er definert ut fra økning av responsraten og ikke om man liker dem eller ikke Reinforcers do not work because they make the organism feel good or because the organism likes them (Catania, 1992, p.81) EA 66

34 En positiv forsterker En positiv forsterker er en hvilken som helst stimulus som blir presentert (tilført) umiddelbart på en respons, og som øker sannsynligheten for liknende type av responser i framtiden EA 67 Eksempel med bruk av positiv forsterkning EA 68

35 Nok et eksempel på det samme EA 69 En negativ forsterker En negativ forsterker er en hvilken som helst stimulus som blir terminert (fjernet) umiddelbart på en respons, og som øker sannsynligheten for liknende type av responser i framtiden EA 70

36 En definisjon som er langt fra korrekt kt Fra en eksamensoppgave på profesjonsstudiet i psykologi: Negativ forsterkning er akkurat det samme, bortsett fra at man øker styrken av responsen ved å unngå åforsterkning EA 71 mellom responser og miljøet. Denne relasjonen inkluderer minst tre komponenter: 1. Responsen må ha konsekvenser. 2. Økt sannsynlighet for at liknende responser forekommer i framtida. 3. Økningen må forekomme fordi responsene har disse konsekvensene og ikke for noen annen grunn EA 72

37 Typer av forsterkere: Ubetingede forsterkere (noen ganger også betegnet som primær forsterkere) er hendelser eller stimuli som har en åpenbar biologisk betydning for organismen, for eksempel mat og vann. Betingede forsterkere er hendelser eller stimuli som gjentatt ganger blir paret med stimuli som allerede er effektive forsterkere, for eksempel ros, smil. Dersom betingede forsterkere er paret med en rekke andre forsterkere i en rekke situasjoner blir disse generaliserte betingede forsterkere, for eksempel penger, tegnøkonomibrikker EA 73 Fire grunnleggende forhold mellom stimuli som etterfølger atferd og effekt på atferd: Operasjoner og prosesser Operasjon: Stimulus som følger etter atferden Økning Effekt på atferd Reduksjon Presentasjon Positiv i Type 1 forsterkning punishment Fjerning Negativ forsterkning Type II punishment EA 74

38 Fra Cooper et al. (2007) EA 75 To motsatte prosesser EA 76

39 Ekstinksjon Ekstinksjon som prosedyre er at den forsterker som tidligere etterfulgte/opprettholdt t tth ldt en bestemt t type respons blir holdt tilbake eller ikke gjør det lenger. Ekstinksjon som prosess refererer til at hyppigheten av denne type respons først øker noe for deretter å avta som et resultat av ekstinksjonsprosedyren EA 77 Effektene av ekstinksjon EA 78

40 Responding during extinction EA 79 Extinction EA 80

41 Spontaneous Recovery EA 81 Sannsynligheter EA 82

42 Klassebegrepet En operant er en klasse av responser som er under kontroll av de samme diskriminative stimuli og forsterkende hendelser EA 83 Classes of behavior EA 84

43 Descriptive vs. Functional operant EA 85 Definisjon av differensiell forsterkning Differensiell forsterkning er presentasjon av forsterkere bare etter bestemte type responser med bestemte responsegenskaper, og evt. bare i nærvær av bestemte t stimuli EA 86

44 Forsterkning kan arrangeres som Kontinuerlig forsterkning er presentasjon av forsterker ved hver forekomst av en bestemt type av responser. Intermitterende forsterkning er forsterkning noen ganger, men ikke hver gang en bestemt type av responser forekommer EA 87 Forsterkningsskjema Et forsterkningsskjema er et arrangement som spesifiserer se e hvilke responser se innenfor en operant klasse som leder til forsterker. Forsterknings-skjemaer kan baseres i forhold til antall responser, tidsintervall mellom hver mulighet for forsterkning dersom korrekt respons (kan også forekommet uten ved FT-skjemaer) og raten av respondering EA 88

45 Fire grunnleggende gg forsterkningsskjemaer Fast ratio (FR) er forsterkning etter et bestemt/fast antall korrekte responser. Varierende ratio (VR) er forsterkning etter et varierende antall korrekte responser. Fast intervall (FI) er forsterkning av første korrekte respons etter et bestemt/fast tidsinter-vall. Varierende intervall (VI) er forsterkning av første korrekte respons etter et varierende-tidsintervall. EA 89 Schedules of reinforcement EA 90

46 Definisjon av shaping Forming (shaping) av en bestemt respons-topografi består av at kriteriet for hvilke responsformer som leder til forsterkning endres gradvis i en bestemt retning EA 91 Eksempel EA 92

47 EA 93 Betingede forsterkere og kjeding Tradisjonelt: S D R S R Trykkerespons klikkelyd for vannmekanisme vann Molekylært nivå: S D R1 S R Synet av spaken vannmekanismen trykkerespons klikkelyd fra S R /S D R2 S R Klikkelyd fra vannmekanisme går til vannluka vann EA 94

48 Baklengs kjeding EA 95 Fra Cooper et al. (2007) EA 96

49 Fra Cooper et al Foranlednin Atferd Konsekvens Framtidig frekvens Operasjon/prosedyre g av atferd i lignende situasjoner Si navnet på en Positiv Tyrannosaurus Supert kjøttetende t forsterkning Rex dinosaur Fæl lukt under kjøkkenbenken Tar ut søpla Den fæle lukta forsvinner Negativ forsterkning Glatt vei Kjører i normal hastighet Kjører inn i bilen foran Positiv straff Spørsmål i popup boks på skjermen: Vil du Klikker på Nei varsles dersom du sletter uleste beskjeder? Viktig e-post beskjeder blir slettet Negativ straff EA 97 Eksempler på feilforsterkning Situasjon Respons Umiddelbare konsekvenser Langtidseffekter En tre år gammel gutt leker med fargeboken sin, Barnet går over mot TV n og fikler med Mor kommer umiddelbart løpende bort og sier: jeg Sjansene for at ungen vil fikle med knottene på TV n vil øke i framtiden reiser seg og ser seg rundt knottene tipper du er lei av å leke for deg selv, la oss som et resultat av oppmerksomhet fra mor. gå en tur. En mann gjør seg klar til å gå på jobben om Han skriker høyt Hvor i helvete er Kona finner skjorta og gir den umiddelbart til mannen. I framtida vil det være stor sannsynlighet for at mannen skriker og sverter morgenen, men kan ikke finne skjorta mi at han ikke kan finne klærne sine skjorta si. En far er opptatt med å stryke klær, mens hans to barn Det ene barnet slår det andre i hodet med en Faren stopper å stryke tøy og setter seg ned for å leke med barna. Barnet vil sannsynligvis i framtida kunne slå broren sin for å få fars leker stille. leke. oppmerksomhet EA 98

50 Forts. Eksempler på feilforsterkning Situasjon Respons Umiddelbare konsekvenser Langtidseffekter Mor og barn er å handler på et kjøpesenter Barnet begynner ågråteogsier: Jeg vil hjem; Jeg vil hjem. Mor blir brydd og forlater kjøpesenteret umiddelbart sammen med barnet uten å få gjort sine ærend. Barnet vil sannsynligvis skrike i lignende situasjoner i framtida. Fire personer med psykisk utviklingshemning spiser mat sammen på kjøkkenet i gruppeboligen. En jente holder opp sitt tomme glass og grynter høylydt mmmmmm Ett av personalet kommer umiddelbart og fyller glasset med melk. I framtida vil det være økt sannsynlighet for at hun løfter glasset og lager tilsvarende lyder i slike situasjoner hvor hun ønsker drikke EA 99 Forts 2. Eksempler på feilforsterkning Situasjon Respons Umiddelbare konsekvenser Langtidseffekter Far ser på tippekampen på TV. To av barna leker i det samme rommet og blir etter hvert meget støyende. Far gir dem penger slik at går på kiosken og ikke forstyrrer hans TV-titting. Barna vil sannsynligvis leke mer støyende i framtida når far ser på TV i lignende situasjoner. På en fest så danser kona litt flørtende med en annen mann. Mannen viser tydelig tegn på at han misliker det og forlater festen. Kona følger umiddelbart etter han og overøser han med oppmerksomhet Mannen vil i framtida forlate fester under lignende betingelser. En gutt med autisme sitter med oppgaver på skolen. Han starter med å hive bøkene fra seg og slå seg i hodet. Læreren kommer umiddelbart bort til pulten og hjelper gutten med oppgavene. Gutten vil med stor sannsynlighet i framtida også hive bøker og starte med selvskading under lignende betingelser EA 100