Forskningsmetoder med vektlegging av

Transkript

1 Forskningsmetoder med vektlegging av Eksperimentelle Design Erik Arntzen HiAk EA 1 Kontroll, motkontroll EA 2

2 Sentrale verdier for atferdsanalyse som er tatt fra naturvitenskapen 1) Experimental questions should be asked about the subject matter and the variables that influence it (rather than about theory). 2) Variability in the data is a measure of the degree of experimental control achieved. 3) The value of the data is directly related to the degree of experimental control achieved. 4) Generality emerges from understanding di controlling variables. 5) Experimental methods must be adapted to the characteristics of the subject matter. (Johnston & Pennypacker, 1993, p. 10) EA 3 Hypotetisk deduktive vs. induktiv forskningsmetode Atferdsanalyse er atskilt fra mye av resten av eksperimentalpsykologien hvor den sistnevnte historisk sett har sine røtter i teoridrevne og hypotetisk-deduktive metoder (Chiesa, 1994). Allerede Thales, Pythagoras, Aristotles, og andre greske filosofer i perioden 600 til 300 BC beskrev deduktiv resonnering. Galileo Galilei og også Francis Bacon ansees for å være viktige personer når det gjaldt å innføre denne metoden EA 4

3 Forts. I nyere tid så er det den østerrikske filosofen Karl Popper som har utviklet den hypotetiske deduktive vitenskapelige metode. I motsetning har vi den induktive metode hvor f.eks. Mach hevder at vitenskapens oppgave er å beskrive funksjonelle relasjoner mellom hendelser. Beskrivelser av disse funksjonelle relasjonene er en forklaring i seg selv og at det ikke er nødvendig å henvise årsaken til uobserverbare hendelser (Mach, 1893). Sidman skriver at en kan tenke seg en forskjell her hvor hypotesetester vil spørre Is this true (or approximately true)?, mens en som er opptatt av atferdsanalyse vil spørre I wonder what happen if (Sidman, 1960, s. 8) EA 5 Ulike forskningsmetoder Beskrivende forskningsmetoder Feltobservasjon Kasusstudier Systematisk observasjon Retrospektive undersøkelser Longitudinelle og kryss-seksjonelle metoder Arkivforskning Survey-undersøkelse undersøkelse Intervju Spørreskjema Psykologiske tester Eksperimentelle forskningsmetoder (Svartdal, 1998) EA 6

4 Formålet med forskningsdesign i Atferdsanalytikere er ikke interessert i å studere en hvilken som helst atferd eller manipulere variabler helt tilfeldig som en kuriositet. Det er snakk om å utvikle og manipulere de variablene som vil resultere i en terapeutisk forandring for målpersonen og for å demonstrere at det er disse variablene som er ansvarlig for forandringene og ingen andre variabler EA 7 Oppsummering av viktige dimensjoner ved anvendt atferdsanalyse, the field of applied behavior analysis stresses the study if socially important behavior that can be readily observed, and it uses research designs that demonstrate functional control, usually at the level of the individual performer. The procedures developed by this field must be replicable, and the extent of the resulting behavior change must have important practical significance for the social community. (Bailey & Burch, 2002, p. 17) EA 8

5 Ti steg for vellykket forskning Velg et vanlig område, finn en god setting og velg passende forsøkspersoner Avgrens problemstillingen din Bestem avhengige og uavhengige variabler Fastsett sosial validitet Lag ditt eget datainnsamlingssystem t Gjør en pilottest med dine hovedvariabler Finn fram til en egnet forskningsdesign Foreta en etisk sjekk Gjennomfør forskningsprosjektet Analyser og framstill dataene dine grafisk (Bailey and Burch, 2002) EA 9 To Hovedtyper av Design 1) Gruppedesign 2) N=1 design EA 10

6 Gruppedesign Ved en gruppedesign er en gruppe personer eller dyr gjenstand for manipulasjoner og resultatene sammenlignes med en kontrollgruppe EA 11 Type I og Type II feil Type I feil. Feilaktig tilbakevise en korrekt null hypotese. I et eksperiment innebærer dette vanligvis at en konkluderer med at det er en effekt når det i virkeligheten ikke er en effekt. Type II feil. Avviser ikke en falsk null hypotese. I et eksperiment innbærer dette at man konkluderer at det ikke er noen effekt når det virkelig er en effekt EA 12

7 Single-subjects designs Skinner studied the behavior of the individual organism. Part of the rationale for doing this is that groups do not behave individuals do. (O Donahue & Ferguson, 2001) EA 13 The average no goes to the circus to see the average dog jump through a hoop significantly oftener than untrained dogs raised under the same circumstances. (Skinner, 1956, p. 228) EA 14

8 Ulike typer N=1 design Kasusstudier. Ikke-eksperimentelle design B-design. d B-C design. Eksperimentelle design EA 15 Ulike typer av eksperimentelle N=1 design 1) ABAB design eller reverseringsdesign 2) Multiple baseline design 3) Multiple-treatment design 4) Changing criterion design EA 16

9 Kjennetegn ved vitenskapelig tekning Determinisme Objektivitet Styrt av data (Goodwin, 2005) EA 17 Determinisme 1 Tradisjonelle bruk av ordet determinisme innebærer helt enkelt at alle hendelser har årsaker. Noen snakker om sannsynlighet eller statistisk dt determinisme ii Determinisme er ofte kontrastert med fri vilje EA 18

10 Determinisme 2 Rudolph Carnap argued that free choice is meaningless unless true determinism is true, because choices should be made on some reasonable basis and there can be no such basis for choice unless the world is lawful l to a degree. (Goodwin, 2005, p. 10) EA 19 Determinisme 3 causal regularity it is not possible to make a free choice at all. A choice involves a delibrate preference for one course of action over another. How could a choice be made if the consequences of alternative courses of action could not be foreseen? (Carnap, 1966,,p p. 220) EA 20

11 Objektivitet En objektiv observasjon er helt enkelt en observasjon som kan verifiseres av mer enn en observatør På den måten kan en studie repliseres. Direkte og systematisk replikasjon (Sidman, 1960) EA 21 Styrt av data EA 22

12 Pseudoscience Generelt kan man si at pseudoscience er anvendt på et hvert område og som utgir seg for å bruke vitenskapelige metoder, men er faktisk basert på inadekvate, uvitenskapelige metoder og bruker resultater som generelt er falske. (Goodwin, 2005) EA 23 Science vs. pseudosience EA 24

13 Franz Josef Gall Frenologi er da forholdet mellom personlighet og hjernestruktur, hvor (a) Ulik personlighet og ulike intellektuelle attributter (faculties) ble assosiert med ulike deler av hjernen (se figuren) (b) større slike attributter resulterte i større hjerneområder, (c) skallmål ga estimater av den relative styrken av disse attributtene EA EA 26

14 EA EA 28

15 Hos frenologen EA 29 I dag kan man besøke et mangfold av websider å bestille såkalt underbevissthets kassetter som lover å hjelpe med improve memory, lose weight, stop smoking, become a better sexual partner, improve self-esteem, become rich hin the stock market, or even become a more proficient hunter of deer ( com) EA 30

16 Målene ved forskning innen psykologi kl Beskrive atferd Identifisere mønstre av hendelser, inklusive både stimuli og miljømessige hendelser og responser. Predikere atferd Det at atferd følger lover innebærer at gjentatte og predikerbare forhold eksisterer mellom variabler. Forklare atferd Det å forklare atferd innebærer bl.a. å vite noe om hva var årsaken til at den forekom. Kontrollere atferd Kontroll refererer helt enkelt til ulike måter å anvende disse atferdsprinsippene. (Goodwin, 2005) EA 31 Skinner en av de mest framtredende d i forrige århundre EA 32

17 Ekstinksjonskurve My first extinction curve showed by accident. A rat was pressing the lever in an experiment on satiation when the pellet dispenser jammed. I was not there at the time, and when returned I found a beatiful curve. The rat had gone on pressing although no pellets were received The change was more orderly than extinction of a salivary reflex in Pavlov s setting, and I was terribly exited. It was a Friday afternoon and there and there was no one in the laboratory who I could tell. All the weekend I crossed streets with particular care and avoided all unecessary risks to protect my discovery from loss through accidental death. (Skinner, 1979, p. 95) EA 33 A case history in scientific method (Skinner,1956)... when you run into something interesting, drop everything else and study it (p. 363);... some ways of doing research are easier than others (p. 364);... some people p are lucky (pp );... apparatus sometimes breaks down (p. 367);... serendipity the art of finding one thing while looking for something else (p. 369) EA 34

18 Basic vs. applied Basic research Aktivitet hvor en beskriver,,predikerer og forklarer grunnleggende prinsipper om atferd. Applied research Aktivitet som har direkte og umiddelbar relevans for løsninger i virkelige problemer EA 35 Ulike typer av data Kvantitativ forskning Kvalitativ forskning EA 36

19 Kjennetegn ved en sterk vitenskapelig teori Kunne forklare allerede eksisterende fenomener ( inclusiveness ) Kunne rettlede forskning ( fruitfulness ) Kunne gi et samlet bidrag for diverse fenomener ( generality ) (Schlinger, 1995) EA 37 Falsifisering og Kloke Hans EA 38

20 Reliabilitet og validitet Reliabilitet Pålitelighet Validitet En måling av atferd er reliabel dersom resultatene er repeterbare når målingene gjentas Gyldighet Valid dersom det måler hva det er designet for å måle EA 39 Eks. med reaksjonstidsdata EA 40

21 Reaction time data.16 s.15 s.19 s.17 s.19 s.11 s.21 s.19 s.08 s.33 s.23 s.26 s.21 s.22 s.24 s EA 41 Reliabilitet Test-retest reliabilitet Interitem reliabilitet Split-half procedure Interrater reliabilitet Frequency ratio Point-by-point agreement ratio Pearson product-moment correlation EA 42

22 To hovedkategorier av validitet t Validitet av et måleinstrument Spesielt i forhold til tester innen det som betegnes som testpsykologi, psykometriske tester, men også for eksempel i forhold til et spørreskjema. Validitet t av en prosedyre i en studie Aktuell innen for atferdsanalyse EA 43 Ulike typer validitet ved et måleinstrument: Face validity Innholdsvaliditet Kriterievaliditet Nåværende Prediktiv Teoretisk validitet, begrepsvaliditet og konstrukt validitet EA 44

23 Validitet ved en prosedyre Indre (intern) og ytre (ekstern) validitet er to forhold som må tas i betraktning når man skal klvurdere årsak-virkning. ik i Et funn er indre valid dersom den uavhengige variabel faktisk er årsaken til forandringer i den avhengige variabel. Et funn er ytre valid dersom funnet kan generaliseres til andre typer av atferd, situasjoner eller behandlinger. Populasjonsvaliditet Økologisk validitet EA 45 om hvorvidt den kliniske eller anvendte behandlingseffekten er viktig. Dette må vurderes i forhold til minst tre nivåer: 1) En må spørre seg om hvorvidt målresponsen(e) som har vært fokus i behandlingstiltaket virkelig er de viktigste for klienten og samfunnet. 2) En må være opptatt av at klienten aksepterer prosedyrene som anvendes, særlig dersom alternative prosedyrer kan gi de samme resultatene. 3) En må sikre seg at konsumentene (klientene og/eller deres nærpersoner) er fornøyd med resultatene. (Wolf, 1978) EA 46

24 Noen forhold som kan true den interne validiteten: Historie Modning Reaktivitet Svikt i måleinstrumentet ( Instrumentation decay ) Statistisk regresjon EA 47 Statistisk regresjon Eksempel med baseball: En spiller har kastet flere hundre kast og han kaster i gjennomsnitt 90 meter. Så kaster han 115 meter. Hvor mange meter vil det neste kastet hans bli på: a) 115 meter b) 128 meter c) 100 meter EA 48

25 Målingsskalaer Nominelle skalaer Klassifisering av hendelser i en eller annen gruppe Ordinale skalaer Intervall skalaer Ratio skalaer EA 49 Problemer med skalaen? EA 50

26 Målingsskalaer Nominelle skalaer Klassifisering av hendelser i en eller annen gruppe Ordinale skalaer I hovedsak et sett av rangeringer Intervall skalaer Ratio skalaer EA 51 Målingsskalaer Nominelle skalaer Klassifisering av hendelser i en eller annen gruppe Ordinale skalaer I hovedsak et sett av rangeringer Intervall skalaer Intervall skalaer har en rangering hvor det er et likt intervall mellom de hendelsene som rangeres. Rti Ratio skalaer kl EA 52

27 Målingsskalaer Nominelle skalaer Klassifisering av hendelser i en eller annen gruppe. Ordinale skalaer I hovedsak et sett av rangeringer. Intervall skalaer Intervall skalaer har en rangering hvor det er et likt intervall mellom de hendelsene som rangeres. Ratio skalaer Ratio skalaer har med seg rangeringen og like intervaller, men har i tillegg et absolutt nullpunkt EA 53 Statistiske analyser Deskriptiv statistikk Målinger i forhold til sentral tendens, variabilitet, etc. mean, median, mode Slutningsstatistikk EA 54

28 EA 55 Gjennomsnitt mean = gjennomsnittet 3 = sum av de enkelte skårene n = antall scorer i utvalget EA 56

29 Median Det er den scoren som er akkurat midt i ett sett scorer. Median location = (n +1)/ EA 57 Mode Det er den skåren som opptrer hyppigst i ett sett med skårer EA 58

30 EA 59 Definisjoner Målatferd er den atferd som gjøres til gjenstand for tiltak eller registrering g Målbetingelse er den betingelse det er et mål at atferden skal forekomme under kontroll av EA 60

31 Tre forhold ved definisjon av målatferd Objektivitet Definisjonen av responsen skal referere til observerbare former for atferd i klart spesifiserte situasjoner. Klarhet eller nøyaktighet Beskrivelse av responsen kan leses og bli nøyaktig gjengitt av en trent terapeut eller observatør. Fullstendighet Alle tilfeller av atferden skal være skilt fra alle ikkeforekomster EA 61 Dimensjoner ved atferd Frekvens eller antall Rate = antall/tidsenhet Varighet Intensitet Latens eller reaksjonstid EA 62

32 Registreringsteknikker 1) Automatisk 2) Ved sluttprodukter 3) Ved direkte observasjon a) Hendelsesregistrering b) Frekvensregistrering c) Varighetsregistrering d) Intervallregistrering i. Kontinuerlig observasjon med intervall registrering it i ii. Tidsutvelgelse ( momentary time sampling ) EA 63 Uavhengig og avhengig variabel Uavhengig variabel Avhengig variabel Det som blir endret i et eksperiment Det som blir målt i et eksperiment X-variabel Y-variabel Vanligvis kalt årsak I atferdsanalytiske eksperimenter er dette miljømessige forandringer Vanligvis kalt effekt Atferden til organismen EA 64

33 Baseline Det er den fasen av et eksperiment eller en intervensjon hvor atferden blir registrert i fravær av de eksperimentelle manipuleringene eller behandlingen EA 65 Et minimum ved atferdsanalytiske behandlingsprogrammer En baselinefase En behandlingsfase En oppfølgingsfase EA 66

34 For å demonstrere generaliteten ved eksperimentelle funn brukes: Direkte replikasjon Systematisk replikasjon (Sidman, 1960) EA 67 Interobserver agreement: EA 68

35 Hvordan en grafisk framstilling skal se ut (#1): EA 69 Hvordan en grafisk framstilling skal se ut (#2): EA 70

36 Hvordan en grafisk framstilling skal se ut (#3): EA 71 Hvordan en grafisk framstilling skal se ut (#4): EA 72

37 Hvordan en grafisk framstilling skal se ut (#5): EA 73 To Hovedtyper av Design 1) Gruppedesign 2) N=1 design EA 74

38 Gruppedesign Ved en gruppedesign er en gruppe personer eller dyr gjenstand for manipulasjoner og resultatene sammenlignes med en kontrollgruppe EA 75 Single-subjects designs Skinner studied the behavior of the individual organism. Part of the rationale for doing this is that groups do not behave individuals do. (O Donahue & Ferguson, 2001) EA 76

39 Ulike typer N=1 design Kasusstudier. Ikke-eksperimentelle eksperimentelle design: B-design. B-C design. Eksperimentelle design EA 77 Logikk i forhold til baseline Tre elementer: Prediksjon Verifisering Replikasjon Steady state strategien innebærer å utsette forsøkspersonen for et gitt betingelse samtidig som en fjerner eller kontrollerer for fremmed eller irrelevant påvirkning. i Dette gjøres før en betingelse i t d introduseres. Cooper et al. (2007)

40 Prediksjon EA 79 Affirmation of the consequent EA 80

41 Verifisering EA 81 Replikasjon EA 82

42 Ulike typer av eksperimentelle N=1 design 1) ABAB design 2) Multiple baseline design 3) Multiple-treatment design 4) Changing criterion design EA 83 Oversikt over ulike design

43 Ulike reverseringsdesign ABAB ABA BAB ABABAB Reverseringsdesign med en baselineprobe Multiple treatment reverseringsdesign EA 85 En ABAB design Inneholder A-fase (baseline) og B-fase (intervensjon/behandling/tiltak) Innebærer et minimum på en reversering Ved gjeninnføring i av baselinelignende betingelser skal frekvensen av atferd vende tilbake til samme nivå som under første baselinebetingelse og på tilsvarende måte for gjeninnføring i av tiltak sammenlignet med første gang tiltaket var virksomt ik EA 86

44 Hypotetisk ABAB design EA 87 Begrensninger ved reverseringsdesign i Manglende stabilitet Repliserbarhet av prosedyren og effekten Effekter av sekvens Det å produsere reverseringseffekter Etiske forhold EA 88

45 Over responser Over situasjoner Over personer Multiple baseline design EA EA 90

46 Multiple probe design En undergruppe av multiple baseline design Den ble beskrevet først av Horner og Baer (1978) En av hovedfordelene ved denne designen er at den kan hindre reaktivitet EA 91 Momenter som må bli tatt i betraktning vedrørende multiple baseline design Dersom to eller flere av responsene idesignen samvarierer, så vil ikke denne designen kunne demonstrere tilstrekkelig eksperimentell kontroll. Ettersom verifiseringen må sluttes ut fra mangel på forandring i de andre responsene, så er multiple baseline design en svakere design enn reverseringsdesign mht. å vise eksperimentell kontroll mellom uavhengig g variabel og en gitt atferd. Denne designen er en tidkrevende design EA (Cooper et al., 1987) 92

47 Multiple-treatment design multi-element design (Ulman & Sulzer-Azaroff, 1975) alternating-treatment treatment design simultaneous-treatment design (Barlow & Hayes, 1979) (Browning, 1967) concurrent schedule design (Hersen & Barlow, 1976) multiple-schedule design (Redd, 1969) EA 93 Multiple-treatment design Denne designen blir brukt for å sammenligne hvor effektive ulike intervensjoner eller betingelser som iverksettes i forhold til en målperson eller gruppe av målpersoner er. I designen blir effekten av de ulike intervensjonene vist ved å presentere hver av dem i enkeltvise intervensjonsfaser etter baseline. Måten disse forskjellige intervensjonene blir iverksatt på i løpet av intervensjonsfasen er grunnlaget for å skille mellom ulike multiple- treatment designs EA 94

48 Multi-element design brukt i eksperimentelle funksjonelle analyser Alene betingelse Presentasjon av oppmerksomhet Kontrollbetingelse (nonkontingent forsterkning) Flukt betingelse EA 95 Kontrollforhold ved funksjonelle analyser Kontrollforhold % av tilfellene Positiv forsterkning rk 26,3 Negativ forsterkning 38,1 Automatisk forsterkning 25,7 Multippel kontroll 5,3 Syklisk eller uforutsigbar 4, EA 96

49 Alternating treatment design kjennetegnet ved en rask alternering mellom to eller maksimum tre forskjellige behandlinger, dvs. uavhengige variabler. alternering skjer uavhengig av nivået på atferd en bestemt stimulus er korrelert med hver behandling EA 97 Varianter av ATD ATD uten en innledende baselinefase ATD med en innledende baselinefase ATD med en innledende baselinefase og en etterfølgende fase hvor den beste behandlingen blir brukt EA 98

50 EA 99 Tabell som viser oversikt over administreringen av to intervensjoner ( I1 og I2) balansert i forhold til to tidsperioder (T1 og T2) Rekkefølgen blir alternert annenhver dag i intervensjonsfasen Tidsperioder n T1 T2 I1 I2 I2 I1 I1 I2 I2 I1 I1 I2 I2 I1 Rekkefølgen blir tilfeldig alternert i intervensjonsfasen Tidsperioder n T1 T2 I1 I2 I2 I1 I2 I EA 100 I1 I2 I2 I1 I1 I2

51 Fordeler ved bruk av multiple-treatment design : 1) Sammenlignet med ulike typer reversingsdesign er ingen reversering påkrevet. 2) Designen krever ikke at behandling/intervensjoner blir holdt tilbake, slik det er tilfellet i multiple baseline design hvor behandlingen/intervensjonen blir iverksatt i forhold til en atferd/person/situasjon ad gangen. 3) Baseline variasjoner er også mer akseptabelt både i forhold igangsetting og evaluering av behandlingseffektene. 4) Designen er egnet for å sammenligne ulike typer av behandling/intervensjoner innen en EA 101 person over relativt kort periode. Problemer ved bruk av multiple-treatment design : 1) Designen krever at det er raske forandringer av målatferd som en følge av intervensjonen. 2) Forekomst av målatferden kan være avgjørende for valg av denne designen. 3) Ettersom intervensjonene er iverksatt nært i tid, så er det viktig at intervensjonene er mulig å diskriminere mellom for målpersonen. 4) Varigheten av designen vil øke som en funksjon av antall intervensjoner og stimulus betingelser som blir anvendt. 5) Det at de ulike typene av behandling/intervensjoner som anvendes i designen kan interferere EA 102

52 Changing criterion design Første t gang beskrevet i litteraturen t av Hartmann og Hall (1976). Noen ganger er også Weiss og Hall (1971) trukket fram som de første. Denne designen har visse likheter med alternating treatment design. Det skiller fra ATD ved at den framfor å alternere mellom ulike intervensjoner, så forandrer den en enkel klit intervensjon på en systematisk tikmåte. Eksperimentell kontroll ved designen er vist dersom skrittvise forandringer i den avhengige variabelen samsvarer med skrittvise forandringer i intervensjonen EA 103 CCD forts. Hver fase i designen vil fungere som baseline for neste fase. Når det kan vises innen designen at nivået ved responderingen ikke forandrer seg uten at kriterium i forandres og ikke avhengig av lengden på fasene kan vi si at eksperimentell kontroll er tilstede. Cooper et al., EA 104

53 Hartmann og Hall (1976) EA 105 Hartmann og Hall (1976) EA 106

54 Spesielle ting å merke seg ved bruk av CCD Primært brukes denne designen når atferden er endimensjonal og hvor intervensjonen involverer forandringer av noen kontingenser langs en dimensjon. Designen kan brukes bare dersom målresponsene er i repertoaret til målpersonen. Pass på at antall muligheter ikke samsvarer med kriterium for forsterkning. Designen er best egnet i forhold til kontingent forsterkning og eller straffeprosedyrer som er anvendt i forhold til en spesifisert rate, frekvens, eller utførelse. Trender i data er uheldig og det må være stabilitet innen hver fase. (Cooper et al., 1987) EA 107 Retningslinjer for å vurdere effekten av den uavhengige variabel (behandlingen) har hatt på den avhengige variabel: Antall ganger resultatet er replisert. Overlapp av datapunkter fra baseline og behandling. På hvilket tidspunkt effekten er observert etter at behandlingen er iverksatt. Størrelsen av effekten det er i forhold til baseline. Jo mer presist behandlingsprosedyrene er spesifisert. Jo mer reliable responsmålingene er. Jo mer konsistente dataene er med eksisterende data og akseptert atferdsteori EA 108

55 Innvendinger mot tn=1 1design Den vanligste innvendingen mot N=1 design er manglende oppnåelse av ytre (ekstern) validitet EA 109 Viktige momenter ved analyser: Prediksjon Verifisering Replikasjon EA 110

56 Systematisk relasjoner er demonstrert når: 1) atferd forandres mer over eksperimentelle bti betingelser enn innen betingelsene bti 2) disse forandringene kan repeteres innen en enkelt forsøksperson eller hos en ny forsøksperson EA 111