Enalyzer Norge Nice to know - ESS
Oversikt Generelle tanker omkring spørsmålsformulering Typiske utfordringer ved de forskjellige spørsmålstyper Typiske utfordringer i lanseringsdelen Husk at folk gjør feil felles løsning på unike problemer Generelle prinsipper bak analysedelen 2
Spørsmålsformulering
Spørsmålsformulering Lag et utkast til et skjema i enten Excel eller Word Tenk over struktur Gruppér spørsmål Minimér antallet av unike verdier Gå etter å bruke samme skala Får du svar på alt? 4
Begrensninger ved noen av spørsmålstypene Matrise 3D-matrise Numerisk matrise Tekstfelt Numerisk Fritekst 5
Matrise Man kan kun markere 1 svaralternativ for hvert underspørsmål i en matrise En begrensning da mange kunder ønsker å bruke matrisen til andre formål fordi oppsettet kan virke mer oversiktelig En matrise kan ikke krysses med andre spørsmål det er kun hvert enkelt underspørsmål som kan det 6
3D-matrise En 3D-matrise har en begrensning i form av oversiktelighet. Bør anvendes med forsiktighet Forklar respondenten tydelig hvordan man fyller ut spørsmålene Selve resultatet av en 3D-matrise vises som 2 separate matriser i analysen Den eneste fordel ved typen er derfor oversikteligheten i selve spørreskjemaet!! 7
Numerisk matrise En numerisk matrise er en mer komplisert spørsmålstype, og med store fordeler til sitt bruk Dels er det vanskelig å formulere spørsmålene så det passer til formatet, dels kan man ikke bruke resultatene i analysen, men kun eksportere data i rådataformat Det er meget viktig å sikre seg at du ikke er i tvil om begrensningene ved typen da man ikke kan anvende data i analysen uten å bearbeide de ytterligere 8
Tekstfelt Hver enkelt inntasting vurderes som unik og kan derfor som utgangspunkt IKKE sammenlignes i analysen MERK AT: Man kan likevel lage en BDV (Brukerdefinert variabel) på bakgrunn av et tekstfelt her vil alle resultater som er stavet identisk legges sammen. Dette gir fordeler i analysedelen og etterbehandling av data Det betyr at Enalyzer Norge og Enalyzer norge IKKE vil bli lagret som den samme kategorien. Man blir derfor nødt til å gå inn og gruppere evt. like svaralternativer i etterkant Hvis man har mange respondenter, kan denne delen av analysen potensielt bli relativt tidskrevende 9
Numerisk Inntastingene kan valideres etter et forutbestemt format Hver inntasting vurderes som unik og man kan derfor som utgangspunkt IKKE sammenligne verdiene i analysen Man har likevel også her mulighet for å lage en BDV på bakgrunn av et numerisk spørsmål her vil alle identiske resultater legges sammen Igjen kan det i etterkant være nødvendig å rense litt i svaralternativer ved å gruppere og utelukke flere av verdiene 10
Fritekst Et fritekstspørsmål kan kun hentes ut i Word Fritekstspørsmål kan ikke krysses 11
Utfordring ved lansering
Spørreskjemaet låser ved lansering Det er likevel enkelte ting du fortsatt kan foreta deg selv om du har lansert undersøkelsen: Du kan opprette nye spørsmål Du kan legge inn hopp Du kan legge inn betingelser Du kan endre i formuleringen av selve spørsmålet, men du kan ikke endre i svaralternativer og underspørsmål i f.eks. matriser Du kan ikke slette spørsmål, men du kan skjule dem 13
Valg av anonymitetsgrad Ingen anonymitet: Du kan se de enkelte besvarelser med tilhørende personopplysninger som fornavn, etternavn og e-mail Delvis anonym: Du kan se hvem som har svart og du kan se alle de svar som er avgitt men du kan ikke se forbindelsen mellom dem Fullt anonym: Du kan se hvor mange som har svart, men ikke hvem de er. Du kan også se svarene, men uten noen form for link til hvilke respondenter som har avgitt dem OBS! Man kan IKKE sende ut påminnelser i en fullt anonym undersøkelse! 14
Når du oppdager feil i lanseringen din Kan du Rette feil i kontaktgruppen du har lansert til Sende en invitasjon ut til en eksisterende respondent Legge til nye respondenter Endre status fra Ønsker ikke delta til Ikke svart 15
Alle gjør feil!
Og nesten alle feil kan rettes i analysen F.eks. Hvis det har manglet et svaralternativ i et spørsmål Hvis det er angitt team i en bakgrunnsvariabel, men en av respondentene hører ikke til (eller mangler) i det aktuelle team Hvis man har glemt et hopp slik at respondentene f.eks. har måttet oppgi at de tilhører en underavdeling, selv om de ikke gjør det. Hvis bakgrunnsvariablene ikke ble importert med kontaktgruppen 17
Lik løsning på unike problemer Den mest brukte måten til å håndtere feil er ved å lage en BDV (Brukerdefinert variabel) som erstatter den variabel som har feil forbundet med seg: Du må adgang til passordet til den enkelte respondent Alternativt må man gjenkjenne og velge ut respondentene på noen andre kriterier Det kan f.eks. være en spesifikk gruppe i en av bakgrunnsvariablene eller ved å vite hvilke besvarelser den enkelte har avgitt osv. 18
Analyse
Prinsippet bak - BDV I prinsippet er det en måte å legge til et ekstra spørsmål, og svare på det på vegne av respondentene For at være helt sikker på at du kan lage alle former for brukerdefinerte variabler, så kreves det at din undersøkelse kun er delvis eller ikke anonym, eller at du på annen vis har et unikt kjennetegn på respondentene 20
BDV et eksempel Et spørreskjema var satt opp slik at respondentene først skulle svare på hvilken avdeling de arbeidet i, og deretter angi hvilken underavdeling. Spørsmålet om underavdelingen skulle likevel kun vises til noen bestemte respondenter fra det første spørsmålet, da det ikke var alle avdelinger som hadde en underavdeling. Men den betingelsen var ikke blitt opprettet, så det ble ca. 10 respondenter som endte opp med å måtte angi en feil underavdeling. Da man kom til analysen ønsket man så å få slettet disse 10 respondenter fra det aktuelle spørsmålet. Da det ikke er mulig å slette respondentenes enkelte svar måtte man lage en brukerdefinert variabel som er identisk med det gale spørsmålet, og som kun inneholder de svar som er korrekte. Deretter kunne man så erstatte det gale spørsmål i analysen med den brukerdefinerte variabelen. 21
Prinsippet bak - Filter Et filter er en måte å sortere bort de besvarelser som man ikke ønsker å se med andre ord: beholde de som man er interessert i. Det finnes to forskjellige former for filtre: Det simple Det avanserte Eller -betingelser Mer enn 5 kriterier Benchmark (det vender vi tilbake til litt senere) 22
Filter - Simpelt Du kan maksimalt legge 5 forskjellige filtre på Fungerer på samme måte som en og -betingelse Du må derfor være oppmerksom på at du ikke setter to gjensidige, utelukkende filtre på Du kan også velge verdien åpen som vises ved dette symbolet: [?] Det gjør det mulig for deg å bruke visninger for å skifte mellom verdiene i det spørsmålet du har brukt som filter 23
Filter Avansert Eller Eller betingelser eller flere enn 5 verdier Du kan bygge opp et filter som samler flere forskjellige verdier i den samme variabelen Du kan også opprette og -betingelser i et avansert filter og dermed bruke avanserte filtre til å filtrere på flere betingelser av gangen enn de 5 som det er mulig ved bruk av et simpelt filter 24
Prinsippet bak sammenligning Det er to typer av rapporter i ESS en standard og en benchmark. Begge kan brukes til å sammenligne forskjellige enheter (som avdeling, land, leder, alder mm.) med hverandre, men med to vidt forskjellige resultater: Standard Benchmark Krysstabell Samme rapport for hver enhet 25
Sammenligning - Standard Krysstabell Du har bedt respondentene angi deres alder samt hvor mange timer ukentlig de er online på internettet. Du vil gjerne se om det er en sammenheng mellom disse spørsmål, så du lager en krysstabell der alder blir vist på den ene aksen og ukentlige timer online på den andre Krysstabeller kan også brukes gjennom en hel rapport. F.eks. kan du velge å krysse et spørsmål om hvilken avdeling arbeider du i med alle de resterende spørsmål i undersøkelsen. På den måten får du et enkelt overblikk over hvordan svarene fordeler seg på de enkelte avdelinger 26
Sammenligning - Standard Samme rapport for hver enhet Du kan også velge å lage den samme rapporten flere ganger, men for forskjellige enheter. Hvis det igjen dreier seg om flere forskjellige avdelinger i den samme virksomheten kan du bygge opp rapport din med de elementene du ønsker å få vist og så legge på et åpent filter (se ovenfor) og trekke rapporten ut for hver avdeling 27
Filter Avansert Benchmark: Du har laget en lederevaluering på 4 ledere som er blitt vurdert etter en 5-punkts skala og du vil gjerne se den samlede score for hver av de 4 ledere holdt opp mot hverandre Derfor skal du opprette et avansert filter for hver av lederne som du kaller for lederens navn og hvor du angir at ledernavn skal være lik med den aktuelle leder disse brukes så når du setter din benchmarkrapport opp 28
Sammenligning - Benchmark Som beskrevet ovenfor er benchmarkrapporter anvendbare når man har bedt respondentene vurdere forskjellige utsagn på en skala. Det behøver ikke nødvendigvis være på en tallskala, men en skala fra meget uenig til meget enig er like så anvendelig. ESS tildeler alle svaralternativer en verdi etter hvilken rekkefølge de står i. Det betyr at det første svaralternativet har verdien 1 og det neste verdien 2 osv. En skala på 5 punkter som går fra meget uenig til meget enig vil i systemet bli oversatt slik at meget uenig får verdien 1 og meget enig får verdien 5. Et benchmarktall kommer derfor til å ligge mellom 1 og 5 og utgjør den gjennomsnittlige verdien av alle de respondenter som har besvart spørsmålet 29
Enalyzer Norge AS Prof. Dahls gate 19 0353 Oslo T: +47 2369 1100 E: info@enalyzer.no W: www.enalyzer.no Enalyzer A/S Havnegade 39 1058 København K T: +45 7010 7006 E: info@enalyzer.dk W: www.enalyzer.dk Enalyzer Sverige AB Vasagatan 11, 1TR 11120 Stockholm T: +46 08-692 65 33 E: info@enalyzer.se W: www.enalyzer.se