FINAL EXAM. Exam in: STA-3300 Applied Statistics 2 Date: Wednesday 28. November Time: 09:00 13:00 Place: Åsgårdvegen 9. All printed and written

Transkript

1 FAKULTET FOR NATURVITENSKAP OG TEKNOLOGI FINAL EXAM Exam in: STA-3300 Applied Statistics 2 Date: Wednesday 28. November Time: 09:00 13:00 Place: Åsgårdvegen 9 Approved aids: Calculator All printed and written The exam consists of 20 pages, front page included. Contact during the exam: Georg Elvebakk Phone:

2 IMPORTANT: All points a), b), c) etc. will count for 10% of the final grade. SPSS printouts are listed on pages 5 to 17. There is a norwegian translation (without tables) on pages 19 and 20. If nothing else is specified use 5% significance level on tests, and 95% confidence intervals. Problem 1 We will use data from a study about patients that have had a particular liver operation. We are interested in how long they live after the operation (Y ), and what independent variables that might contribute to predict this survival time. The following data have been recorded for 54 randomly chosen patients. Y Length of survival after operation. (In days, mean around 700.) lny The logarithm of Y. X 1 Index for blod clotting. X 2 A prognostic index. X 3 Enzyme function index. X 4 Liver function index. X 5 Age. X 6 Dummy variable for gender (0 = male, 1 = female). Dummy for high alcohol consumption (0 = not high, 1 = high). X 7 The total data set is given in the SPSS listings. We start by fitting an ordinary regression model for survival time Y with X 4 (liver function index) as the independent variable. We will use this model in points a), b) and c). Use the printouts to answer the questions (model 1 in SPSS). a) In what way is X 4 the best first choice of independent variable in a regression model for Y? Formulate the linear model with X 4 as the independent and Y as dependent variable. Find the fitted (estimated) model and interpret what the estimated parameters tells us in this study. In the next point you might use that S X4 = b) Compute S Y X and explain what information this measure gives you about the individual survival times. Find S ˆβ4 (the standard error of the slope of X 4, ˆβ 4 ). Do a test to check whether there is a linear relationship between Y and X 4. Let us say that we get a new patient with a liver function index (X 4 ) of 3.0. You would like to know what can be said about his prognosis from the fitted model with X 4 as independent variable. You can use that X 4 = and S X4 = c) What is the estimate of the survival time for the patient? Compute a 90% prediction interval for the patient. What kind of information does this interval give the patient? We will now try to make a better model by including some of the other independent variables. We are especially interested in the group of the remaining medical 2

3 variables, X1, X2 and X3. In the SPSS printouts two models (model 2 and 3) are fitted: Y = β 0 + β 1 X 1 + β 2 X 2 + β 3 X 3 + E Y = β 0 + β 1 X 1 + β 2 X 2 + β 3 X 3 + β 4 X 4 + E d) Explain what these correlations are and compute estimates of them: ρ Y,(X1,X 2,X 3) X 4 and ρ Y,(X1,X 2,X 3) X 4 Do a test to check whether adding the group of X 1, X 2 and X 3 (to a model that includes X 4 ) is contributing to the prediction of Y. We want to choose the best regression model from all the possible independent variables, and have computed some criteria for the most relevant models: Model R 2 MSE C p F p value A X B X 2, X C X 1, X 2, X D X 1, X 2, X 3, X E X 1, X 2, X 3, X F X 1, X 2, X 3, X G X 1, X 2, X 3, X 4, X H X 1, X 2, X 3, X 5, X I X 1, X 2, X 3, X 6, X J X 1, X 2, X 3, X 4, X 5, X 6, X e) Explain very briefly what R 2, MSE, C p and F p measures and how they can be used to choose a best model. Explain which model(s) you would have chosen. In the rest of this problem we will use the model with X 1, X 2, X 3 and X 7. f) Find the fitted model for Y (model 4 in SPSS). Test if X 7 is significantly contributing to the prediction of Y in this model. Explain what a residual is. Are there patterns in the resdidual plot for this model that indicates that some model assumption(s) is/are not OK? Because the data are counting data (number of days patients survive) it is often smart to use a transformation like the logarithm. We will therefore try the same model as above, but with lny as dependent variable instead of Y. The result is in the SPSS printouts (model 5). g) Use model diagnostics techniques to check for outliers, OK model assumptions and collinearity. From this and other information you got, what are your general conclusions about this model? 3

4 Problem 2 The data in this problem is from an experiment that investigates the factors that might influence how much a car dealer is willing to pay for your car. 18 men and 18 women tried to sell a particual used car to different dealers. They wanted to know if there were any gender difference in how much they were offered. The collected data were as follows (price is in 1000 dollars). Men, Y 1i Women Y 2i Y 1i is the amount man number i was offered, Y 2i the amount woman i was offered. We assume men and women are independent. See descriptions in SPSS printouts. a) Formulate a natural model for this experiment. Set up and perform a T-test to find out whether you can claim that men and women are offered different prices from the car dealers. If the test result was negative (no difference detected), how do you conclude regarding the true difference in the price offers men and women receive? But the researchers who deviced the experiment wanted to explore more factors that could influence prices. So the 18 men and 18 women were in fact drawn from three age groups (reffered to as young, middle aged and old ), with 6 in each group. Here is the restructured presentation of the results: Y ijk Young Middle aged Old Gender mean Men Cell mean: Women Cell mean: Age group mean Total mean: Y = The offered price is Y ijk where i = 1, 2 (gender, 1 is male), j = 1, 2, 3 (age group) and k = 1,..., 6. The total mean and the means of each cell, gender, and age group are given. The researchers will use a two-way ANOVA model to analyze the data. b) Do you think these two factors (gender and age) are fixed or random? Formulate a model for this experiment and explain what the elements in the model represent. What would interaction mean in this model. Use the cell means to make a plot that can reveal possible interaction. Conclusion? c) Test the effects of interaction, gender and age groups. Do you get the same result as you got in a)? Can you explain what has happened? Explain how all age groups can be compared by several confidence intervals. Compute the interval for the mean diffference between young and middle aged. How do you conclude from this and the other intervals (from SPSS)? 4

5 PROBLEM 1 5

6 6

7 Model 1: ANOVA b Model Sum of Squares df Mean Square F Sig. 1 Regression Residual Total a. Predictors: (Constant), X4 b. Dependent Variable: Y Coefficients a Standardized Unstandardized Coefficients Coefficients Model B Std. Error Beta t Sig. 1 (Constant) X a. Dependent Variable: Y 7

8 Model 2: ANOVA b Model Sum of Squares df Mean Square F Sig. 1 Regression a Residual Total a. Predictors: (Constant), X3, X2, X1 b. Dependent Variable: Y Coefficients a Standardized Unstandardized Coefficients Coefficients Model B Std. Error Beta t Sig. 1 (Constant) X X X a. Dependent Variable: Y 8

9 Model 3: ANOVA b Model Sum of Squares df Mean Square F Sig. 1 Regression a Residual Total a. Predictors: (Constant), X4, X2, X3, X1 b. Dependent Variable: Y Coefficients a Standardized Unstandardized Coefficients Coefficients Model B Std. Error Beta t Sig. 1 (Constant) X X X X a. Dependent Variable: Y 9

10 Model 4: Model Summary b Model R R Square Adjusted R Square Std. Error of the Estimate a a. Predictors: (Constant), X7, X2, X3, X1 b. Dependent Variable: Y ANOVA b Model Sum of Squares df Mean Square F Sig. 1 Regression a Residual Total a. Predictors: (Constant), X7, X2, X3, X1 b. Dependent Variable: Y Coefficients a Unstandardized Coefficients Standardized Coefficients Collinearity Statistics Model B Std. Error Beta t Sig. Tolerance VIF 1 (Constant) X X X X a. Dependent Variable: Y 10

11 11

12 Model 5: Model Summary b Model R R Square Adjusted R Square Std. Error of the Estimate a a. Predictors: (Constant), X7, X2, X3, X1 b. Dependent Variable: LnY ANOVA b Model Sum of Squares df Mean Square F Sig. 1 Regression a Residual Total a. Predictors: (Constant), X7, X2, X3, X1 b. Dependent Variable: LnY Coefficients a Unstandardized Coefficients Standardized Coefficients Collinearity Statistics Model B Std. Error Beta t Sig. Tolerance VIF 1 (Constant) X X X X a. Dependent Variable: LnY 12

13 Residuals Statistics a Minimum Maximum Mean Std. Deviation N Predicted Value Std. Predicted Value Standard Error of Predicted Value Adjusted Predicted Value Residual Std. Residual Stud. Residual Deleted Residual Stud. Deleted Residual Mahal. Distance Cook's Distance Centered Leverage Value a. Dependent Variable: LnY 13

14 14

15 15

16 PROBLEM 2 Group Statistics Gender N Mean Std. Deviation Std. Error Mean Price Men Women Tests of Between-Subjects Effects Dependent Variable:Price Type III Sum of Source Squares df Mean Square F Sig. Corrected Model a Intercept Gender Age Gender * Age Error Total Corrected Total a. R Squared =,830 (Adjusted R Squared =,802) 16

17 Multiple Comparisons Dependent Variable:Price Mean 95% Confidence Interval (I) Age (J) Age Difference (I- J) Std. Error Sig. Lower Bound Upper Bound Tukey HSD * * Bonferroni * * Based on observed means. *. The mean difference is significant at the 0,05 level. 17

18 Norwegian translation: Next two pages. 18

19 Oppgave 1 Vi skal bruke data fra en studie om pasienter som har gjennomgått en spesiell type leveroperatsjon. Vi er interest i hvor lenge de overlever etter operasjonen (Y ), og hvilke uavhengige variabler som kan bidra til å predikere denne overlevingstida. Følgende data blei registrert for 54 tilfedig valgte pasienter. Y Overlevingstid etter operasjonen. (Dager, gjennomsnitt omkring 700.) lny Logaritmen av Y. X 1 Indeks for blodpropp. X 2 Prognostisk index. X 3 Ensymfunksjonsindeks. X 4 Leverfunksjonsindeks. X 5 Alder. X 6 Dummyvariable for kjønn (0 = mann, 1 = kvinne). Dummy for høgt alkoholforbruk (0 = ikke h øgt, 1 = høgt). X 7 The fullstendige datasettet er er i SPSS-ustskriftene. Vi staret med å tilpasse en vanlig regersjonsmodell for overlevingstid Y med X 4 (leverfunksjonsindeks) som den uavhengige variabelen. Vi vil bruke denne modellen i delpunkta a), b) og c). Bruk utskriftene til å svare på spørsmåla (modell 1 i SPSS). a) På hvilken måte kan en si at X 4 er det beste første valget av en uavhengig variabel i en regresjonsmodell for Y? Formuler en lineær modell med X 4 som den uavhengige og Y som de avhengige variabelen. Finn den tilpassa (estimerte) modellen og gi en fortolking av de estimerte parametrene i denne studien. I dette punktet kan du f å bruk for at S X4 = b) Rekn ut S Y X og forklar hva dette målet sier om individuelle overlevingstider. Finn S ˆβ4 (standardfeilen til stigningstallet til X 4, ˆβ 4 ). Utfør en test om det er en lineær sammenheng mellom Y og X 4. La oss si at vi får inn en ny pasient med en leverfunksjonsindeks (X 4 ) på 3.0. Du vil gjerne vite hva som kan sies om vedkommendes diagnose fra modellen med X 4 som den uavhengige variabelen. Du kan bruke at X 4 = og S X4 = c) Hva blir estimert overlevingtid for pasienten? Rekn ut et 90%-prediksjonsintervall for pasienten. Hva slags informasjon gir dette pasienten? Vi skal nå prøve å lage en bedre modell ved å inkludere noen av de andre uavhengige variablene. Vi er spesielt interessert i gruppa av de gjenværende medisinske variablene, X1, X2 and X3. I SPSS-utskriftene er to modeller (modell 2 og 3) tilpassa: Y = β 0 + β 1 X 1 + β 2 X 2 + β 3 X 3 + E Y = β 0 + β 1 X 1 + β 2 X 2 + β 3 X 3 + β 4 X 4 + E d) Forklar hva disse korrelasjonene måler, og finn estimater av dem: ρ Y,(X1,X 2,X 3) X 4 og ρ Y,(X1,X 2,X 3) X 4 Utfør en test for om variablene X 1, X 2 and X 3 (som ei gruppe) bidrar til å predikere Y (i en modell som inneholder X 4 ). Vi vil gjerne velge den beste regresjonsmodellen fra alle tilgjenglige uavhengige variabler, og har rekna ut disse kriteriene for noen av de mest relevante modellene: 19

20 e) Forklar svært kort hva R 2, MSE, C p og F p måler og hvordan du kan bruke de til å velge en beste modell. Forklar hvilken modell du ville ha valgt. I resten av denne oppgaven vil vi bruke modellen med X 1, X 2, X 3 og X 7. f) Finn den tilpassa modellen for Y (modell 4 i SPSS). Test om X 7 bidrar signifikant til å predikere Y i denne modellen. Forklar hva et residual er. Er det mønster i residualplottet for denne modellen som indikerer at at en eller fleire av modellforutsetningene ikke er oppfylt?. Fordi dette er telledata (antall dager en pasient overlever) er det ofte lurt å bruke en transformasjon som logaritmen. Vi vil derfor prøve samme modell som over, men bruke lny som avhengig variabel i staden for Y. Resultater i SPSS-utskriftene (modell 5). g) Bruk teknikker for modelldiagnostikk for å sjekke om det finns uteliggere, om modellforutsetningene er oppfylt og om det finns kolinearitet. Fra dette og annen informasjon du har, hva er konklusjonen din om denne modellen? Oppgave 2 Dataene i dette problemet er fra et eksperiment som undersøker hvilke faktorer som kan påvirke hvor mye en bilforhandler er villig til å gi for bilen din. 18 menn og 18 kvinner prøvde å selge en spesiell brukt bil til ulike forhandlere. De ville gjerne vite om det vcar en kjønnsforskjell i hvor mye forhandleren vill tilby. Følgende blei som f,ølge (pris i 1000 dollar): Y 1i er beløpet mann nummer i ble tilbudt, Y 2i er beløpet kvinne nummer i blei tilbudt. Vi antar at menn og kvinner er uavhengige. Se SPSS for meir om dataene. a) Formuler en naturlig modell for dette eksperimentet. Sett opp og utfør en test for om du kan påstå at menn og kvinner tilbys ulike beløp av forhandlerene. Om resultatet av testen var negativ (ingen forskjell funnet), hvordam konkluderer du med hensyn til den sanne forskjellen mellom menn og kvinner. Men forskerne som satte opp eksperimentet ville gjrerne utforske fleire faktorer som kunne påvirke prisene, Derfor var de 18 mennene og 18 kvinnene faktrisk trukket fra tre aldresgrupper (kalt unge, middelaldrende og gamle ), men 6 i hver gruppe. Her er de restrukturerte resultatene: Så tilbudt pris er Y ijk hvor i = 1, 2 (kjønn, 1 er mann), j = 1, 2, 3 (aldersgruppe) og k = 1,..., 6. Det totale gjennomsnittet og gjennomsnitta for hver celle, hvert kjønn og hver aldersgruppe er oppgitt. Forskerne vil bruk en to-vegs ANOVA-modell til å analysere datene. b) Trur du de to faktorene (kjønn og alder) er fikserte eller tilfeldige? Formuler en modell for dette experimentet og forklar hva elementene i modellen representerer. Hva betyr samspill (interaksjon) i denne modellen? Bruk celle-gjennomsnitta til å lage et plott som kan avsløre om det er samspill. Konklusjon? c) Test effektene av samspill, kjønn og alder. Fikk du samm resultat som i a)? Kan du forklare hva som har skjedd? Forklar hvordan alle aldersgruppene kan bli sammenlikna ved fleire konfidensintervall. Rekn ut intervallet for forskjell mellom unge og middeladrende. Konklusjon fra dette og andre intervalal (fra SPSS)? 20