Several Aspects of Regression Analysis (13)

## 13. Several Aspects of Regression Analysis

This chapter focusses on topics that add to the understanding of regression analysis. This includes alternative specifications for these models, and what happens in the situations where basic regression assumptions are violated.

## 13.1. Developing models

The goal when developing a model is to approximate the complex reality as close as possible with a relatively simple model, which can then be used to provide insight into reality. It is impossible to represent all of the influences in the real situation in a model, instead only the most influential variables are selected.

Building a statistical model has 4 stages:

1. Model Specification: This step involves the selection of the variables (dependent and independent), the algebraic form of the model, and the required data. In order to this correctly it is important to understand the underlying theory and context for the model. This stage may require serious study and analysis. This step is crucial to the integrity of the model.
2. Coefficient Estimation: This step involves using the available data to estimate the coefficients and/or parameters in the model. The desired values are dependent on the objective of the model. Roughly there are two goals:
1. Predicting the mean of the dependent variable: In this case it is desirable to have a small standard error of the estimate, se. The correlations between independent variables need to be steady, and there needs to be a wide spread for these independent variables (as this means that the prediction variance is small).
2. Estimating one or more coefficients: In this case a number of problems arise, as there is always a trade-off between estimator bias and variance, within which a proper balance must be found. Including an independent variable that is highly correlated with other independent variables decreases bias but increases variance. Excluding the variable decreases variance, but increases bias. This is the case because both these correlations and the spread of the independent variables influence the standard deviation of the slope coefficients, sb.
3. Model Verification: This step involves checking whether the model is still accurate in its portrayal of reality. This is important because simplifications and assumptions are often made while constructing the model, this can lead to the model becoming (too) inaccurate). It is important to examine the regression assumptions, the model specification, and the selected data. If something is wrong here, we return to step

## Access options

The full content is only visible for JoHo members.

• or mail info@joho.org

## For Dutch visitors

Toegang tot pagina of document:

Word JoHo donateur of abonnee voor online toegang

• Om online toegang te krijgen kun je JoHo donateur worden
• Lees hieronder meer over JoHo donateur en abonnee worden

Je bent al donateur, maar je hebt geen toegang?

• Log in, of maak een account aan als je dat nog niet eerder hebt gedaan.
• Voeg je JoHo (member) nummer toe aan je account voor volledige toegang. Je kunt dit nummer vinden op JoHo.org/user of in de bevestigingsmail van je JoHo donateursinschrijving. Kom je er niet uit, neem dan even contact op!

Kom je er niet helemaal uit of heb je problemen met inloggen?

-----------------------------------------------

## JoHo donateur (WorldSupporter) worden

JoHo donateurschap (€5,- per jaar)

• Voor wie €10,- korting wil op zijn JoHo abonnement
• Voor wie JoHo WorldSupporter en Smokey projecten wil steunen
• Voor wie gebruik wil maken van alle gedeelde materialen op WorldSupporter
• Voor wie op zoek is naar de organisatie bij een vacature

## JoHo abonnementen

JoHo abonnement (€20,- per jaar)

• Voor wie online volledig gebruik wil maken van alle JoHo's en boeksamenvattingen voor alle fases van een studie, met toegang tot alle online HBO & WO boeksamenvattingen en andere studiehulp
• Voor wie gebruik wil maken van de gesponsorde boeksamenvattingen (en er met zijn pinpoints 10 gratis kan afhalen in een JoHo support center of bij een JoHo partner)
• Voor wie gebruik wil maken van de vacatureservice en bijbehorende keuzehulp & advieswijzers
• Voor wie gebruik wil maken van keuzehulp en advies bij werk in het buitenland, lange reizen, vrijwilligerswerk, stages en studie in het buitenland
• Voor wie extra kortingen wil op (reis)artikelen en services (online + in de JoHo support centers)
• Voor wie extra kortingen wil op de geprinte studiehulp (zoals tentamen tests en study notes) in de JoHo support centers

## Direct Donateur Worden

This question is for testing whether or not you are a human visitor and to prevent automated spam submissions.
Summaries & Study Note of Dara Yapp
Join World Supporter
Join World Supporter

## Why create an account?

• Once you are logged in, you can:
• Save pages to your favorites
• Give feedback or share contributions
• participate in discussions
• share your own contributions through the 11 WorldSupporter tools
Content