Lecture 10: reliability and validity
part 1
Betrouwbaarheid
WAT IS BETROUWBAARHEID?
Als je kijkt naar onderstaand voorbeeld van een vragenlijst die de belangrijkheid van gezondheid
meet m.b.v. verschillende items, zie je dat mensen niet helemaal consistent antwoorden. Het
meetinstrument is dus niet super betrouwbaar.
Te zien in onderstaande grafiek van bloeddruk is dat de bloeddruk fluctueert over de dagen. De
daadwerkelijke bloeddruk zou constant moeten zijn en is dus de rechte lijn. Echter, door meetfouten,
het anders plaatsen van de band etc. kan het zijn dat de waardes verschillen over de dagen. Volgens
de Classical Test Theory geldt daarom het volgende:
Observed score = true score + measurement error
Als je zou middelen voor alle meetfouten zou dit nul moeten zijn, dit omdat de meetfouten random
zijn. Het gemiddelde van alle observaties van bloeddruk is eigenlijk de ware bloeddruk score.
Echter, omdat je geen meetfouten hebt zijn de verschillen tussen de patiënten in hun ware score zijn
ook de verschillen tussen de geobserveerde bloeddruk waarde.
, Echter, als er wel meetfouten worden gemaakt dan moet je rekening houden met werkelijke
varianties tussen mensen omdat het verschillende mensen zijn maar ook met de varianties ten
gevolge van meetfouten. DUS niet alleen de ware scores zorgen voor verschillen in geobserveerde
waardes, ook meetfout verschillen zorgen hiervoor.
Hoe is betrouwbaarheid nu uit te drukken in een getal?
Als een instrument perfect betrouwbaar is dan betekent dit dat er geen meetfouten worden
gemaakt. Dit is dus het geval als:
BETROUWBAARHEID UITDRUKKEN IN GETALLEN
- Betrouwbaarheid (Pyy) is ook uit te drukken in een getal. Bij perfect betrouwbare metingen
komt uit onderstaande formule 1. Als het instrument volledig onbetrouwbaar is dan wordt
dit getal 0.
- Er is ook nog een ander concept en dat is de standard error of measurement (SEM). Als je de
betrouwbaarheid formule herschrijft dan zie je dat SEM te maken heeft met de variantie van
de geobserveerde scores(σ2y) en de onbetrouwbaarheid (1-Pyy). y) en de onbetrouwbaarheid (1-Pyy).
part 1
Betrouwbaarheid
WAT IS BETROUWBAARHEID?
Als je kijkt naar onderstaand voorbeeld van een vragenlijst die de belangrijkheid van gezondheid
meet m.b.v. verschillende items, zie je dat mensen niet helemaal consistent antwoorden. Het
meetinstrument is dus niet super betrouwbaar.
Te zien in onderstaande grafiek van bloeddruk is dat de bloeddruk fluctueert over de dagen. De
daadwerkelijke bloeddruk zou constant moeten zijn en is dus de rechte lijn. Echter, door meetfouten,
het anders plaatsen van de band etc. kan het zijn dat de waardes verschillen over de dagen. Volgens
de Classical Test Theory geldt daarom het volgende:
Observed score = true score + measurement error
Als je zou middelen voor alle meetfouten zou dit nul moeten zijn, dit omdat de meetfouten random
zijn. Het gemiddelde van alle observaties van bloeddruk is eigenlijk de ware bloeddruk score.
Echter, omdat je geen meetfouten hebt zijn de verschillen tussen de patiënten in hun ware score zijn
ook de verschillen tussen de geobserveerde bloeddruk waarde.
, Echter, als er wel meetfouten worden gemaakt dan moet je rekening houden met werkelijke
varianties tussen mensen omdat het verschillende mensen zijn maar ook met de varianties ten
gevolge van meetfouten. DUS niet alleen de ware scores zorgen voor verschillen in geobserveerde
waardes, ook meetfout verschillen zorgen hiervoor.
Hoe is betrouwbaarheid nu uit te drukken in een getal?
Als een instrument perfect betrouwbaar is dan betekent dit dat er geen meetfouten worden
gemaakt. Dit is dus het geval als:
BETROUWBAARHEID UITDRUKKEN IN GETALLEN
- Betrouwbaarheid (Pyy) is ook uit te drukken in een getal. Bij perfect betrouwbare metingen
komt uit onderstaande formule 1. Als het instrument volledig onbetrouwbaar is dan wordt
dit getal 0.
- Er is ook nog een ander concept en dat is de standard error of measurement (SEM). Als je de
betrouwbaarheid formule herschrijft dan zie je dat SEM te maken heeft met de variantie van
de geobserveerde scores(σ2y) en de onbetrouwbaarheid (1-Pyy). y) en de onbetrouwbaarheid (1-Pyy).
