Summary Psychometrics, ISBN: 9781506389875 Test Theory
Measurement Theory and Assessment Book Notes
Measurement Theory and Assessment 2 // Meten en Diagnostiek 2 (Vrije Universiteit) Course Notes - Year 2, Period 2
All for this textbook (3)
Written for
Erasmus Universiteit Rotterdam (EUR)
Pedagogische Wetenschappen
3.5 Psychometrie: Een Introductie (FSWP2052A)
All documents for this subject (14)
Seller
Follow
anoukopschoor99
Reviews received
Content preview
Psychometrie – H5 & H6
Hoofdstuk 5
Classical Test Theory (CTT) = als je naar geobserveerde scores van mensen op een meetinstrument
kijkt dan is deze score niet helemaal gelijk aan de daadwerkelijke score.
Iedere score op een testinstrument bestaat uit 2 dingen: een deel van de echte score van wat we
willen weten en een deel ruis (meetfout).
We gaan er vanuit dat de echte score ook stabiel, constant en onveranderd blijft over de tijd.
Geobserveerde score X0 = True score XT (echte score op onderliggende onzichtbare construct) en
Error XE (ruis, fluctuatie, foutjes)
Formule:
→ Dit wordt gemeten door het meetinstrument.
Voorbeeld: je krijgt een cijfer die bepaald is door hoe goed je hebt geleerd en
omdat je ziek was.
Geobserveerde score 6 = true score 7 en error score -1 → (met een aantal van
deze scores kun je het gemiddelde en de variantie van Xo, Xt en Xe berekenen).
Volgens de CTT is het gemiddelde van Xo gelijk aan het gemiddelde van Xt in de populatie omdat
volgens de CTT het gemiddelde van Xe 0 is en daardoor zijn het gemiddelde van Xo en Xt gelijk → dit
komt doordat geluk (positieve Xe) en pech (negatieve Xe) tegen elkaar wegvallen met gevolg van
gemiddelde Xe 0.
Kijken naar de betrouwbaarheid en validiteit van een testinstrument
➢ Betrouwbaarheid: als ik iets meerdere keren ga meten, meet ik dan steeds hetzelfde.
X0 = XT + XE.
➢ Validiteit: als je meerdere keren aan het meten bent, meet je dan wat je wilt meten en echt
wilt weten. De True score dus XT. Voorbeeld: scheve weegschaal geeft onjuiste waarde.
Betrouwbaarheid
Voorbeeld: ik geef iemand met geen goede korte termijn geheugen dezelfde vragenlijst, krijg ik
steeds dezelfde scores? NEE → dit komt door de Error.
• De geobserveerde score is steeds anders doordat de Error verandert per testmoment.
- De True score blijft ieder testmoment hetzelfde/constant (het is een vaststaand feit).
- De Error varieert.
Perfecte testinstrument = meet alleen het construct waarin je geïnteresseerd bent.
Hier is geen enkele ruis, foutloos en hierdoor zal de Geobserveerde score (X0) gelijk staan aan de
True score (XT). Perfect meten is iedere keer dezelfde score meten.
→ Toevallige dingen zijn niet aan de orde aangezien er geen meetfout is.
Betrouwbaarheid → Krijg ik iedere keer hetzelfde getal terug, is de Error klein?
Hoe constanter het getal dat je meet, de geobserveerde score (X0) blijft en hierdoor is de Error (XE)
kleiner en daardoor meet je betrouwbaarder.
Je kijkt bij betrouwbaarheid hoe klein die Error is. De Error moet zo min mogelijk zijn.
Validiteit → Is de True Score (XT), die je ruis-loos meet, de score die je echt wil weten?
1
,Betrouwbaarheid = als je een testinstrument 2 of meerdere keren afneemt bij dezelfde persoon,
onder dezelfde omstandigheden, hoe vergelijkbaar zijn deze verschillende scores bij deze meerdere
afnames.
Problemen betrouwbaarheid
➢ De omstandigheden waarin de test wordt afgenomen moeten onveranderd /
gestandaardiseerd zijn.
Gestandaardiseerde omstandigheden: stabiele kenmerken van de testomgeving en
testprocedure.
Wat zijn vergelijkbare omstandigheden? → Het is moeilijk om dit te bepalen.
In de praktijk heb je te maken met: psychologische omstandigheden, geheugen en motivatie
die een rol spelen.
Betrouwbaarheid = hoe constant zijn de geobserveerde scores. De echte score (XT) blijft
onveranderd dus de verschillen in de scores wordt bepaald door de Error XE (toeval of niet).
Classieke Test Theorie
Gebruik maken van CTT om te kijken hoe de betrouwbaarheid werkt voor een testinstrument.
De maten van betrouwbaarheid van deze CTT moet de geobserveerde score kunnen verdelen onder:
de True score en de Errorscore.
Wat gebeurt er → onderverdeling systematische variantie en niet-systematische variantie.
Testscore = systematische invloeden (true score) + toevallige invloeden (error). Formule:
◼ Systematisch is niet hetzelfde als True.
Er kunnen vertekeningen in het meetinstrument zitten die er steeds in blijven zijn. De
vertekeningen worden systematisch. Dit is een aanname.
Voorbeeld: 2 Russische vragen komen beide keren in de toets voor dus wel systematisch
maar niet true score omdat het een meetfout is.
Theorie: betrouwbaarheid > hoe nauwkeurig meten we de True score (en komt die overeen met
geobserveerde score)
Praktijk: betrouwbaarheid > hoeveel toevallige verstoringen zijn er (die de geobserveerde score
vertekenen).
Hoe kun je de geobserveerde score opdelen in True score en Error?
(dit kan niet bij één vraags-instrument daarom altijd een vragenlijst met meerdere vragen)
Meerdere metingen afnemen om te bepalen wat systematisch is en wat niet systematisch is
(dus ruis) om True score en Error te bepalen.
➢ Het gemiddelde berekenen = hierbij blijft de True-score hetzelfde en verandert de Error.
- Het gemiddelde van de geobserveerde score is dus het constante deel van de score (True
score).
- Het verschil met de geobserveerde score en het gemiddelde van de geobserveerde score
is dus het Error deel.
De Error + of - moet tegen elkaar wegvallen (omdat je deze meeneemt in het gemiddelde).
De betekenis van deze Error hangt af van de context.
2
, Bij de CTT gaan we ervanuit dat:
- De echte score (True score) is gelijk aan de gemiddelde scores (geobserveerd en true score)
- Van al die toevallige fluctuaties (Error) valt tegen elkaar weg (hiermee kom je op 0 uit)
Je gaat ervanuit dat de gemiddelde fout (Error) is 0 is.
Als je 2 van de 3 onderdelen weet kan je de rest dus berekenen.
Betrouwbaarheid = als ik meerdere keren een toets afneem, hoe erg hetzelfde
is het dan steeds. Meten we heel vaak hetzelfde?
Van de totale variantie van de scores op de vragenlijst wil je met betrouwbaarheid dat deze
verschillen voornamelijk komen door verschillen in het onderliggende construct.
➔ Echte verschillen i.p.v. verschillen die komen door de ruis
Hoe kun je hieruit de totale variantie halen en a.d.h.v. daarvan bepalen welk deel hiervan echte
variantie is en welk deel error variantie is?
De CTT gaat ervan uit dat de echte waarde consistent en onveranderbaar is, geen true score
variantie. Daarom geldt deze vraag NIET voor een individu omdat er geen variantie van een echte
score bestaat. Wel voor populatie
- Geobserveerde variantie = Errorvariantie
Als je naar een geobserveerde score van een persoon kijkt is alle variantie
van de geobserveerde score = Errorvariantie. Omdat True score stabiel is.
- Met 1 persoon kun je nog niks zeggen over betrouwbaarheid (= welk deel
van de totale variantie gelijk is aan de true score variantie)
Hoe kun je op basis van de vragenlijst iets zeggen over de betrouwbaarheid?
➢ De vragenlijst afnemen bij meerdere mensen.
De True score blijft onveranderbaar per persoon, als die de vragenlijst meerdere keren
maakt, en hierdoor is er tussen mensen wel verschil in True score.
Echte score variantie = is er niet per individu volgens de CTT maar wel bij meerdere mensen.
Alle verschillen komen door de Error bij het individu.
3
The benefits of buying summaries with Stuvia:
Guaranteed quality through customer reviews
Stuvia customers have reviewed more than 700,000 summaries. This how you know that you are buying the best documents.
Quick and easy check-out
You can quickly pay through credit card or Stuvia-credit for the summaries. There is no membership needed.
Focus on what matters
Your fellow students write the study notes themselves, which is why the documents are always reliable and up-to-date. This ensures you quickly get to the core!
Frequently asked questions
What do I get when I buy this document?
You get a PDF, available immediately after your purchase. The purchased document is accessible anytime, anywhere and indefinitely through your profile.
Satisfaction guarantee: how does it work?
Our satisfaction guarantee ensures that you always find a study document that suits you well. You fill out a form, and our customer service team takes care of the rest.
Who am I buying these notes from?
Stuvia is a marketplace, so you are not buying this document from us, but from seller anoukopschoor99. Stuvia facilitates payment to the seller.
Will I be stuck with a subscription?
No, you only buy these notes for $3.23. You're not tied to anything after your purchase.