PB werkcollege opdracht 3
1. Bereken handmatig op basis van deze gegevens Cohen’s Kappa (tip: maak eerst een
overeenstemmingsmatrix).
Zie voor overeenstemmingsmatrix collegeblok. P o = 0.55
2. Voer nu de gegevens in SPSS in en bereken Cohen’s Kappa. Vraag tevens zowel de
‘observed’ als de ‘expected’ frequencies per cel op. Geef de syntax en de gevraagde
output.
CROSSTABS
/TABLES=Beoordelaar1 BY Beoordelaar2
/FORMAT=AVALUE TABLES
/STATISTICS=KAPPA
/CELLS=COUNT EXPECTED
/COUNT ROUND CELL.
Symmetric Measures
Asymptotic Approximate
a b
Value Standard Error Approximate T Significance
Measure of Agreement Kappa ,406 ,137 3,532 ,000
N of Valid Cases 20
a. Not assuming the null hypothesis.
b. Using the asymptotic standard error assuming the null hypothesis.
, 3. Vergelijk de SPSS-output van vraag 2 met jouw berekeningen bij en uitkomst van vraag 1.
Wat valt je op? Wat is de expected frequencie van de cel waarin beide beoordelaars
aangeven de gezichtsuitdrukking als ‘erg verdrietig’ te beoordelen?
De kappa uit SPSS komt overeen met mijn eigen berekende kappa (0.406 vs. 0.4059). Dus goed
uitgerekend.
Beoordelaar 2 heeft geen één keer iemand beoordeelt met ‘erg verdrietig’. Daarom is deze kolom
ook niet te zien in de SPSS output. De verwachte waarde voor de cel 5,5 is dan ook 0.
4. Bereken de gewogen Kappa, uitgaande van deze gewichtenmatrix (zie pdf.)
(0.75 – 0.3675)/(1 – 0.3675) = 0.6047 0.60
5. Hoe hoog kan de overeenstemming tussen deze twee beoordelaars maximaal worden?
Bereken hiervoor de ongewogen Kappa na een tabel te hebben gemaakt met maximale
overeenstemming. Hiertoe geef je in de tabel eerst de randproporties weer en vul je
vervolgens de tabel verder in zoals deze er bij maximale overeenstemming uit zou zien.
Bedenk hoe je dit deed bij het berekenen van phi-max.
Hoe komt men aan de randtotalen??????
Verder zie collegeblok voor uitwerking
6. Open de dataset en vraag met SPSS (als onderdeel van een betrouwbaarheidsanalyse) een
ANOVA-tabel op voor de verschillende bronnen van spreiding in de cijfers voor de
werkstukken (objecten, beoordelaars en interactie). Geef de syntax en de gevraagde
output. Wat is het gemiddelde cijfer van de 10 werkstukken berekend op basis van de 30
beoordelingen?
ANOVA
Sum of Squares df Mean Square F Sig
Between People 66,833 9 7,426
Within People Between Items 14,467 2 7,233 11,982 ,000
Residual 10,867 18 ,604
Total 25,333 20 1,267
Total 92,167 29 3,178
Grand Mean = 6,8333
6.83 (Grand mean)
The benefits of buying summaries with Stuvia:
Guaranteed quality through customer reviews
Stuvia customers have reviewed more than 700,000 summaries. This how you know that you are buying the best documents.
Quick and easy check-out
You can quickly pay through credit card or Stuvia-credit for the summaries. There is no membership needed.
Focus on what matters
Your fellow students write the study notes themselves, which is why the documents are always reliable and up-to-date. This ensures you quickly get to the core!
Frequently asked questions
What do I get when I buy this document?
You get a PDF, available immediately after your purchase. The purchased document is accessible anytime, anywhere and indefinitely through your profile.
Satisfaction guarantee: how does it work?
Our satisfaction guarantee ensures that you always find a study document that suits you well. You fill out a form, and our customer service team takes care of the rest.
Who am I buying these notes from?
Stuvia is a marketplace, so you are not buying this document from us, but from seller wivdven. Stuvia facilitates payment to the seller.
Will I be stuck with a subscription?
No, you only buy these notes for $3.24. You're not tied to anything after your purchase.