Zusammenfassung Psychologische Diagnostik

Grundlagen psychologischer Diagnos k
03 Der Diagnos sche Prozess

Überblick
I. Der diagnos sche Prozess
I.I Planung
d. Opera onalisierung
- Entscheidungsregeln
- Gütekriterien
- Testauswahl

1 Haupt-Gütekriterien
1.1 Objek vität
1.2 Reliabilität
1.3 Validität
2. Nebengütekriterien
2.1 Norm- vs. kriteriumsorien erte Tests
2.2 Nutzen
2.3 Fairness
2.4 Unverfälschbarkeit




• Die drei wich gsten Qualitätsmerkmale (Haupt-Gütekriterien) von Tests sind
◦ Objek vität: Ein Test ist objek v, wenn verschiedene Testleiter*innen (Tl) bei der Durch-führung,
Auswertung und Interpreta on des Tests zu denselben Ergebnissen kommen.
◦ Reliabilität: Ein Test ist reliabel, wenn er das, was er misst, zuverlässig und genau (d.h. mit
geringem Messfehler) misst - gleichgül g, ob es das ist, was er zu messen beabsich gt.
◦ Validität: Ein Test ist valide, wenn er das misst, was er zu messen beabsich gt.




1



ti titi titi ti ti ti ti ti ti ti ti

, Bedenken Sie vor allen Dingen, dass und wie die Gütekriterien miteinander in Zusammenhang stehen!!




Hauptgütekriterien: Objek vität




• Durchführungs-Objek vität/Testleiterunabhängigkeit:
◦ Es werden klare Vorgaben bezüglich der Standardisierung der Testbedingungen gemacht, so dass
alle Pbn bzw. ein Pb zu einem beliebigen Zeitpunkt immer unter konstanten Bedingungen
getestet werden/wird.
◦ Ist dann gegeben, wenn das Testverhalten der Testperson unabhängig ist von zufälligen oder
systema schen Verhaltensvaria onen aller denkbaren Tl.
• Auswertungs-Objek vität/Verrechnungssicherheit:
◦ Es ist sicherzustellen, dass standardisierte Auswertungsregeln vorgegeben sind , die auch die
Wahrscheinlichkeit von Fehlern minimieren und derart exakt festgelegt sind, dass jeder
Auswerter zu denselben Ergebnissen kommt.
• Interpreta ons-Objek vität/Interpreta onseindeu gkeit:
◦ Liegt dann vor, wenn verschiedene Tl aufgrund der vorliegenden Testergebnisse zu den gleichen
Schlüssen/Interpreta onen kommen.




Objek vität — Verrechnungssicherheit
2



ti ti ti tititi ti ti ti ti

, Beobachtungsübereins mmung (zwischen Objek vität & Reliabilität einzuordnen)




• Bei strukturierten Verhaltensbeobachtungen, aber auch bei quan ta ven Inhaltsanalysen, wo
standardisierte (Beobachtungs-) Systeme durch mehrere Beobachter/Rater verwendet werden.
• Ra ng ndet in vorher festgelegten/vorgegebenen Kategorien sta (z.B. „tri zu“ / „tri nicht zu“)
oder auch als Intensität auf Ra ngskalen.
• Geringe Beobachterübereins mmung deutet darauf hin, dass das Mess-/Beobachtungssystem unklar
oder messungenau ist.
• Gründe hierfür sind zu klären (Fehler oder aber Unfähigkeit die Ra ngs durchzuführen) und ggf. zu
besei gen, z.B. Überarbeitung des Beobachtungssystems, Konkre sierung der Bewertungskriterien,
Verbesserung der Auswertungsinstruk onen, Schulung der Beobachter…
• Beobachterübereins mmung sollte typischerweise in einem Pretest bes mmt werden, als allgemeines
Gütekriterium und auch bei jeder Untersuchung erfasst und berichtet werden (ähnlich Reliabilität).
• Es lässt sich überprüfen, ob ein oder mehrere Kodierer eines Merkmals zu demselben Schluss kommen
und wie sehr sie sich dabei einig sind.
• Dabei kann die Reliabilitätsbes mmung vorgenommen werden von:
◦ Einem Kodierer: Intra-Kodierer-Übereins mmung, bei der eine Person eine ausreichend große
Anzahl an Items in einem zeitlichen Abstand kodiert
◦ Zwei Kodierer: Typische Form der Reliabilitätsprüfung mi els Inter-Kodierer-Übereins mmung,
bei der zwei Kodierer dasselbe Material anhand eines Kodiersystems auswerten.
◦ Mehr als zwei Kodierer: Zunächst werden die paarweisen Übereins mmungen berechnet und
dann eine Gesamtreliabilität berechnet. Sinnvoll bei groß angelegten Studien, um die
Objek vität zu überprüfen.
• Man ndet auch den Begri Inter-Rater Reliabilität. (Obwohl eigentlich Bewertung der Objek vität)


3



ti fititifi

ti ti ff ti ti ti ti ti tt titttiti ti ti fft ti fft ti