• Die drei wich gsten Qualitätsmerkmale (Haupt-Gütekriterien) von Tests sind
◦ Objek vität: Ein Test ist objek v, wenn verschiedene Testleiter*innen (Tl) bei der Durch-führung,
Auswertung und Interpreta on des Tests zu denselben Ergebnissen kommen.
◦ Reliabilität: Ein Test ist reliabel, wenn er das, was er misst, zuverlässig und genau (d.h. mit
geringem Messfehler) misst - gleichgül g, ob es das ist, was er zu messen beabsich gt.
◦ Validität: Ein Test ist valide, wenn er das misst, was er zu messen beabsich gt.
1
ti titi titi ti ti ti ti ti ti ti ti
, Bedenken Sie vor allen Dingen, dass und wie die Gütekriterien miteinander in Zusammenhang stehen!!
Hauptgütekriterien: Objek vität
• Durchführungs-Objek vität/Testleiterunabhängigkeit:
◦ Es werden klare Vorgaben bezüglich der Standardisierung der Testbedingungen gemacht, so dass
alle Pbn bzw. ein Pb zu einem beliebigen Zeitpunkt immer unter konstanten Bedingungen
getestet werden/wird.
◦ Ist dann gegeben, wenn das Testverhalten der Testperson unabhängig ist von zufälligen oder
systema schen Verhaltensvaria onen aller denkbaren Tl.
• Auswertungs-Objek vität/Verrechnungssicherheit:
◦ Es ist sicherzustellen, dass standardisierte Auswertungsregeln vorgegeben sind , die auch die
Wahrscheinlichkeit von Fehlern minimieren und derart exakt festgelegt sind, dass jeder
Auswerter zu denselben Ergebnissen kommt.
• Interpreta ons-Objek vität/Interpreta onseindeu gkeit:
◦ Liegt dann vor, wenn verschiedene Tl aufgrund der vorliegenden Testergebnisse zu den gleichen
Schlüssen/Interpreta onen kommen.
• Bei strukturierten Verhaltensbeobachtungen, aber auch bei quan ta ven Inhaltsanalysen, wo
standardisierte (Beobachtungs-) Systeme durch mehrere Beobachter/Rater verwendet werden.
• Ra ng ndet in vorher festgelegten/vorgegebenen Kategorien sta (z.B. „tri zu“ / „tri nicht zu“)
oder auch als Intensität auf Ra ngskalen.
• Geringe Beobachterübereins mmung deutet darauf hin, dass das Mess-/Beobachtungssystem unklar
oder messungenau ist.
• Gründe hierfür sind zu klären (Fehler oder aber Unfähigkeit die Ra ngs durchzuführen) und ggf. zu
besei gen, z.B. Überarbeitung des Beobachtungssystems, Konkre sierung der Bewertungskriterien,
Verbesserung der Auswertungsinstruk onen, Schulung der Beobachter…
• Beobachterübereins mmung sollte typischerweise in einem Pretest bes mmt werden, als allgemeines
Gütekriterium und auch bei jeder Untersuchung erfasst und berichtet werden (ähnlich Reliabilität).
• Es lässt sich überprüfen, ob ein oder mehrere Kodierer eines Merkmals zu demselben Schluss kommen
und wie sehr sie sich dabei einig sind.
• Dabei kann die Reliabilitätsbes mmung vorgenommen werden von:
◦ Einem Kodierer: Intra-Kodierer-Übereins mmung, bei der eine Person eine ausreichend große
Anzahl an Items in einem zeitlichen Abstand kodiert
◦ Zwei Kodierer: Typische Form der Reliabilitätsprüfung mi els Inter-Kodierer-Übereins mmung,
bei der zwei Kodierer dasselbe Material anhand eines Kodiersystems auswerten.
◦ Mehr als zwei Kodierer: Zunächst werden die paarweisen Übereins mmungen berechnet und
dann eine Gesamtreliabilität berechnet. Sinnvoll bei groß angelegten Studien, um die
Objek vität zu überprüfen.
• Man ndet auch den Begri Inter-Rater Reliabilität. (Obwohl eigentlich Bewertung der Objek vität)
3
ti fititifi
ti ti ff ti ti ti ti ti tt titttiti ti ti fft ti fft ti
The benefits of buying summaries with Stuvia:
Guaranteed quality through customer reviews
Stuvia customers have reviewed more than 700,000 summaries. This how you know that you are buying the best documents.
Quick and easy check-out
You can quickly pay through credit card or Stuvia-credit for the summaries. There is no membership needed.
Focus on what matters
Your fellow students write the study notes themselves, which is why the documents are always reliable and up-to-date. This ensures you quickly get to the core!
Frequently asked questions
What do I get when I buy this document?
You get a PDF, available immediately after your purchase. The purchased document is accessible anytime, anywhere and indefinitely through your profile.
Satisfaction guarantee: how does it work?
Our satisfaction guarantee ensures that you always find a study document that suits you well. You fill out a form, and our customer service team takes care of the rest.
Who am I buying these notes from?
Stuvia is a marketplace, so you are not buying this document from us, but from seller leoaufmwasser. Stuvia facilitates payment to the seller.
Will I be stuck with a subscription?
No, you only buy these notes for $5.81. You're not tied to anything after your purchase.