TOE experimenteel: Research Methods – Morling et al.
H.10 Introduction to Simple Experiments
Wanneer onderzoekers een causale claim maken, suggereren ze ook iets over interventies en
behandelingen.
Two Examples of Simple Experiments
Example 1: Taking Notes
Onderzocht of aantekeningen maken via laptop of via pen en papier beter is (wie maakt de toets
beter met feitelijke en conceptuele vragen).
Example 2: Eating Pasta
Onderzocht of je meer eet (en opschept) als je bord groter is.
Experimental Variables
Experimenten kunnen in een laboratorium plaats vinden of ergens anders. Een onderzoeker
manipuleert een variabele door iemand in een bepaalde conditie van een variabele in te delen.
Tijdens het experiment noteren de onderzoekers wat er gebeurt.
Experiment = Een onderzoeker manipuleert minimaal 1 variabele en meet een andere.
Manipulated variable/Gemanipuleerde variabele = Een variabele in een experiment die een
onderzoeker controleert, bijvoorbeeld door deelnemers verschillende niveaus (waarden) toe te
wijzen.
Measured variable/Gemeten variabele = Een variabele in een studie waarvan de niveaus (waarden)
worden waargenomen en geregistreerd.
Independent and Dependent Variables
Hoe een proefpersoon zich gedraagt op de gemeten variabele hangt af van het level van de
onafhankelijke variabele. Onderzoekers hebben minder controle over de afhankelijke variabele dan
de onafhankelijke variabele. Ze manipuleren de onafhankelijke variabele en zien wat er gebeurt met
de afhankelijke variabele. Experimenten moeten minstens 1 onafhankelijke variabele en 1
afhankelijke variabele hebben, maar vaak zijn er meerdere onafhankelijke variabelen. Wanneer de
waarden in een grafiek worden uitgedrukt, dan komt de onafhankelijke variabele bijna altijd op de x-
as en de afhankelijke variabele op de y-as.
Independent variable/Onafhankelijke variabele = De gemanipuleerde variabele (onderzoekers
hebben onafhankelijkheid in het toewijzen van mensen in de verschillende levels van deze variabele).
Condition/Conditie = Een van de niveaus van de onafhankelijke variabele in een experiment.
Dependent variable – outcome variable/Afhankelijke variabele = In een experiment, de variabele die
wordt gemeten. In een meervoudige regressieanalyse, de enkele uitkomst, of criteriumvariabele,
waarvan de onderzoekers het meest geïnteresseerd zijn in het begrijpen of voorspellen ervan.
Independent-Groups Designs
Er zijn vele vormen van experimenten. 2 basisonderscheidingen: independent-groups designs en
within-groups designs.
Independent-Groups vs. Within-Groups Designs
2 basisvormen van de independent-groups design zijn de posttest-only design en de pretest/posttest
design.
Independent-groups design - between-subjects design - between-groups design = Een experimenteel
design waarbij verschillende groepen deelnemers worden blootgesteld aan verschillende niveaus van
de onafhankelijke variabele, zodanig dat elke deelnemer slechts één niveau van de onafhankelijke
variabele ervaart.
1
,TOE experimenteel: Research Methods – Morling et al.
Within-groups design - within subjects design = Een proefopzet waarbij elke deelnemer aan alle
niveaus van de onafhankelijke variabele wordt blootgesteld.
Posttest-Only Design
Participanten worden random ingedeeld. Posttest-only voldoen aan alle 3 de eisen voor causaliteit
(covariantie, temporele precedentie & interne validiteit). Wanneer onderzoekers geschikte controle
variabelen gebruiken, zouden er geen design confounds en selectie-effecten moeten zijn.
Posttest-only design - Equivalent groups, posttest-only design = Een experiment met een
onafhankelijke-groepsopzet waarbij de deelnemers slechts eenmaal worden getest op de
afhankelijke variabele.
Pretest/Posttest Design
Ook hier worden de participanten random ingedeeld. Onderzoekers kunnen een pretest/posttest
design gebruiken om te demonstreren dat random indeling de groepen gelijk maakte geen
selectie-effect. Deze designs kunnen ook veranderingen in prestaties van mensen bijhouden.
Pretest/posttest design = Een experiment waarbij gebruik wordt gemaakt van een independent-
groups design waarbij de deelnemers tweemaal worden getest op de belangrijkste afhankelijke
variabele: eenmaal vóór en eenmaal na blootstelling aan de onafhankelijke variabele.
H.11 More on Experiments: Confounding and Obscuring
Variables
Threats to Internal Validity: Did the Independent Variable Really
Cause the Difference?
3 bedreigingen voor interne validiteit: design confounds, selection effects en order effects. Deze
hebben alle 3 een andere verklaring voor de resultaten.
Design confound = Een bedreiging voor de interne validiteit in een experiment waarin een tweede
variabele toevallig systematisch varieert samen met de onafhankelijke variabele en derhalve een
alternatieve verklaring is voor de resultaten.
Selection effect/Selectie effect = Een bedreiging voor de interne validiteit die optreedt in een
onafhankelijke-groepsopzet wanneer de soorten deelnemers op het ene niveau van de
onafhankelijke variabele systematisch verschillen van de deelnemers op het andere niveau.
Order effect = In een within-groups design, een bedreiging voor de interne validiteit waarbij
blootstelling aan één conditie de reacties van deelnemers op een latere conditie verandert.
The Really Bad Experiment (A Cautionary Tale)
Een one-group, pretest/posttest design is geen goed design, omdat als je een effect meet, je niet
weet of dit misschien door andere variabele kan komen ( je hebt geen controle groep).
One-group, pretest/posttest design = Een experiment waarbij een onderzoeker één groep
deelnemers rekruteert; hen meet op een pretest; hen blootstelt aan een behandeling, interventie, of
verandering; en hen dan meet op een posttest.
Six Potential Internal Validity Threats in One-Group, Pretest/Posttest
Designs
Maturation Threats to Internal Validity
Maturation threat/Rijpingsbedreiging = Een bedreiging voor de interne validiteit die optreedt
wanneer een waargenomen verandering in een experimentele groep in de loop van de tijd min of
meer spontaan tot stand zou kunnen zijn gekomen.
2
, TOE experimenteel: Research Methods – Morling et al.
Preventing Maturation Threats
Maturation threat wordt voorkomen door het toevoegen van een 2 e groep, de controlegroep.
History Threats to Internal Validity
Om een historische bedreiging te zijn, moet de externe factor de meeste mensen in de groep in
dezelfde richting beïnvloeden (systematisch) en niet slechts een paar mensen (onsystematisch).
Historical threat/Historische bedreiging = Een bedreiging van de interne validiteit die optreedt
wanneer het onduidelijk is of een verandering in de behandelingsgroep veroorzaakt is door de
behandeling zelf of door een externe of historische factor die de meeste leden van de groep treft.
Preventing History Threats
History threat wordt voorkomen door het toevoegen van een 2 e groep, de controlegroep.
Regression Threats to Internal Validity
Regression threat = Een bedreiging van de interne validiteit die verband houdt met regressie tot het
gemiddelde, een verschijnsel waarbij een extreme bevinding de volgende keer dat zij wordt gemeten
(met of zonder de experimentele behandeling of interventie) waarschijnlijk dichter bij haar eigen
typische of gemiddelde niveau zal komen te liggen.
Regression to the mean/Regressie naar het gemiddelde = Een verschijnsel waarbij een extreme
bevinding de volgende keer dat zij wordt gemeten waarschijnlijk dichter bij haar eigen typische, of
gemiddelde, niveau zal liggen, omdat dezelfde combinatie van toevalsfactoren die de bevinding
extreem maakten, de tweede keer niet aanwezig is.
Everyday Regression to the Mean
Regression and Internal Validity
Regression to the mean kan leiden tot een bedreiging voor de interne validiteit.
Preventing Regression Threats
Regression threat wordt voorkomen door het toevoegen van een 2 e groep, de controlegroep.
Daarnaast is een goede inspectie nodig van het patroon van de resultaten.
Attrition Threats to Internal Validity
Als een systematische type deelnemer uit het onderzoek stapt (wat een attrition threat is) dan heeft
dat gevolgen voor de gemiddelden van de resultaten.
Attrition threat = In een pretest/posttest, een onderzoek met herhaalde metingen of een quasi-
experimenteel onderzoek, een bedreiging van de interne validiteit die optreedt wanneer een
systematisch type deelnemer uit het onderzoek stapt voordat het is afgelopen.
Preventing Attrition threat
Attrition threat voorkomen door de scores van de participanten die gestopt zijn niet mee te nemen.
En andere benadering is om hun scores van de pretest te bekijken, als zij extremere scores hebben
op hun pretest, dan is attritie meer een bedreiging voor de interne validiteit dan wanneer hun scores
dichter bij het gemiddelde van de groep liggen.
Testing Threats to Internal Validity
Testing threat/Testdreiging = In een experiment of quasi-experiment met herhaalde metingen, een
soort volgorde-effect waarbij de scores in de loop van de tijd veranderen alleen omdat de
deelnemers de test meer dan eens hebben afgelegd; omvat ook praktijkeffecten.
3
