Leerlingen zijn meestal wel in staat de begrippen betrouwbaarheid en validiteit uit het hoofd te leren. Vaak echter begrijpen zij de betekenis van deze begrippen niet goed, met als gevolg dat zij ze door elkaar halen. Deze korte illustratie helpt om een discussie op gang te brengen over de concepten die hen in staat stellen om de betekenis van zowel betrouwbaarheid als validiteit te begrijpen.
Nadat ik heb opgemerkt dat de leerlingen hebben gelezen over betrouwbaarheid en validiteit voor
de les van die dag, vraag ik om vrijwilligers om het verschil tussen beide uit te leggen.
Nadat we de juiste definities hebben doorgenomen (van de vrijwilligers of met
hulp van anderen in de klas), merk ik op dat de leerlingen deze begrippen vaak door elkaar halen en dat ik ze een voorbeeld zal geven om beide
begrippen te illustreren.
Ik leg vervolgens uit dat ik, net als veel mensen, niet meer in mijn kleren pas zoals
ik vroeger deed. Het lijkt erop dat mijn kleren zijn gekrompen. Dit is vooral het laatste jaar een
probleem geworden. Op dat moment haal ik een weegschaal tevoorschijn en zet hem op de grond waar iedereen hem kan zien. Ik stap op de weegschaal en zeg: “Elke ochtend stap ik op mijn weegschaal, ik kijk naar beneden en ik zie dat ik ___pond weeg.” (Humor in de les brengen is altijd nuttig, dus ik doe meestal mijn hand voor mijn mond telkens als ik mijn gewicht herhaal, en mompel het bedrag zodat het niet te horen is). Ik ga verder met te zeggen: “Deze weegschaal is een meetinstrument. Net als de vragenlijsten waarover je in het boek hebt gelezen, meet het iets – in dit geval slechts één variabele – namelijk het gewicht. Dit specifieke meetinstrument is betrouwbaar. Wanneer het wordt toegepast op dezelfde situatie, geeft het hetzelfde resultaat. Dus, als ik morgen op de weegschaal stap, zal ik nog steeds kilo’s wegen. (Aangenomen dat ik niet ben afgevallen of aangekomen in de vierentwintig uur sinds ik voor het laatst op de weegschaal stond). Deze weegschaal is echter geen geldig meetinstrument. Ze geeft geen ware meting van de variabele die ze beweert te meten.”
Op dit punt stap ik van de weegschaal af, pak hem op, en speel met de draaiknop waarmee iemand het gewicht op de weegschaal kan aanpassen. Ik ga verder met te zeggen: “Omdat mijn kleren zijn gekrompen (en mijn gewicht nu hoger is dan ik zou willen) heb ik vorige week deze kleine draaiknop gebruikt om de weegschaal vijf pond lichter te laten lezen. Heeft iemand van jullie dat ooit gedaan? Dus, deze weegschaal is nog steeds een betrouwbare maatstaf. Het is echter geen geldige maatstaf. Na deze korte illustratie richt ik mij tot de klas als geheel en vraag hen om voorbeelden uit de sociale wetenschappen waarbij een maatstaf wel betrouwbaar is, maar niet geldig. Ik ben altijd voorbereid met enkele eigen voorbeelden om de illustraties van de klas te ondersteunen. Een bijzonder nuttige illustratie: Een vragenlijst zou een ouder kunnen vragen hoe vaak hij of zij zijn of haar kind in de afgelopen week hard heeft geslagen. De antwoorden zouden waarschijnlijk heel betrouwbaar zijn -consistente antwoorden van 0. Ze zouden echter misschien niet geldig zijn.