Obvykle jsou studenti schopni zapamatovat si pojmy reliabilita a validita. Často však skutečně nechápou význam těchto pojmů a v důsledku toho je zaměňují. Tato krátká ukázka pomůže vést k diskusi o těchto pojmech, která jim umožní pochopit význam spolehlivosti i platnosti.
Po konstatování, že si studenti přečetli o spolehlivosti a platnosti pro
tu hodinu, požádám dobrovolníky, aby vysvětlili rozdíl mezi nimi.
Po tom, co si zopakujeme správné definice (podané buď od dobrovolníků, nebo
s pomocí ostatních ve třídě), poznamenám, že studenti si tyto pojmy často pletou a že jim uvedu příklad, který jim pomůže oba
pojmy ilustrovat.
Poté vysvětlím, že stejně jako mnozí lidé se do svého oblečení nevejdu tak
jako dříve. Zdá se, že se mi oblečení zmenšuje. To se
stalo problémem zejména v posledním roce. V tu chvíli si vyrobím koupelnovou váhu a položím ji na podlahu tak, aby ji každý viděl. Stoupnu si na váhu a řeknu: „Každé ráno si stoupnu na váhu, podívám se dolů a vidím, že vážím ___kilogramů.“ A pak se podívám na váhu. (Vložit do přednášky humor je vždycky užitečné, takže si obvykle při každém opakování své váhy dám ruku na ústa a částku zamumlám tak, aby nebyla slyšet). Pokračuji a říkám: „Tato koupelnová váha je měřicí přístroj. Stejně jako dotazníky, o kterých jste četli v knize, něco měří – v tomto případě pouze jednu proměnnou – váhu. Tento konkrétní měřicí nástroj je spolehlivý. Když se použije na stejnou situaci, dává stejný výsledek. Až tedy zítra vstoupím na váhu, budu stále vážit kilogramy. (Za předpokladu, že jsem během čtyřiadvaceti hodin od posledního stoupnutí na váhu nezhubl ani nepřibral.) Tato váha však není platným měřicím přístrojem. Neposkytuje pravdivé měření veličiny, kterou má údajně měřit.“
V tomto okamžiku odstupuji od váhy, zvedám ji a hraji si s kolečkem, které
umožňuje člověku nastavit hmotnost na váze. Pokračuji dál: „Vzhledem k tomu, že se mi zmenšilo oblečení (a moje váha je nyní vyšší, než bych si přál), použil jsem minulý týden tento malý ciferník, aby váha ukazovala o pět kilo méně. Už to někdo z vás někdy udělal? Tato váha je tedy stále spolehlivým měřítkem. Není však platným měřítkem. Dává sice stejné výsledky, ale nejsou to výsledky správné.“
Po této krátké ilustraci se obracím na celou třídu a žádám je o příklady ze společenskovědních dat, kdy může být míra spolehlivá, ale ne platná. Vždy jsem připraven s několika vlastními příklady, abych podpořil ilustrace ze třídy. Obzvláště užitečná ilustrace: V dotazníku se můžeme rodiče zeptat, kolikrát za poslední týden surově zbil své dítě. Odpovědi by byly pravděpodobně docela spolehlivé – konzistentní odpovědi 0. Nemusely by však být validní.