Mittauksen luotettavuus
Lähde: Alkula ym. "Sosiaalitutkimuksen kvantitatiiviset menetelmät"
Validius - systemaatisen virheen esiintyminen vähentää
mittarin validiutta.
Reliaabelius - satunnaisen virheen esiintyminen vähentää
mittarin reliaabeliutta
Vrt. Otannan sisäinen ja ulkoinen luotettavuus:
Sisäinen luotettavuus: "Miten hyvin kerätyt tiedot kuvaavat
juuri niitä asoita, joita on ollut tarkoitus tutkia?"
Ulkoinen luotettavuus: "Miten hyvin tutkittavien tiedot voidaan yleistää
koskemaan laajempaa kohdejoukkoa?"
Validius
-Käsitteiden operationalisointi
-Taustalla ajatusprosessi - aikaisempi tutkimus, aiheen tuntemus, yleinen
logiikka (aputeoria vrt. teorian muodostus)
1) Ennustevalidius
-
Mittarin kyky kuvata oikein jotain mittarin ulkopuolista ilmiötä
(vertailumuuttuja)
-
Ongelma: Miksi etsiä uutta mittaria, jos toimiva jo olemassa
2) Sisällöllinen validius
-
Mittarin kyky mitata juuri tarkoitettu asiaa (ks. käsitteen operationalisointi)
3) Rakennevalidius
-
Mittarin kyky toimia odotetusti tutkimusprosessin kokonaisuudessa
-
Ongelmana tiedon kumulatiivisyyden edellytys (ei sosiaalitieteissä
välttämättä edes tavoiteltavaa - käsitteet kulttuuri
ja aikasidonnaisia) - mittarit epävalideja vai teoria virheellinen?
- entisen teorian kokeileminen uusilla mittareilla tai entisten mittareiden
soveltaminen uuteen teoriaan
4)Prosessivalidius
-
Valiuden kannalta relevanttien vaiheiden mahdollisimman tarkka kuvaus (käsiteanalyysi,
operationalisointi, mittaus)
Reliaabelius
-
Satunnaisvirheet alentavat mittauksen eri vaiheissa
-
Useat eri tekijät: huolimattomuus- ja muistivirheet, tallennusvirheet
yms.
-
Abstraktit teemat ongelmallisimpia
-
Satunnaisvirheet kumoavat toisiaan
-
Yhdistetyt mittarit - sekä validius että reliaabelius paranevat
Reliaabeliuden mittaaminen
1) Uudelleen mittaaminen
-
Virheetön mittaus toistettuna tuo saman tuloksen. Toisistaan riippumattomien
peräkkäisten mittausten korrelaation avulla pyritään
laskemaan reliaabeliutta.
-
Ongelma: Peräkkäisten mittausten väliajan määrittäminen
vaikeaa - edellisen vastauskerran muistaminen vaikuttaa tulokseen. Väliajan
pidentäminen ongelmallista ajallisen muutoksen takia. Myös kohteen
refleksiivisyys ongelma.
2) Rinnakkaismittaus
-
Samaa asiaa eri kerroilla eri mittareilla
-
Ongelma: mittareiden validius - mittaavatko samaa asiaa
3) Cronbachin alfa
-
Ei yksiselitteistä sääntöä hyvälle reliaabeliudelle.
Alkula: "mielellään yli 0,7"
-
Alfan arvo vaihtelee osioiden lukumäärän ja osioiden keskimääräisen
korrelaation mukaan - jos toinen vakio ja toinen kasvaa - alfa kasvaa (satunnaisvirheet
kumoavat toisiaan)
Lisää aiheesta:
Miksi
summamuuttujia?