Masarykova univerzita Fakulta sociálních studií prouzek bez loga na zelenem logo_fss_kruh OPVK_MU_rgb PSY252 Statistická analýza dat II Seminář 7 - Reliabilita Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb •Míra zatížení měření nesystematickou chybou •Obecně r, které vyjadřuje, jak velká část rozptylu měřené proměnné je rozptyl pravých skórů (true scores). • •Jednotlivá měření Xi=ti+ei •Variabilita jednotlivých měření s2x=s2t +s2e •Reliabilita rxx=s2t / s2x = s2t /(s2t +s2e) Reliabilita obecně Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb Stanovení intervalu spolehlivosti pro individuální skór •Náhodná standardní chyba měření se=sx√(1−rxx) •Normální rozložení náhodných chyb >> 95% interval spolehlivosti pro pravý skór je Xi ±1,96se * • Úvaha nad vlivem náhodné chyby měření na výsledky analýz •Korekce korelace na nereliabilitu měření correction for attenuation •r’xy= rxy / √(rxxryy) Obecná užití reliability * Přesněji se interval staví nikoli kolem pozorovaného skóru Xi, ale kolem odhadu pravého skóru daného jedince Ti = rxxXi+(1−rxx)MX Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb Reliabilita jako stabilita v čase •test-restestová reliabilita – korelace opakovaných měření Reliabilita paralelních (ekvivalentních, alternativních) forem Reliabilita jako vnitřní konzistence •Split-half •Cronbachova alfa a Kuder-Richardsonovy koeficienty Reliabilita jako shoda posuzovatelů •rodina koeficientů kappa – Cohenova kappa Reliabilita specificky Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb S náhodnou chybou měření bojujeme opakováním měření •opakovanou administrací testu - rtt Nelze-li opakovat – test rozpůlíme a považujeme to za opakování :: split-half •korelováním polovin testu – r (pomocí Spearman-Brownova vzorce přepočítáme korelaci na reliabilitu) Půlit lze mnoha způsoby a lze i čtvrtit … až ho rozdělíme na jednotlivé položky. •korelováním položek testu – konzistence – a Uvažujeme-li test=položka, administrace sady položek je opakovaným administrováním testu •Administrace v jednom čase > řada náhodných vlivů zůstává konstantní > primárním uvažovaným zdrojem chyby jsou specifika/nedokonalosti jednotlivých položek (≈unicity). •Do jaké míry měří testy-položky totéž? Reliabilita jako vnitřní konzistence Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb Interpretace •Alfa je odhadem reliability (jedním z mnoha, zatíženým nejméně výběrovou chybou) •Podíl rozptylu hypotetické true-scorové škály (složené ze všech myslitelných položek), který by naše škála vysvětlila. •Korelace škály se všemi možnými stejně dlouhými škálami měřícími týž konstrukt •Průměrná korelace všech myslitelných půlení testu •Alfa je projevem unidimenzionality (nikoli důkazem) Obvykle požadovaná hodnota pro výzkum >0,7, pro diagnostiku >0,9 (záleží na tom, jak velkou šíři intervalu spolehlivosti můžeme tolerovat). Cronbachova alfa je primárně funkcí •průměrné korelace mezi položkami (čím vyšší, tím vyšší alfa) •počtu položek (čím vyšší, tím vyšší alfa) Cronbachova alfa Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb •Analyze > Scale > Reliability analysis •Vybrat položky, z nichž se má škála skládat. •Zvolit model „Alpha“ •Ve „Statistics“ zvolit následující volby •Descriptives for: Item, Scale, Scale if item deleted •Inter-Item: Correlations •Summaries: Correlations •Syntax RELIABILITY /VARIABLES= seznam položek /SCALE('POJMENOVANI SKALY') ALL /MODEL=ALPHA /STATISTICS=DESCRIPTIVE SCALE CORR /SUMMARY=TOTAL CORR. Cronbachova alfa v SPSS Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb Zjistíme-li, že některá z položek existující škály nepřispívá k vnitřní konzistenci… •zkontrolujeme, zda nejsou někde chyby •můžeme to pouze konstatovat (nemáme-li dostatečně reprezentativní vzorek) •můžeme položku odstranit a analýzu reliability provést znovu •je-li takových položek více --> FA •průběžně hypotézujeme o změnách obsahové validity, můžeme-li tak i korelujeme •!Příliš mnoho tunění vede k tuzingu: vysoce konzistentní škála z tak mála položek, že nemá žádnou validitu (psychometrický paradox) Tun(z)ing škál Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb V běžných empirických studiích •Alfa se udává v sekci Metody jako součást informace o metodě měření. • Self-Control. At age 11, self-control was measured using parent ratings of 13 items from a Czech translation of the Carey Temperament Scales (Carey & McDevitt, 1995). Items rated on a six-point scale ranging from almost always (1) to almost never (6) are listed in Appendix A. Internal consistency of the scale was acceptable (Cronbach alpha = .79 ). Reportování reliability Masarykova univerzita | Fakulta sociálních studií OPVK_MU_rgb Proveďte analýzu reliability zvolené škály. Zamyslete se nad funkčností jednotlivých položek. Lze z položek, které máte k dispozici, zkonstruovat lepší škálu? Zadání seminární práce OPVK_MU_rgb Děkujeme za pozornost