Kongenerische Reliabilität

Aus testwiki
Zur Navigation springen Zur Suche springen

Der Begriff kongenerische Reliabilität ρC (Aussprache: „rho-C“; engl. congeneric reliability) bezeichnet die Reliabilität eindimensionaler kongenerischer Messmodelle. Solche Messmodelle zeichnen sich dadurch aus, dass die Faktorladungen der Indikatoren nicht homogen sein müssen, d. h. sich unterscheiden können. ρC ist eine Kennzahl, an deren Wert sich ablesen lässt, in welchem Ausmaß die Indikatoren eines Messmodells alle wie beabsichtigt etwas sehr Ähnliches messen: im Idealfall die zugrundeliegende latente Variable. Die kongenerische Reliabilität ist somit u. a. in der Psychometrie von Bedeutung. Für den Begriff existieren zahlreiche Synonyme (darunter insbesondere Faktorreliabilität und engl. composite reliability, daneben construct reliability, unidimensional omega, Raju (1977) coefficient).[1]

Bedeutung

Kongenerisches Messmodell

Gegeben seien Antworten (Indikator (Sozialwissenschaften))Xi zu Testfragen i und die latente Variable T.

Die sehr verbreitete tau-äquivalente Reliabilität ρT (= „Cronbachs α“) setzt voraus, dass die Faktorladungen aller Indikatoren gleich groß sind (d. h. λ1=λ2==λk). Dies ist in vielen Messmodellen jedoch nicht der Fall, wodurch ρT die Reliabilität systematisch unterschätzt. Die kongenerische Reliabilität ρC schafft hierbei Abhilfe, indem sie unterschiedliche Faktorladungen explizit berücksichtigt. Ähnlich wie bei ρT liegen auch bei ρC die Werte im Regelfall zwischen 0 und 1, wobei nach Bagozzi & Yi (1988) Werte von mindestens etwa 0,6 wünschenswert sind.[2] In der Forschungspraxis werden jedoch typischerweise höhere Werte von mindestens 0,7 oder gar 0,8 angestrebt. Sowohl für ρT als auch ρC ist jedoch zu beachten, dass sich strenge Regeln, die Messmodelle unterhalb eines Schwellwertes automatisch ablehnen und oberhalb eines Schwellwertes automatisch annehmen, in der Regel verbieten.[3] Zudem kann ein ρC nahe an 1 darauf hindeuten, dass sich die verwendeten Indikatoren im Sinne von Redundanz zu ähnlich sind.

Geschichte

Erstmals wurde die kongenerische Reliabilität durch Jöreskog (1971) vorgestellt, wobei hierfür schlicht der Begriff „Reliabilität“ (im engl. Original: reliability) verwendet wurde. Der Autor bezog sich dabei jedoch auf kongenerische Messmodelle.[4] Auch Werts et al. (1978) verwendeten hierfür allgemein den Begriff „Reliabilität“, verwendeten zur Unterscheidung von „single-item reliability“ jedoch auch erstmals den Begriff „composite reliability“.[5] In der Folge wurde in Ermangelung einer begrifflichen Alternative häufig von „composite reliability“ gesprochen, der Begriff jedoch zugleich kritisiert.[1] Zuletzt wurde u. a. von Cho (2016) die konsequente Verwendung des Begriffs „kongenerische Reliabilität“ (engl. congeneric reliability) propagiert.

Berechnung

Es gibt mehrere alternative Wege zur Berechnung der kongenerischen Reliabilität, die jedoch äquivalent sind und somit zum gleichen Ergebnis führen. Traditionell wird ρC wie folgt berechnet:

ρC=(i=1kλi)2(i=1kλi)2+i=1kσei2

Hierbei ist k die Anzahl der Indikatoren (engl. items) des Messmodells, λi die Faktorladung von Indikator i und σei2 die beobachtete Varianz des Fehlers ei. Eine von Cho (2016) vorgeschlagene Berechnung ist wie folgt realisiert, wobei σX2 für die Varianz des Testergebnisses steht:

ρC=(i=1kλi)2σX2

Vorteil der alternativen Formel ist, dass sie in das von Cho (2016) vorgestellte System aus Formeln eingebettet ist und einen Vergleich zu anderen Koeffizienten, etwa für die tau-äquivalente Reliabilität (= „Cronbachs α“), erleichtert. Die zuvor fehlende Systematik bei der Benennung ist zudem der Grund, warum Cho auf den Begriff „composite reliability“ verzichtet und stattdessen von „congeneric reliability“ spricht.

Beispiel

Das folgende Beispiel zur Berechnung von ρC anhand der beiden vorgenannten Formeln ist Cho (2016) entnommen.[1]

Gegeben sei ein Test mit 4 Testfragen (Items). Der Score der i-ten Testfrage sei die Zufallsvariable Xi. Die Kovarianzmatrix (welche die Rohdaten beschreibt) sei:

Kovarianzmatrix
X1 X2 X3 X4
X1 10,00
X2 4,42 11,00
X3 4,98 5,71 12,00
X4 6,98 7,99 9,01 13,00
Σ 124,23=2×(Σsubdiagonal+Σdiagonal)Σdiagonal

Die Rohdaten für die Faktorladungen und Fehler lauten wie folgt:

Faktorladungen und Fehler
λ^i σ^ei2
X1 1,96 6,13
X2 2,25 5,92
X3 2,53 5,56
X4 3,55 0,37
Σ 10,30 18,01
Σ2 106,22

Nun lässt sich ρC mit der traditionellen Formel von oben berechnen; ein Dach über einer Variable signalisiert hierbei, dass die Berechnung auf Basis von Stichprobendaten erfolgt:

ρ^C=(i=1kλ^i)2(i=1kλ^i)2+i=1kσ^ei2=106,22106,22+18,01=0,8550

Mit der von Cho (2016) vorgeschlagenen alternativen Formel ergibt sich entsprechend:

ρ^C=(i=1kλ^i)2σ^X2=106,22124,23=0,8550

Weitere Gütemaße

Ein eng mit der kongenerischen Reliabilität verwandter Koeffizient ist die durchschnittlich erfasste Varianz (DEV, engl. AVE). Neben der Reliabilität sind weitere Eigenschaften eines Messmodells zu hinterfragen, darunter z. B. die Konstruktvalidität.

  • RelCalc, Tools zur Berechnung der kongenerischen Reliabilität und anderer Koeffizienten.
  • Das Handbook of Management Scales von Wikibooks sammelt betriebswirtschaftliche Konstrukte, deren Indikatoren und gibt häufig die kongenerische Reliabilität an. (engl.)

Einzelnachweise

  1. 1,0 1,1 1,2 Cho (2016), Vorlage:Doi
  2. Bagozzi & Yi (1988), Vorlage:Doi
  3. Guide & Ketokivi (2015), Vorlage:Doi
  4. Jöreskog (1971), Vorlage:Doi
  5. Werts et al. (1978), Vorlage:Doi