Filtern
Dokumenttyp
Volltext vorhanden
- ja (3) (entfernen)
Gehört zur Bibliographie
- nein (3)
Schlagworte
- psychometrics (3) (entfernen)
Institut
Based on a meta-analysis, Redick and Lindsey (2013) found that complex span and n-back tasks show an average correlation of r = 0.20, and concluded that "complex span and n-back tasks cannot be used interchangeably as working memory measures in research applications" (p. 1102). Here, we comment on this conclusion from a psychometric perspective. In addition to construct variance, performance on a test contains measurement error, task-specific variance, and paradigm-specific variance. Hence, low correlations among dissimilar indicators do not provide strong evidence for the existence, or absence, of a construct common to both indicators. One way to arrive at such evidence is to fit hierarchical latent factors that model task-specific, paradigm-specific, and construct variance. We report analyses for 101 younger and 103 older adults who worked on nine different working memory tasks. The data are consistent with a hierarchical model of working memory, according to which both complex span and n-back tasks are valid indicators of working memory. The working memory factor predicts 71% of the variance in a factor of reasoning among younger adults (83% for among older adults). When the working memory factor was restricted to any possible triplet of working memory tasks, the correlation between working memory and reasoning was inversely related to the average magnitude of the correlations among the indicators, indicating that more highly intercorrelated indicators may provide poorer coverage of the construct space. We stress the need to go beyond specific tasks and paradigms when studying higher-order cognitive constructs, such as working memory.
Die vorliegende Arbeit befasst sich mit der Hypothese, dass der „Life Orientation Test (-Revised)“ (LOT-R), der als Selbstberichtsfragebogen zur Erfassung von dispositionellem Optimismus konstruiert wurde, nicht nur „Optimismus“ erfasse, sondern auch „Pessimismus“; Pessimismus wird im Rahmen dieser „OP-Hypothese“ nicht als der Gegenpol von Optimismus aufgefasst, sondern als ein partiell unabhängiges Konstrukt. Die OP-Hypothese wird typischerweise mit sog. „konfirmatorischen“ Faktorenanalysen untersucht. Die OP-Hypothese wird zunächst aus theoretischer Perspektive analysiert, insbesondere auch deshalb, weil die Begriffe „Optimismus“ und „Pessimismus“ im Rahmen der OP-Hypothese nicht auf dieselbe Art verwendet werden wie sonst in der Psychologie oder in anderen Wissenschaften üblich. Dabei zeigt sich, dass keine angemessene theoretische Herleitung der OP-Hypothese möglich ist: Was „Pessimismus“ ist, wenn es nicht der Gegenpol von Optimismus ist, bleibt unklar. Ausgehend von dem Befund, dass die theoretische Herleitung der OP-Hypothese unangemessen ist, wird diese Hypothese aus methodologisch-testtheoretischer Perspektive und mittels zweier empirischer Arbeiten kritisch überprüft. Aus methodologischer und mathematisch-statistischer Perspektive wird dargestellt, dass die empirischen Befunde, die für die OP-Hypothese sprechen, nicht eindeutig sind; die OP-Hypothese ist also unterdeterminiert. Die Gültigkeit eines reflexiven Messmodells, das für die Untersuchung der OP-Hypothese mittels konfirmatorischer Faktorenanalysen erforderlich wäre, kann nicht ohne Weiteres angenommen werden. Die mathematisch-statistischen Annahmen der „experimentellen Unabhängigkeit“ und der „lokalen Homogenität“, die ein reflexives Messmodell konstituieren, sind für Selbstberichtsfragebogen in vielen Fällen verletzt. Noch gravierender ist das Ergebnis, dass sich aus „konfirmatorischen“ Faktorenmodellen, die für die OP-Hypothese sprechen, keine ausreichenden Informationen über den empirischen Gehalt der Hypothese ergeben. In grundsätzlicher Form und anhand einfacher Beispiele wird gezeigt, dass für eine gegebene Kovarianzmatrix, die die Datenbasis einer „konfirmatorischen“ Faktorenanalyse darstellt, grundsätzlich unendlich viele Alter-nativmodelle konstruiert werden können, von denen zumindest eine Teilmenge auch mit sinnvollen Interpretationen verbunden ist. Angesichts der Existenz solcher Alternativmodelle müssen andere Kriterien zur Überprüfung der OP-Hypothese herangezogen werden als „konfirmatorische“ Faktorenmodelle. Anhand einer empirischen Untersuchung mit dem LOT-R wird gezeigt, dass ein „Methodeneffektmodell“ eine bessere Anpassung an die Daten ermöglicht als das mit der OP-Hypothese verbundene Modell. Das Methodeneffektmodell beinhaltet die Annahme, dass die Antworten auf LOT-R-Items nicht ausschließlich durch die individuelle Ausprägung in „Optimismus“ bedingt werden, sondern zum Teil auch unerwünschte Effekte der Itemformulierungen abbilden. Entsprechend lässt sich eine Korrelation des „Methodenfaktors“ mit sozial erwünschtem Antwortverhalten beobachten. Schließlich wird in einer weiteren empirischen Untersuchung gezeigt, dass mit der Skala „Personaler Optimismus“ ein Instrument zur Erfassung von dispositionellem Optimismus vorliegt, welches nicht unter der faktorenanalytischen Mehrdimensionalität leidet, die den LOT-R kennzeichnet. In der Zusammenschau der methodologischen und empirischen Ergebnisse muss die OP-Hypothese als zu gering begründet zurückgewiesen werden. Über den Rahmen des speziellen Inhaltsgebietes „Optimismus“ hinaus weist die vorliegende Arbeit aber auch auf die Notwendigkeit multipler Betrachtungsebenen bei der Untersuchung persönlichkeitspsychologischer Fragestellungen hin. Nachteilig für die persönlichkeitspsychologische Forschung könnten sich insbesondere die unreflektierte Verwendung von Selbstberichtsfragebogen auf der Seite der Datenerhebung und die unreflektierte Verwendung von „konfirmatorischen“ Faktorenanalysen auf der Seite der Datenauswertung auswirken.
Owing to higher performance on the Raven’s Progressive Matrices (RPM) than on the Wechsler Intelligence Scales (WIS), it has recently been argued that intelligence is underestimated in autism. This study examined RPM and WIS IQs in 48 individuals with autism, a mixed clinical (n = 28) and a neurotypical (n = 25) control group. Average RPM IQ was higher than WIS IQ only in the autism group, albeit to a much lesser degree than previously reported and only for individuals with WIS IQs <85. Consequently, and given the importance of reliable multidimensional IQ estimates in autism, the WIS are recommended as first choice IQ measure in high functioning individuals. Additional testing with the RPM might be required in the lower end of the spectrum.