Testtheorie at Universität Bochum

Diagnostik = theoriegeleitete, systematische Sammlung hochwertiger Informationen über ein diagnostisches Objekt

Ziele:

• Beschreibung relevanter Merkmale des Objekts 
• Vorhersage künftig relevanter Merkmale des Objekts 
• Bestimmung von Maßnahmen, um erwünschte Merkmale des Objekts herbeizuführen oder zu bewahren und unerwünschte Merkmale des Objekts zu verhindern oder zu beseitigen

Ein Test ist ein wissenschaftliches Routineverfahren zur Erfassung eines oder mehrerer empirisch abgrenzbarer psychologischer Merkmale mit dem Ziel einer möglichst genauen quantitativen Aussage über den Grad der individuellen Merkmalsausprägung.

• Der Begriff „Test“ ist mit klaren Qualitätsanforderungen verbunden (s. nächste Sitzung) 
• Der Begriff „Fragebogen“ ist uneinheitlich definiert 
  • Wenn aus dem Englischen übersetzt, häufig vergleichbar mit „Test“ (vgl. englische Begriffe questionnaire, scale) 
  • Im Deutschen auch Sammelausdruck für schriftliche Befragungen

Ein Test ist dann objektiv, wenn er dasjenige Merkmal, das er misst, unabhängig von Testleiter und Testauswerter misst. Außerdem müssen klare und anwenderunabhängige Regeln für die Ergebnisinterpretation vorliegen. Moosbrugger & Kelava, 2012, S. 8

• Testdurchführung ist unabhängig von dem/der Testleiter*in 
• Dann gegeben, wenn der Test möglichst standardisiert ist 
• Gleiche Durchführungsbedingungen für alle, z.B. – Gleiche Instruktion – Gleiche Zeitvorgabe – Gleiche Rahmenbedingungen

• Testergebnis ist unabhängig von dem/der Testleiter*in 
• Einfacher zu erreichen bei geschlossenen Antwortformaten als bei offenen Antwortformaten 
• Erfordert genaue Anweisungen im Testmanual 
• Überprüfung durch Messung des Grads der Übereinstimmung zwischen verschiedenen Auswertern

• Verschiedene Testanwender kommen bei Testpersonen mit demselben Testergebnis zu denselben Schlussfolgerungen 
• Beispiele – Ist eine bestimmte Therapie indiziert? – Ist der/die Bewerber*in für die Stelle geeignet? 
• Hilfestellungen – Genaue Anleitungen im Testmanual – Normentabellen aus Eichstichproben

• Messgenauigkeit: Ein Test ist dann reliabel (zuverlässig), wenn er das Merkmal, das er misst, exakt (messfehlerfrei) misst 
• Wird ausgedrückt im Reliabilitätskoeffizienten: 0 = Testergebnis ist nur auf Messfehler zurückzuführen, 1 = Testergebnis ist völlig frei von Messfehler

Bestimmung der Reliabilität

1. Retest-Reliabilität 2. Paralleltest-Reliabilität 3. Testhalbierungs-Reliabilität 4. Innere Konsistenz

• Ein Test gilt dann als valide („gültig“), wenn er das Merkmal, das er messen soll, auch wirklich misst und nicht irgendein anderes 
• Objektivität und Reliabilität sind notwendige, aber keine hinreichende Voraussetzungen für Validität 
• Validitätsaspekte 1. Augenscheinvalidität 2. Inhaltsvalidität 3. Konstruktvalidität 4. Kriteriumsvalidität

• Validität des Tests ist aus Sicht eines/-r Lai*in gegeben 
• Wichtig für Akzeptanz von Tests 
• Beispiele: – Fehlende Augenscheinvalidität im Vorstellungsgespräch – Fehlende Augenscheinvalidität bei impliziten Verfahren

• Test oder Testitem ist repräsentativ für das zu erfassende Merkmal. 
• Kein numerischer Kennwert, sondern logische und fachliche Überlegungen durch Expert*innen 
• Beispiel: Situative Fragen im Vorstellungsgespräch

• Theoretische Fundierung der gemessenen psychologischen Merkmale 
• Beispiel: Misst der Test wirklich Intelligenz oder doch eher Aufmerksamkeit? 
• Struktursuchendes Vorgehen, z.B. – Exploratorische Faktorenanalyse – Nomologisches Netzwerk (konvergente und diskriminante Validität) 
• Strukturprüfendes Vorgehen, z.B. – Konfirmatorische Faktorenanalyse – Multitrait-Multimethod-Analysen mit Strukturgleichungsmodellen