Das Fehlen eines Testmanuals ist ein eindeutiger Hinsweis auf einen nicht wissenschaftlichen Test.

Der psychologische Test wird als Routineverfahren bezeichnet, da sein Verfahrensablauf, sein Inhalt und seine Bewertung standardisiert und damit vorgegeben sind.

Bei einer qualitativen Messung werden die Resultate mit Zahlen verknüpft und zu seine Testwert (score) zusammengefasst.

Test sind universell und unabhängig vom Zweck einsetzbar. So kann ein klinischer Persönlichkeitstest auch Anwendung in der Personalauswahl finden.

Semiprojektive Tests sind gänzlich standardisiert.

Konstrukttests erlauben Rückschlüsse von Verhalten auf dahinter liegende latente Fähigkeiten (Konstrukte).

Konstrukttests sind normorientiert, da sie das Testergebnis einer Person relativ zur durchschnittlichen Ausprägung einer Bezugsgruppe (Norm) sehen.

Die meisten Tests beruhen auf der klassischen Testtheorie (KTT). Auch wenn ihr Nachfolger, die probabilistische Testtheorie, einige Schwächen überwindet, hat sich die KTT bewährt, da auch ihre Anwendung deutlich einfacher ist.

Das Existenzaxiom besagt, dass eine Normalverteilung der Testwerte entsteht, wenn eine Person den selben Test beliebig oft wiederholt. Der Mittelwert dieser hypothetischen Normalverteilung entspricht dem wahren Wert (true score).

Kritisch zu betrachten ist, dass die KTT Annahmen über das Zustandekommen von Leistungen erlaubt. So erklärt sie die Verbindung zwischen einem latenten Merkmal und der Itembeantwortung

Ein weiterer Kritikpunkt ist die ungenaue Messung mittels KTT in Extrembereichen, da z.B. extreme Schwierigkeiten nur selten in den Tests vorkommen, aber durchaus notwendig/ nützlich sind.

Die KTT prüft die vorausgesetzte Eindimensionalität.

Die lokale Unabhängigkeit besagt, dass es korrelierte Messfehler zwischen den Messwerten gibt. Dies entspricht dem Prinzip der Eindimensionalität.

Die Annahme der Unabhängigkeit zwischen wahrem Wert und Messfehler ist haltbar, da nicht zufällige systematische Fehler bei Messungen eher selten sind.

Die Stichprobenabhänhigkeit der Testwerte ist ein weiterer kritischer Punkt für die KTT. Je nach Referenzgruppe können sich völlig andere Bedeutungen der individuellen Leistungen ergeben.

Die KTT ist sowohl für Intervall- und rationale Skalen als auch für dichotome und Ratingskalen anwendbar.

Im Rahmen der KTT handelt es sich häufig um eine "per-fiat" Messung, wobei man einfach auf die Annäherung an das geforderte Intervallskalenniveau vertraut.

Der Standardmess- und Schätzfehler leitet sich bei der KTT aus der Reliabilität ab.

Der Bias beschreibt einen systematischen Fehler, wie z.B. Prüfungsangst.

Die Annahmen der KTT sind schwer überprüfbar, da es sich hierbei nur um logische Schlussfolgerungen handelt. Das macht sie für die Praxis zum Teil schwer haltbar. Des Weiteren werden Übungs- und Transfereffekte nicht berücksichtigt. Zu bezweifeln sind außerdem die Konstanz der wahren Werts und die Unabhängigkeit zwischen dem wahren Wert und dem Messfehler.

Probabilistisch bedeutet, dass auch eine Person mit geringen Fähigkeiten die Möglichkeit hat eine schwierige Aufgabe zu lösen, wenn auch nur mit geringer Wahrscheinlichkeit.

Mit steigender Personenfähigkeit nimmt die Wahrscheinlichkeit ein Item zu lösen ab.

In der PTT werden Modellvoraussetzungen wie das Skalenniveau und die Eindimensionalität geprüft und nicht nur angenommen. Somit lässt sich im Prinzip die PTT auch auf Tests anwenden, die ursprünglich für die KTT konstruiert wurden.

Bei einer erschöpfenden Statistik sagt der Summenwert einer Person tatsächlich etwas über den Auspägungsgrad des latenten Konstrukt aus. Wird das Modell durch den Modelltest nicht abgelehnt liefert es alle Informationen über die Fähigkeitsausprägung einer Person.

2. Kapitel.
Der Merkmalsbereich bezieht sich auf die Konstrukte des Tests. Hierbei wird festgelegt, was der Test messen soll.

Der Geltungsbereich des Tests bezieht sich auf den Kontext bzw. den Zweck der Untersuchung. Er grenzt ein, wo, bei wem und wofür der Test eingesetzt werden soll.

Bei der externalen testkonstruktion stehen bereits im frühen Stadium empirische Daten im Hintergrund.

Die externale Konstruktion wird typischerweise zur Differenzierung zwischen Gruppen angewandt.

Im Extremfall spricht man bei der externalen Konstruktion von "blinden Empirismus" oder auch "dust bowl empiricism", hierbei wird auf inhaltiche Erwägungen großen Wert gelegt.

Die Verankerung bezeichnet die numerische, verbale, grafische oder symbolische Beschriftung einer Rating Skala. Es können dabei jede einzelne Stufe oder auch beispielsweise nur die Endpunkte markiert sein.

Disjunkte Antwortvorgaben haben eine gemeinsame Schnittmenge.

Distraktoren bezeichnen die falschen Antwortmöglichkeiten bei Mehrfachwahlaufgaben. Sie haben einen geringen Einfluss auf die Aufgabenschwierigkeit und sind mit wenig Aufwand konstruierbar.

Forced Choice Items sind formal nicht von Multiple Choice Items zu unterscheiden. Damit soll sozial erwünschtem Verhalten entgegen gewirkt werden, in dem man die am meisten oder am wenigsten zutreffende Aussage wählen soll. Auch das Erstellen einer Rangreihe ist möglich.

Eine ipsative Messung ist auch eine idiographische Messung. Die Testwerte werden nicht zwischen den Personen verglichen, sonder der Maßstab ist die Person selbst. Die Messwerte können nur innerhalb der vom Probanden vorliegenden Messwerte verglichen werden.

Der Kontrasteffekt beschreibt eine positive Verzerrung der Ergebnisse durch Reihenfolgeneffekte.

Bei lokaler stochastischer Unabhängigkeit ist es möglich die Lösungswahrscheinlichkeiten zweier Items zu multipizieren. Bei einer Lösungswahrscheinlichkeit von 0.5 beträgt somit die Wahrscheinlichkeit beide zu lösen 0,25.

Kommunalitäten sind Indizes für die Eignung einzelner Items und sollten größer als .20 sein.

Das Ziel der konfirmatorischen Faktorenanalyse ist die Datenstrukturierung und das Zusammenfassen vieler manifester Variablen zu wenigen latenten.

Nach Thompson besteht ein zentraler Zweck der EFA in der Validitätsprüfung.

Der Grundgedanke der EFA besagt, dass jede Ausprägung eines beobachtbaren Verhaltens durch dahinterstehende latente Konstrukte beeinflusst wird.

Die Faktoren der EFA sind die latenten Variablen.

Ein Faktor hat Einfluss auf eine der beobachtbaren Variablen.

Die Modellart der Faktorenanalyse lässt sich auch als Kausalindikatorenmodell beschreiben.

Werden Items von dem selben Faktor beeinflusst, so sind sich stochastisch voneinaner unabhänig.

Die PAF dient der Aufdeckung latenter Strukturen im Datensatz.

Die PCA wird zur Datenerweiterung und Datenanalyse verwendet.

Zur Faktorenextraktion wird eine Kovarianz- / Korrelationsmatrix untersucht. Die Ausprägung der jeweiligen Person auf der beobachtbaren Variable setzt sich aus der Ausprägung der latenten Variable und eines Fehlerterms zusammen.

Nach der Extraktion und Rotation entstehen Faktoren, welche den Messwerten der VP zugeordnet werden können. Diese beschreiben nun ihre Ausprägung auf den latenten Merkmalen.

Die beobachtete Korrelationsmatrix sollte signifikant von der vollständigen Unabhängigkeit der Variablen in der Population abweichen .

Die Anforderunge an die Stichprobengröße steigen:

- je mehr Items in die Analyse eingehen
- je mehr Items je Faktor zusammengefasst werden
- je reliabler die einzelnen Items sind

Die Faktorenanalyse unterstellt Intervallskalenniveau und Normalverteilung.

Die deskriptiven Verteilungseigenschaften sollten post-hoc durch genaue Inspektion überprüft werden. Finden sich innerhalb des Faktors viele Items mit ähnlichen VE, dann ist es möglich, dass diese lediglich Methodenartefakte abbilden.

Bei der Methode der Parcels fässt man die Items zu "Päckchen" zusammen um die Reliabilität, speziell für die CFA, zu verbessern.

Die Tetrachorische Korrelation verwendet man um den Zusammenhang zweier künstlich dichotomisierter Variablen zu berechnen. Der tetrachorische Koeffizient beschribt somit eine Maßkorrelation des wahren Wertes.
Die polychorische Korrelation verwendet man hingegen für Ratinskalen.

Quadrierte Ladungen beschreiben der Anteil der Gesamtvarianz aller Variablen an der gemeinsamen Varianz.

Die Zeilensumme der Ladungsmatrix nennt man auch Kommunalitäten.