PRÜFUNGSPROTOKOLLE DIAGNOSTIK SPINATH Prüfung WS 2006 Bei welchem Vorgehen spielen Moderatorvariablen eine wichtige Rolle? Validitätsgeneralisierung! Bei der Validitätsgeneralisierung wird die Varianz der Validitätskoeffizienten um bestimmte statistische Artefakte bereinigt. Wenn nach dieser Bereinigung noch erhebliche Varianz übrigbleibt, sucht man nach Moderatoren, die dafür verantwortlich sein können. Was ist die Minderungskorrektur? Was bedeutet das für die Praxis? Die Minderungskorrektur bringt dem Praktiker nichts, er arbeitet trotz statistischer Aufwertung mit seinem unreliablen Instrument. Und Verdünnungsparadoxon. Nennen sie einen Konzentrationstest, Daten zur Objektivität, Reliabilität, Validität. In welchem Zusammenhang würden Sie ihn einsetzen? Welche Kennwerte liegen vor, kann man "schummeln"? Sagen Sie alles was Ihnen zum 16PF einfällt. Was ist das ganz besondere an ihm? Er hat eine Intelligenzskala, im Gegensatz zu allen anderen Persönlichkeitstests. Was ist Konstruktvalidität, gibt es spezielle Methoden? MultitraitMultimethod-Analyse. Was sind die Forderungen bei der Multitrait-Multimethodeanalyse? Prüfung (No. 1) 2007 1. Was ist eine Metaanalyse? Kennen Sie eine Metaanalyse? Metaanalyse von Schmidt & Hunter zum Berufserfolg, s. Folien letzter Termin? 2. Was ist Validitätsgeneralisierung? Um welche Artefakte wird Varianz bereinigt? Was macht man, wenn noch Restvarianz übrig bleibt? 3. Inkrementelle Validität? Kommunalitätenanalyse 4. Sagen Sie alles, was Sie zum Gießen – Test wissen! 5. Kosten und Nutzen einer psychologischen Testung? (da gibt es wohl ein Modell zu im Buch, aber da wusste ich auch einen Faktor, der da mit eingeht, nicht) Grund- und Selektionsquote Validität 6. Was ist lokale stochastische Unabhängigkeit? 7. Was muss bei der moderierten Regression signifikant werden? Interaktionsterm 8. Nennen Sie einen Konzentrationstest, was fällt ihnen alles dazu ein? Testgütekriterien Kann man schummeln? Überspringen mgl. Prüfung (No. 2) 2007 1. Was versteht man unter Konstruktvalidität? - Wie genau heißen die Forderungen? 2. Wie werden die Ergebnisse einer MTMM-Analyse dargestellt? - Wo liegt dabei das Problem? 3. NEO-PI-R beschreiben und mit NEO-FFI vergleichen 4. Tests und Eignungsdiagnostik: Würden Sie NEO zur Eignungsdiagnostik empfehlen? - Wann ist der Einsatz von Tests sinnvoll? 5. Moderierte Regression: Was ist das? - Welche Aspekte beinhaltet die Formel? - Was ist der wichtige Term? 6. Soziale Erwünschtheit und Moderation: Wie kann man mit sozial erwünschten Antworten umgehen? - Bringen Kontrollskalen was? 7. Welche Fairnessmodelle gibt es? Unterschied zw. 1. und 3. ? - Wie realisiert man das 3.? 2 parallele Regressionsgeraden Prüfung (No. 3) 2007 Einstiegsthema: o multi trait / multi method Analyse o Reliabilität wofür? o Minderungskorrektur was genau macht man? o Kritik warum machen es so wenige? o Tests o Gießen Skalen Beziehungstypen o wenn man bei Grundschulkindern die Intelligenzentwicklung testen will -> welcher Test? Warum? z.B. KFT (Gruppentest) Test beschreiben, Normen, Gütekriterien o Was braucht man für gute Normen? Repräsentativität 2000-3000 Vpn o Warum sind Normen manchmal egal? z.B. LPS sehr ökonomisch; oft benutzt, trotz schlechter Normen kriteriumsorientierter Test bei Einzelfall braucht man Normen bei Korrelationsstudie braucht man Normen nicht o Welches in Lit. aufgeführtes Test-Fairneß-Modell am besten? Prüfung (No. 4) 2007 Einstiegsthema: o multi trait / multi method Analyse o Warum machen es so wenige? o Tests o BIT2 o BIP schlechte Validität wie würde man Personaltest evaluieren? Kriterium: Berufserfolg o nach 2 Jahren mit z.B. Einschätzung oder Umsatz evaluieren o Aber: a) Varianzeinschränkung weil man die Überund Unterqualifizierten nicht einlädt b) die Abgelehnten kann man kein Evaluierung machen o Schulkinder Gruppentest o LPS (nicht HAWIK, weil Einzeltest) aber: schlechte Normen keine Repräsentativität o wenn man Normen haben will? o CFT (bin mir nicht sicher, ob ich diesen Test richtig mitgeschrieben habe, müsste aber, weil ja kein verbales Wissen siehe nächste Frage) o wenn man auch verbales Wissen testen will? o KFT 4-12 Was weiß man über den Test? o Moderator o Wie ermittelt man den? o a) Regressionsmodell o b) (kann ich nicht mehr lesen, aber müsste Teilung in 2 distinkte Gruppen oder so ähnlich sein) o Wie sieht das in SPSS aus? o ß-Gewicht o Kreuzvalidierung o Warum? o Wie? o Wie bezeichnet man den Effekt? o großer Effekt o Wenn man die nicht machen kann was dann? o in SPSS-Output nach was schauen? shrunken R² Was ist das? (war nur Detailfrage) Prüfung 2008 1. Einstiegsthema: Multiple Regression und KommunalitätenAnalyse - Warum macht man diese Kommunalitäten-Analyse in der Praxis nicht öfter? => Weil sie einem kaum mehr Infos gibt - Ändert sich etwas an den Signifikanzen der beta-Gewichte durch das Rechnen der Kommunalitäten-Analyse? => Nein (daher kaum mehr Infos). Die Signifikanzen bleiben gleich. - Was bewirkt das Vorhandensein von vielen Prädiktoren bei der Vorhersagen von diesen Prädiktoren auf das Kriterium und wie geht man damit um? => Stichprobenfehler steigt -> Überoptimierung => Shrunken R² 2. Externale Skalenkonstruktion - Was ist das und warum muss ich dabei Kreuzvalidierung machen? - Woher bekomme ich am Ende der doppelten Kreuzvalidierung die "richtigen" beta-Gewichte, die ich am Ende auch in der Praxis nutzen kann? => Durch Mitteln der betas aus den beiden Stichproben 3. MMPI - welche Auswirkung hat die externalen Skalenkonstuktion auf Homogenität/Hetrogenität der Skalen? - Wie ist es dabei um die anderen Gütekriterien bestellt? ... wollte dabei auf Cronbach's Alpha hinaus. 4. Sagen die alles zum GIESSEN-Test, das Sie wissen. - Bespiel für Skala - Was erfahre ich aus den errechneten Profilen => Paarkonstellationen - Nennen Sie ein Beispiel für Paarkonstellationen. - welches Konstrukt liegt dem Test zugrunde? => Psychoanalytisches Konzept 5. Was zeigt den 16PF aus? Er hat eine Besonderhit, die kein anderer Test hat. Welche? => Intelligenz-Skala - Was ist die praktische Bedeutung von dieser Skala und wie deuten Sie diese? => Intelligenz als Voraussetzung für das Bearbeiten von PersönlichkeitsTests ... sinnvolle Skala 6. Was bedeutet die lokale stochastische Unabhängigkeit bei der IRT? 7. Was ist der Ablauf einer Validitätsgeneralisierung? - Erklären sie die 5 Arten von Fehlern, die zur Varianz in den Vorhersagegenauigkeiten führen.