Multitrait-multimethod analysis in psychotherapy research: New methodological approaches

Abstract

Multimethod measurement plays a crucial role in psychology to analyze the convergent and discriminant validity, estimate the degree of method specificity, and scrutinize the generalizability of results of empirical studies and assessment procedures across methods. The implications of multimethod approaches for test validation, multimethod measurement, indication, and evaluation in psychotherapy research are discussed. Moreover, an overview of modern methodological approaches of multitrait-multimethod analysis for cross-sectional and longitudinal data is given. In particular, basic principles of confirmatory factor analysis models for interchangeable and structurally different methods are explained.

ABSTRACT

Die Messung mehrerer Erhebungsmethoden spielt eine entscheidende Rolle in der Psychologie, um die konvergente und diskriminante Validität zu untersuchen, den Grad der Genauigkeit der Methoden zu schätzen und die Generalisierbarkeit der Ergebnisse empirischer Studien sowie der Erhebungsansätze über verschiedene Methoden hinweg, genau zu überprüfen. Die Auswirkungen der Multimethod-Ansätze für die Testvalidierung, die Messung mehrerer Erhebungsmethoden, sowie Anhaltspunkte und Beurteilungen in der Psychotherapieforschung werden diskutiert. Darüber hinaus wird ein Überblick der fortschrittlichen methodologischen Ansätze von Multitrait-Multimethod-Analysen für quer- und längsschnittliche Daten gegeben. Im Besonderen, werden Grundprinzipien der konfirmatorischen Faktoranalyse für untereinander austauschbare und strukturell verschiedene Methoden erklärt.

RÉSUMÉ

La mesure multi-traits multi-méthodes joue un rôle crucial en psychologie pour analyser la validité convergente et discriminante, estimer le degré de spécificité d'une méthode, et scruter la généralisabilité des résultats d’études empiriques et de procédure d’évaluations suivant différentes méthodes. Les implications de cette approche pour la validation de tests, la mesure multi-méthode, l'indication, et l’évaluation dans la recherche en psychothérapie sont discutés. De plus, une vue d'ensemble des approches méthodologiques contemporaines de l'analyse multi-traits multi-méthodes est donnée pour des données transversales et longitudinales. En particulier, les principes de base des modèles de l'analyse factorielle confirmatoire pour différentes méthodes interchangeables sont expliquées.

A medida multi-método desempenha um papel crucial na psicologia como forma de analisar a validade convergente e discriminante, estimar o grau de especificidade do método e escrutinar a generalização dos resultados de estudos empíricos e procedimentos de avaliação nos vários métodos. São discutidas as implicações para as abordagens multi-método em termos de validação de testes, medidas multi-método, indicação e avaliação em psicoterapia. Adicionalmente, é dada uma visão geral sobre as abordagens metodológicas de análise multi-método e multi-traço de dados transversais e longitudinais. Em particular, são explicados os princípios básicos para modelos de análise confirmatória a um factor para modelos estruturalmente diferentes.

ABSTRACT

La misurazione multimetodo svolge un ruolo cruciale in psicologia per analizzare la validità convergente e discriminante, per stimare il grado di specificità del metodo e per controllare la generalizzabilità dei risultati di studi empirici e di procedure di valutazione attraverso i metodi. Le implicazioni degli approcci multimetodo come la prova della validità, la misura multimetodo, l'indicazione e la valutazione della ricerca in psicoterapia sono discussi di seguito. Inoltre, sono passati in rassegna dei moderni approcci metodologici di analisi molti tratto-multimetodo per gli studi trasversali e longitudinali. In particolare, sono enucleati i principi di base dell'analisi fattoriale confermatoria per diversi metodi intercambiabili e strutturali.

Keywords:

• multimethod assessment
• evaluation research
• confirmatory factor analysis
• multitrait-multimethod-multioccasion analysis
• latent state–trait analysis