Supervisor variance in psychotherapy outcome in routine practice

Abstract

Objective: Although supervision has long been considered as a means for helping trainees develop competencies in their clinical work, little empirical research has been conducted examining the influence of supervision on client treatment outcomes. Specifically, one might ask whether differences in supervisors can predict/explain whether clients will make a positive or negative change through psychotherapy. Method: In this naturalistic study, we used a large (6521 clients seen by 175 trainee therapists who were supervised by 23 supervisors) 5-year archival data-set of psychotherapy outcomes from a private nonprofit mental health center to test whether client treatment outcomes (as measured by the OQ-45.2) differed depending on who was providing the supervision. Hierarchical linear modeling was used with clients (Level 1) nested within therapists (Level 2) who were nested within supervisors (Level 3). Results: In the main analysis, supervisors explained less than 1% of the variance in client psychotherapy outcomes. Conclusions: Possible reasons for the lack of variability between supervisors are discussed.

Obiettivo: Anche se la supervisione è stata a lungo considerata come un mezzo per aiutare gli allievi a sviluppare competenze per il loro lavoro clinico, sono state effettuate poche ricerche cliniche per esaminare l'influenza della supervisione negli esiti del trattamento. In particolare, ci si potrebbe chiedere se le differenze nei supervisori possono prevedere / spiegare se i pazienti avranno un cambiamento positivo o negativo nel corso della psicoterapia. Metodo: In questo studio naturalistico, abbiamo usato un grande set di dati archiviati in 5 anni (6521 pazienti visti da 175 terapeuti in formazione che sono stati supervisionati da 23 supervisori) degli esiti di psicoterapie condotte in centri di salute mentale privati non profit per verificare se l'esito del trattamento del paziente (misurato con il OQ-45.2) era diverso in relazione a chi era il supervisore. E’ stato usato un modello lineare gerarchico con i pazienti (Livello 1) annidato nei terapeuti (livello 2) a loro volta compresi all'interno dei supervisori (Livello 3). Risultati: Nell'analisi principale, i supervisori spiegavano meno dell'1% della differenza negli esiti delle psicoterapie dei pazienti. Conclusioni: Saranno discusse le possibili ragioni della mancanza di variabilità tra i supervisori.

Ziel: Obwohl Supervision schon lange als eine Maßnahme zur Unterstützung von Auszubildenden bei der Entwicklung von Kompetenzen in der klinischen Arbeit gilt, wurde bisher wenig zum Einfluss der Supervision auf die Behandlungsergebnisse der Patienten geforscht. Insbesondere ist fraglich, ob Supervisorenunterschiede erklären/vorhersagen können, ob sich der Patient während der Therapie positiv oder negativ entwickelt. Methode: In dieser naturalistischen Studie wurde ein großer (6521 Patienten, behandelt von 175 auszubildenden Therapeuten, welche von 23 Supervisoren betreut wurden), über 5 Jahre archivierter Datensatz der Therapieergebnisse eines privaten, gemeinnützigen Zentrums für psychische Gesundheit verwendet, um zu testen, ob sich die Behandlungsergebnisse der Patienten (gemessen anhand des OQ-45.2) abhängig vom Supervisor unterschieden. Es wurde ein hierarchisches lineares Modell verwendet, bei dem die Patienten (Level 1) innerhalb der Therapeuten (Level 2) und die Therapeuten wiederum innerhalb der Supervisoren (Level 3) genestet waren. Ergebnisse: In der Hauptanalyse erklärten Supervisoren weniger als 1% der Gesamtvarianz der Behandlungsergebnisse der Patienten. Schlussfolgerung: Es werden mögliche Gründe für den Mangel an Variabilität zwischen den Supervisoren diskutiert.

Objetivo: Embora a supervisão tenha sido desde sempre considerada um meio que ajuda terapeutas em formação a desenvolver as suas competências no trabalho clínico, muito pouca investigação empírica foi realizada no sentido de analisar a influência da supervisão no resultado do tratamento para os clientes. Especificamente, poderemos questionar-nos se diferenças ao nível dos supervisores poderão predizer/explicar se os clientes apresentarão mudanças positivas ou negativas ao longo da psicoterapia. Método: Neste estudo naturalista, usamos uma ampla (6521 clientes acompanhados por 175 terapeutas em formação que receberam supervisão de 23 supervisores) base de dados de um arquivo de 5 anos de resultados psicoterapêuticos, de um centro privado de saúde mental sem fins lucrativos. Testámos se os resultados terapêuticos dos clientes (medidos de acordo com o OQ-45.2) diferiram em função do supervisor. Foi utilizado um Modelo Linear Hierárquico com os clientes (Nível 1) enquadrados nos terapeutas (Nível 2), que por sua vez foram enquadrados nos respetivos supervisores (Nível 3). Resultados: De acordo com a análise principal, os supervisores explicaram menos de 1% da variância nos resultados psicoterapêuticos dos clientes. Conclusões: São discutidas razões possíveis para a falta de variabilidade entre supervisores.

目的:雖然長久以來督導制度已被視為幫助實習心理師發展臨床實務的有效方法，然而卻鮮少有實證研究來檢視督導對個案治療成效的影響。具體而言，或許有人會好奇不同督導者能否預測/解釋個案治療成效的正、負向改變。 方法:本研究採用自然主義研究法，大樣本來自一個非營利組織的心理健康中心(由175位實習心理師治療6521個個案，實習心理師分別受督於23位督導者)，從5年的歸檔資料中以心理治療成效問卷 (Outcome Questionnaire, OQ-45.2) 來評定治療成效，並探究不同督導者對接案成效的影響。運用階級線性模式分析個案(第一層)巢套於治療師內(第二層)，這些治療師又巢套於督導者內(第三層)。 結果:透過主要分析，督導者的變異僅能解釋個案治療成效不到 1%的變異量。結論：探討督導者之間為何缺少變異性的可能原因。

Keywords:

• supervision
• training
• psychotherapy outcome

Parole chiave:

• supervisione
• formazione
• esito della psicoterapia

Schlüsselwörter:

• Supervision
• Training
• Psychotherapieergebnis

關鍵字:

• 督導
• 實習心理師訓練
• 心理治療成效

Acknowledgment

The authors would like to thank Michael Ellis for help with this manuscript.