1,716
Views
34
CrossRef citations to date
0
Altmetric
HONORING THE LIFE AND WORK OF JEREMY SAFRAN

Rupture Resolution Rating System (3RS): Development and validation

, , &
Pages 306-319 | Received 12 Sep 2018, Accepted 15 Nov 2018, Published online: 10 Dec 2018
 

Abstract

Objective: Our aim was to examine the reliability and validity of the Rupture Resolution Rating System (3RS), an observer-based measure of alliance ruptures and resolution processes. Method: We used the 3RS to rate early sessions from 42 cases of cognitive behavior therapy. We compared the 3RS to a simplified version of the Structural Analysis of Social Behavior (SASB), as well as patient and therapist self-reports of ruptures and the alliance. Results: Coders achieved high rates of interrater reliability on the frequency of confrontation and withdrawal ruptures and resolution strategies (ICCs = .85 to .98), as well as ratings of the therapist’s contribution to ruptures and the extent to which ruptures were resolved (ICC = .92). Predictive validity analyses found that confrontation markers (d = .74), successful resolution (d = .67), and ratings of the therapist’s contribution to ruptures (d = .61) predicted dropout from therapy. Analyses of convergent validity with the SASB failed to meet predictions; however, we observed theoretically coherent relations between 3RS and SASB variables. Confrontation rupture markers were significantly associated with patient self-report of rupture (d = 1.54) and therapist self-reported alliance (r = −.50, p = .002). Conclusions: This study provides evidence that the 3RS is a reliable and useful tool for examining psychotherapy process and predicting dropout.

Clinical or methodological significance of this article: This study provides evidence of the reliability and validity of the 3RS, an observer-based measure of alliance ruptures and resolution processes. The 3RS can be used to identify problems in the therapeutic relationship that are associated with premature dropout from therapy.

ABSTRACT

Obiettivo: Il nostro obiettivo è esaminare l’attendibilità e la validità della Rupture Resolution Rating System (3RS), una misura basata sull’osservatore dei processi di rottura e riparazione dell’alleanza terapeutica.

Metodo: Abbiamo usato la 3RS per valutare le prime sedute di 42 casi di terapia cognitivo comportamentale. Abbiamo comparato la 3RS a una versione semplificata della Structural Analysis of Social Behavior (SASB) e a valutazioni self report sulle rotture e sull’alleanza sia del paziente sia del terapeuta. Risultati: I valutatori hanno ottenuto un elevato punteggio di inter-rater reliability sulla frequenza di rotture di confrontazione e rotture di ritiro e strategie di risoluzione (ICC da .85 a .98), così come valutazioni del contributo del terapeuta alle rotture e al grado con cui queste rotture sono risolte (ICC = .92). Le analisi di validità predittiva hanno trovato che i marker di confrontazione (d = .74), le risoluzioni positive (d = .67), e le valutazioni del contributo del terapeuta alle rotture (d= .61) predicevano l’interruzione del trattamento. Le analisi di validità convergente con la SASB non ha evidenziato risultati significativi in termini di predittività. Tuttavia, abbiamo osservato relazioni teoricamente coerenti tra le variabili 3RS e SASB. Le rotture di confrontazione sono significativamente associate con le valutazioni self report di rotture da parte dei pazienti (d = 1.54) e con valutazioni self report di alleanza da parte dei terapeuti (r = −.50, p = .002).

Conclusioni: Questo studio dimostra che la 3RS è uno strumento attendibile e utile per esaminare il processo terapeutico e predire il dropout.

Significato clinico o metodologico di questo articolo: questo studio dimostra l’attendibilità e la validità della 3RS, una misura delle rotture dell’alleanza terapeutica e dei processi di risoluzione basata sull’osservatore. La 3RS può essere usata per identificare i problemi nella relazione terapeutica che sono associati con l’interruzione prematura del trattamento.

摘要

目的:我們的目的是為檢視化解斷裂的評分系統(3RS)的信度與效度,這是由觀察員評量的工具,測 量同盟的破裂與化解的歷程。方法:我們使用3RS,並針對42 位接受認知行為治療個案的早期談話 進行評分,我們比較3RS、社會行為結構分析(SASB)的簡版,以及病人和治療師自陳的斷裂和同 盟。結果:編碼者在面質與退縮斷裂的頻率,以及化解策略,有極高的評分者信度(ICC s= .85 至.98); 在治療師對斷裂的貢獻和解決斷裂的程度評量,也有很高的評分者信度(ICC=.92);預測效度分析發 現,面質的標記(d=.74)、成功化解(d=.67),以及治療師對於斷裂所做貢獻(d=.61)的評分,均能預測是 否治療提早結束,雖然SASB 的聚合效度分析未能達到預測之效,然而,在理論上,我們能觀察到 3RS 和SASB 變項之間的一致關係,面質斷裂的標記與病人自陳的斷裂(d=1.54)及治療師自陳的同盟 (r=−.50, p=.002)之間有顯著關連。結論:本研究顯示3RS 是檢視心理治療歷程和預測提早結案的可靠 而有用工具。

Resumo

Objetivo: Nosso objetivo foi examinar a confiabilidade e validade do Sistema de Classificação de Resolução de Ruptura (3RS), uma medida baseada em observadores de rupturas da aliança e processos de resolução. Método: Utilizamos o 3RS para avaliar as sessões iniciais de 42 casos de terapia cognitivo comportamental. Comparamos o 3RS com uma versão simplificada da Análise Estrutural do Comportamento Social (SASB), bem como auto-relatos de paciente e terapeuta de rupturas e da aliança. Resultados: Os codificadores alcançaram altas taxas de confiabilidade interavaliador na freqüência de confrontações e rupturas de retirada e estratégias de resolução (ICCs = .85 a .98), bem como avaliações da contribuição do terapeuta às rupturas e a extensão em que as rupturas foram resolvidas (ICC = .92). Análises de validade preditiva indicaram que marcadores de confrontação (d = .74), resolução bem-sucedida (d = .67) e classificações da contribuição do terapeuta às rupturas (d = .61) previram o abandono da terapia. Análises de validade convergente com o SASB não encontraram previsões; entretanto, observamos relações teoricamente coerentes entre variáveis do 3RS e SASB. Os marcadores de ruptura de confrontação foram significativamente associados à ruptura autorreferida pelo paciente (d = 1.54) e a aliança autorreferida do terapeuta (r = -.50, p = .002). Conclusões: Este estudo fornece evidências de que o 3RS é uma ferramenta confiável e útil para examinar o processo de psicoterapia e prever o abandono.

Significância clínica ou metodológica deste artigo: Este estudo fornece evidências da confiabilidade e validade do 3RS, uma medida baseada em observadores de rupturas da aliança e processos de resolução. O 3RS pode ser usado para identificar problemas na relação terapêutica que estão associados ao abandono prematuro da terapia.

Acknowledgements

We would like to thank the patients, therapists, supervisors, and research assistants who made this study possible. We would particularly like to thank Briana Auman, Liana Diamond, Alexandra Drake, Eriko Dunn, Elizabeth Ellman, Shira Kelin, Sara Rothschild, and Samantha Stein for their many hours of coding and their invaluable contributions to the development of the 3RS. This study was supported in part by Grant MH07178 from the National Institute of Mental Health (Primary Investigator: J. Christopher Muran). Portions of this paper were presented at the 46th International Meeting of the Society for Psychotherapy Research (SPR), June 2015, Philadelphia, PA, USA, and at the 47th International Meeting of SPR, June 2016, Jerusalem, Israel.

Additional information

Funding

This work was supported by National Institute of Mental Health [grant number MH07178].

Log in via your institution

Log in to Taylor & Francis Online

PDF download + Online access

  • 48 hours access to article PDF & online version
  • Article PDF can be downloaded
  • Article PDF can be printed
USD 53.00 Add to cart

Issue Purchase

  • 30 days online access to complete issue
  • Article PDFs can be downloaded
  • Article PDFs can be printed
USD 200.00 Add to cart

* Local tax will be added as applicable

Related Research

People also read lists articles that other readers of this article have read.

Recommended articles lists articles that we recommend and is powered by our AI driven recommendation engine.

Cited by lists all citing articles based on Crossref citations.
Articles with the Crossref icon will open in a new tab.