A generalizability theory analysis of group process ratings in the treatment of cocaine dependence

Abstract

Videotaped group drug counseling sessions were rated for alliance, self-disclosure, positive and negative feedback, group cohesion, and degree of participation of each group member. Interrater reliability was good to excellent for most measures. However, generalizability coefficients based on statistical models that included terms for patient, counselor, session, group, and rater revealed that some measures had inadequate dependability at the patient level if only two raters and two sessions were used to create patient-level scores. In contrast, good generalizability coefficients based on two raters and two sessions were obtained for alliance, non-positive learning statements received from counselor, participation variables, and self-disclosures about the past. The implications of the findings for the design of process-outcome studies are discussed.

RÉSUMÉ

Des séances vidéo de counsellling de groupe ont été codées pour l'alliance, la révélation de soi, le feedback positif et négatif, la cohésion du groupe et le degré de participation de chaque membre du groupe. La fidélité interjuges était bonne à excellente pour la plupart des mesures. Cependant, les coefficients de généralisabilité basés sur des modèles statistiques qui incluaient des termes pour le patient, le conseiller, la séance, le groupe, et le codeur révélaient que certaines mesures avaient une fiabilité inadéquate au niveau du patient si seulement deux codeurs et deux mesures étaient utilisées pour créer un score au niveau du patient. Par contraste, des coefficients avec une bonne généralisabilité basés sur deux codeurs et deux séances étaient obtenus pour l'alliance, des énoncés d'apprentissage non positifs reçus du conseiller, des variables de participation, et de révélation de soi à propos du passé. Les implications de ces résultats pour la conception d’étude processus-résultats sont discutées.

Abstract

As filmagens das sessões de aconselhamento em grupo para as drogas foram classificadas para a aliança, a auto-revelação, feedback positivo e negativo, a coesão do grupo, e o grau de participação de cada membro do grupo. A inter-avaliação foi boa ou óptima para a maioria das medidas. No entanto, os coeficientes de generalização baseados em modelos estatísticos que incluíram os termos para o paciente, o conselheiro, a sessão, o grupo, e leitor revelou que algumas medidas tiveram confiança inadequada ao nível do paciente, se apenas dois avaliadores e duas sessões foram utilizados para criar pontuações dos pacientes. Em contraste, os bons coeficientes de generalização baseados em dois avaliadores e duas sessões foram obtidos para aliança, declarações de aprendizagem não-positivas recebidas pelo conselheiro, variáveis de participação e auto divulgações sobre o passado. As implicações dos achados para a concepção de estudos de desfecho de processo são discutidas.

Abstract

Sono state valutate sedute videoregistrate di counseling di gruppo per tossicodipendenti relativamente all'alleanza, self-disclosure, feedback positivi e negativi, coesione di gruppo e livello di partecipazione di ciascun membro del gruppo. L'affidabilità inter-rater è risultata da “buona” a “eccellente” per la maggior parte delle misure. Tuttavia, i coefficienti di generalizzabilità basati su modelli statistici che includevano le condizioni del paziente, del counselor, della seduta, del gruppo e del valutatore, hanno rivelato che alcune misure non risultavano sufficientemente affidabili a livello del paziente, quando venivano utilizzati solo due giudici e due sedute per creare punteggi a livello del paziente. Al contrario, sono stati ottenuti buoni coefficienti di generalizzabilità basati su due giudici e due sedute per l'alleanza, per le affermazioni di apprendimento non positivo da parte del counselor, per le variabili di partecipazione, e per l'autosvelamento rispetto al passato. Sono qui discusse le implicazioni dei risultati per i disegni di ricerca su processo-esito.

Abstract

Keywords:

• group psychotherapy
• process research
• alliance
• substance abuse