Quality of Instruction Improved by Evaluation and Consultation of Instructors

Abstract

One aim of student evaluation of instruction is the improvement of teaching quality, but there is little evidence that student assessment of instruction alone improves teaching. This study tried to improve the effects of evaluation by combining evaluation with individual counselling in an institutional development approach. Evaluation was conducted in a private school for speech therapy (logopedia) in 35 classes (N = 16 teachers, N = 592 students). Evaluation was done twice within a period of three to twelve months using a standardized questionnaire (HILVE‐II) developed for evaluation of university courses. The intervention effect on teaching quality was more than half a standard deviation on the teacher scales. Despite the fact that the counsellor had no pedagogical training, the quality of teaching not only improved quantitatively and qualitatively but also became more homogeneous although the relative rank listing of teachers did not change.

Ein Ziel der studentischen Lehrevaluation ist die Verbesserung von Lehrqualität. Es gibt aber wenig empirische Evidenz dafür, dass studentische Lehrevaluation allein Lehre verbessern kann. Diese Studie versuchte, die Effekte von Veranstaltungskritik in einem Ansatz, der Lehrevaluation mit Beratung verbindet, zu erhöhen. Lehrveranstaltungsevaluation wurde in einem privaten Ausbildungsinstitut für Logopädie in 35 Kursen von 16 Dozenten mit 592 Studierenden durchgeführt. Veranstaltungskritik wurde zweimal praktiziert binnen eines Zeitabschnitts von drei bis zwölf Monaten anhand eines Fragebogens (HILVE‐II), der für die Evaluation von Hochschulveranstaltungen entwickelt wurde. Der Verbesserungseffekt auf Lehrqualität war in den dozentenbezogenen Skalen größer als eine halbe Standardabweichung. Obwohl der Berater keine pädagogische Ausbildung hatte, verbesserte sich die Lehrqualität nicht nur in den quantitativen und qualitativen Maßen, sondern wurde auch homogener. Die relative Rangreihung innerhalb der Dozenten blieb aber stabil.

Un des objectifs de l’évaluation, par les étudiants, de l’enseignement est l’amélioration de la qualité de ce dernier. Pourtant, les preuves que l’évaluation de l’enseignement par les étudiants améliore celui‐ci sont limitées. Cette étude a tenté d’améliorer les effets de l’évaluation en combinant l’évaluation avec du conseil individuel au sein d’une approche de développement institutionnel. L’évaluation a été effectuée dans 35 classes (N = 16 enseignants, N = 592 étudiants) d’une école privée d’orthophonie (logopédie). L’évaluation a été effectuée deux fois sur une période variant de trois à seize mois en employant un questionnaire standard (HILVE‐II) développé pour l’évaluation des cours universitaires. L’effet relatif à la qualité de l’enseignement associé à l’intervention représentait plus d’un demi écart‐type sur l’échelle des enseignants. En dépit du fait que le conseiller n’avait pas de formation pédagogique, la qualité de l’enseignement s’est améliorée à la fois au plan quantitatif et au plan qualitatif, en plus de devenir davantage homogène, bien que le positionnement relatif des enseignants n’ait pas changé.

Acknowledgements

We want to thank all participating students and teachers for their collaboration.