Abstract: The current study sought to examine whether explicit instruction affects teacher evaluators in terms of a six-factor Teacher Evaluation (TE) model encompassing Perception, Method, System, Content, Purpose, and Outcome. Moreover, it explored how training of the evaluators affects their practices in actual evaluation. To this end, twenty EFL teacher-evaluators selected as the participants of the study filled out a TE questionnaire (developed by the researchers) and participated in a semi-structured interview. In addition, the evaluators' actual practice was examined through recording of post-observation debriefing sessions between the evaluators and the teachers they supervised. Subsequently, a four-session training course on various aspects of teacher evaluation was held. After four weeks, the interviews, questionnaires, and debriefing sessions were repeated. To analyze the data, a two-way repeated measures Analysis of Variance (ANOVA) was run and the comparison of the results showed that the training course had positively affected many aspects of evaluators' perceptions and practices. Likewise, the content analysis of the interviews and debriefing sessions identified the features of the training course that the evaluators found most valuable such as the methods of observation, the strategies required for overcoming the evaluators' communication problems with teachers, and managing the debriefing sessions. The results also revealed that the TE factor outcome was not affected by the training instruction course.
Keywords: teacher evaluation training, teacher evaluators, evaluator's perceptions, evaluator's practices, post-observation debriefing sessions
Resumen: El presente estudio buscó examinar si la instrucción explícita afecta a los evaluadores de maestros en términos de un modelo de Evaluación de Maestros (TE) de seis factores que abarca Percepción, Método, Sistema, Contenido, Propósito y Resultado. Además, exploró cómo la formación de los evaluadores afecta sus prácticas en la evaluación real. Para ello, veinte profesores-evaluadores de inglés como lengua extranjera seleccionados como participantes del estudio llenaron un cuestionario TE (desarrollado por los investigadores) y participaron en una entrevista semiestructurada. Además, se examinó la práctica real de los evaluadores a través de la grabación de sesiones informativas posteriores a la observación entre los evaluadores y los profesores que supervisaban. Posteriormente, se llevó a cabo un curso de formación de cuatro sesiones sobre diversos aspectos de la evaluación docente. Después de cuatro semanas, se repitieron las entrevistas, los cuestionarios y las sesiones informativas. Para analizar los datos, se ejecutó un Análisis de Varianza (ANOVA) de medidas repetidas de dos vías y la comparación de los resultados mostró que el curso de capacitación había tenido un impacto positivo sobre muchos aspectos de las percepciones y prácticas de los evaluadores. Asimismo, el análisis de contenido de las entrevistas y sesiones posteriores identificaron las características del curso de capacitación que los evaluadores encontraron más valiosas, como los métodos de observación, las estrategias necesarias para superar los problemas de comunicación de los evaluadores con los profesores y la gestión de las sesiones posteriores. Los resultados también revelaron que el resultado del factor TE no se vio afectado por el curso de instrucción de capacitación.
Palabras Clave: formación en evaluación de profesores, evaluadores de profesores, percepciones de los evaluadores, prácticas de los evaluadores, sesiones informativas posteriores a la observación