摘要：O Programa Segundo Tempo criou o Protocolo de Observação de Aula (POA) a fim de analisar o quanto os professores conseguem materializar a metodologia do programa em suas aulas. O POA possui itens que contemplam aspectos que devem estar presentes em uma aula voltada para o ensino esportivo como um todo. Ele foi criado tanto para avaliar aulas, quanto para ser utilizado como um guia educativo para o planejamento e o melhoramento das mesmas. Considerando a necessidade de mensurar suas qualidades psicométricas, o presente estudo tem como objetivo testar a validade de critério, a consistência interna e a reprodutibilidade intra e interobservador das suas medidas. Para estabelecer a validade de critério, os escores das duas videoaulas foram comparados com o gabarito. Para a confiabilidade interobservador, foram comparados os escores que cada avaliador deu para as videoaulas. Quanto à confiabilidade intraobservador, foi usado o escore de uma segunda observação sobre a mesma videoaula em momentos diferentes. Após a análise dos resultados, as medidas do POA apresentaram boa confiabilidade (Alfa de Conbrach – 0,90; Reprodutibilidade Interobservador com CCI entre 0,89 e 0,91 e Reprodutibilidade Intraobservador com 11 dos 22 itens apresentando valor de p significativo). Sobre a validade de critério, apenas cinco itens apresentaram concordância acima de 50%. Desse modo, o POA traz boas perspectivas de aplicação e grande potencial de impacto no âmbito do ensino esportivo, contudo, parece importante que a capacitação para o seu uso seja reforçada, a fim de fortalecer os critérios de avaliação de aulas.
其他摘要：The Programa Segundo Tempo, aiming to quantify the adhesion of its teachers to the metodology of the program in them classes, created the Classroom Observation Protocol (COP). The POA has items that contemplate aspects that should be present in a class focused on sports education. It was created both to evaluate classes and to be used as an educational guide to plan and improve classes. Due to the need to measure the psychometric qualities of this instrument, this study aims to test the validity criteria, internal consistency and intra and interobserver reproducibility of the measures obtained by the COP. To establish the validity criteria, two video classes were assessed, the scores obtained were compared with the template. Regarding the interobserver reliability, the values referring to the video classes observation performed by each evaluator were compared. Regarding to the intraobserver reliability, a calculation based in a second observation of the same evaluator about the same video class in a different moment was made. After the analysis of the results, the measures of the COP presented a good reliability (Cronbanch Alpha – 0,90; Interobserver reproducibility with ICC between 0,89 and 0,91; Intraobserver reproducibility with 11 of 22 items presenting significative p value); nevertheless, concerning the validity criteria, only 5 items presented concordance above 50%. Thus, the POA brings good prospects for application and great potential for impact in the field of sports education, but it is necessary a reinforcement its training, in order to strengthen the assessment criteria.
关键词：Avaliação Educacional, Psicometria, Reprodutibilidade dos testes
其他关键词：Educational Measurement, Psychometrics, Reproducibility of Results
