Estudos em Avaliação Educacional
Print version ISSN 0103-6831
Abstract
MATOS, Daniel Abud Seabra. Confiabilidade e concordância entre juízes: aplicações na área educacional. Est. Aval. Educ. [online]. 2014, vol.25, n.59, pp.298-324. ISSN 0103-6831. https://doi.org/10.1822/255920142750.
Os objetivos desta pesquisa foram: (1) investigar as estratégias de verificação da confiabilidade e concordância entre juízes, enfatizando as aplicações na área educacional; (2) realizar uma revisão da literatura nacional sobre as técnicas de confiabilidade e concordância entre juízes e suas áreas de aplicação; e (3) ilustrar a aplicação das técnicas de confiabilidade e concordância entre juízes por meio da análise das correções das redações do vestibular de uma universidade pública de Minas Gerais. Utilizamos o coeficiente de correlação intraclasse para analisar a confiabilidade e concordância entre juízes na correção das redações no período de 2005 a 2010. Identificamos pouco uso, nas pesquisas educacionais, de técnicas de concordância entre juízes. Quanto à análise da correção das redações, alguns resultados foram satisfatórios (exemplo: confiabilidade média dos juízes para as notas totais das redações) e outros insatisfatórios (exemplo: concordância baixa em alguns critérios de correção).
Keywords : Taxa de Confiabilidade; Concurso Vestibular; Juízes; Redação..