Estudos em Avaliação Educacional

A PROFICIENCY EXAMINATION FOR FOREIGN LANGUAGE TEACHERS: HISTORY AND ADVANCES

RESUMO Apresentam-se, neste artigo, aspectos basilares da constituição do Exame de Proficiência para Professores de Línguas Estrangeiras (Epple), a partir de sua trajetória histórica, de produções acadêmico-científicas e das potencialidades de avanços na continuidade desse projeto. O artigo constitui um diálogo com pesquisadores de avaliação de línguas, ao situar reflexões sobre alguns aspectos, como (i) formação e competências de professores de línguas e (ii) qualidade da proficiência linguístico-comunicativo-pedagógica de professores de línguas. As caracterizações da linguagem dos professores nos contextos de pesquisas sobre o Epple fortalecem o escopo temático da avaliação quanto à aplicação de exames que pretendem retratar a realidade sociocultural da formação profissional das licenciaturas no Brasil.

RESUMEN En este artículo se presentan aspectos básicos de la constitución del Exame de Proficiência para Professores de Línguas Estrangeiras [Examen de Suficiencia para Profesores de Lenguas Extranjeras] (Epple), a partir de su trayectoria histórica, de producciones académico-científicas y del potencial de avances en la continuidad de ese proyecto. El artículo constituye un diálogo con investigadores en evaluación de lenguas, al situar reflexiones en algunos aspectos, tales como (i) la formación y competencias de los profesores de lenguas y (ii) la calidad de la suficiencia lingüístico-comunicativo-pedagógica de los profesores de lenguas. Las caracterizaciones del lenguaje de los profesores en los contextos de investigaciones sobre el Epple fortalecen el alcance temático de la evaluación respecto a la aplicación de exámenes que objetivan retratar la realidad sociocultural de la formación profesional de los cursos de graduación en el Brasil.

ABSTRACT In this article, we present basic aspects of the Exame de Proficiência para Professores de Línguas Estrangeiras [Proficiency Examination for Foreign Language Teachers] (Epple) based on its historical trajectory, academic-scientific productions and potential for further advancement in the development of this project. The article represents a dialogue with language assessment researchers, by addressing reflections on issues such as (i) language teacher training and professional competences and (ii) the quality of language teachers’ linguistic-communicative-pedagogic proficiency. The characterizations of teacher language use in Epple-related research contexts reinforce the thematic scope of assessment concerning the application of exams that aim to portray the sociocultural reality of professional training in undergraduate courses in Brazil.

ASSESSMENT LITERACY: TRAINING RATERS FOR THE CELPE-BRAS WRITTEN PART

RESUMO Este trabalho apresenta o curso autoformativo para avaliadores da parte escrita do exame Celpe-Bras. São explicitados os objetivos, as bases teóricas e a abordagem metodológica utilizada nas atividades propostas, apontando seu potencial para o desenvolvimento do letramento em avaliação de avaliadores e de professores de português como língua adicional. Orientadas por um desenho de prática-reflexão-prática, as atividades do curso fornecem oportunidades para os cursistas experienciarem os procedimentos avaliativos e relacioná-los ao construto do exame. Os conteúdos do curso e a abordagem metodológica proposta projetam a aprendizagem por meio da reflexão sobre a prática de avaliação, trazendo subsídios teóricos e metodológicos para o ensino e a avaliação de produção textual.

RESUMEN Este trabajo presenta el curso autoformativo de evaluadores de la parte escrita del examen Celpe-Bras. Se han explicitado los objetivos, las bases teóricas y el enfoque metodológico utilizado en las actividades propuestas, subrayando su potencial para el desarrollo de la literacidad en evaluación de evaluadores y de profesores de portugués como lengua adicional. Guiadas por un diseño de práctica-reflexión-práctica, las actividades del curso brindan oportunidades para que los participantes experimenten los procedimientos de evaluación y los relacionen con el constructo del examen. Los contenidos del curso y el enfoque metodológico propuesto proyectan el aprendizaje por medio de la reflexión sobre la práctica evaluativa, aportando fundamentos teóricos y metodológicos para la enseñanza y la evaluación de la producción escrita.

ABSTRACT This paper presents the self-study training course for raters of the written part of the Celpe-Bras exam. The objectives, the theoretical framework, and the methodological design of the course tasks are explained, highlighting their potential for developing assessment literacy of raters and teachers of Portuguese as an additional language. Based on a practice-reflection-practice cycle, the course tasks provide opportunities for participants to engage in assessment procedures and relate them to the exam construct. The course content and design promote learning through reflection on assessment practice, providing theoretical and methodological support for teaching and assessing writing.

READING COMPREHENSION IN ENGLISH IN SCHOOLS WITH DIFFERENT EDUCATIONAL FORMATS

RESUMO O objetivo geral deste estudo é o de verificar se há diferença no nível de compreensão de leitura em inglês como língua estrangeira de alunos de duas escolas de ensino médio, de modalidades de ensino distintas. Participaram 225 estudantes, sendo 115 de escola técnica estadual e 110 de uma escola estadual, que responderam ao Teste de Cloze informatizado no programa de computador OnlineCloze. Os resultados apontaram uma boa compreensão de leitura em inglês em ambas as escolas e as diferentes modalidades de ensino não influenciaram na compreensão de leitura em inglês dos participantes.

RESUMEN El objetivo general de este estudio es verificar si hay diferencia en el nivel de comprensión de lectura en inglés como lengua extranjera entre estudiantes de dos escuelas secundarias con diferentes modalidades de enseñanza. Participaron 225 estudiantes, siendo 115 de una escuela técnica estatal y 110 de una escuela estatal, que respondieron al test computarizado Cloze mediante el programa informático OnlineCloze. Los resultados indicaron una buena comprensión de lectura en inglés en ambas escuelas y las diferentes modalidades de enseñanza no influyeron en la comprensión de lectura en inglés de los participantes.

ABSTRACT The overall objective of this study is to determine whether there is a difference in the level of reading comprehension in English as a foreign language among students from two high schools with distinct educational formats. A total of 225 students participated: 115 from a state technical school and 110 from a regular state school. Participants completed a computerized Cloze Test using the online program OnlineCloze. The results indicated good reading comprehension in English at both schools, and the different educational formats did not influence the students’ reading comprehension in English.

DEVELOPING ENGLISH TEACHERS’ LITERACY IN (SELF)ASSESSMENT WITH CHILDREN

ABSTRACT The need to develop literacy in language assessment with increasingly younger children has gained more attention in schools in recent years. For this reason, the aim of this paper is to present a guide designed to support teachers in enhancing their language assessment literacy with emphasis on promoting self-assessment as a tool for learning with children. The methodology presents the research stages undertaken to create such educational resource, and the analysis explains the guide’s icons sections, helping readers to understand how these sections can assist teachers in their self-learning process. In conclusion, teachers are expected to incorporate self-assessment practices in English classes with children to foster their learning development.

RESUMEN Ha tenido lugar los últimos años la necesidad de desarrollar el letramiento en la evaluación de lenguas con niños cada vez más pequeños. Por este motivo, el presente artículo tiene el objetivo de presentar una guía desarrollada para ayudar a los docentes a avanzar en su letramiento en lo que se refiere a la evaluación de lenguas con énfasis en la autoevaluación para el aprendizaje con niños. La metodología presenta las etapas de investigación que se han utilizado para crear dicho producto educativo y durante el análisis se explican los íconos de las secciones de la guía para que los lectores comprendan cómo dichas secciones pueden colaborar con los profesores en su proceso de aprendizaje autodidacta. En conclusión, se espera que los docentes hagan uso de la autoevaluación en las clases de inglés para niños con el propósito de desarrollar su aprendizaje.

RESUMO A necessidade de desenvolver o letramento em avaliação de línguas com crianças cada vez mais jovens tem ganhado mais atenção nas escolas nos últimos anos. Por essa razão, o objetivo deste artigo é apresentar um guia desenvolvido para ajudar os professores a avançarem em seu letramento em avaliação de línguas com ênfase na autoavaliação para a aprendizagem com crianças. A metodologia apresenta os estágios de pesquisa trilhados para criar tal produto educacional, e, durante a análise, as seções dos ícones do guia são explicadas com o intuito de fazer com que os leitores entendam como essas seções podem ajudar os professores em seu processo de aprendizagem autodidata. Em conclusão, é esperado que os professores façam uso da autoavaliação em aulas de inglês com crianças para desenvolver sua aprendizagem.

DEVELOPMENT OF LITERACY IN THE EVALUATION OF SPANISH LANGUAGE TEACHERS

RESUMO A avaliação é essencial na educação, mas aspectos sociais, políticos e éticos são frequentemente negligenciados na formação docente, resultando em baixos níveis de letramento em avaliação. Este artigo apresenta os conhecimentos, as habilidades e os princípios relevantes para o desenvolvimento do letramento em avaliação de línguas entre professoras de espanhol em um curso de formação continuada. Uma pesquisa de natureza qualitativo-interpretativista permitiu a geração de dados por meio do uso de diários reflexivos. Os resultados indicam que o curso ajudou as professoras a definirem objetivos e critérios avaliativos, ressaltando a importância de certos conhecimentos, habilidades e princípios para aprimorar a qualidade da educação e promover práticas avaliativas mais eficazes e justas.

RESUMEN La evaluación es esencial en la educación, pero los aspectos sociales, políticos y éticos son frecuentemente descuidados en la formación docente, lo que resulta en bajos niveles de literacidad en evaluación. Este artículo presenta los conocimientos, habilidades y principios relevantes para el desarrollo de la literacidad en la evaluación de lenguas entre las profesoras de español en un programa de formación continua. Una investigación de naturaleza cualitativa-interpretativa permitió la generación de datos mediante el uso de diarios reflexivos. Los resultados indican que el curso ayudó a las profesoras a definir los objetivos y criterios de evaluación, destacando la importancia de ciertos conocimientos, habilidades y principios para mejorar la calidad de la educación y promover prácticas de evaluación más efectivas y justas.

ABSTRACT Assessment is essential in education, yet social, political, and ethical aspects are often overlooked in teacher training, leading to low levels of assessment literacy. This article discusses the knowledge, skills, and principles relevant to the development of literacy in language assessment among Spanish teachers in a continuing education program. A qualitative-interpretive study generated data through the use of reflective journals. The findings indicate that the program helped teachers define assessment goals and criteria, highlighting the importance of specific knowledge, skills, and principles for improving the quality of education and promoting more effective and equitable assessment practices.

DIALOGIC REFLEXIVITY: A COLLABORATIVE ASSESSMENT IN ENGLISH LANGUAGE TEACHING

RESUMO A partir da observação do predomínio de teorias, práticas e políticas avaliativas tradicionais e coloniais no ensino de inglês, o presente artigo tem como objetivo vislumbrar possibilidades otherwise, com base em perspectivas decoloniais da linguística aplicada crítica feita no Brasil. Em uma pesquisa-ação autoetnográfica colaborativa, desenvolveu- -se uma avaliação alternativa em duas turmas de inglês pré-intermediário no projeto UTFPR Idiomas pelo período de um semestre. Neste estudo, essa experiência é relatada, e levanta-se a possibilidade de pensarmos a avaliação enquanto reflexividade dialógica, enfatizando a importância do envolvimento do aprendiz não só no processo, mas também no debate sobre as complexidades da linguagem e da avaliação.

RESUMEN A partir de la observación del predominio de teorías, prácticas y políticas de evaluación tradicionales y coloniales en la enseñanza del inglés, este artículo tiene como objetivo visualizar posibilidades otherwise, con base en perspectivas decoloniales de la lingüística crítica aplicada en Brasil. En una investigación-acción auto etnográfica colaborativa, se desarrolló una evaluación alternativa en dos clases de inglés pre-intermedio del proyecto UTFPR Idiomas durante un semestre. Este estudio informa sobre esta experiencia y plantea la posibilidad de considerar la evaluación como reflexividad dialógica, enfatizando la importancia de la participación del alumnado no solo en el proceso, sino también en el debate sobre las complejidades del lenguaje y de la evaluación.

ABSTRACT Based on the observation of the predominance of traditional and colonial assessment theories, practices, and policies in English language teaching, this article aims to explore other possibilities grounded in decolonial perspectives of critical applied linguistics in Brazil. In a collaborative autoethnographic action research project, an alternative assessment approach was developed in two pre-intermediate English classes within the UTFPR Idiomas project over the course of one semester. This study reports on this experience and proposes the possibility of understanding assessment as dialogic reflexivity, emphasizing the importance of learner involvement not only in the assessment process itself but also in discussions about the complexities of language and assessment.

EXPERIENCES OF EMERGENCY REMOTE TEACHING: TOWARD ASSESSMENT FOR/IN CYBERCULTURE

RESUMO Neste artigo, compilamos ações de disseminação e de experimentação de formas de pensar e concretizar a avaliação que ocorreram durante o ensino remoto emergencial, entre os anos de 2020 e 2021. Em um primeiro momento, apresentamos um levantamento de eventos de formação em avaliação para a aprendizagem em ambientes virtuais. Na sequência, trazemos uma pesquisa que evidenciou como o ensino remoto demandou adaptações de práticas que, ainda que de modo não sistematizado e forçado pelas condições, levou à experimentação de uma avaliação mais próxima de propósitos formativos e humanizadores. Concluímos que o uso informado das tecnologias, aliado a princípios norteadores da avaliação, constitui ferramentas para uma nova cultura de aprendizagem-avaliação-ensino para e na cibercultura.

RESUMEN En este artículo, recopilamos acciones de difusión y experimentación sobre formas de pensar y concretizar la evaluación, llevadas a cabo durante la enseñanza remota de emergencia entre 2020 y 2021. En primer lugar, presentamos un estudio sobre eventos de capacitación en evaluación para el aprendizaje en entornos virtuales. A continuación, presentamos una investigación que destacó cómo la enseñanza remota requirió adaptaciones de prácticas que, si bien no sistemáticas y forzadas por las circunstancias, llevaron a la experimentación de una evaluación más próxima de fines formativos y humanizadores. Concluimos que el uso informado de las tecnologías, combinado con los principios rectores de la evaluación, constituyen herramientas para una nueva cultura de aprendizaje-evaluación-enseñanza para y en la cibercultura.

ABSTRACT In this article, we compile dissemination initiatives and experimental approaches to rethinking and implementing assessment during emergency remote teaching between 2020 and 2021. We begin by presenting a survey of training events focused on assessment for learning in virtual environments. Next, we discuss a study that showed how remote teaching required adaptations to assessment practices. Although these changes were often unsystematic and driven by external conditions, they fostered experimentation with more formative and humanizing approaches to evaluation. We conclude that the informed use of technology, combined with guiding principles of assessment, serves as a foundation for a new culture of learning-assessment-teaching for and within cyberculture.

IDEB AND THE CHALLENGES OF EDUCATION AS A RIGHT: PROPOSALS FOR (RE)FORMULATION

RESUMO O objetivo deste artigo é compreender as contribuições do Índice de Desenvolvimento da Educação Básica (Ideb) para a garantia do direito à educação, legalmente previsto, por meio da análise dos resultados obtidos pelo ensino médio de escolas e municípios localizados no Espírito Santo. Para tanto, esta pesquisa adota uma abordagem quantitativa e empírica de natureza descritiva e exploratória. Com base nos resultados e nas fragilidades apontadas pela literatura, são propostas recomendações para aprimorar o indicador, atualmente em atualização. Esse movimento se faz importante considerando que, conforme exposto empiricamente no estudo, o indicador, assumido como parâmetro oficial da qualidade da educação nacional, pode contribuir para a exclusão educacional e aprofundamento das desigualdades.

RESUMEN El objetivo de este artículo es comprender las contribuciones del Índice de Desenvolvimento da Educação Básica [Índice de Desarrollo de la Educación Básica] (Ideb) para garantizar el derecho a la educación, legalmente previsto, mediante el análisis de los resultados obtenidos en la educación secundaria en escuelas y municipios de Espírito Santo. Para ello, esta investigación adopta un enfoque cuantitativo y empírico de naturaleza descriptiva y exploratoria. Con base en los resultados y en las debilidades señaladas por la literatura, son propuestas recomendaciones para mejorar el indicador, que actualmente se encuentra en proceso de actualización. Esta medida es importante considerando que, como se expone empíricamente en el estudio, el indicador, asumido como un parámetro oficial de la calidad de la educación nacional, puede contribuir para la exclusión educativa y la profundización de las desigualdades.

ABSTRACT The aim of this article is to understand the contributions of the Índice de Desenvolvimento da Educação Básica [Basic Education Development Index] (Ideb) to ensuring the legally established right to education by analyzing the results achieved by high schools in municipalities located in the state of Espírito Santo. To this end, this research adopts a quantitative, empirical approach with a descriptive and exploratory nature. Based on the results and the shortcomings highlighted in the literature, recommendations are proposed to improve the indicator, which is currently being updated. This effort is important considering that, as empirically demonstrated in the study, the indicator, which is assumed to be the official benchmark of national education quality, can contribute to educational exclusion and the deepening of inequalities.

INDICATORS OF THE PRESENCE OF PHYSICAL SPACES IN SCHOOLS

RESUMO Este estudo apresenta o desenvolvimento de indicadores de infraestrutura escolar com base nos microdados do Censo Escolar de 2023, abrangendo escolas públicas de ensino fundamental e médio de todo o país. Utilizou-se a Análise Fatorial Confirmatória para especificar um modelo hierárquico composto de seis fatores de primeira ordem, explicados por um fator de segunda ordem, denominado Indicador de Espaços Físicos nas Escolas, responsável por sintetizar os ambientes pedagógicos e os recursos de acessibilidade. Os resultados indicaram um ajuste adequado do modelo e evidenciaram disparidades relevantes conforme região geográfica, localização e dependência administrativa das escolas, ressaltando o papel central da infraestrutura na promoção da equidade e na melhoria da qualidade educacional.

RESUMEN Este estudio presenta el desarrollo de indicadores de infraestructura escolar basados en los microdatos del Censo Escolar de 2023, abarcando escuelas públicas de primaria y secundaria a nivel nacional. Se utilizó el Análisis Factorial Confirmatorio para especificar un modelo jerárquico compuesto por seis factores de primer orden, explicados por un factor de segundo orden, denominado Indicador de Espacios Físicos en las Escuelas, responsable de sintetizar los entornos pedagógicos y los recursos de accesibilidad. Los resultados indicaron un ajuste adecuado del modelo y evidenciaron disparidades significativas según la región geográfica, la ubicación y la dependencia administrativa de las escuelas, destacando el papel central de la infraestructura en la promoción de la equidad y en la mejora de la calidad educativa.

ABSTRACT This study presents the development of school infrastructure indicators based on microdata from the 2023 School Census, covering public elementary and secondary schools across the country. Confirmatory Factor Analysis was used to define a hierarchical model composed of six first-order latent factors, explained by a second-order factor, referred to as the School Physical Spaces Indicator. This model summarizes the presence of physical spaces and accessibility resources in educational units. The model showed satisfactory fit, and the results indicate significant disparities related to variables such as geographic region, location, and administrative dependency, underscoring the importance of adequate physical infrastructure in schools, as it constitutes an essential aspect for promoting educational equity and quality.

EDUCATIONAL ICMS: VARIATIONS IN THE DEFINITION OF EQUITY IN STATE REGULATIONS

RESUMO Este artigo analisa como os estados brasileiros mobilizam o conceito de equidade educacional em seus normativos do ICMS educacional, instituído pela Emenda Constitucional n. 108 (2020), que tornou o Fundo de Manutenção e Desenvolvimento da Educação Básica e de Valorização dos Profissionais da Educação (Fundeb) permanente. A regra determina que ao menos 10 pontos percentuais da cota-parte municipal do imposto sejam distribuídos com base em indicadores de melhoria da aprendizagem e aumento da equidade, definidos por cada estado. A partir da análise qualitativa de legislações aprovadas em 26 estados até 2024, são analisadas três dimensões: avanço na aprendizagem, equidade racial e equidade socioeconômica. Os resultados revelam variações na abordagem da equidade e apontam a necessidade de fortalecer a regulamentação nacional, com foco na redução das desigualdades educacionais, especialmente no tocante à dimensão racial.

RESUMEN Este artículo analiza cómo los estados brasileños operacionalizan el concepto de equidad educativa en sus normativas del ICMS educativo, instituido por la Enmienda Constitucional n. 108 (2020) que hizo permanente el Fundo de Manutenção e Desenvolvimento da Educação Básica e de Valorização dos Profissionais da Educação [Fondo de Mantenimiento y Desarrollo de Educación Básica y de Valoración de los Profesionales de Educación] (Fundeb) permanente. La regla determina que al menos el 10 % de la parte municipal de la cuota del impuesto sea distribuida con base en los indicadores de mejora del aprendizaje y aumento de la equidad, definidos por cada estado. A partir del análisis cualitativo de legislaciones aprobadas en 26 estados hasta 2024, son examinadas tres dimensiones: progreso en el aprendizaje, equidad racial y socioeconómica. Los resultados revelan variaciones en el abordaje de la equidad y resaltan la necesidad de fortalecer la regulación nacional, con énfasis en la reducción de las desigualdades educativas, especialmente en lo relacionado con la dimensión racial.

ABSTRACT This article analyzes how Brazilian states interpret and apply the concept of educational equity in their regulations concerning the educational ICMS, established by Constitutional Amendment n. 108 (2020) tha made the Fundo de Manutenção e Desenvolvimento da Educação Básica e de Valorização dos Profissionais da Educação [Fund for the Maintenance and Development of Primary Education and Valorization of Education Professionals] (Fundeb) permanent. The provision mandates that at least 10 percentage points of the municipal tax revenue share be distributed based on indicators of learning improvement and increased equity, as defined by each state. Based on a qualitative analysis of legislation enacted in 26 states up to 2024, the study examines three dimensions: learning progress, racial equity, and socioeconomic equity. The findings reveal variations in how equity is addressed and highlight the need to strengthen national regulation, focusing on reducing educational inequalities, particularly regarding racial equity.

QUOTA POLICY IN THE GRADUATE PROGRAM IN SOCIAL HISTORY AT FFLCH-USP

RESUMO O artigo trata da política de ação afirmativa nos processos seletivos (2022-2024) do Programa de Pós-Graduação em História Social da Faculdade de Filosofia, Letras e Ciências Humanas (FFLCH) da Universidade de São Paulo (USP), buscando analisar e identificar seus impactos no desempenho das pessoas candidatas durante os processos. Para isso, fez-se uso de metodologias da ciência de dados como estatísticas descritivas e técnicas não supervisionadas de machine learning. Os resultados apontaram uma tendência de desempenho superior entre pessoas não optantes pela política e inferior entre optantes e mulheres em geral, indicando, assim, a necessidade da política no Programa e da adoção de ações que promovam o acesso e a transparência dos dados dos processos seletivos e políticas democráticas de diversidade e inclusão.

RESUMEN Este artículo aborda la política de acción afirmativa en los procesos de selección (2022-2024) del Programa de Pós-Graduação em História Social [Programa de Posgrado en Historia Social] de la Faculdade de Filosofia, Letras e Ciências Humanas (FFLCH) de la Universidade de São Paulo (USP), buscando analizar e identificar su impacto en el desempeño de los candidatos durante los procesos. Para ello, se utilizaron metodologías de ciencia de datos, como la estadística descriptiva y técnicas no supervisadas de machine learning. Los resultados indicaron una tendencia de desempeño mayor entre quienes no optaron por la política y un menor desempeño entre quienes sí optaron y entre las mujeres en general, indicando la necesidad de esta política en el Programa y de la adopción de acciones que promuevan el acceso y la transparencia de los datos del proceso de selección, así como de políticas democráticas de diversidad e inclusión.

ABSTRACT This article addresses the affirmative action policy in the admission processes (2022-2024) of the Programa de Pós-Graduação em História Social [Graduate Program in Social History] at the Faculdade de Filosofia, Letras e Ciências Humanas (FFLCH) at the Universidade de São Paulo (USP), seeking to analyze and identify its impacts on the candidates’ performance during admission processes. To this end, data science methodologies such as descriptive statistics and unsupervised machine learning techniques were used. The results indicated a tendency toward higher performance among candidates who did not opt for the policy and lower performance among those who did opt for it, as well as among women in general. These findings highlight the need for maintaining the policy in the Program and for adopting measures that promote access and transparency of data from selection processes, along with democratic policies fostering diversity and inclusion.

SCHOOL INFRASTRUCTURE INDICATOR FOR BRAZILIAN SCHOOLS

RESUMO Este artigo compara metodologias empregadas para a construção do indicador de infraestrutura para as escolas brasileiras, com foco no ensino médio. Com isso, visa a fornecer operacionalizações para esse constructo e traçar um panorama da infraestrutura das escolas brasileiras nas últimas décadas. Para tanto, foram utilizados os dados administrativos do Censo Escolar, verificando a comparabilidade dos itens para analisar a distribuição no sistema ao longo do tempo (1997-2023). Embora tenha sido observada a melhoria da infraestrutura das escolas nas últimas décadas, ainda há uma variabilidade expressiva que marca a heterogeneidade e endossa a relevância do estabelecimento de indicadores sintéticos de infraestrutura que sejam capazes de compor e induzir políticas públicas.

RESUMEN Este artículo compara las metodologías utilizadas para la construcción de un indicador de infraestructura para las escuelas brasileñas, con especial atención en la educación secundaria. Con esto, busca proporcionar operacionalizaciones para este constructo y ofrecer una visión general de la infraestructura de las escuelas brasileñas en las últimas décadas. Para ello, fueron utilizados los datos administrativos del Censo Escolar, verificando la comparabilidad de los ítems para analizar la distribución dentro del sistema a lo largo del tiempo (1997-2023). Sin embargo, así hayan sido observadas mejorías en la infraestructura de las escuelas en las últimas décadas, aún existe una variabilidad significativa que manifiesta la heterogeneidad y subraya la importancia de establecer indicadores sintéticos de infraestructura que sean capaces de componer e inducir las políticas públicas.

ABSTRACT This article compares methodologies employed in the construction of a school infrastructure indicator for Brazilian schools, focusing on secondary education. The objective is to provide operationalizations for this construct and to outline an overview of the infrastructure of Brazilian schools over the past decades. For this purpose, administrative data from the School Census were used, assessing the comparability of items to analyze the distribution in the system over time (1997-2023). Although improvements in school infrastructure have been observed in recent decades, there remains significant variability, which highlights heterogeneity and underscores the importance of establishing synthetic infrastructure indicators capable of informing and guiding public policy.

PISA CONTEXTUAL QUESTIONNAIRES IN EDUCATIONAL RESEARCH: A SYSTEMATIC REVIEW

RESUMO Este artigo apresenta uma revisão sistemática da literatura em periódicos, utilizando o método Prisma, para analisar produções acadêmicas que empregam questionários contextuais do Programme for International Student Assessment (Pisa). Foram selecionados 22 artigos, classificados em três categorias de análises: desempenho educacional de estudantes; fatores ambientais, socioemocionais e políticos; e qualidade psicométrica. Os estudos abordam diversas perspectivas em variados contextos, com foco predominante no uso do questionário do estudante como instrumento de análise. Destaca-se o número expressivo de estudos comparativos entre países. Contudo, são reduzidas as análises desenvolvidas no contexto sul-americano.

RESUMEN Este artículo presenta una revisión sistemática de la literatura en revistas, utilizando el método Prisma, para analizar producciones académicas que emplean cuestionarios contextuales del Programme for International Student Assessment (Pisa). Fueron seleccionados 22 artículos, clasificados en tres categorías de análisis: desempeño educativo de los estudiantes; factores ambientales, socioemocionales y políticos; y calidad psicométrica. Los estudios abordan diferentes perspectivas en variados contextos, con un enfoque predominante en el uso del cuestionario estudiantil como instrumento de análisis. Se destaca el importante número de estudios comparativos entre países. Sin embargo, los análisis desarrollados en el contexto sudamericano son reducidos.

ABSTRACT This article presents a systematic review of the literature in journals, using the Prisma method to analyze academic studies that use contextual questionnaires from the Programme for International Student Assessment (Pisa). A total of 22 articles were selected and classified into three categories of analysis: student educational performance; environmental, socio-emotional, and political factors; and psychometric quality. The studies address different perspectives across various contexts, with a predominant focus on the use of the student questionnaire as an analytical tool. The significant number of comparative studies between countries stands out. However, there have been few analyses carried out in the South American context.

MEDIATED ASSESSMENT OF CHILDREN AGED 2 TO 5 YEARS

RESUMO O texto apresenta um protocolo de avaliação para crianças com idades entre 2 e 5 anos e tem como base escalas de desenvolvimento: a Base Nacional Comum Curricular e currículo para a educação infantil. A pauta para o registro dos resultados abrange as áreas a serem avaliadas e os materiais necessários, bem como um espaço para anotações. Trata-se de uma proposta de avaliação mediada, na qual o(a) avaliador(a) atenta para as estratégias da criança, interfere e medeia de forma intencional e organizada, com vistas a compreender seus conhecimentos e habilidades reais e potenciais. Os resultados das avaliações realizadas até o momento indicam a viabilidade do instrumento para aplicação e sua contribuição para o planejamento de intervenções pedagógicas na fase pré-escolar.

RESUMEN El texto presenta un protocolo de evaluación para niños con edad entre 2 y 5 años y tiene como base escalas de desarrollo, la Base Nacional Común Curricular y el currículo para la educación infantil. La agenda para el registro de los resultados abarca las áreas a evaluar y los materiales necesarios, así como un espacio para anotaciones. Se trata de una propuesta de evaluación mediada, en la que el evaluador presta atención a las estrategias del niño, interfiere y media de manera intencional y organizada, con miras a comprender sus conocimientos y habilidades reales y potenciales. Los resultados de las evaluaciones realizadas hasta el momento indican la viabilidad del instrumento para su aplicación y su contribución para la planificación de intervenciones pedagógicas en la etapa preescolar.

ABSTRACT The text presents an assessment protocol for children aged 2 to 5 years, and is based on development scales: the Base Nacional Comum Curricular [National Common Curriculum Base] and the curriculum for early childhood education. The agenda for recording the results includes covers the areas to be assessed and the necessary materials, as well as a space for notes. This is a mediated assessment proposal, in which the evaluator pays attention to the child’s strategies, intentionally and systematically intervenes and mediates, with a view to understanding the child’s actual and potential knowledge and skills. The results of the assessments carried out so far indicate the feasibility of the instrument for application and its contribution to the planning of pedagogical interventions in the preschool phase.

ON HOW TO MEASURE DIFFERENCES IN EDUCATIONAL OUTCOMES

RESUMO O artigo mostra que é inapropriado usar a divergência de Kullback-Leibler para comparar distribuições de notas de avaliações de aprendizagem, como é feito em vários trabalhos publicados. Argumenta-se, nesta pesquisa, que, havendo interesse em avaliar a desigualdade de distribuições de notas ou de escolaridades, é razoável utilizar uma medida usual de desigualdade como o índice de Gini. O artigo mostra também que é inapropriado usar a divergência de Kullback-Leibler como medida de desigualdade de notas entre categorias de estudantes. Para ilustrar o uso de diversas medidas e procedimentos estatísticos, é feita uma análise da distribuição da escolaridade das pessoas ocupadas no Brasil e nas unidades da Federação, usando os dados da Pesquisa Nacional por Amostra de Domicílios Contínua de 2022.

RESUMEN El artículo muestra que no es apropiado utilizar la divergencia de Kullback-Leibler para comparar distribuciones de notas de evaluaciones de aprendizaje, como es realizado en varios trabajos publicados. Se argumenta, en esta investigación, que, habiendo interés en evaluar la desigualdad de distribuciones de notas o de escolaridad, es razonable utilizar una medida habitual de desigualdad como el índice de Gini. El artículo también muestra que es inapropiado utilizar la divergencia de Kullback-Leibler como medida de desigualdad de notas entre categorías de estudiantes. Para ilustrar el uso de diversas medidas y procedimientos estadísticos, es realizado un análisis de la distribución de la escolaridad de las personas ocupadas en Brasil y en las unidades de la Federación utilizando datos de la Pesquisa Nacional por Amostra de Domicílios Contínua [Investigación Nacional Continua por Muestra de Hogares] de 2022.

ABSTRACT The article shows that the Kullback-Leibler divergence is not appropriate for comparing distributions of learning assessment grades, as is done in various published studies. This article argues that when the aim is to evaluate the inequality of score or education distributions, it is reasonable to employ a commonly used measure of inequality, such as the Gini index. The article also shows that it is not appropriate to use the Kullback-Leibler divergence as a measure of grade inequality between categories of students. To illustrate the use of various statistical measures and procedures, an analysis is conducted on the distribution of educational attainment among employed individuals in Brazil and its states, using data from the 2022 Pesquisa Nacional por Amostra de Domicílios Contínua [Continuous National Household Sample Survey].

ASSESSMENT OF PROFESSIONAL EDUCATION IN FEDERAL INSTITUTES: SYSTEMATIC MAPPING

RESUMO O objetivo deste mapeamento sistemático de literatura (MSL) foi identificar as abordagens de avaliação mais comuns no ensino profissional, as contribuições e os desafios do processo de avaliação, a análise do momento em que elas são realizadas e a compreensão das implicações dos resultados na melhoria e no aprimoramento desses cursos. Para a realização do MSL, foram pesquisados artigos em revistas acadêmicas publicados nos últimos 10 anos (2012-2022) nas bases de dados B-On, SciELO e Scopus. As informações indicam que as avaliações dos programas ou cursos são geralmente realizadas por meio de questionários e entrevistas no final da formação. Os estudos explorados nesta pesquisa não apresentam maiores detalhamentos para identificar como esses resultados são usados nos ajustes curriculares.

RESUMEN El objetivo de este Mapeo Sistemático de la Literatura (MSL) fue identificar los enfoques de evaluación más comunes en la educación profesional, las contribuciones y los desafíos del proceso de evaluación, el análisis del momento en que son realizadas y la comprensión de las implicaciones de los resultados en la mejora y perfeccionamiento de estos cursos. Para la realización del MSL, fueron investigados artículos en revistas académicas publicados en los últimos diez años (2012-2022) en las bases de datos B-On, SciELO y Scopus. Las informaciones indican que las evaluaciones de los programas o cursos son generalmente realizadas a través de cuestionarios y entrevistas al final de la formación. Los estudios analizados en esta investigación no presentan mayores detalles para identificar cómo estos resultados son utilizados en los ajustes del plan de estudios.

ABSTRACT The purpose of this Systematic Literature Mapping (SLM) was to identify the most common assessment approaches in middle-level vocational education, the contributions and challenges of the assessment process, the analysis of the timing of assessments, and the understanding of the implications of the findings in the improvement and enhancement of these courses. To carry out the MSL, we searched for articles in academic journals over the last ten years (2012-2022) in the B-On, SciELO, and Scopus databases. The findings indicate that assessments of programs or courses are usually carried out through questionnaires and interviews at the end of training. The studies analyzed in this research do not go into further details to identify how these findings are used in curricular adjustments.

THE INSTITUTIONALIZATION OF SOCIAL IMPACT METRICS: THE CASE OF UNIFESP

RESUMO Este artigo apresenta um framework para institucionalização de métricas de impacto social (MIS) para a Universidade Federal de São Paulo (Unifesp) baseado nos Objetivos de Desenvolvimento Sustentável (ODS) da Organização das Nações Unidas (ONU). Fundamenta-se no institucionalismo sociológico e na dinâmica do ranking Times Higher Education (THE), bem como articula as políticas universitárias com os ODS e alinha as atividades de ensino, pesquisa, extensão e cultura como interface dialógica com a sociedade. Os métodos de design, de design science research e dos pilares analíticos de Scott (regulativo, normativo e cultural-cognitivo) são utilizados. Como resultado, foi desenvolvido um framework MIS-Unifesp que estabelece princípios de análise institucional pautados em métricas.

RESUMEN Este artículo presenta un framework para la institucionalización de Métricas de Impacto Social (MIS) para la Universidade Federal de São Paulo (Unifesp) basado en los Objetivos de Desarrollo Sostenible (ODS) de la Organización de las Naciones Unidas (ONU). Se basa en el institucionalismo sociológico y en la dinámica del ranking Times Higher Education (THE), articula las políticas universitarias con los ODS y alinea las actividades de enseñanza, investigación, extensión y cultura como interfaz dialógica con la sociedad. Utiliza métodos de design, de design science research y de los pilares analíticos de Scott (regulativo, normativo y cognitivo-cultural). Como resultado, fue desarrollado un framework MIS-Unifesp que establece principios de análisis institucional basados en métricas.

ABSTRACT This article presents a framework for institutionalizing Social Impact Metrics (SIM) for the Universidade Federal de São Paulo (Unifesp) based on the United Nations (UN) Sustainable Development Goals (SDGs). It is based on sociological institutionalism and the dynamics of the Times Higher Education (THE) ranking. The framework integrates university policies with the SDGs and aligns teaching, research, extension and cultural activities as a dialogic interface with society. The methods employed include design methods, design science research and Scott’s analytical pillars (regulative, normative and cognitive cultural). As a result, a SIM-Unifesp framework was developed establishing principles of institutional analysis based on metrics.

THE “INDIGENOUS KNOWLEDGE AT SCHOOL ACTION” PROGRAMME: A PROCESS ASSESSMENT

RESUMO O artigo apresenta uma avaliação processual do programa “Ação Saberes Indígenas na Escola” (Asie), examinando sua trajetória e com base na percepção dos participantes, resultados preliminares, dificuldades e recomendações. A metodologia abrangeu coleta em fontes secundárias (bibliográficas, documentos, legislação) e pesquisa de dados primários (formulários on-line e entrevistas semiestruturadas). Concluiu-se que a Asie, alinhando-se aos pressupostos da educação escolar indígena, promove resgate da cultura e do saber dos anciãos, além do aprendizado mútuo e da articulação entre as aldeias. Os obstáculos envolveram desafios para maior participação, instabilidade financeira decorrente das mudanças de governo e questões operacionais associadas à distância das e entre as comunidades.

RESUMEN El artículo presenta una evaluación procesal del programa “Ação Saberes Indígenas na Escola” [“Acción Conocimientos Indígenas en la Escuela”] (Asie), examinando su trayectoria y, a partir de la percepción de los participantes, resultados preliminares, dificultades y recomendaciones. La metodología incluyó la recolección en fuentes secundarias (bibliografías, documentos, legislación) y la investigación de datos primarios (formularios en línea y entrevistas semiestructuradas). Se concluyó que Asie, alineándose con los presupuestos de la educación escolar indígena, promueve la recuperación de la cultura y de los conocimientos de los ancianos, además del aprendizaje mutuo y de la articulación entre las aldeas. Los obstáculos incluyeron desafíos para una mayor participación, inestabilidad financiera resultante de cambios en el gobierno y problemas operativos asociados con la distancia de y entre las comunidades.

ABSTRACT This article presents a procedural assessment of the “Ação Saberes Indígenas na Escola” programme [“Indigenous Knowledge at School Action”] (Asie), examining its trajectory and based on the participants’ perceptions, preliminary results, challenges and recommendations. The methodology included data collection from secondary sources (bibliographic materials, documents, legislation) and primary data research (online forms and semi-structured interviews). The study concluded that Asie, in line with the assumptions of indigenous school education, promotes the preservation of cultural heritage and elders’ knowledge, as well as mutual learning and collaboration among the villages. Challenges included barriers to greater participation, financial instability due to changes in government and operational issues associated with the distance of and between communities.

THE ASSESSMENT OF AND FOR LEARNING: PERCEPTIONS OF CONCEPTS AND PRACTICES

RESUMO O artigo apresenta uma investigação sobre as percepções de professores do 6º ano de escolaridade português acerca dos conceitos e das práticas de avaliação das e para as aprendizagens. Procuramos, assim, compreender as conceções dos referidos docentes sobre os conceitos e as práticas de avaliação das e para as aprendizagens e naquilo que se assemelhavam e diferenciavam. A investigação foi realizada com entrevista semiestruturada a esses professores e os resultados mostraram percepções da avaliação das aprendizagens numa lógica sumativa e da avaliação para as aprendizagens numa lógica formativa. Já sobre práticas, a avaliação para as aprendizagens era feita de forma pouco planeada, pouco estruturada e pouco refletida, sendo realizada, sobretudo, de forma intuitiva.

RESUMEN El artículo presenta una investigación sobre las percepciones de los profesores del 6º año de la escolaridad portuguesa sobre los conceptos y prácticas de evaluación de y para el aprendizaje. Por lo tanto, buscamos comprender las concepciones de los referidos profesores sobre los conceptos y prácticas de evaluación de y para el aprendizaje y de aquello en que se parecían y se diferenciaban. La investigación fue realizada con entrevistas semiestructuradas a estos profesores y los resultados mostraron percepcio-nes de la evaluación del aprendizaje en una lógica sumativa y de la evaluación para el aprendizaje en una lógica formativa. En cuanto a las prácticas, la evaluación para el aprendizaje era realizada de forma poco planificada, poco estructurada y poco reflexiva, realizándose, sobre todo, de forma intuitiva.

ABSTRACT This article presents an investigation into the perceptions of sixth-grade Portuguese teachers regarding the concepts and practices of assessment of and for learning. Our objective is to understand these teachers’ views of the concepts and practices of assessment of and for learning, identifying similarities and differences between them. The study was conducted using semi-structured interviews with these teachers. The results revealed that assessment of learning was perceived through a summative framework, whereas assessment for learning was interpreted within a formative framework. Regarding practices, assessment for learning was conducted with minimal planning, lacking structure and reflection, and was primarily implemented intuitively.

ASSESSMENT INSTRUMENTS IN ACTIVE METHODOLOGIES: A SYSTEMATIC REVIEW

RESUMO Este estudo identifica os instrumentos avaliativos usados para avaliar o aprendizado em metodologias ativas. Utilizou-se o método Prisma 2020, com fases de identificação, triagem e inclusão. As buscas realizadas em bases nacionais do Google Acadêmico e internacionais, como Eric, Science Direct, Scopus e Web of Science, após a triagem, compuseram o corpus da pesquisa com 19 artigos. Constatou-se que o uso de instrumentos avaliativos adequados é essencial para proporcionar um feedback contínuo, reforçando a autonomia e a responsabilidade dos estudantes pelo seu próprio aprendizado. Conclui-se que adaptar as práticas avaliativas de forma confiável em diferentes contextos culturais e educacionais promove uma educação de qualidade.

RESUMEN Este estudio identifica los instrumentos de evaluación usados para evaluar el aprendizaje en metodologías activas. Se utilizó el método Prisma 2020, con fases de identificación, cribado e inclusión. Las búsquedas realizadas en bases de datos nacionales de Google Académico e internacionales, como Eric, Science Direct, Scopus y Web of Science, después de la selección, compusieron el corpus de la investigación con 19 artículos. Se constató que el uso de instrumentos de evaluación adecuados es fundamental para brindar una retroalimentación continua, reforzando la autonomía y la responsabilidad de los estudiantes por su propio aprendizaje. Se concluye que adaptar las prácticas de evaluación de forma confiable en diferentes contextos culturales y educativos promueve una educación de calidad.

ABSTRACT This study identifies the assessment instruments used to assess learning in active methodologies. The Prisma 2020 method was used, encompassing the stages of identification, screening, and inclusion. Searches were carried out in national databases, such as Google Scholar, and international ones such as Eric, Science Direct, Scopus and Web of Science. After screening, the research corpus comprised 19 articles. The findings indicate that the use of appropriate assessment instruments was essential to provide continuous feedback, reinforcing students’ autonomy and responsibility for their own learning. It is concluded that adapting assessment practices reliably in different cultural and educational contexts promotes quality education.

THE PNE 2014-2024 AND FEDERAL POLICIES FOR HIGH SCHOOL EDUCATION

RESUMO Discutem-se neste texto a Meta 3 do Plano Nacional de Educação (PNE) 2014-2024, referente ao ensino médio, e as políticas públicas federais implementadas para essa etapa de ensino. Foi realizada pesquisa documental em leis, portarias e resoluções, em bases de dados e painéis de monitoramento de órgãos do Ministério da Educação. Sistematizado um referencial teórico sobre governança, partiu-se para a análise dos resultados. As cinco políticas para o ensino médio implementadas com recursos financeiros não tiveram como foco o aumento da taxa de matrícula e a redução da evasão, objetivos principais da Meta. Diante do não alcance da Meta, recomendam-se uma governança para cada Meta do novo PNE e mecanismos que assegurem o direcionamento das políticas federais para as Metas definidas.

RESUMEN En este texto se discuten la Meta 3 del Plano Nacional de Educação [Plan Nacional de Educación] (PNE) 2014-2024, referente a la educación secundaria, y las políticas públicas federales implementadas para esta etapa educativa. Fue realizada una investigación documental sobre leyes, ordenanzas y resoluciones, en bases de datos y paneles de seguimiento de órganos del Ministerio de Educación. Habiendo sistematizado un marco teórico sobre gobernanza, se partió para el análisis de los resultados. Las cinco políticas de educación secundaria implementadas con recursos financieros no se centraron en el aumento de las tasas de matrícula y reducir las tasas de deserción, los objetivos principales de la Meta. Ante la falta de logro de la Meta, se recomienda una gobernanza para cada Meta del nuevo PNE y mecanismos que aseguren la orientación de las políticas federales hacia las Metas definidas.

ABSTRACT This paper discusses Goal 3 of the Plano Nacional de Educação [National Education Plan] (PNE) 2014-2024, which refers to high school education, and the federal public policies implemented for this stage of schooling. A documentary research was conducted on laws, ordinances, and resolutions, as well as databases and monitoring panels from the Ministry of Education. A theoretical framework on governance was established, followed by an analysis of the results. The five high school policies implemented with financial resources did not focus on increasing enrollment rates or reducing dropout rates, the main objectives of the Goal. In light of the failure to achieve the Goal, this paper recommends governance for each Goal of the new PNE and mechanisms to ensure that federal policies are directed toward the defined Goals.

USES OF STATE-LEVEL EXTERNAL ASSESSMENTS: EXPANSION OF ACCOUNTABILITY POLICIES

RESUMO Nas últimas décadas, processos de reformas do Estado foram marcados, no campo educacional, por lógicas privadas de gestão implementadas nos sistemas públicos. Este artigo, recorte de pesquisa mais ampla que analisou avaliações próprias das redes estaduais de educação básica, se debruça sobre os usos dos resultados para definição de políticas públicas. Recorre à pesquisa documental para criar categorias que caracterizam os usos dos resultados na definição de políticas. O entretempo de 2003 a 2014 justifica--se por captar as tendências das avaliações estaduais, diante da instituição do Índice de Desenvolvimento da Educação Básica (Ideb). Constata-se crescente vinculação entre resultados das avaliações e premiação das escolas e/ou bonificação dos profissionais da educação.

RESUMEN En las últimas décadas, los procesos de reforma del Estado fueron marcados, en el ámbito educativo, por lógicas privadas de gestión implementadas en los sistemas públicos. Este artículo, parte de un proyecto de investigación más amplio que analizó las evaluaciones de las redes estatales de educación básica, se centra en el uso de los resultados para la definición de políticas públicas. Utiliza la investigación documental para crear categorías que caracterizan los usos de los resultados en la definición de políticas. El período de tiempo de 2003 a 2014 se justifica por capturar las tendencias de las evaluaciones estatales, dado el establecimiento del Índice de Desenvolvimento da Educação Básica [Índice de Desarrollo de la Educación Básica] (Ideb). Se constata un vínculo cada vez mayor entre los resultados de las evaluaciones y la premiación de las escuelas y/o bonificaciones para los profesionales de la educación.

ABSTRACT In recent decades, state reform processes in the field of education have been marked by private management practices implemented in public systems. This article, drawn from a broader research that analyzed the assessments of state basic education networks, focuses on how the results of these assessments are used to define public policies. The documentary research method is adopted to develop categories that characterize the uses of these results in policy-making. The period between 2003 and 2014 was selected as it captures trends in state-level assessments following the implementation of the Índice de Desenvolvimento da Educação Básica [Primary Education Development Index] (Ideb). The findings indicate a growing link between assessment results and school reward schemes and/or performance-based bonuses for education professionals.

SCHOOL CLIMATE IN A SCHOOL OF THE INTEGRAL EDUCATION PROGRAM OF THE STATE OF SÃO PAULO

RESUMO O artigo descreve parte dos resultados de uma pesquisa desenvolvida em quatro escolas do Programa de Ensino Integral (PEI) do estado de São Paulo. A hipótese foi a de que, ao regularem internamente os espaços e tempos criados pelo programa, os agentes escolares poderiam construir uma educação democraticamente orientada, processo no qual o clima escolar é fator de significativa relevância. Assim, o objetivo foi analisar o clima escolar por meio de observações, questionários e devolutiva dada a uma das escolas. O estudo oportunizou reflexões coletivas sobre os dados, explicitando diferentes perspectivas, ensejando amplo diálogo que pode contribuir para o aprimoramento do clima escolar, propiciando, assim, um ambiente respeitoso e democrático para todos que vivem e convivem na escola.

RESUMEN El artículo describe parte de los resultados de una investigación realizada en cuatro escuelas del Programa de Ensino Integral [Programa de Educación Integral] (PEI) del estado de São Paulo. La hipótesis fue que, al regular internamente los espacios y tiempos creados por el programa, los agentes escolares podrían construir una educación democráticamente orientada, proceso en el cual el clima escolar es un factor de significativa relevancia. Así, el objetivo fue analizar el clima escolar a través de observaciones, cuestionarios y retroalimentación dada a una de las escuelas. El estudio dio la oportunidad de reflexiones colectivas sobre los datos, haciendo explicitas diferentes perspectivas, permitiendo un amplio dialogo que puede contribuir para mejorar el clima escolar, proporcionando así un ambiente respetuoso y democrático para todos los que viven y conviven en la escuela.

ABSTRACT This article presents some of the findings from a study carried out in four schools participating in the Programa de Ensino Integral [Integral Education Program] (PEI) of the state of São Paulo. The hypothesis was that by internally regulating the spaces and time structures created by the program, school agents could build a democratically oriented education, a process in which school climate is a relevant factor. Thus, the objective was to analyze the school climate through observations, questionnaires and feedback given to one of the schools. The study fostered collective reflections on the data, revealing different perspectives, encouraging broad dialogue that may contribute to improve the school climate, thus providing a respectful and democratic environment for all members of the school community.

UNIVERSITY STUDENTS WHO DO NOT READ: AN EVALUATION OF ENADE RESPONDENTS FROM 2013 TO 2019

RESUMO Apesar da leitura ser fundamental para a formação de qualquer pessoa, a quantidade de concluintes do ensino superior que leu somente a bibliografia do curso vem aumentando com o tempo. A partir das respostas de mais de dois milhões de questionários do Exame Nacional de Desempenho dos Estudantes (Enade) de 2013 a 2019, este artigo analisa as relações entre leitura e variáveis socioeconômicas, variáveis da instituição de ensino superior e variáveis relacionadas ao percurso do ensino superior. Além da análise exploratória de dados, é aplicado um modelo de árvore de decisão para encontrar as variáveis mais relacionadas à leitura. Segundo esse modelo, a variável mais relacionada com a leitura é o tempo dedicado aos estudos fora do horário de aula.

RESUMEN Si bien la lectura es fundamental para la formación de cualquier persona, el número de graduados de educación superior que leyó solamente la bibliografía del curso viene aumentado con el tiempo. A partir de las respuestas de más de dos millones de cuestionarios del Exame Nacional de Desempenho dos Estudantes [Examen Nacional de Desempeño Estudiantil] (Enade) de 2013 a 2019, este artículo analiza las relaciones entre la lectura y variables socioeconómicas, variables de la institución de educación superior y variables relacionadas con la trayectoria de la educación superior. Además del análisis exploratorio de datos, es aplicado un modelo de árbol de decisión para encontrar las variables más relacionadas con la lectura. Según este modelo, la variable más relacionada con la lectura es el tiempo dedicado al estudio fuera del horario de clase.

ABSTRACT Although reading is fundamental to anyone’s education, the number of higher education graduates who read only the required course bibliography has increased over time. Based on the responses from more than two million questionnaires from the Exame Nacional de Desempenho dos Estudantes [National Student Performance Exam] (Enade) between 2013 and 2019, this article analyzes the relationships between reading habits and socioeconomic variables, higher education institution variables, and variables related to the higher education journey. In addition to exploratory data analysis, a decision tree model is applied to identify the variables most strongly associated with reading. According to this model, the variable most closely related to reading is the amount of time devoted to studying outside of class hours.

HIGH SCHOOL IN THE CONTEXT OF THE PNE (2014-2024): POSTPONED ACCESS AND RETENTION

RESUMO O presente artigo problematiza elementos de acesso e permanência com qualidade social no ensino médio no Brasil. Adota-se o método dialético, com ênfase na categoria metodológica contradição e nas categorias de conteúdo negação do acesso e protelação da permanência exitosa. Abordam-se, mormente, os indicadores educacionais: matrícula no ensino médio; taxa de atendimento escolar; população de 16 anos sem ensino fundamental completo; taxa líquida de matrícula; e população de 19 anos sem ensino médio. As análises revelam uma política educacional que secundarizou o Plano Nacional de Educação (PNE) (2014-2024) e, consequentemente, a urgência de ter todos os jovens de 15 a 17 anos na última etapa da educação básica. A universalização do ensino médio com qualidade social não pode mais ser protelada.

RESUMEN Este artículo problematiza los elementos del acceso y la permanencia con calidad social en la educación secundaria en el Brasil. Se adopta el método dialéctico, con énfasis en la categoría metodológica de contradicción y en las categorías de contenido de negación de acceso y postergación de la permanencia exitosa. Se tratan principalmente los indicadores educativos: matrícula en la educación secundaria; tasa de asistencia escolar; población de 16 años sin educación primaria completa; tasa neta de matrícula; y población de 19 años sin educación secundaria. Los análisis revelan una política educativa que ha dejado de lado el Plano Nacional de Educação [Plan Nacional de Educación] (PNE) (2014-2024) y, en consecuencia, la urgencia de tener a todos los jóvenes de 15 a 17 años en la última etapa de la educación básica. La universalización de la educación secundaria con calidad social es inaplazable.

ABSTRACT This article problematizes elements of access and retention with social quality in secondary education in Brazil. A dialectical method was adopted, emphasizing the methodological category of contradiction and the content categories of denial of access and postponement of successful retention. The study mainly addresses educational indicators such as enrollment in secondary education, school attendance rate, the proportion of the population aged 16 without completing basic education, net enrollment rate, and the proportion of the population aged 19 without completing secondary education. The analyses reveal an educational policy that has sidelined the Plano Nacional de Educação [National Education Plan] (PNE) (2014-2024) and, consequently, the urgency of ensuring that all youth aged 15 to 17 are enrolled in the final stage of basic education. The universalization of secondary education with social quality can no longer be postponed.

LARGE-SCALE ASSESSMENT AND SCHOOL EFFECTIVENESS IN BRAZILIAN SCIENTIFIC PRODUCTION

RESUMO O objetivo deste artigo é sistematizar o estado do conhecimento sobre a temática eficácia escolar no campo da avaliação em larga escala. Analisaram-se 24 artigos científicos, em língua portuguesa, abrangendo o período de 2012 a 2022, agrupados em cinco categorias: ferramentas de mensuração; determinantes intra e extraescolares; bibliográficas; vulnerabilidade; e equidade. Constatou-se a predominância de estudos de natureza qualitativa e mista, se comparado com os resultados de pesquisas que abordaram o período de 2000 a 2013, nas quais prevaleciam investigações de natureza quantitativa. Esse fato sinaliza para a ampliação e enriquecimento da produção do conhecimento sobre o tema objeto deste artigo, principalmente com o aumento nas formas de coletar, selecionar e analisar os dados.

RESUMEN El objetivo de este artículo es sistematizar el estado del conocimiento sobre la temática de la eficacia escolar en el campo de la evaluación a gran escala. Se analizaron 24 artículos científicos en lengua portuguesa, que abarcan el período de 2012 a 2022, agrupados en cinco categorías: herramientas de medición; determinantes intra y extraescolares; estudios bibliográficos; vulnerabilidad; y equidad. Se constató la predominancia de estudios de naturaleza cualitativa y mixta, en comparación con los resultados de investigaciones que abordaron el período de 2000 a 2013, en los cuales predominaban los estudios de naturaleza cuantitativa. Este hecho señala una ampliación y enriquecimiento de la producción del conocimiento sobre el tema objeto de este artículo, principalmente con el aumento en las formas de recolectar, seleccionar y analizar los datos.

ABSTRACT This article aims to systematize the state of knowledge on school effectiveness in the field of large-scale assessment. The present study analyzed 24 scientific articles written in Brazilian Portuguese, covering the period from 2012 to 2022, which were grouped into five categories: measurement tools; intra- and extra-school determinants; bibliographic studies; vulnerability; and equity. Compared to studies conducted between 2000 and 2013, which predominantly employed quantitative approaches, it was observed in the latter reviewed period a predominance of qualitative and mixed-method studies. This shift highlights an expansion and enrichment of knowledge production in this field, especially with the adoption of varied methods for data collection, selection, and analysis.

ANALYSIS OF THE DIMENSIONALITY OF THE 2017 ENADE FOR THE MATHEMATICS TEACHER EDUCATION PROGRAM

RESUMO O objetivo deste estudo foi avaliar os itens específicos e de múltipla escolha do Exame Nacional de Desempenho dos Estudantes (Enade) de 2017, para a Licenciatura em Matemática, quanto às dimensões do traço latente conhecimentos para ensino de matemática. Os dados, coletados de 10.869 participantes, foram analisados pela Teoria da Resposta ao Item, Teoria Clássica dos Testes e Análise Fatorial Exploratória, e revelaram uma prova com alta capacidade de diferenciação e com níveis de dificuldade moderados. Além disso, os padrões identificados indicam que o modelo bidimensional é apropriado, pois a prova foi composta de itens associados tanto a conhecimentos pedagógicos quanto a conhecimentos específicos da matemática, proporcionando uma avaliação mais completa das habilidades dos estudantes nessa área.

RESUMEN El objetivo de este estudio fue evaluar los ítems específicos y de opción múltiple del Exame Nacional de Desempenho dos Estudantes [Examen Nacional de Desempeño de Estudiantes] (Enade) de 2017, para la Licenciatura en Matemáticas, en relación con las dimensiones del rastro latente conocimientos para la enseñanza de las matemáticas. Los datos, recolectados de 10.869 participantes, fueron analizados mediante la Teoría de Respuesta al Ítem, la Teoría Clásica de los Tests y el Análisis Factorial Exploratorio, y revelaron una prueba con alta capacidad de diferenciación y con niveles de dificultad moderados. Además, los patrones identificados indican que el modelo bidimensional es apropiado, ya que la prueba estuvo compuesta por ítems asociados tanto a conocimientos pedagógicos como a conocimientos específicos de las matemáticas, proporcionando una evaluación más completa de las habilidades de los estudiantes en esta área.

ABSTRACT The aim of this study was to evaluate the specific and multiple-choice items of the 2017 Exame Nacional de Desempenho dos Estudantes [National Student Performance Exam] (Enade) for the Mathematics Teacher Education Program in terms of the latent trait dimensions of knowledge for teaching mathematics. Data, collected from 10,869 participants, were analyzed using Item Response Theory, Classical Test Theory, and Exploratory Factor Analysis, revealing an assessment with high discriminative capacity and moderate levels of difficulty. Furthermore, the identified patterns indicate that the bidimensional model is appropriate, as the exam consisted of items associated with both pedagogical knowledge and specific knowledge of mathematics, providing a more comprehensive assessment of students’ skills in this field.

THE FOR-PROFIT SECTOR OF HIGHER EDUCATION AND THE NEW CONDITIONS OF FACULTY WORK

RESUMO A meta 13 do Plano Nacional da Educação 2014-2024 enfatiza a ampliação da proporção de mestres e doutores na docência superior como um dos indicadores de qualidade. O artigo tem como objetivo apresentar o diagnóstico das condições de trabalho docente, observando as diferenças entre os setores que compõem a educação superior. Através da análise dos dados do Censo da Educação Superior, argumentamos que, embora a escolaridade possa ser uma proxy de qualidade, outros elementos condicionam a qualidade do trabalho docente e, por conseguinte, da educação superior. Os resultados indicam diferenças entre os setores público e privado e, dentro deste, entre as instituições com e sem fins lucrativos. Conclui-se que a valorização das condições de trabalho é essencial para a qualidade da educação.

RESUMEN La meta 13 del Plan Nacional de Educación 2014-2024 enfatiza el aumento de la proporción de maestros y doctores en la educación superior como uno de los indicadores de calidad. Este artículo tiene como objetivo presentar un diagnóstico de las condiciones laborales docentes, observando las diferencias entre los sectores que conforman la educación superior. Mediante el análisis de datos del Censo da Educação Superior [Censo de Educación Superior], argumentamos que, si bien la escolaridad pueda ser un proxy de calidad, otros elementos influyen en la calidad del trabajo docente y, en consecuencia, de la educación superior. Los resultados indican diferencias entre los sectores público y privado y, dentro de este último, entre las instituciones con y sin fines de lucro. Se concluye que la valorización de las condiciones laborales es esencial para la calidad de la educación.

ABSTRACT Goal 13 of Brazil’s 2014-2024 National Education Plan emphasizes increasing the proportion of teachers with master’s and doctoral degrees as a key indicator of quality in higher education. This article aims to present a diagnosis of faculty working conditions, highlighting the differences among the sectors that comprise higher education. Based on data from the Censo da Educação Superior [Higher Education Census], we argue that while education may serve as a proxy for quality, other factors significantly influence the quality of academic work and, consequently, the quality of higher education. The results indicate differences between public and private sectors, and within the private sector itself, between for-profit and non-profit institutions. The study concludes that improving faculty working conditions is essential to ensuring quality education.

AN ANALYSIS OF THE COMPLEXITY OF MATHEMATICS ITEMS USING SOLO TAXONOMY

RESUMO A pesquisa objetivou analisar a complexidade cognitiva de itens de matemática do 5º e 9º anos do ensino fundamental da Prova Brasil, a partir da taxonomia cognitiva denominada Structure of Observed Learning Outcomes (Solo). A consistência da análise qualitativa de 123 itens foi avaliada pelo método de concordância entre juízes e investigou- -se a complexidade cognitiva dos itens por meio dos níveis da taxonomia Solo. Também foi verificada a relação entre os níveis da Solo e os parâmetros de discriminação e de dificuldade dos itens e os níveis de proficiência necessários para acerto. Encontramos uma expressiva proporção de itens que exigem aprendizagem superficial. O tipo de aprendizagem superficial prevaleceu inclusive nas faixas de dificuldade e discriminação altas e nos níveis de proficiência considerados adequados e avançados.

RESUMEN Esta investigación tuvo como objetivo analizar la complejidad cognitiva de los ítems de matemáticas de 5º y 9º grado de primaria de la Prova Brasil, a partir de la taxonomía cognitiva denominada Structure of Observed Learning Outcomes (Solo). La consistencia del análisis cualitativo de 123 ítems fue evaluada mediante el método de acuerdo entre jueces y se investigó la complejidad cognitiva de los ítems por medio de los niveles de la taxonomía Solo. También fue verificada la relación entre los niveles de la Solo y los parámetros de discriminación y de dificultad de los ítems, así como los niveles de competencia requeridos para los aciertos. Encontramos una proporción significativa de ítems que exigen un aprendizaje superficial. El tipo de aprendizaje superficial prevaleció incluso en los niveles altos de dificultad y discriminación, y en los niveles de competencia considerados adecuados y avanzados.

ABSTRACT This study aimed to analyze the cognitive complexity of mathematics items from the 5th and 9th grades of elementary education in the Prova Brasil assessment, based on the cognitive taxonomy called Structure of Observed Learning Outcomes (Solo). The consistency of the qualitative analysis of 123 items was evaluated using the inter-rater agreement method, and the cognitive complexity of the items was investigated using the levels of the Solo taxonomy. The relationship between Solo levels and the discrimination and difficulty parameters of the items and the proficiency levels required for correct answers was also examined. We found a significant proportion of items that require surface learning. Surface learning predominated even among items with high levels of difficulty and discrimination and at proficiency levels considered adequate and advanced.

ACCOUNTING STUDENTS’ PERFORMANCE IN ENADE

RESUMO Esta revisão integrativa da literatura identificou as variáveis que influenciam o desempenho de estudantes de Ciências Contábeis no Exame Nacional de Desempenho de Estudantes (Enade). Foram identificados 15 trabalhos entre 2013 e 2023 em periódicos indexados na Spell, Web of Science e Scopus. Idade, gênero, estado civil, etnia, escolaridade dos pais, renda familiar, situação de trabalho, bolsa de estudos, nível de leitura e tipo de inscrição estão relacionados com a nota no Enade. A categoria administrativa, a organização acadêmica e a região da instituição de ensino condicionam o desempenho dos estudantes. Por fim, a organização didático-pedagógica, a infraestrutura e as oportunidades de ampliação da formação, se percebidas de forma positiva, estão atreladas a notas mais elevadas no Enade.

RESUMEN Esta revisión integradora de la literatura identificó las variables que influyen en el desempeño de los estudiantes de Ciencias Contables en el Exame Nacional de Desempenho de Estudantes [Examen Brasileño de Desempeño Estudiantil] (Enade). Fueron identificados 15 trabajos entre 2013 y 2023 en revistas indexadas en Spell, Web of Science y Scopus. La edad, el género, el estado civil, la etnia, la educación de los padres, los ingresos familiares, la situación laboral, las becas de estudios, el nivel de lectura y el tipo de matrícula están relacionados con el puntaje en el Enade. La categoría administrativa, la organización académica y la región de la institución educativa afectan el desempeño de los estudiantes. Finalmente, la organización didáctico-pedagógica, la infraestructura y las oportunidades de ampliación de la formación, si se perciben de forma positiva, se vinculan con las notas más altas en el Enade.

ABSTRACT This integrative literature review identified the variables that influence the performance of Accounting students in the Exame Nacional de Desempenho de Estudantes [Brazilian Student Performance Exam] (Enade). Fifteen studies published between 2013 and 2023 in journals indexed in Spell, Web of Science, and Scopus were identified. Age, gender, marital status, ethnicity, parents’ education, family income, employment status, scholarship, reading level, and enrollment type are related to the Enade score. The administrative category, academic organization, and region of the educational institution affect student performance. Finally, if perceived positively, the didactic-pedagogical organization, infrastructure, and opportunities for expanding training are linked to higher Enade scores.

TREATMENT OF MISSING DATA IN AN EDUCATIONAL EVALUATION WITH LONGITUDINAL DATA

RESUMO A ausência de dados nas avaliações educacionais está relacionada com desempenho e perfil dos estudantes. O presente estudo propõe uma nova abordagem baseada em modelos de misturas de padrões para análise de dados incompletos em avaliações longitudinais. Essa abordagem é comparada com os procedimentos listwise deletion (LD) e imputação múltipla (IM), utilizando modelos de crescimento linear, com base em uma amostra de 8.681 estudantes do ensino médio do Ceará. Verifica-se que os procedimentos diferem na estimação dos efeitos das variáveis preditoras e da taxa média de aprendizado em matemática. Com o uso da nova abordagem são obtidas estimativas mais realistas para a taxa média de aprendizado e as trajetórias geradas são mais coerentes do que aquelas estimadas pelo procedimento de imputação múltipla.

RESUMEN La ausencia de datos en las evaluaciones educativas está relacionada con el rendimiento y el perfil de los estudiantes. Este estudio propone un nuevo enfoque basado en modelos de patrones mezclados para analizar datos incompletos en evaluaciones longitudinales. Este enfoque es comparado con los procedimientos listwise deletion (LD) e imputación múltiple (IM), utilizando modelos de crecimiento lineal, a partir de una muestra de 8.681 estudiantes de educación secundaria de Ceará, Brasil. Se constata que los procedimientos difieren en la estimación de los efectos de las variables predictoras y de la tasa media de aprendizaje en matemáticas. Con el uso del nuevo enfoque, son obtenidas estimaciones más realistas para la tasa media de aprendizaje y las trayectorias generadas son más coherentes que aquellas estimadas por el procedimiento de imputación múltiple.

ABSTRACT The absence of data in educational assessments is related to student’s performance and profile. This study proposes a new approach based on pattern-mixture models for analyzing incomplete data in longitudinal evaluations. This approach is compared with listwise deletion (LD) and multiple imputation (IM) procedures, using linear growth models, based on a sample of 8,681 high school students in Ceará state, Brazil. The results show that the procedures differ in estimating the effects of predictor variables and average rate of learning in mathematics. The new approach yields more realistic estimates are obtained for the average rate of learning and the trajectories generated are more coherent than those estimated by the multiple imputation procedure.

LEARNING ASSESSMENT IN UNDERGRADUATE MATHEMATICS TEACHER EDUCATION PROGRAMS IN BRAZIL

RESUMO Neste artigo analisa-se como os conhecimentos sobre avaliação da aprendizagem, no processo de formação para a docência, são entendidos e normatizados nos projetos pedagógicos reformulados de cursos de Licenciatura em Matemática, conforme Resolução CNE/CP n. 2 (2015). Trata-se de resultado de pesquisa qualiquantitativa, utilizando análise documental. O corpus investigativo foi composto de 172 projetos pedagógicos de institutos federais de educação e universidades federais e estaduais brasileiras, publicados entre 2016 e 2019. Os resultados evidenciam que 51%, 27,3% e 21,7% dos documentos apresentam, respectivamente, amplitude baixa, média e alta de tais conhecimentos, não se observando a centralidade formativa sobre avaliação da aprendizagem nas disciplinas que compõem os currículos dos cursos.

RESUMEN En este artículo se analiza cómo los conocimientos sobre la evaluación del aprendizaje en el proceso de formación docente son entendidos y normatizados en los proyectos pedagógicos reformulados de las carreras de Licenciatura en Matemáticas, de acuerdo con la Resolución CNE/CP n. 2 (2015). Se trata del resultado de una investigación cualicuantitativa, basada en análisis documental. El corpus de la investigación fue constituido por 172 proyectos pedagógicos de institutos federales, universidades federales y estaduales brasileñas, publicados entre los años 2016 y 2019. Los resultados indican que el 51%, el 27,3% y el 21,7% de los documentos presentan, respectivamente, niveles bajos, medios y altos respecto a dichos conocimientos. Sin embargo, no se observa una centralidad formativa de la evaluación del aprendizaje en las asignaturas que conforman los currículos de las carreras.

ABSTRACT This article analyzes how knowledge related to learning assessment within the scope of teacher training is understood and regulated in the reformulated pedagogical project of Mathematics Teacher Education programs, based on Resolution CNE/CP n. 2 (2015). This is the result of quali-quantitative research that employed document analysis. The research corpus comprised 172 pedagogical projects from Brazilian federal institutes, and federal and state universities published between 2016 and 2019. The findings reveal that 51%, 27.3% and 21.7% of the documents present, respectively, low, medium and high levels of such knowledge. In general, a central formative focus on learning assessment is not observed within the courses that constitute the curricular structure of teacher education programs.

ASSESSMENT IN HISTORY TEACHING IN ANGOLAN PRIMARY EDUCATION: FROM THE INSTITUTED TO THE INSTITUTING

RESUMO Discute-se a avaliação a serviço das aprendizagens de alunos da 5a e 6a classes do ensino primário angolano, segundo três eixos (teórico, político-normativo e contextual), com incidência para a disciplina de história. O estudo objetivou a análise de conceções e práticas avaliativas no ensino dessa disciplina, à luz de abordagens promotoras do papel da avaliação a serviço da aprendizagem. Utilizou-se o paradigma metodológico interpretativo, recorrendo-se à análise documental, entrevistas, observação de aulas e um desenho de estudo de caso. Os resultados indicam uma forte discrepância entre o instituído e o instituinte, o primeiro orientado para perspetivas mais atuais ao invés do segundo. Sugere-se um investimento na formação de professores do ensino primário em Angola no domínio de avaliação.

RESUMEN Se discute la evaluación al servicio del aprendizaje de los alumnos de 5o y 6o año de la educación primaria angoleña según tres ejes (teórico, político-normativo y contextual) con incidencia en la asignatura de historia. El estudio tuvo como objetivo el análisis de conceptos y prácticas de evaluación en la enseñanza de esta materia, a la luz de enfoques promotores del papel de la evaluación al servicio del aprendizaje. Se utilizó el paradigma metodológico interpretativo, utilizando análisis documental, entrevistas, observación de clases, y un diseño de estudio de caso. Los resultados indican una fuerte discrepancia entre lo instituido y el instituyente, el primero orientado hacia perspectivas más actuales que el segundo. Se sugiere una inversión en la formación de profesores de educación primaria en Angola en el ámbito de la evaluación.

ABSTRACT This study discusses assessment practices aimed at supporting student learning in the 5th and 6th grades in Angolan primary education according to three axes (theoretical, political-normative and contextual), with a particular focus on the subject of history. The study aims at analysing assessment concepts and practices in the teaching of history, in the light of approaches that promote the role of assessment for learning. The research followed an interpretive methodological paradigm and employed document analysis, interviews and classroom observation, and a case study design. The findings point to a discrepancy between the instituted and the instituting, the former oriented towards more current perspectives rather than the latter. The study suggests investment in teacher training in Angola’s primary education system, particularly in the field of assessment.

ASSESSMENT IN A FRENCH SCHOOL: A PERSPECTIVE ON HETEROGENEITY

RESUMO Para o desenvolvimento desta pesquisa, realizamos um estudo de caso de natureza qualitativa com o objetivo de investigar a prática avaliativa de uma professora francesa da cidade de Lyon, atuante em uma turma do cours préparatoire. Nessa direção, o trabalho se desenvolveu nos anos letivos de 2021 e 2022, na França. A coleta de dados foi feita por meio de observações, entrevistas e minientrevistas. Os resultados revelaram que a professora francesa utilizava uma abordagem de avaliação mais formativa. Concluímos que as avaliações cotidianas eram realizadas no exercício diário da sala de aula e que os resultados dessas avaliações eram considerados para redimensionar e diversificar o ensino.

RESUMEN Para desarrollar esta investigación, realizamos un estudio de caso cualitativo con el objetivo de investigar las prácticas de evaluación de una profesora francesa de la ciudad de Lyon, que actúa en un grupo del cours préparatoire. En ese sentido, el trabajo se desarrolló entre los años 2021 y 2022 en Francia. La recopilación de datos se realizó mediante observaciones, entrevistas y minientrevistas. Los resultados revelaron que la profesora francesa utilizaba un enfoque de evaluación más formativo. Concluimos que las evaluaciones cotidianas eran realizadas en la práctica diaria del aula y que los resultados de esas evaluaciones se utilizaban para redefinir y diversificar la enseñanza.

ABSTRACT For the development of this research, we conducted a qualitative case study aimed at investigating the assessment practices of a French teacher from the city of Lyon, working with a cours préparatoire class. The study was carried out during the 2021 and 2022 academic years in France. Data collection included observations, interviews, and short interviews. The findings revealed that the French teacher employed a more formative assessment approach. We concluded that daily assessments were carried out in the day-to-day classroom routine and that the results of these assessments were used to adjust and diversify teaching.

THE INNOVATIVE CURRICULUM OF THE MEDICINE COURSE AT USP IN BAURU IN THE PROGRESS TEST

RESUMO O objetivo deste artigo é apresentar a construção do currículo do novo curso de Medicina da Universidade de São Paulo (USP) em Bauru, e o desempenho de seus estudantes no teste de progresso (TP) de 2018 e 2019 com outros nove cursos públicos. Foram analisados os dados do desempenho médio dos estudantes agrupados por área do conhecimento e ano de graduação. Como resultado, os estudantes de Bauru tiveram desempenho significativamente melhor que os demais nos dois anos do TP. Nas turmas do primeiro ano de 2018 e 2019, destacou-se o desempenho em Saúde Coletiva/Medicina de Família e Comunidade e, no segundo ano (2019), em todas as demais áreas, exceto a básica. Conclui-se que o currículo do novo curso de Medicina em Bauru, com diferentes metodologias ativas, oferece oportunidades pedagógicas e assistenciais de aplicação precoce e vivência prática dos conhecimentos, contribuindo para o bom desempenho obtido.

RESUMEN El objetivo de este artículo es presentar la construcción del currículo del nuevo curso de Medicina de la Universidade de São Paulo (USP) en Bauru y el desempeño de sus estudiantes en el teste de progreso [test de progreso] (TP) de 2018 y 2019 con otros nueve cursos públicos. Se analizaron los datos sobre el desempeño promedio de los estu- diantes, agrupados por área de conocimiento y año de graduación. Como resultado, los estudiantes de Bauru obtuvieron un desempeño significativamente mejor que los demás en ambos años del TP. En las clases del primer año de 2018 y 2019, se destacó el desempeño en Salud Colectiva/Medicina Familiar y Comunitaria, y en el segundo año (2019), en todas las demás áreas, excepto la básica. Se concluye que el currículo del nuevo curso de Medicina en Bauru, con sus diversas metodologías activas, ofrece oportunidades pedagógicas y asistenciales de aplicación temprana y la vivencia práctica de los conocimientos, contribuyendo para el buen desempeño alcanzado.

ABSTRACT The objective of this article is to present the development of the curriculum of the new medical program at the Universidade de São Paulo (USP) in Bauru, and the performance of its students in the 2018 and 2019 progress tests (TP) compared to nine other public medical programs. Data on students’ average performance grouped by knowledge area and year of graduation were analyzed. As a result, Bauru students performed significantly better than those from other institutions in both years of the TP. In the first-year classes of 2018 and 2019, their performance stood out in Public Health/Family and Community Medicine, and in the second year (2019), in all other areas except the basic one. It can be concluded that the curriculum of the new medical program in Bauru, with its diverse active learning methodologies, provides pedagogical and care opportunities for the early application and practical experience of knowledge, contributing to the strong performance obtained.

INTEGRAL FORMATION AND EVALUATION OF LEARNING IN INTEGRATED HIGH SCHOOL AT IFC

RESUMO Nos institutos federais englobam-se ensino, cultura, ciência e tecnologia em sintonia com a formação integral. Neste estudo elencamos o seguinte objetivo: investigar as concepções dos educadores do Instituto Federal de Educação, Ciência e Tecnologia Catarinense (IFC) sobre a avaliação da aprendizagem no contexto da formação integral no ensino médio integrado. Na coleta de dados foram utilizadas informações dos documentos do IFC-Brusque, aplicação de questionário, aplicação de oficina temática e diário de bordo, sendo utilizada a Análise Textual Discursiva para interpretação. Os participantes compreendem os princípios da educação integral e buscam práticas mais progressistas, porém esse ideário, frente aos desafios que emergem na instituição, acaba enfraquecido e os educadores recorrem a formatos pedagógicos mais tradicionais.

RESUMEN En los institutos federales se integran la enseñanza, la cultura, la ciencia y la tecnología en sintonía con la formación integral. En este estudio planteamos el presente objetivo: investigar las concepciones de los educadores del Instituto Federal de Educação, Ciência e Tecnologia Catarinense (IFC) sobre la evaluación del aprendizaje en el contexto de la formación integral en la educación secundaria integrada. En la recolección de los datos fueron utilizadas informaciones de los documentos del IFC-Brusque, aplicación de cuestionario, aplicación de taller temático y bitácora, utilizándose el Análisis Textual Discursivo para la interpretación. Los participantes comprenden los principios de la educación integral y buscan prácticas más progresistas, sin embargo, esta ideología, ante los desafíos que emergen en la institución, termina debilitada y los educadores recurren a formatos pedagógicos más tradicionales.

ABSTRACT Federal institutes integrate teaching, culture, science and technology as part of integral formation. This study sets out the following objective: to investigate the conceptions of educators at the Instituto Federal de Educação, Ciência e Tecnologia Catarinense (IFC) regarding learning assessment within the context of integral formation in integrated high school programs. Data were collected from IFC-Brusque documents, questionnaires, thematic workshops and logbooks, and Discursive Textual Analysis was used for interpretation. Participants understand the principles of integral education and seek more progressive practices. However, when faced with institutional challenges, these ideals tend to weaken, leading educators to resort to more traditional pedagogical formats.

THE EFFECTS OF SCHOOL CLIMATE ON EARLY CHILDHOOD EDUCATION: A SYSTEMATIC REVIEW

RESUMO Este artigo integra os estudos que buscam possíveis associações entre o clima escolar e o desenvolvimento cognitivo/acadêmico, procurando investigar essa associação na educação infantil. Realizamos uma revisão sistemática de artigos que abordam a relação do clima escolar com resultados escolares na educação infantil. A partir do levantamento, a aplicação de critérios de inclusão e exclusão resultou em nove artigos que apresentavam rigor na definição conceitual e mensuração do clima escolar, sendo analisados em profundidade. Na análise dos modelos estatísticos desenvolvidos pelos estudos, destacamos a associação entre a dimensão “ensino e aprendizagem” e a dimensão “relacional” e o desenvolvimento cognitivo/acadêmico de crianças pequenas.

RESUMEN Este artículo forma parte de una serie de estudios que buscan las posibles asociaciones entre el clima escolar y el desarrollo cognitivo/académico, con el objetivo de investigar esta asociación en la educación infantil. Realizamos una revisión sistemática de artículos que abordan la relación entre el clima escolar y los resultados académicos en la educación infantil. A partir de la encuesta y la aplicación de criterios de inclusión y exclusión, se obtuvieron nueve artículos que presentaron rigor en la definición conceptual y la medición del clima escolar, siendo analizados en profundidad. En el análisis de los modelos estadísticos desarrollados por los estudios, destacamos la asociación entre las dimensiones de “enseñanza y aprendizaje” y la dimensión “relacional” con el desarrollo cognitivo/académico de los niños pequeños.

ABSTRACT This article is one of several studies that seek possible associations between school climate and cognitive/academic development, aiming to investigate this relationship in early childhood education. We conducted a systematic review of articles addressing the relationship between school climate and educational outcomes in early childhood education. After conducting the search and applying the inclusion and exclusion criteria, we selected nine articles with rigorous conceptual definitions and measurements of school climate for in-depth analysis. In the analysis of the statistical models developed by the studies, we highlight the association between the “teaching and learning” dimension and the “relational” dimension and the cognitive/academic development of young children.

TEACHERS’ ATTITUDES IN THE STATE OF ESPÍRITO SANTO TOWARD EXTERNAL ASSESSMENTS

RESUMO Este estudo investiga as atitudes dos docentes capixabas em relação à ampla agenda de avaliações em larga escala, problematizando seus impactos na carreira docente. A pesquisa adotou uma abordagem quali-quantitativa e transversal, aplicando a escala de atitudes perante as avaliações externas em larga escala (EAAE) a 405 professores da rede estadual. Os resultados indicam uma tendência a atitudes negativas nas dimensões cognitiva e afetiva e positivas na dimensão comportamental. Essa divergência foi analisada à luz das inconsistências das políticas educacionais do estado do Espírito Santo, estruturadas em torno das avaliações externas, que impactam diretamente a prática docente. As discrepâncias identificadas ressaltam a necessidade de reestruturação dessas políticas, de modo que a avaliação, enquanto processo dinâmico, contribua efetivamente para a garantia do direito à educação.

RESUMEN Este estudio investiga las actitudes de los docentes capixabas frente a la amplia agenda de evaluaciones externas a gran escala, problematizando sus impactos en la carrera docente. La investigación adoptó un enfoque cualicuantitativo y transversal, aplicando la escala de actitudes ante las evaluaciones externas a gran escala (EAAE) a 405 profesores de la red estatal. Los resultados indican una tendencia hacia actitudes negativas en las dimensiones cognitiva y afectiva, y positivas en la dimensión comportamental. Esta divergencia fue analizada a la luz de las inconsistencias de las políticas educativas del estado de Espírito Santo, estructuradas en torno a las evaluaciones externas, que impactan directamente en la práctica docente. Las discrepancias identificadas resaltan la necesidad de una reestructuración de dichas políticas, de modo que la evaluación, como un proceso dinámico, contribuya efectivamente para la garantía del derecho a la educación.

ABSTRACT This study analyzed the attitudes of teachers in the state of Espírito Santo toward the extensive agenda of large-scale assessment, questioning its impact on teaching careers. The research adopted a quali-quantitative and cross-sectional approach, applying the scale of attitudes toward large-scale external assessments scale (EAAE) to 405 teachers in the state school system. The results indicated a tendency toward negative attitudes in the cognitive and affective dimensions and positive attitudes in the behavioral dimension. This divergence was analyzed in light of inconsistencies in the educational policies of Espírito Santo, which are structured around external assessments and directly impact teaching practices. The discrepancies identified highlight the need to restructure these policies so that assessment, as a dynamic process, effectively contributes to ensuring the right to education.

HOW IS STUDENT ASSISTANCE BEING MONITORED IN FEDERAL INSTITUTES?

RESUMO Este estudo analisou o monitoramento da assistência estudantil em institutos federais, visando a identificar ferramentas e desafios para subsidiar diretrizes nacionais que fortaleçam seus objetivos. A pesquisa, qualitativa, descritiva e exploratória, incluiu entrevistas em cinco instituições representativas das regiões brasileiras e pesquisa documental. Técnicas de análise de conteúdo, documental e triangulação por comple- mentaridade foram aplicadas para ampliar a compreensão do fenômeno. Os resultados apontaram ausência de um sistema estruturado de monitoramento, com práticas voltadas principalmente para auditorias, em detrimento da avaliação de impactos. Apesar disso, os planos de desenvolvimento institucional apresentam indicadores promissores para aplicação na assistência estudantil.

RESUMEN Este estudio analizó el monitoreo de la asistencia estudiantil en instituciones federales, visando identificar herramientas y desafíos para respaldar las directrices nacionales que fortalezcan sus objetivos. La investigación cualitativa, descriptiva y exploratoria incluyó entrevistas en cinco instituciones representativas de regiones las brasileñas e investigación documental. Se aplicaron técnicas de análisis de contenido, análisis documental y triangulación de complementariedad para ampliar la comprensión del fenómeno. Los resultados indicaron la ausencia de un sistema de monitoreo estructurado, con prácticas centradas principalmente en auditorías, en detrimento de la evaluación de impacto. A pesar de ello, los Planes de Desarrollo Institucional presentan indicadores prometedores para su aplicación en la asistencia estudiantil.

ABSTRACT This study analyzed the monitoring of student assistance in federal institutes, aiming to identify tools and challenges to support national guidelines that strengthen its objectives. This qualitative, descriptive, and exploratory research included interviews conducted at five institutions representing different Brazilian regions, along with document analysis. Content analysis, document analysis, and triangulation by complementarity were applied to deepen understanding of the phenomenon. The results indicated the absence of a structured monitoring system, with practices focused mainly on audits rather than impact assessment. Nevertheless, the Institutional Development Plans present promising indicators for application in student assistance programs.

USING DICTATION TO EVALUATE WRITING PROFICIENCY AMONG EARLY ELEMENTARY SCHOOL STUDENTS

RESUMO Este estudo avaliou o potencial de uma tarefa de ditado para medir a escrita de alunos do 2º ao 5º ano do ensino fundamental I. O ditado (10 palavras e 1 sentença) foi aplicado em sala de aula, pelas professoras, e 356 alunos responderam individualmente. Os acertos em respostas escritas aumentaram significativamente do 2º ao 5º ano, mostrando-se sistematicamente maiores para palavras isoladas (médias por ano: 21,4%, 45,6%, 63,5% e 84,0%) do que para a sentença (médias: 5,7%, 26,9%, 47,8% e 73,6%), mas a diferença tendeu a diminuir nos últimos anos. Os resultados permitiram caracterizar a escrita dos alunos da escola e identificar alunos com dificuldades severas. A tarefa mostrou-se útil para avaliar a escrita de forma rápida, coletiva e com baixo custo.

RESUMEN Este estudio evaluó el potencial de una tarea de dictado para medir la escritura de estudiantes de 2º a 5º primaria. El dictado (10 palabras y una oración) fue aplicado en el aula por las maestras, y 356 estudiantes respondieron individualmente. Los aciertos de las respuestas escritas aumentaron significativamente del 2º al 5º grado, siendo sistemáticamente mayores para palabras aisladas (promedios por curso: 21,4 %, 45,6 %, 63,5 % y 84,0 %) que para la oración (promedios: 5,7 %, 26,9 %, 47,8 % y 73,6 %), aunque la diferencia disminuyó en los últimos cursos. Los resultados ayudaron a caracterizar la escritura de los estudiantes y identificar casos con dificultades severas. La tarea demostró ser útil para evaluar la escritura de forma rápida, colectiva y económica.

ABSTRACT This study evaluated the potential of a dictation task to measure the writing skills of students from 2nd to 5th grade in elementary school. The dictation (10 words and one sentence) was administered in the classroom by teachers, and 356 students completed it individually. Accuracy in written responses increased significantly from 2nd to 5th grade, being consistently higher for isolated words (average percentages by grade: 21.4%, 45.6%, 63.5%, and 84.0%) than for the sentence (averages: 5.7%, 26.9%, 47.8%, and 73.6%), although this difference tended to decrease in the later years. The results allowed for the characterization of students’ writing performance and identified those with severe difficulties. The task was useful for assessing writing quickly, collectively, and at low cost.

THE CONCEPT DETERMINES THE METHOD: A RESPONSE TO HOFFMANN

RESUMO Nesta nota, procuramos responder à crítica de Rodolfo Hoffmann à metodologia que empregamos para medir desigualdades de proficiência de estudantes de diferentes grupos sociais em testes educacionais. Argumentamos que o crítico não leva em conta a conceituação proposta de justiça distributiva em educação nem o objetivo do trabalho, que é analisar a qualidade e as desigualdades de aprendizagem entre grupos sociais definidos por nível socioeconômico, raça e sexo. Assim, reapresentamos nosso objeto de pesquisa e alegamos que ele demanda uma referência externa para a análise da distribuição das proficiências dos estudantes. Defendemos que a metodologia apropriada reside nas medidas de divergência entre duas distribuições estatísticas e justificamos nossa opção pela divergência de Kullback-Leibler.

RESUMEN En esta nota, buscamos responder a la crítica de Rodolfo Hoffmann a la metodología que utilizamos para medir las desigualdades de suficiencia de estudiantes de diferentes grupos sociales en test educativos. Argumentamos que el crítico no considera la conceptualización propuesta de justicia distributiva en educación ni el objetivo del estudio, que es analizar la calidad y las desigualdades del aprendizaje entre grupos sociales definidos por el nivel socioeconómico, la raza y el género. Por lo tanto, reafirmamos nuestro objetivo de la investigación y argumentamos que él requiere una referencia externa para el análisis de la distribución de la suficiencia de los estudiantes. Argumentamos que la metodología adecuada reside en las medidas de divergencia entre dos distribuciones estadísticas y justificamos nuestra elección por la divergencia de Kullback-Leibler.

ABSTRACT In this note, we respond to Rodolfo Hoffmann’s critique of the methodology we employed to evaluate differences in proficiency levels among students from different social groups in educational exams. We argue that the reviewer disregards the proposed conceptualization of distributive justice in education, as well as the aim of the study, which is to analyze quality and differences of learning among social groups defined by socioeconomic status, race, and gender. Thus, we restate our research object and contend that it requires an external reference for analyzing the distribution of student proficiency. We claim that the appropriate methodology lies in measures of divergence between two statistical distributions and justify our choice of the Kullback-Leibler divergence.

THE THEIL-T INDEX AND THE KL DIVERGENCE: A SUPPLEMENTARY REPLY TO PROF. R. HOFFMANN

RESUMO A nota responde às críticas do professor Rodolfo Hoffmann sobre o uso da divergência Kullback-Leibler (KL) para medir desigualdades educacionais. Mostra-se que o método de densidades relativas é mais geral que a medida de divergência em questão. Os exemplos de Hoffmann são questionados por usarem de comparações de distribuições uniformes e por não considerar o método de construção de Teoria da Resposta ao Item (TRI). Argumenta-se que uma boa referência para a escala de proficiência representa uma meta educacional desejada. Prova-se matematicamente, no Apêndice, que o índice de Theil-T é, na verdade, um caso especial da divergência KL. Isso demonstra que a KL não é uma medida inadequada, mas uma ferramenta mais geral e flexível para analisar desigualdades educacionais.

RESUMEN La nota responde a la crítica del profesor Rodolfo Hoffmann sobre el uso de la divergencia Kullback-Leibler (KL) para medir las desigualdades educativas. Se muestra que el método de densidades relativas es más general que la medida de divergencia en cuestión. Los ejemplos de Hoffmann son cuestionados porque utilizan distribuciones uniformes para la comparación y por no considerar el método de construcción de la Teoría de la Respuesta al Ítem (TRI). Se argumenta que una buena referencia para la escala de aprendizaje representa un objetivo educativo deseado. Está demostrado matemáticamente, en el Apéndice, que el índice Theil-T es en realidad un caso especial de la divergencia KL. Esto demuestra que el KL no es una medida inadecuada, sino una herramienta más general y flexible para analizar las desigualdades educativas.

ABSTRACT The note responds to Professor R. Hoffmann’s criticism of the use of the Kullback-Leibler (KL) divergence to measure educational inequalities. It is shown that the method of relative densities is more general than the measure of divergence in question. Hoffmann’s examples are questioned because they use uniform distributions for comparison and for not considering the Item Response Theory (IRT) construction method. It is argued that a good reference for the proficiency scale represents a desired educational goal. It is proven mathematically, in the Appendix, that the Theil-T index is actually a special case of the KL divergence. This demonstrates that KL is not an inadequate measure, but rather a more general and flexible tool for analyzing educational inequalities.