Estudos em Avaliação Educacional

A study on associated factors through hierarchical quantile regression

RESUMO Este trabalho apresenta uma abordagem não usual em estudo de fatores associados ao desempenho escolar, utilizando regressões quantílicas hierárquicas. Enquanto na abordagem tradicional tem-sepor objetivo identificar fatores importantes com base nos indivíduos da faixa intermediária de proficiência, nesta aqui apresentada procura-se detectar efeitos nos quantis da distribuição de proficiência, permitindo identificar como determinado fator influencia estudantes de baixa, intermediária e alta proficiências. São realizadas a descrição da metodologia adotada e uma aplicação com os dados das provas de Língua Portuguesa e Matemática do 8º ano do ensino fundamental doestado do Pará, em 2016.

RESUMEN Este trabajo presenta un abordaje no usual en el estudio de factores asociados aldesempeño escolar, haciendo uso de regresiones cuantílicas jerárquicas. Mientrasque en el enfoque tradicional se tiene el objetivo de identificar factores importantesen base a los individuos del rango intermedio de competencia, en este abordajese pretende detectar efectos en los cuantiles de la distribución de competencia, lo que permite identificar cómo determinado factor influye en los estudiantes decompetencia baja, intermedia y alta. Se describe la metodología adoptada y unaaplicación con los datos de las pruebas de Lengua Portuguesa y Matemáticas del 8ºaño de la Educación Básica del estado de Pará, en el 2016.

ABSTRACT In this paper, we present an unusual approach to factors associated with academic achievement since we use hierarchical quantile regressions. While the traditional approach aims to identify important factors based on individuals with an intermediate performance, our approach aims to detect the effects on performance distribution quantiles, thus allowing to identify how a certain factor can affect poor-,intermediate-, and high-performing pupils. We describe the methodology and use it with data from Portuguese and Mathematics tests of the 8th grade of primary education in the Brazilian state of Pará, in 2016.

Educational evaluation: theoretical concepts and conflicts

RESUMO O artigo objetiva realizar uma discussão teórica ao revisitar, sistematizar e refletir a respeito de distintas concepções de avaliação e de suas tendências no campo da avaliação educacional. A construção histórica dessas concepções de avaliação sinaliza, em suas origens, determinadas demandas que alteram a ênfase da avaliação educacional em cada momento do campo da avaliação educacional. Destaca-se que, no contexto atual, a compreensão a respeito da avaliação educacional está associada ao hibridismo de distintas concepções de avaliação. Esse hibridismo, materializado nas políticas de avaliação, tem posto em evidência um momento de transição nas tendências das concepções de avaliação, com avanços e recuos importantes no alcance, objetos e lógica da avaliação educacional, ao combinar harmonização ou conflitos das/entre concepções de avaliação.

RESUMEN El artículo tiene el objetivo de realizar una discusión teórica al revisitar, sistematizar y reflexionar sobre distintas concepciones de evaluación y sus tendencias en el ámbito de la evaluación educacional. La construcción histórica de tales concepciones de evaluación señala, en sus orígenes, determinadas demandas que alteran el énfasis de la evaluación educacional en cada momento del campo de la evaluación educacional. Se subraya que, en el actual contexto, la comprensión acerca de la evaluación educacional está asociada al hibridismo de distintas concepciones de evaluación. Dicho hibridismo, materializado en las políticas de evaluación, ha puesto en evidencia un momento de transición en las tendencias de las concepciones de evaluación, con importantes avances y retrocesos en lo que se refiere al alcance, objetos y lógica de la evaluación educacional, al combinar armonización o conflictos de las/entre concepciones de evaluación.

ABSTRACT This paper aims to conduct a theoretical discussion by revisiting, systematizing, and reflecting upon different concepts and trends in the field of educational evaluation. The historical construction of these concepts of evaluation indicates specific social and educational demands, that change the focus of educational evaluation at different times, in the field of educational evaluation. It should be stressed that, in the current context, the understanding of educational evaluation is associated with the hybridization of different concepts of evaluation. This hybridism, seen in the evaluation policies, has evidenced a moment of transition in the trends of concepts of evaluation, with important advances and retreats in the reach, objects and logic of educational evaluation. It does so by resolving agreement or conflict between the concepts of evaluation.

Learning processes and learning assessment for expertise development

RESUMO Desenvolve-se uma análise de protocolos verbais de processos de estudo, tendo como inspiração a taxonomia de objetivos educacionais de Bloom et al. (1977), para a geração de subsídios para a avaliação educacional. Os protocolos foram gerados a partir da entrevista com seis indivíduos que realizaram o estudo com materiais de domínio e não domínio inferido. Os resultados da pesquisa sugerem que: i) informações importantes para o realinhamento das ações em uma situação de ensino e aprendizagem podem ser obtidas, tais como termos-chave que tenham significado para os indivíduos e que estejam inseridos em materiais de não domínio; e ii) uma categorização como a proposta neste estudo para a tomada de decisão pode contribuir para o trabalho efetivo do estudante em situações adequadas ao seu nível de desenvolvimento rumo ao domínio completo de determinado material de estudo.

RESUMEN Se desarrolla un análisis de protocolos verbales de procesos de estudio, cuya inspiración es la taxonomía de objetivos educacionales de Bloom et al. (1977), a fin de generar subsidios para la evaluación educacional. Los protocolos se originaron a partir de la entrevista con seis individuos que realizaron el estudio con materiales de dominio y no dominio inferido. Los resultados de la investigación sugieren que: i) se pueden obtener informaciones importantes para la realineación de las acciones en una situación de enseñanza y aprendizaje, tales como términos clave que tengan significado para los individuos y que estén insertos en materiales de no dominio; y ii) una categorización como la propuesta en este estudio para la toma de decisión puede contribuir para el trabajo efectivo del estudiante en situaciones adecuadas a su nivel de desarrollo rumbo al dominio completo de un determinado material de estudio.

ABSTRACT An analysis of verbal protocols of learning processes, and their categorization based on Bloom’s et al. (1977) taxonomy of educational objectives, is developed to generate subsidies for an educational assessment of learning processes. The participants were six academics who were observed while solving problems involving domain and non-domain material. Results suggest that: i) knowledge that is relevant for the realignment of actions in situations of teaching, such as keywords that are meaningful for individuals that can be obtained even when inserted into nondomain materials; and ii) categorizations such as the ones proposed for this study can contribute to the effectiveness of students’ learning processes in situations that are appropriate for their level of development and towards the mastery of study content.

Student perception of learning evaluation in democratic municipal management

RESUMO Este artigo tem o objetivo de analisar as percepções de alunos sobre avaliação da aprendizagem no âmbito da política educacional implementada na rede municipal de Santo André (SP). Apresenta um estudo qualitativo que elaborou uma triangulação analítica entre aspectos do contexto da política educacional do município pautada na perspectiva de gestão democrática, com base em documentos oficiais; discute a literatura da área dos estudos sobre avaliação de aprendizagem; e apresenta informações colhidas, por meio de grupos focais, junto aos alunos do 5º ano do Ensino Fundamental I de duas escolas municipais. As entrevistas foram examinadas com base na análise de conteúdo. Os dados demonstram que os alunos percebem a avaliação de forma positiva, como um instrumento que estimula e colabora com avanços na aprendizagem em sala de aula, indicando possíveis reflexos dos princípios da gestão democrática instaurada na educação municipal.

RESUMEN Este artículo tiene el objetivo de analizar las percepciones de los alumnos sobre la evaluación del aprendizaje en el marco de la política educacional implementada en la red municipal de Santo André (SP). Presenta un estudio cualitativo que elaboró una triangulación analítica entre aspectos del contexto de la política educacional del municipio desde la perspectiva de la gestión democrática, en base a documentos oficiales; discute la literatura del área de los estudios sobre evaluación de aprendizaje; y presenta informaciones recogidas por medio de grupos focales junto a los alumnos del 5º año de Educación Básica I de dos escuelas municipales. Las entrevistas se examinaron en base al análisis de contenido. Los datos demuestran que los alumnos perciben la evaluación de forma positiva, como un instrumento que estimula y colabora con avances en el aprendizaje en el aula, indicando posibles reflejos de los principios de la gestión democrática instaurada en la educación municipal.

ABSTRACT This article aims to analyze student perception of learning evaluation regarding the educational policy implemented in the municipal school network of Santo André (SP). It is a qualitative study that used analytical triangulation to assess aspects of the educational policy of the municipality, grounded in a democratic management perspective, based on official documents. It discusses the literature in the field of learning evaluation, and presents information collected through focus groups with 5th grade students from two municipal schools. The interviews were analyzed using content analysis. The data show that students see the evaluation positively, as an instrument that promotes and supports advances in classroom learning, indicating possible reflections of democratic management principles implemented in municipal education.

Avaliação e recuperação nos ginásios estaduais pluricurriculares experimentais - GEPES (1967-1969)

RESUMO Os processos de avaliação e recuperação integraram-se como ferramentas fundamentais para a promoção automática (como era denominada a progressão continuada) de 1967 a 1969, enquanto funcionou o Núcleo Experimental da Lapa, que coordenou o Grupo Escolar Experimental “Dr. Edmundo de Carvalho” e quatro unidades do Ginásio Estadual Pluricurricular Experimental (Gepe) na zona oeste paulistana, com o objetivo de implantar a continuidade dos ensinos primário e ginasial. O Núcleo valeu-se de variadas formas de avaliação e recuperação para validar a promoção automática. Com base na revisão bibliográfica, o presente estudo procedeu a uma análise crítica dos relatórios anuais das unidades e dos processos de formulação das propostas de avaliação e recuperação que fizeram parte do projeto, relatando a trajetória nem sempre linear em busca da melhor forma de avaliar e aprovar o aluno, diante do novo desafio da organização por ciclos.

RESUMEN Los procesos de evaluación y recuperación se integraron como herramientas fundamentales para la promoción automática (como se denominaba la progresión continuada) de 1967 a 1969, mientras funcionó el Núcleo Experimental da Lapa, que coordinó el Grupo Escolar Experimental “Dr. Edmundo de Carvalho” y cuatro unidades del Ginásio Estadual Pluricurricular Experimental (Gepe [Liceo Estadual Multicurricular Experimental]) en la zona oeste de la ciudad de São Paulo, con el objetivo de implantar la continuidad de la educación primaria y secundaria. El Núcleo utilizó variadas formas de evaluación y recuperación para validar la promoción automática. En base a la revisión bibliográfica, el presente estudio llevó a cabo un análisis crítico de los informes anuales de las unidades y de los procesos de formulación de las propuestas de evaluación y recuperación que formaron parte del proyecto, relatando la trayectoria no siempre lineal en búsqueda de la mejor forma de evaluar y aprobarlo al alumno, frente al nuevo desafío de la organización por ciclos.

ABSTRACT Assessment and recovery processes have become essential instruments for automatic promotion (as continued advancement was called) from 1967 to 1969, while the Núcleo Experimental da Lapa was operating. It coordinated the “Dr. Edmundo de Carvalho” Experimental School and four units of the Ginásio Estadual Pluricurricular Experimental (Gepe [Experimental State Multi-Curricular Junior High School]) on the west side of São Paulo, with the goal of deploying the continuity of primary and junior high school education. The Núcleo used various forms of assessment and recovery to validate automatic promotion. Based on the literature review, the present study undertook a critical analysis of the annual reports of the units and the formulation processes of assessment and recovery proposals that were part of the project. It reported the trajectory, which is not always linear, in a search for the best way to evaluate and to promote the student, facing the new challenge of cyclical organization.

Emancipatory evaluation of polytechnic high school: ethnographic experiences in physical education

RESUMO Propõe-se, neste artigo, analisar experiências de avaliação da Educação Física escolar com a “avaliação emancipatória”, denominação utilizada durante a vigência da reforma curricular ocorrida na rede pública estadual de ensino do Rio Grande do Sul em 2012, e que vigorou até 2016. Trata-se de uma abordagem qualitativa e etnográfica, com utilização de entrevistas, observação participante e análise documental. A pesquisa empírica envolveu o acompanhamento de duas turmas de ensino médio politécnico, de duas diferentes escolas, nas aulas de Educação Física e nos conselhos de classe de um trimestre letivo de 2016. Por meio da triangulação, os dados foram analisados a partir das categorias regulação e emancipação. Distintas tensões e contradições ocorreram nas práticas avaliativas, e também ficou evidente a presença de elementos que as influenciaram no sentido da manutenção da regulação, e não da participação e da emancipação.

RESUMEN El artículo se propone analizar experiencias de evaluación de la educación física escolar con la “evaluación emancipatoria”, denominación utilizada durante la vigencia de la reforma curricular ocurrida en la red pública estadual de enseñanza de Rio Grande do Sul en 2012 y que permaneció vigente hasta el año de 2016. Se trata de un enfoque cualitativo y etnográfico, con la utilización de entrevistas, observación participante y análisis documental. La investigación empírica involucró el seguimiento de dos clases de la educación media politécnica de dos distintas escuelas en las clases de Educación Física y en los Consejos de Clase de un trimestre lectivo de 2016. Por medio de la triangulación, los datos se analizaron a partir de las categorías de regulación y emancipación. Distintas tensiones y contradicciones ocurrieron en las prácticas evaluativas, así como quedó evidente la presencia de elementos que las influenciaron en el sentido del mantenimiento de la regulación y no de la participación y la emancipación.

ABSTRACT This paper proposes to analyze experiences of evaluating physical education in schools using “emancipatory evaluation”. This denomination was used during the period of curriculum reform in the public education network of Rio Grande do Sul in 2012, and was in force until 2016. It takes a qualitative and ethnographic approach, using interviews, participant observation and document analysis. The empirical research involved following two Polytechnic High School groups, from two different schools, in physical education classes and in the class councils of one academic quarter of 2016. The data were analyzed using triangulation in the categories of regulation and emancipation. Different tensions and contradictions occurred in evaluative practices. The presence of elements that influenced these practices was also evident in the sense of maintaining regulation, and not in participation or emancipation.

Evaluation in preschool and ongoing teacher training

RESUMO Este artigo trata dos resultados a que se chegou na pesquisa de mestrado, desenvolvida por meio de uma investigação-ação educacional (IAE) com o grupo de professoras de uma instituição pública de educação infantil da rede municipal de Santa Maria, Rio Grande do Sul, Brasil. Focalizou a avaliação na educação infantil buscando compreender sua relação com a qualidade das práticas pedagógicas das professoras que atuam junto às crianças menores de 3 anos. O estudo investigou as práticas avaliativas que se realizam naquele contexto, tendo em vista a qualificação das práticas pedagógicas a partir do processo reflexivo gerado nas professoras. Os resultados indicam que esse é um processo em desenvolvimento no contexto pesquisado, além de evidenciarem a potencialidade da avaliação para a formação contínua dos professores e, consequentemente, a qualificação dos contextos educativos para a infância.

RESUMEN Este artículo trata de los resultados que se obtuvieron en una investigación de maestría, desarrollada por medio de una Investigación-Acción Educacional (IAE) con el grupo de maestras de una institución pública de educación infantil de la red municipal de Santa Maria, Rio Grande do Sul, Brasil. Se enfocó la evaluación en la educación infantil tratando de comprender su relación con la calidad de las prácticas pedagógicas de las docentes que actúan con niños menores de 3 años. El estudio investigó las prácticas evaluativas que se realizan en aquel contexto teniendo en cuenta la cualificación de las prácticas pedagógicas a partir del proceso reflexivo generado en las maestras. Los resultados indican que éste es un proceso en desarrollo en el contexto investigado, además de evidenciar la potencialidad de la evaluación para la formación continuada de los profesores y, por consiguiente, para la cualificación de los contextos educativos para la infancia.

ABSTRACT This article presents results that were gathered during a Master’s study developed using an Educational Investigative-Action (EIA) method with a group of teachers from a public institution of preschool education in the municipal school system of Santa Maria, Rio Grande do Sul. The focus of the study was the evaluation used in preschool, in order to understand its relation to the quality of the pedagogical practices of teachers who work with children less than 3 years old. In addition, the present study investigated the evaluation practices performed in that context, bearing in mind the qualification of the pedagogic practices based on reflective process generated in the teachers. The results indicate that this is a process under development in the studied context. Furthermore, the potential of evaluation for ongoing teacher training is made evident and, consequently, for the qualification of childhood educational contexts.

Juvenilization in EJA as a side effect of accountability policies

RESUMO O fenômeno denominado juvenilização da Educação de Jovens e Adultos (EJA) é analisado no presente artigo como consequência da expulsão de jovens em defasagem idade-série da escola regular. O pressuposto é que o fenômeno tem se intensificado na medida em que a correção de fluxo tem funcionado como mecanismo de escape, utilizado por gestores com o objetivo de evitar as sanções previstas nas políticas de responsabilização às escolas e aos professores que não alcançam as metas de desempenho estabelecidas pelas diferentes esferas do sistema. São utilizados dados estatísticos sobre o histórico de matrículas na EJA na rede municipal de ensino da cidade do Rio de Janeiro para sustentar que as políticas de avaliação em larga escala, anunciadas como garantidoras da qualidade da educação, têm favorecido a manutenção de processos de exclusão escolar. Aportes pós-estruturalistas, em especial a Teoria do Discurso, sustentam a problematização de uma concepção instrumental de qualidade.

RESUMEN Se analiza el fenómeno denominado juvenilización de la Educação de Jovens e Adultos (EJA) en el presente artículo en función de la expulsión de jóvenes en desfase edad-año de la escuela regular. Se presupone que el fenómeno se ha intensificado en la medida que la corrección de flujo funciona como mecanismo de escape, utilizado por gestores con el objetivo de evitar las sanciones previstas en las políticas de responsabilización a las escuelas y a los profesores que no alcanzan las metas de desempeño establecidas por las diferentes esferas del sistema. Se utilizan datos estadísticos sobre el historial de matrículas en EJA en la red municipal de enseñanza de la ciudad de Rio de Janeiro para sustentar que las políticas de evaluación en gran escala, anunciadas como garantes de la calidad de la educación, han favorecido el mantenimiento de procesos de exclusión escolar. Aportes post-estructuralistas, en especial la Teoría del Discurso, sostienen la problematización de una concepción instrumental de calidad.

ABSTRACT This article analyzes the phenomenon called juvenilization in Educação de Jovens e Adultos (EJA [Adult and Youth Education]) as a result of the exclusion of young people with age-grade discrepancy from regular school. The assumption is that the phenomenon has intensified, as the flow correction has worked as an escape mechanism used by managers to avoid the penalties prescribed in the accountability policies for schools and teachers not reaching the performance targets established for the different levels of the system. Statistical data about the EJA academic transcripts from the municipal school network of Rio de Janeiro are used to support the large-scale assessment policies. These policies, announced as guarantors of the quality of education, have favored the maintenance of school exclusion processes. Poststructuralist contributions, particularly Discourse Theory, support the problematizing of an instrumental concept of quality.

A new model of EJA for high school in Rio de Janeiro

RESUMO O presente artigo analisa os resultados de uma modalidade de ensino voltada para alunos que, na idade oportuna, não puderam cursar a educação básica. Hoje a Educação de Jovens e Adultos (EJA) atende, inclusive, o ensino médio. A Secretaria de Estado de Educação do Rio de Janeiro (Seeduc-RJ), até 2013, ofertava o ensino médio na modalidade EJA em três fases semestrais e, somente a partir desse mesmo ano, tendo observado os desempenhos insuficientes da fase III no Sistema de Avaliação da Educação do Estado do Rio de Janeiro (Saerj), foi introduzida na rede de ensino uma nova proposta de oferta de EJA em quatro módulos, também semestrais. Este artigo analisa os resultados do Saerj mensurando o quanto esse novo desenho de EJA, em seu primeiro ciclo, do módulo I ao módulo IV, foi capaz de elevar a proficiência média em Língua Portuguesa e Matemática, estimada para os concluintes do módulo IV, em relação à proficiência média dos concluintes da fase III, estimada em anos anteriores a 2014.

RESUMEN El presente artículo analiza los resultados de una modalidad de enseñanza destinada a alumnos que, en la edad oportuna, no pudieron frecuentar la educación básica. En la actualidad la Educación de Jóvenes y Adultos (EJA) atiende incluso la educación media. Hasta el 2013, la Secretaría de Estado de Educación de Rio de Janeiro (Seeduc-RJ), ofertaba la educación media en la modalidad EJA en tres fases semestrales y tan solo desde este mismo año, habiendo observado los desempeños insuficientes de la fase III en el Sistema de Evaluación de la Educación del Estado de Rio de Janeiro (Saerj), se introdujo en la red de enseñanza una nueva propuesta de oferta de EJA en cuatro módulos, también semestrales. Este artículo analiza los resultados de Saerj al medir cuánto este nuevo diseño de EJA, en su primer ciclo, del módulo I al IV, fue capaz de elevar la competencia media en Idioma Portugués y Matemáticas, estimada para los concluyentes del módulo IV, en relación a la competencia media de los concluyentes de la fase III, estimadas en años anteriores al 2014.

ABSTRACT The present article analyzes the results of a teaching modality directed at students who, at the appropriate age, could not attend Basic Education. Today, Educação de Jovens e Adultos (EJA [Youth and Adult Educaction]) also includes High School. The State Department of Education of Rio de Janeiro (Seeduc-RJ), until 2013, provided High School YAE in threesemester phases. In that same year, by analyzing the inadequate performance of phase III in the State Education Assessment System in Rio de Janeiro (Saerj), a new YAE proposal was introduced into the Education System in four biannual modules. The present article offers a analysis of the Saerj results by measuring how much this new YAE design, in its first cycle from modules I to IV, raised the average proficiency in the Portuguese Language and Mathematics estimated for the graduates of module IV, in relation to the average proficiency of the graduates of phase III, estimated in the years prior to 2014.