Estudos em Avaliação Educacional

Tendências da avaliação da aprendizagem em sala de aula

What is it to evaluate? Reconstruction of evaluation practices and concessions

A avaliação das aprendizagens constitui-se como parte integrante do desenvolvimento curricular, como regulação e aferição das aprendizagens intencionalizadas mediante a ação de ensinar. Contudo, as práticas predominantes na escola, na sua "gramática" organizacional tradicional, mecanicista e uniformista, instalada desde o século XIX, separam os modos, os espaços e os tempos destinados a ensino e avaliação, na decorrência de conceitos de ensinar e aprender herdados, mas inadequados. Neste texto, reexamina-se o conceito de avaliação, enquadrando, assim, um projeto de formação-investigação em curso numa escola portuguesa, coordenado pelos autores, centrado na reflexão e melhoria, por parte dos professores, dos seus modos de desenvolver e aferir avaliação das aprendizagens segundo critérios progressivamente aferidos entre os pares, de que se apresentam dados intermédios.

La evaluación de los aprendizajes constituye parte integrante del desarrollo curricular, como regulación y verificación de los aprendizajes intentados mediante la acción de enseñar. Sin embargo, las prácticas predominantes en la escuela, en su "gramática" organizacional tradicional, mecanicista y uniformista instalada desde el siglo XIX, separan los modos, los espacios y los tiempos destinados a la enseñanza y a la evaluación en función de conceptos de enseñar y aprender heredados, pero inadecuados. En este texto se reexamina el concepto de evaluación y de este modo se enmarca un proyecto de formación-investigación, coordinado por los autores, en una escuela portuguesa. Este proyecto se centra en la reflexión y la mejora del profesorado, de sus modos de desarrollar y de verificar la evaluación de los aprendizajes según criterios progresivamente comparados entre los pares, de que se presentan datos intermedios.

The evaluation of learning is an integral part of curriculum development used as a regulation and measurement of intentional learning in the course of teaching. However, the practices that prevail in schools, with their traditional, organizational, mechanistic and uniformistic "grammar", in place since the 19th century, separate the ways, spaces and times intended for teaching and assessment, due to the concepts inherited of teaching and learning, which are inadequate. This text reviews the concept of evaluation, including an ongoing project of action formation-research in a Portuguese school. This project, coordinated by the authors, focuses on the reflection and improvement carried out by teachers regarding their ways of developing and measuring learning evaluation, according to progressively assessed criteria agreed on among peers, whose intermediate data are presented here.

An investigation of perceptions and assessment practices in Portuguese Higher Education

O propósito deste artigo foi analisar percepções e práticas de avaliação de docentes e estudantes de quatro universidades portuguesas. As percepções foram estudadas por meio de um questionário administrado a docentes e estudantes. As práticas de avaliação foram pesquisadas através de observações de aulas e de entrevistas a docentes e estudantes. Os resultados mostraram que, em geral, as percepções e as práticas de avaliação eram mais consistentes com uma pedagogia centrada nos docentes, baseada na exposição das matérias e na avaliação para classificar, do que numa pedagogia em que os estudantes estão no centro das dinâmicas pedagógicas, baseada na avaliação para aprender e na distribuição de feedback. As percepções e práticas enquadráveis nessa última perspetiva, ainda que minoritárias, revelaram que é possível evoluir para uma pedagogia mais progressiva e inovadora no ensino superior.

El propósito de este artículo fue el de analizar percepciones y prácticas de evaluación de docentes y estudiantes de cuatro universidades portuguesas. Las percepciones se estudiaron por medio de un cuestionario administrado a docentes e estudiantes. Las prácticas de evaluación se investigaron a través de observaciones de clases y de entrevistas a docentes y estudiantes. Los resultados mostraron que, en general, las percepciones y prácticas de evaluación eran más consistentes con una pedagogía centrada en los docentes, basada en la exposición de las materias y en la evaluación para clasificar, que en una pedagogía en la que los estudiantes se encuentran en el centro de las dinámicas pedagógicas, basada en la evaluación para aprender y en la distribución de feedback. Las percepciones y prácticas que se enmarcan en esta última perspectiva, aunque minoritarias, revelaran que es posible evolucionar hacia una pedagogía más progresiva e innovadora en la educación superior.

This paper was aimed at analyzing perceptions and assessment practices of teachers and students in four Portuguese universities. Perceptions were studied by means of a questionnaire that was administered to both teachers and students. Assessment practices were studied through class observations and interviews with both teachers and students. Results showed that, in general, perceptions and assessment practices were more consistent with a teacher-centered pedagogy, based on subject-matter exposure and assessment for grading, rather than with a pedagogy that puts students at the center of pedagogical dynamics, based on assessment for learning and on feedback distribution. Perceptions and practices encompassed in the latter perspective, though a minority, have shown that it is possible to move towards a more progressive and innovative pedagogy in higher education.

The demons of evaluation: memories of teachers from when they were students

Este artigo parte de quarenta narrativas de professores que evocaram situações de avaliação particularmente marcantes, ocorridas no tempo em que foram alunos. Dessas quarenta, trinta e uma narrativas assumem a expressão de um abuso de poder intolerável. Nove manifestam práticas avaliativas emancipatórias. Através de uma análise dos discursos, quantificamos e qualificamos os sentidos dos abusos - humilhação, violência, discriminação, deceção, arbitrariedade - e da emancipação minoritária, procurando explicar essas práticas à luz dos tempos histórico, social, organizacional e profissional. Conclui-se que essas práticas precisam de ser combatidas e prevenidas, requerendo-se políticas e práticas mais rigorosas de acesso à profissão e o exercício de uma ação pedagógica mais interativa.

Este artículo parte de cuarenta narrativas de profesores que evocaron situaciones de evaluación particularmente significativas que ocurrieron en la época en la que fueron alumnos. De esas cuarenta, treinta y una narrativas asumen la expresión de un intolerable abuso de poder. Nueve manifiestan prácticas evaluativas emancipatorias. A través de un análisis de los discursos, cuantificamos y cualificamos los sentidos de los abusos - humillación, violencia, discriminación, decepción, arbitrariedad - y de la emancipación minoritaria, tratando de explicar tales prácticas a la luz de los tiempos histórico, social, organizacional y profesional. Se concluye que hay que combatir y prevenir tales prácticas y que se requieren políticas y prácticas más rigurosas de acceso a la profesión, así como el ejercicio de una acción pedagógica más interactiva.

This article takes forty narratives of teachers who recalled situations of particularly memorable evaluation situations that occurred when they were students. Of these forty narratives, thirty-one express an intolerable abuse of power. Nine express emancipatory evaluative practices. Through an analysis of these discourses, the meanings of the abuses - humiliation, violence, discrimination, deception, arbitrariness - and of the minority emancipation are quantified and qualified, seeking to explain these practices in the light of the historical, social, organizational and professional times. It is concluded that these practices need to be fought against and prevented; and, that stricter policies and practices of access to the profession and the exercise of more interactive pedagogic action are required.

Language assessment from a multiliteracies perspective

Este artigo busca discutir, em particular, as implicações da nova base epistemológica digital nos processos de avaliação da aprendizagem de línguas. Para tanto, faz-se necessário compreender as mudanças ontológicas e epistemológicas das sociedades pós-tipográficas, as quais redefinem conceitos como linguagem, texto e gênero em face da amplitude de novas multissemioses ou multimodalidades em curso. Compreendidas essas mudanças conceituais, o texto trata das especificidades da avaliação da aprendizagem de línguas à luz das novas demandas sociais. O artigo conclui em favor da revisão de formas de ensinar e avaliar línguas, seja materna ou estrangeira, de modo que a prática escolar atual responda às novas éticas e estéticas emergentes nas sociedades multiletradas.

Este artículo intenta discutir, en particular, las implicaciones de la nueva base epistemológica digital en los procesos de evaluación del aprendizaje de idiomas. Para ello hay que comprender los cambios ontológicos y epistemológicos de las sociedades post-tipográficas, que redefinen conceptos como lenguaje, texto y género frente a la amplitud de nuevas multisemiosis o multimodalidades en curso. Comprendidos dichos cambios conceptuales, el texto trata de las especificidades de la evaluación del aprendizaje de idiomas a la luz de las nuevas demandas sociales. El artículo concluye en favor de la revisión de formas de enseñar y evaluar las lenguas, sea ella materna o extranjera, de modo que la actual práctica escolar responda a las nuevas éticas y estéticas emergentes en las sociedades multiletradas.

This article seeks to discuss the implications of the new digital, epistemological base in language assessment processes. In order to do so, it is necessary to understand the ontological and epistemological changes occurring in post-typographic societies since such changes have altered notions such as language, text, and gender towards the vast array of multimodalities in today's meaning making processes. Such conceptual understanding allows us to refer to some of the specificities in language assessment in light of new social demands. The text concludes in favour of a deep review on the ways of teaching and assessing languages, be them native or foreign, so that contemporary education might respond to the new emerging ethics and aesthetics in multiliterate societies.

Visual assessment of learning: an alternative for deaf students

Este artigo apresenta a avaliação visual, uma proposta bilíngue a alunos surdos do ensino médio que vai ao encontro da política linguística e educacional inclusiva. Essa avaliação utiliza, além do texto verbal, o não verbal, incluindo elementos visuais, como imagens referentes aos conteúdos abordados, e proporciona isso ao aluno surdo em sua própria língua natural, a Língua Brasileira de Sinais. Foram observados e considerados aspectos relacionados a alunos surdos de grau profundo e filhos de pais ouvintes. O registro das observações foi feito por meio de entrevistas gravadas em vídeo-Libras e a análise dos dados se constituiu como uma investigação através da observação inicial da intérprete de Libras e depois do professor. Constatou-se que essa avaliação reduz os sentimentos negativos reforçados pela avaliação escrita, favorece a autonomia, a percepção de competência e de pertencimento, auxiliando na motivação do processo de ensino e aprendizagem.

Este artículo presenta la evaluación visual, una propuesta bilingüe a alumnos sordos de la educación media relativa a la política lingüística y educacional inclusiva. Esta evaluación utiliza, además del texto verbal, el no verbal, incluyendo elementos visuales, como imágenes referentes a los contenidos abordados, y lo proporciona al alumno sordo en su propio idioma natural, la Lengua Brasileña de Signos (Libras). Se observaron y consideraron aspectos relacionados con alumnos sordos de grado profundo y a hijos de padres oyentes. El registro de las observaciones se efectuó por medio de entrevistas grabadas en video-Libras y el análisis de los datos constituyó una investigación a través de la observación inicial de la intérprete de Libras y después del profesor. Se constató que dicha evaluación reduce los sentimientos negativos reforzados por la evaluación escrita, favorece la autonomía, la percepción de competencia y de pertenencia, además de ayudar a motivar el proceso de enseñanza y aprendizaje.

This article presents a visual assessment, a bilingual proposal for deaf high school students that satisfies the linguistic and educational policy of inclusion. This assessment uses the verbal as well as the non-verbal texts, including visual elements, such as images that refer to the content studied, providing it to deaf students in their own language, the Brazilian sign language. Aspects related to profoundly deaf students, as well as children born to hearing parents, were observed and considered. The observations were registered by means of interviews recorded using video-Libras and the analysis of the data was carried out through the initial observation by the Libras' interpreter and then by the professor. It was noted that this evaluation reduces the negative feelings reinforced by written assessments, favors autonomy and the perception of competence and belonging, helping in the motivation of the teaching and learning process.

Construction of evaluation tools for students training in intensive and emergency care

Objetivou-se relatar a experiência da construção de dois instrumentos para avaliar o desempenho de estudantes de um curso de graduação em Enfermagem de uma universidade pública, durante o estágio das Unidades Curriculares de Enfermagem em Cuidados Intensivos e Enfermagem em Emergência e apresentar os instrumentos construídos. A metodologia do trabalho consistiu em doze encontros presenciais e a distância, ocorridos no período de janeiro a março de 2014 entre a pedagoga da universidade e oito docentes da graduação de Enfermagem, quando se discutiu exaustivamente o tema avaliação, partindo de instrumentos existentes desde 2008. Concluiu-se que os instrumentos anteriores estavam inadequados em alguns aspectos e dois novos instrumentos de avaliação foram elaborados pelo grupo, com enfoque em competências e habilidades, com o objetivo de atender às necessidades de avaliação dos estudantes no momento, mas ambos os instrumentos são passíveis de reformulações futuras, condizentes com as necessidades que possam surgir.

El objetivo fue el de relatar la experiencia de la construcción de dos instrumentos para evaluar el desempeño de estudiantes de un curso de graduación en Enfermería de una universidad pública, durante la pasantía de las Unidades Curriculares de Enfermería en Cuidados Intensivos y Enfermería en Emergencia, y presentar los instrumentos construidos. La metodología del trabajo consistió en doce encuentros presenciales y a distancia, que se llevaron a cabo en el periodo de enero a marzo de 2014 entre la pedagoga de la universidad y ocho docentes de graduación de Enfermería, cuando se discutió exhaustivamente el tema de la evaluación, partiendo de instrumentos existentes desde 2008. Se concluyó que los instrumentos anteriores eran inadecuados en algunos aspectos y dos nuevos instrumentos de evaluación fueron elaborados por el grupo, con enfoque en competencias y habilidades, a fin de atender a las necesidades de evaluación de los estudiantes en el momento; sin embargo, ambos instrumentos son pasibles de reformulaciones futuras, según las necesidades que puedan surgir.

This study aimed to report the experience of constructing two tools to assess the performance of students in an undergraduate nursing course from a public university. It was conducted during the internship of the Curricular Units of Nursing in Intensive Care and Nursing in Emergency Care. The study also introduced the tools constructed. The study methodology consisted of twelve face-to-face and distance meetings, which occurred in the period from January to March 2014 between the university pedagogue and eight professors from the under graduate nursing course. In these meetings, the evaluation issue was thoroughly discussed, based on tools existing since 2008. It was concluded that these previous tools were inadequate in some respects and two new assessment tools were developed by the group, with a focus on skills and abilities, in order to meet the needs of students at the time. Both tools are subject to future reformulation, consistent with needs that may arise.

Portfolio: an integrated assessment option for science education

Este estudo objetiva apresentar o portfólio como um instrumento viável para integrar avaliação e aprendizagem no ensino de Ciências. A pesquisa foi desenvolvida no âmbito de duas escolas públicas estaduais no Rio de Janeiro, onde alunos elaboraram seus portfólios de avaliação a partir de atividades pedagógicas diversas. Assumidos o viés metodológico da pesquisa-ação e uma abordagem qualitativa na análise dos dados, concluiu-se que, embora a marca da avaliação tradicional tenha sido ainda encontrada nos discursos dos alunos, não há como negar que eles estão permeados pela concepção da avaliação integrada ao ensino-aprendizagem. A utilização do portfólio como instrumento de avaliação ainda é considerada uma novidade pedagógica, mas pode e deve ser empregado como instrumento de avaliação no ensino de Ciências, pois se mostrou possível e bem-sucedido quanto à sua implementação

Este estudio tiene el objeto de presentar el portafolio como un instrumento viable para integrar evaluación y aprendizaje en la enseñanza de Ciencias. La investigación se desarrolló en el ámbito de dos escuelas públicas estaduales en Rio de Janeiro, donde los alumnos elaboraron sus portafolios de evaluación a partir de actividades pedagógicas diversas. Asumidos el sesgo metodológico de la investigación-acción y un abordaje cualitativo en el análisis de los datos, se concluyó que, aunque la marca de la evaluación tradicional todavía es encontrada en los discursos de los alumnos, no hay cómo negar que ellos están permeados por la concepción de la evaluación integrada a la enseñanza-aprendizaje. La utilización del portafolio como instrumento de evaluación todavía es considerada como una novedad pedagógica, pero puede y debe utilizarse como un instrumento de evaluación en la enseñanza de Ciencias, ya que su implementación se mostró posible y exitosa.

This study aims to present the portfolio as a viable tool to integrate learning and assessment in science education. The study was developed within two public state schools in Rio de Janeiro, where students prepared their assessment portfolios from various educational activities. Given the methodological bias of action research and a qualitative approach to the data analysis, it was concluded that, although the mark of traditional assessment was still found in the students' discourses, there is no denying that they are permeated by the concept of assessment as an integral part of teaching and learning. The use of the portfolio as an assessment tool is still considered an educational novelty, but can and should be employed as an assessment tool in science education, as its implementation proved to be both possible and successful.

Formative assessment of learning: the class council experience

O estudo teve por objeto o conselho de classe como instrumento da avaliação formativa da aprendizagem. Buscou identificar as concepções de avaliação da aprendizagem que perpassam a experiência do conselho de classe no Colégio de Aplicação da Universidade Federal de Pernambuco. Toma a avaliação formativa como aquela que favorece o desenvolvimento do aluno, pois se configura num processo contínuo e permanente de acompanhamento das aprendizagens. Fundamentado no método de estudo de caso, foram feitas observações de reuniões do conselho de classe, entrevistas semiestruturadas e análise de documentos. Os resultados revelam que as concepções intrínsecas à dinâmica do funcionamento do conselho de classe apontam para compreensão e prática dentro de uma perspectiva de avaliação formativa, e que as práticas de desenvolvimento do conselho de classe revelam a possibilidade de implantação de uma avaliação construtiva e coletiva.

El estudio tuvo como objeto el consejo de clase como instrumento de la evaluación formativa del aprendizaje. Trató de identificar las concepciones de evaluación del aprendizaje que se encuentran presentes en la experiencia del consejo de clase en el Colégio de Aplicação de la Universidad Federal de Pernambuco. Toma la evaluación formativa como aquella que favorece el desarrollo del alumno, ya que se configura en un proceso continuado y permanente de seguimiento de los aprendizajes. Fundamentado en el método de estudio de caso, se efectuaron observaciones de reuniones del consejo de clase, entrevistas semiestructuradas y análisis de documentos. Los resultados revelan que las concepciones intrínsecas a la dinámica del funcionamiento del consejo de clase señalan comprensión y práctica dentro de una perspectiva de evaluación formativa, y que las prácticas de desarrollo del consejo de clase revelan la posibilidad de implantación de una evaluación constructiva y colectiva.

This study aimed to evaluate the class council as a tool for the formative assessment of learning. Its intent was to identify the concepts of learning assessment that pervade the experience of class councils in the Colégio de Aplicação of the Federal University of Pernambuco. Formative assessment promotes the development of students, as it is built in a continuous and permanent process for monitoring learning. Observations of class council meetings, semi-structured interviews and document analysis were carried out based on case study methodology. The results show that the conceptions which are intrinsic to the dynamic functioning of class councils point to the understanding and practice from the perspective of formative assessment, and that the practices of class council development indicate the possibility of implementing a constructive and collective form of assessment.

Teachers' self-assessment and the improvement of educational practices: perceptions of Portuguese teachers

Realizámos uma investigação que visava auscultar professores sobre o contributo da auto-avaliação docente, prevista no sistema de avaliação de desempenho docente português, na melhoria das práticas pedagógicas. Para isso, delineámos uma metodologia de investigação qualitativa, com o estudo exploratório de caso, concretizada pela análise da legislação sobre a avaliação de desempenho docente em Portugal e pela entrevista semi-estruturada a cinco professores de um agrupamento de escolas. Pelos dados obtidos, verificou-se que os professores percepcionavam a avaliação de desempenho docente como um processo de diagnóstico dos pontos fortes e do que era preciso melhorar nas suas práticas pedagógicas. A auto-avaliação dos professores, por meio da reflexão sobre suas práticas pedagógicas ao longo do ano letivo, constitui um contributo para esse processo, embora não fosse evidente que dela resultasse uma mudança efetiva das práticas promotora do seu desenvolvimento profissional.

Realizamos una investigación con el objeto de auscultar a los profesores sobre el aporte de la autoevaluación docente, prevista en el sistema de evaluación de desempeño docente portugués, en la mejora de las prácticas pedagógicas. Para ello, delineamos una metodología de investigación cualitativa con el estudio exploratorio de caso, que se concretó por medio del análisis de la legislación sobre la evaluación de desempeño docente en Portugal y por la entrevista semiestructurada a cinco profesores de un agrupamiento de escuelas. De acuerdo con los datos obtenidos, se verificó que los profesores percibían la evaluación de desempeño docente como un proceso de diagnóstico de los puntos fuertes y que debía mejorar en sus prácticas pedagógicas. La autoevaluación de los profesores, por medio de la reflexión sobre sus prácticas pedagógicas a lo largo del año lectivo, constituye un aporte para dicho proceso, aunque no sea evidente que de ella resulte un cambio efectivo de las prácticas promotoras de su desarrollo profesional.

Our study aimed to gather teachers' perspectives regarding the contribution of self-assessment to the evaluation system of Portuguese teacher performance, for the improvement of pedagogic practices. Using an exploratory case study, we outlined a qualitative research methodology that was completed by the analysis of the legislation on the evaluation of teaching performance in Portugal as well as by semi-structured interviews of five teachers from a group of schools. The data obtained showed that teachers perceive teaching performance assessment as a diagnosis process to identify strengths as well as what should be improved in their teaching practices. The self-assessment of teachers, through a reflection on their own teaching practices throughout the school year, constitutes a contribution to this process, although it is not clear whether it leads to effective change in terms of practices that promote their professional development.

Evaluation of the construction of geometrical figures in basic education

O trabalho refere-se a questões de geometria espacial constantes de avaliações oficiais feitas em larga escala e analisa desenhos de planificação de figuras geométricas tridimensionais (paralelepípedo, pirâmide, prismas, cilindros e cones). Foram sujeitos 842 alunos do 9º ano do ensino fundamental e da 3ª série do ensino médio. Com abordagem piagetiana acerca da construção das noções projetivas relativas à construção do espaço representativo, foram formadas categorias de análise referentes a níveis de desenvolvimento dessas noções. Os níveis variaram de um (mais verificado na planificação do cone), que revelou o estabelecimento de noções topológicas e a não identificação de propriedades das figuras, a cinco (mais verificado na planificação do paralelepípedo), cujos desenhos revelaram a identificação das principais propriedades e o estabelecimento de relações projetivas e euclidianas. O trabalho discute a planificação como forma de contribuir para a avaliação das propriedades das figuras geométricas espaciais.

El trabajo se refiere a temas de geometría espacial que constan en evaluaciones oficiales efectuadas a gran escala y analiza diseños de planificación de figuras geométricas tridimensionales (paralelepípedo, pirámide, prismas, cilindros y conos). Los sujetos fueron 842 alumnos del 9º año de la educación fundamental y del 3er año de la educación media. Con un abordaje piagetiano acerca de la elaboración de las nociones proyectivas relativas a la construcción del espacio representativo, se han formado categorías de análisis relativas a niveles de desarrollo de dichas nociones. Los niveles variaron de uno (más verificado en la planificación del cono), que reveló el establecimiento de nociones topológicas y la no identificación de propiedades de las figuras, a cinco (más verificado en la planificación del paralelepípedo), cuyos diseños revelaron la identificación de las principales propiedades y el establecimiento de relaciones proyectivas y euclidianas. El trabajo discute la planificación como forma de contribuir para la evaluación de las propiedades de las figuras geométricas espaciales.

The study refers to spatial geometry questions listed in large scale official assessments and analyzes the construction of three-dimensional geometric figures (parallelograms, pyramids, prisms, cylinders and cones). 842 students from the ninth grade and twelfth grades were part of the study. Categories of analysis regarding the developmental levels of the construction of projective notions concerning representative space were formed based on the Piagetian approach. The levels ranged from one (better demonstrated in the construction of the cone), which showed the acquisition of topological notions and the non-identification of the properties of figures, to five (better demonstrated in the construction of the parallelogram), which drawings showed the identification of the main properties and the acquisition of projective and Euclidean relations. The study discusses construction as a way of contributing to the assessment of the properties of geometric spatial figures.