Aprendendo com as respostas dos estudantes a itens dos testes das avaliações de larga escala: lições do Saeb

Abstract

Neste artigo apresentamos alguns resultados da pesquisa realizada no âmbito da Diretoria de Avaliação da Educação Básica do Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Daeb-Inep), cujo objetivo geral é buscar padrões de comportamento de itens dos testes de avaliação de larga escala a partir da análise dos erros dos respondentes. A partir da avaliação das características pedagógicas e psicométricas de um conjunto de itens do teste piloto de Ciências da Natureza (CN) e de História e Geografia (HG) aplicados na edição de 2013 do Saeb (Sistema Nacional de Avaliação da Educação Básica) para estudantes do 9º ano do Ensino Fundamental, foram formuladas hipóteses acerca dos componentes dos itens que agregam dificuldade para os respondentes. As hipóteses foram testadas com base na aplicação da técnica de Entrevistas Cognitivas (Cognitive Interviewing) realizadas com um grupo de estudantes do 9º ano do ensino fundamental de escolas do Distrito Federal. A análise das entrevistas apontou que os estudantes têm dificuldades no entendimento de certos conceitos e que tendem a produzir sentidos que fazem referência a elementos próximos de suas realidades, acentuadamente quando são usadas, nos itens, imagens ou palavras no sentido conotativo. Destacamos o potencial da entrevista cognitiva como metodologia que possibilita avaliar e aperfeiçoar os instrumentos de avaliação e também o potencial de uso dos itens aplicados nos testes como recurso pedagógico no processo de aprendizagem.