O erro como ferramenta para compreender o desempenho de estudantes em avaliações em larga escala

Abstract

Esta dissertação tem por objetivo analisar os erros cometidos por estudantes em um teste cognitivo de avaliação em larga escala e, a partir dessa análise, gerar evidências pedagógicas para compreender o desempenho deles nessas avaliações. Neste trabalho, parte-se do pressuposto de que o desenvolvimento de uma habilidade é um processo contínuo, cujos estágios são evidenciados pelos erros que os estudantes cometem. Aplicando esse conceito ao universo das avaliações em larga escala e considerando que as opções erradas de um item refletem esses estágios, entende-se que estudantes em estágios diferentes de desenvolvimento de uma habilidade cometem erros também diferentes. Sendo assim, este estudo utilizou uma metodologia de análise estatística para analisar as probabilidades de marcação das opções erradas e associá-las ao nível de proficiência desses estudantes, criando uma escala interpretada que leva em consideração os erros dos estudantes ao invés dos acertos. A questão central que norteou essa investigação foi: é possível utilizar as marcações dos estudantes nas opções erradas para gerar evidências sobre o seu desempenho em avaliações em larga escala? Para responder a esse questionamento, a presente dissertação justifica o estudo com base em uma abordagem quali-quantitativa, sendo organizada na forma de artigo, com introdução, dois estudos analíticos, um produto técnico, que traz uma escala interpretada com o objetivo de oferecer à comunidade escolar e à sociedade uma devolutiva a respeito do desempenho dos estudantes em avaliações em larga escala e as considerações finais. Os resultados permitem propor a referida escala, delimitando para cada um dos grupos de estudantes estabelecidos um perfil dos erros geralmente cometidos. Cabe destacar que essa pesquisa tem caráter exploratório, tendo em vista seu ineditismo no cenário das análises que se fazem dos dados extraídos em avaliações em larga escala. Admite-se, portanto, suas limitações no que se refere aos modelos estatísticos empregados, cabendo análises mais robustas para consolidar os procedimentos adotados. Por outro lado, destaca-se como grande contribuição deste trabalho uma análise que complementa as escalas de proficiência tradicionais e se soma aos resultados das avaliações em larga escala, oferecendo uma nova perspectiva sobre o desempenho dos estudantes.