A validade de construto das questões de língua inglesa do ENEM : um olhar para o conteúdo e a matriz de referência

Abstract

Esta pesquisa baseou-se em minhas motivações e inquietações pessoais como pesquisadora-tecnologista em informações e avaliações educacionais do Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (INEP), relacionadas ao meu trabalho com as chamadas avaliações de larga escala e seus processos de elaboração e composição de itens. Este trabalho buscou a verificação da “defensibilidade” das quinze questões de língua inglesa do Exame Nacional do Ensino Médio (ENEM) entre os anos de 2013 e 2015, por meio da análise de seu conteúdo e da problematização da Matriz de Referência (MR) do Exame. Os questionamentos feitos pelos autores Tumolo e Tomich (2007) no que tange à ideia de “itens defensáveis” e “não defensáveis” conduziram a proposta desta pesquisa, permeando seu objetivo geral de analisar a validade de construto das questões de inglês das provas de Linguagem, códigos e suas tecnologias do ENEM 2013-2015. Autores como Alderson (2000), Brown (2003) e Weir (2005), além de pesquisas bibliográficas na área de avaliação fundamentam a base teórica deste trabalho no que diz respeito à composição do construto leitura nas questões de língua inglesa do ENEM. Por meio do método análise documental para a problematização da MR e da utilização do esquema sociocognitivo de Weir (2005) para a validação de conteúdo das referidas questões, foram constatadas a validade de seu construto leitura, pautado na atual matriz de referência (MR), seus documentos oficiais norteadores e nas variáveis descrita ao longo da Fundamentação Teórica desta dissertação. O processo de validação dos itens relacionado à análise das habilidades pertencentes à Competência 2 da MR, que guia o processo de elaboração dos itens de língua inglesa, foi validado por duas especialistas da área de avalição, com larga experiência nessa Matriz. Os resultados das análises indicam que dos quinze itens analisados, catorze foram validados com relação ao conteúdo e apenas um não correspondeu a uma das demandas utilizadas para a análise. Em relação à análise da MR, quatro itens não correspondem ao proposto pelos microdados produzidos pelo INEP. Como conclusão, este estudo apresenta sugestões para aprimoramento desse construto por meio de descritores para as habilidades da MR, com o objetivo de guiar as futuras elaborações das questões de língua inglesa do ENEM.