Análise dos itens de ciências da natureza/biologia do Enem por meio da taxonomia SOLO.

Abstract

O objetivo geral da pesquisa foi analisar os itens de Ciências da Natureza/Biologia do Exame Nacional do Ensino Médio (Enem) por meio dos níveis de complexidade cognitiva da Taxonomia SOLO. Os objetivos específicos foram: 1) classificar os itens de acordo com a sua complexidade cognitiva, estabelecendo uma série histórica para os anos de 2012 a 2018; 2) associar os itens Ciências da Natureza/Biologia às suas respectivas habilidades e competências da Matriz de Referência de Ciências da Natureza e suas Tecnologias e 3) identificar e classificar os objetos de conhecimento presentes nos itens da amostra, de acordo com a Matriz de Referência de Ciências da Natureza. Usamos como referencial teórico a Taxonomia SOLO, uma taxonomia cognitiva com cinco níveis que crescem em complexidade: 1) pré-estrutural; 2) uniestrutural; 3) multiestrutural; 4) relacional e 5) abstrato estendido. Os níveis uniestrutural e multiestrutural se agrupam na aprendizagem superficial. A aprendizagem profunda é representada pelos níveis relacional e abstrato estendido. Já o nível pré-estrutural não representa construção de aprendizagem. Também realizamos uma revisão da literatura, na qual pesquisamos trabalhos que analisaram a complexidade cognitiva de itens do Enem na área de Ciências da Natureza. Analisamos um total de 105 itens de Ciências da Natureza/Biologia do Enem, nos anos de 2012 a 2018. Selecionamos os itens mais diretamente relacionados com a disciplina de Biologia (15 por ano). Utilizamos tanto métodos qualitativos (análise de conteúdo para classificação dos itens nos níveis de complexidade da Taxonomia SOLO) quanto quantitativos (concordância entre juízes, através dos coeficientes Kappa de Cohen e Alfa de Krippendorff, para analisar as classificações de duas pesquisadoras independentes). Dentre os principais resultados, destacamos: a) a revisão da literatura aponta, em larga medida, que os itens do Enem apresentam, em sua maioria, baixa complexidade cognitiva. A Taxonomia SOLO ainda é pouco conhecida no Brasil, sendo que os trabalhos encontrados usaram a Taxonomia Revisada de Bloom; b) a maioria dos itens analisados é do nível uniestrutural (81,9%), o menos complexo possível. O restante ficou entre os níveis multiestrutural (11,4%) e relacional (6,7%). O nível abstrato estendido não foi identificado em nenhum dos itens. Consequentemente, a maior parte dos itens foi classificada como aprendizagem superficial (93,3%), com 6,7% de itens de aprendizagem profunda. Esse não é um cenário desejado de avaliação de estudantes que estão concluindo o ensino médio. Assim, o Enem e a forma de elaboração dos seus itens talvez precisem ser repensados, incorporando a análise da demanda cognitiva dos itens. Essa é a principal contribuição da nossa pesquisa. Mol (2019) encontrou resultados semelhantes aos nossos com dados do Saeb de Matemática, outra avaliação de larga escala. A revisão da literatura encontrada, embora pequena, tende a corroborar nossos resultados. De qualquer forma, são necessários mais estudos sobre a complexidade cognitiva dos itens do Enem; c) quanto aos objetos de conhecimento, alguns aparecem com maior frequência em detrimento de outros. Destaque para o objeto "ecologia e ciências ambientais" (32%). No outro extremo, "origem e evolução da vida" apareceu em apenas 3% dos itens; d) com relação às habilidades e competências da Matriz de Referência de Ciências da Natureza, identificamos 21 das 30 habilidades que a compõem. A distribuição das habilidades nos itens foi diversificada, algumas com maior incidência do que as outras. Destacamos as habilidades que apareceram 8, 9 e até 10 vezes entre os itens (H13, H14, H15, H28 e H29) e as habilidades H17, H19 e H23 que estiveram em apenas um item. As competências de área 3, 4 e 8 têm presença maior entre os itens e a competência de área 2 não foi encontrada em nenhum item. Por fim, sugerimos estudos complementares sobre os objetos de conhecimento da Matriz de Referência do Enem e o uso da Taxonomia SOLO para a classificação de itens de outras disciplinas avaliadas no Enem para possíveis comparações sobre os níveis de complexidade cognitiva.