Como saber se uma habilidade realmente foi aprendida — ou apenas decorada
Um aluno acertar uma questão não significa, necessariamente, que tenha desenvolvido a habilidade que a escola pretendia avaliar. O acerto pode demonstrar que ele lembra uma informação, mas ainda não que consegue compreendê-la, utilizá-la em uma situação diferente ou analisar um problema a partir dela.
Essa distinção é importante porque o resultado de uma avaliação só oferece um bom diagnóstico quando as questões exigem processos cognitivos compatíveis com aquilo que se deseja medir. Uma habilidade que pressupõe interpretação ou aplicação, por exemplo, não pode ser considerada consolidada apenas porque o estudante acertou itens baseados em reconhecimento ou reprodução de informações.
É nesse ponto que a Taxonomia de Bloom se torna particularmente útil para a avaliação: não como uma classificação teórica que a gestão escolar precisa dominar em detalhes, mas como uma referência para perguntar o que o estudante precisou fazer cognitivamente para chegar à resposta.
Acertar uma questão não é a mesma coisa que demonstrar domínio de uma habilidade
Imagine que um estudante esteja aprendendo porcentagem.
Uma questão pode pedir:
“Quanto é 20% de 100?”
Outra pode apresentar o preço de um produto, informar um desconto de 20% e pedir ao estudante que determine quanto o consumidor pagará.
Uma terceira pode mostrar duas promoções com formas diferentes de desconto e exigir que o aluno identifique qual delas é mais vantajosa e por quê.
As três questões podem envolver porcentagem, mas não produzem a mesma evidência sobre a aprendizagem.
Na primeira, o estudante pode recorrer a um procedimento já conhecido. Na segunda, precisa reconhecer que aquele conhecimento é aplicável a uma situação contextualizada. Na terceira, precisa relacionar informações e distinguir estratégias para chegar a uma conclusão.
Isso mostra por que o conteúdo da questão e a habilidade avaliada não são a mesma coisa. O conteúdo é o conhecimento mobilizado; a habilidade envolve aquilo que o estudante consegue fazer com esse conhecimento.
Para uma avaliação diagnóstica, essa diferença é decisiva. Se a prova contém apenas itens que exigem processos cognitivos mais simples, um percentual elevado de acertos pode produzir uma impressão de domínio maior do que aquilo que o instrumento efetivamente demonstrou.
A própria elaboração técnica de itens parte dessa preocupação: é preciso verificar se o comando, o texto-base e as alternativas realmente acionam a habilidade prevista na matriz de referência. A TRIEduc aprofunda essa diferença no conteúdo avaliar conteúdo e avaliar habilidade: a diferença está menos no objetivo da escola e mais na qualidade do instrumento.
A Taxonomia de Bloom ajuda a identificar o que uma questão realmente exige do aluno
A Taxonomia de Bloom organiza diferentes processos cognitivos envolvidos na aprendizagem. Em sua versão revisada, são considerados seis processos: lembrar, compreender, aplicar, analisar, avaliar e criar. (Avaliação de Resultados de Aprendizagem)
Para a gestão escolar, não é necessário transformar essa classificação em mais uma teoria a ser incorporada ao cotidiano. Sua principal contribuição está em fornecer uma lente para analisar a qualidade dos instrumentos avaliativos.
Neste caso, quatro níveis são particularmente úteis para perceber a diferença entre reprodução do conhecimento e evidências progressivamente mais complexas de aprendizagem: lembrar, compreender, aplicar e analisar.
Lembrar: o estudante consegue recuperar a informação?
Questões de lembrar exigem que o estudante reconheça ou recupere fatos, conceitos, definições, fórmulas ou outras informações já aprendidas.
Por exemplo, em Ciências:
Qual órgão é responsável por bombear o sangue pelo corpo humano?
Responder corretamente exige um conhecimento necessário e importante. Não há problema algum em avaliá-lo. Conhecer conceitos, definições, propriedades e informações fundamentais é parte da aprendizagem e fornece a base necessária para processos cognitivos posteriores.
O problema aparece quando esse tipo de item é utilizado como evidência suficiente de uma habilidade mais complexa.
Saber que o coração bombeia o sangue não demonstra, por si só, que o estudante consegue interpretar uma situação envolvendo o funcionamento do sistema circulatório.
Portanto, uma avaliação não se torna melhor simplesmente por eliminar questões de memorização. O ponto é verificar se a demanda cognitiva dos itens corresponde ao que a escola pretende concluir a partir dos resultados.
Compreender: o aluno consegue construir significado a partir do que aprendeu?
No nível de compreender, não basta recuperar uma informação. O estudante precisa construir significado: interpretar, exemplificar, classificar, resumir, inferir, comparar ou explicar são processos associados a esse nível.
Considere novamente o sistema circulatório.
Em vez de perguntar qual órgão bombeia o sangue, uma questão poderia apresentar um esquema simplificado da circulação e pedir ao estudante que explique a função desempenhada pelo coração naquele processo.
O conteúdo permanece relacionado ao mesmo objeto de conhecimento, mas a evidência produzida é diferente.
O estudante precisa demonstrar que compreendeu a relação entre os elementos, e não apenas que reconhece seus nomes.
Essa diferença é relevante para o diagnóstico pedagógico. Um aluno que consegue identificar corretamente conceitos, mas não estabelecer relações entre eles, apresenta uma necessidade de aprendizagem diferente daquela de um estudante que sequer consolidou os conhecimentos básicos.
Aplicar: o estudante consegue usar o conhecimento em outra situação?
Em aplicar, a questão exige que o estudante execute ou utilize um conhecimento ou procedimento em determinada situação. Na Taxonomia de Bloom revisada, processos como executar, implementar, resolver e usar estão associados a essa categoria.
Aqui aparece um teste importante para a aprendizagem: o aluno consegue mobilizar aquilo que sabe quando a situação não reproduz exatamente o exemplo utilizado durante o ensino?
Voltemos à porcentagem.
Em vez de perguntar diretamente quanto é 20% de determinado número, a avaliação pode apresentar uma situação de compra:
Uma mochila custa R$ 150 e está sendo vendida com 20% de desconto. Qual será o preço após a aplicação do desconto?
O estudante precisa identificar que porcentagem é o conhecimento pertinente e utilizá-lo para resolver a situação.
A mudança parece pequena, mas altera a informação que a avaliação oferece à escola. O item passa a investigar não apenas se o aluno conhece um procedimento, mas se consegue reconhecer quando e como mobilizá-lo.
Analisar: o estudante consegue estabelecer relações e distinguir informações relevantes?
No processo de analisar, a exigência cognitiva avança: o estudante precisa decompor informações e perceber como as partes se relacionam. Diferenciar, organizar e atribuir são processos associados a essa categoria na Taxonomia revisada.
Uma questão poderia apresentar duas promoções:
Loja A: 30% de desconto no produto.
Loja B: 20% de desconto e mais 10% sobre o valor já descontado.
Em vez de simplesmente calcular uma porcentagem, o estudante precisa compreender a estrutura das duas situações, realizar os procedimentos necessários e comparar os resultados.
Nesse caso, diferentes conhecimentos e operações são mobilizados para sustentar a análise.
É justamente esse tipo de diferença que permite à avaliação fornecer informações mais refinadas sobre até onde o estudante consegue ir com aquilo que aprendeu.
Uma questão mais difícil não necessariamente exige uma habilidade cognitiva mais complexa
Essa distinção é especialmente importante para gestores: dificuldade do item e complexidade cognitiva não são sinônimos.
Uma questão pode exigir apenas memorização e, ainda assim, apresentar baixo índice de acerto porque cobra uma informação pouco conhecida. Da mesma forma, uma questão de aplicação pode ter alto percentual de acerto porque os estudantes dominam muito bem aquela habilidade.
Na Teoria de Resposta ao Item (TRI), por exemplo, a dificuldade é uma característica estimada empiricamente a partir do comportamento dos respondentes; não deve ser confundida simplesmente com uma classificação pedagógica da tarefa como “fácil” ou “difícil”.
A Taxonomia de Bloom e os parâmetros psicométricos, portanto, respondem a perguntas diferentes.
Bloom ajuda a examinar qual processo cognitivo a tarefa pretende mobilizar.
A análise psicométrica ajuda a verificar como o item efetivamente funciona quando aplicado aos estudantes.
Essa distinção impede um erro comum na interpretação de avaliações: considerar que aumentar a dificuldade das perguntas significa, automaticamente, avaliar habilidades mais sofisticadas.
O verbo da questão ajuda, mas não determina sozinho a habilidade avaliada
É comum associar determinados verbos aos níveis da Taxonomia de Bloom: identificar e reconhecer a “lembrar”; explicar e comparar a “compreender”; resolver e utilizar a “aplicar”; diferenciar e organizar a “analisar”.
Esses verbos são referências úteis, mas não são suficientes para classificar uma questão.
“Analisar”, escrito no comando, não transforma automaticamente um item em uma tarefa de análise.
A demanda cognitiva resulta da combinação entre o conhecimento envolvido, o contexto apresentado, as informações disponíveis, o comando e o raciocínio necessário para chegar à resposta.
Por isso, a elaboração de itens tecnicamente consistentes exige mais do que selecionar um verbo adequado. Como explica a TRIEduc em seu conteúdo sobre elaboração de itens em avaliações externas, um problema recorrente ocorre justamente quando a habilidade declarada na matriz e aquilo que a questão efetivamente exige do estudante não coincidem.
Como saber, então, se o aluno aprendeu ou apenas decorou?
Uma única resposta correta raramente permite fazer essa distinção com segurança.
A evidência se torna mais robusta quando o instrumento permite observar o desempenho do estudante diante de diferentes demandas cognitivas relacionadas ao mesmo campo de conhecimento.
Se um aluno reconhece uma definição, mas encontra dificuldade quando precisa interpretar o conceito em outro contexto, a avaliação revela uma fronteira importante de sua aprendizagem.
Se compreende o conceito, mas não consegue aplicá-lo para resolver uma situação nova, o diagnóstico é outro.
Se consegue aplicar um procedimento isoladamente, mas encontra dificuldade para comparar informações, identificar relações ou selecionar estratégias, novamente a intervenção pedagógica pode ser diferente.
Por isso, a pergunta mais produtiva para uma escola não é simplesmente:
“Quantos alunos acertaram este conteúdo?”
Mas:
“Que evidência esse conjunto de respostas oferece sobre o que nossos alunos já conseguem fazer com esse conhecimento?”
Essa mudança aparentemente pequena transforma a avaliação de um mecanismo de contabilização de acertos em um instrumento capaz de localizar diferentes estágios da aprendizagem.
O diagnóstico melhora quando a prova foi planejada para produzir evidências diferentes
Para gestores escolares e de redes, a consequência prática é importante: não basta olhar para o resultado depois da aplicação; a qualidade do diagnóstico começa no planejamento do instrumento.
É preciso definir previamente quais habilidades serão avaliadas e construir itens capazes de produzir evidências compatíveis com elas.
Isso envolve planejamento de matriz, seleção adequada de objetos do conhecimento, definição da demanda cognitiva, construção de contextos funcionais, elaboração de distratores plausíveis e validação dos itens.
E há uma segunda etapa igualmente importante: verificar empiricamente se as questões funcionam como esperado.
Para a gestão, isso significa receber mais do que uma nota ou percentual de acertos. Significa ter condições de interpretar o que os estudantes demonstraram saber e fazer — e onde a aprendizagem ainda precisa avançar.
Leia também
Avaliar conteúdo e avaliar habilidade: a diferença está menos no objetivo da escola e mais na qualidade do instrumento
Aprofunda uma distinção central deste artigo: por que conhecer o conteúdo continua sendo essencial, mas o desenho da avaliação precisa produzir evidências compatíveis com as habilidades que a escola pretende diagnosticar.
Elaboração de itens em avaliações externas: respostas às dúvidas mais frequentes de gestores e professores sobre erros, distratores e validade
Mostra como comando, texto-base, alternativas e distratores interferem na validade de um item — e por que uma questão pode parecer adequada sem medir efetivamente a habilidade prevista.
Pré-testagem de questões: o que é e por que faz diferença no resultado do seu aluno
Explica como a pré-testagem permite verificar empiricamente se uma questão mede aquilo para o qual foi construída antes de utilizá-la em avaliações diagnósticas.
Análise de itens: o que fazer com as questões de baixo índice de acerto?
Avança para a etapa posterior à aplicação: como interpretar percentuais de acerto, padrões de resposta, distratores e outras informações para compreender melhor as dificuldades apresentadas pelos estudantes.
Avaliar melhor é descobrir até onde a aprendizagem consegue chegar
A diferença entre lembrar uma informação e conseguir analisá-la não torna o primeiro aprendizado dispensável. Não há aplicação ou análise consistente sem uma base de conhecimentos sobre a qual o estudante possa operar.
O que muda é a evidência necessária para cada conclusão.
Se uma escola pretende saber apenas se determinado conhecimento foi adquirido, questões de reconhecimento e recordação podem cumprir essa função. Se pretende diagnosticar se o aluno consegue interpretar, transferir e mobilizar esse conhecimento, o instrumento precisa exigir esses processos.
É essa correspondência entre o que se pretende medir e o que o item efetivamente exige que torna uma avaliação pedagogicamente útil.
A TRIEduc desenvolve avaliações e itens planejados para transformar respostas dos estudantes em informações mais precisas sobre aprendizagem. Conheça as soluções de avaliação da TRIEduc e converse com a equipe sobre como construir diagnósticos mais úteis para as decisões pedagógicas da sua escola ou rede.