Marcos Santos / USP
Uma nova pesquisa indica que os alunos com nomes que começam pelas letras finais do alfabeto tendem a ter avaliações piores nos seus trabalhos universitários.
Um novo estudo, que ainda está a ser revisto por pares, sugere que há um viés na forma como os estudantes são avaliados, sugerindo que aqueles com apelidos começados por letras mais tardias no alfabeto tendem a receber notas mais baixas.
O estudo analisou mais de 30 milhões de registos de estudantes de um sistema de gestão de aprendizagem (LMS) chamado Canvas, amplamente utilizado em universidades.
Os resultados indicam um claro “viés sequencial” em várias disciplinas, sendo o viés mais pronunciado nas ciências sociais e humanidades em comparação com áreas como engenharia, ciência e medicina.
Isto é atribuído à natureza das tarefas nas ciências sociais, que muitas vezes são mais subjetivas e abertas à interpretação, ao contrário das respostas mais concretas esperadas em áreas técnicas.
A ordenação alfabética padrão no Canvas levou a que estudantes com apelidos que começam de A a E recebessem notas que eram, em média, 0,3 pontos mais altas (numa escala de 100 pontos) em comparação com quando a ordem de avaliação era aleatória.
Por outro lado, estudantes com apelidos que começam de U a Z viram as suas notas diminuir 0,3 pontos sob o sistema alfabético em comparação com a avaliação aleatória, explica o Science Alert.
Curiosamente, a pesquisa também destacou o impacto da fadiga dos avaliadores. As tarefas avaliadas mais cedo na sequência recebiam pontuações significativamente mais altas, com as primeiras dez tarefas avaliadas a receber cerca de 3,5 pontos a mais do que aquelas avaliadas entre a 50.ª e a 60.ª posição.
Esta diferença sugere que os avaliadores podem tornar-se menos generosos e mais críticos à medida que avançam numa pilha de trabalhos.
A fadiga dos avaliadores foi ainda sublinhada pelo comportamento de um pequeno grupo de avaliadores que marcava em ordem alfabética inversa, efetivamente invertendo o viés contra aqueles tipicamente afetados por estarem no final do alfabeto.
A equipa também analisou os comentários dos avaliadores e as consultas e pedidos de reavaliação dos estudantes pós-avaliação. Descobriram que as tarefas avaliadas mais tarde não só receberam notas mais baixas, mas também foram acompanhadas por comentários mais negativos e menos educados.
Além disso, estas tarefas avaliadas mais tarde eram mais propensas a ser contestadas pelos estudantes, sugerindo um declínio na qualidade da avaliação ao longo do tempo.
Dadas estas descobertas, os investigadores recomendam que as instituições educativas considerem contratar mais avaliadores ou implementar uma validação cruzada das notas para mitigar os efeitos da fadiga dos avaliadores.
Também sugerem que tornar a ordenação aleatória a configuração padrão em LMS como o Canvas poderia ajudar a abordar os vieses inerentes à avaliação alfabética.
