Avaliação automática de respostas textuais curtas por similaridades de n -gramas: refinamentos por regressão linear

Resumo

No ensino a distância cresce a necessidade de ambientes virtuais inteligentes, onde um dos componentes é um sistema de avaliação automática de questões conceituais discursivas. Trabalhamos com respostas de questões do vestibular utilizando técnicas de similaridade de textos baseadas em n gramas e o método de regressão linear. A acurácia do sistema (S × H) foi contrastada com a dos avaliadores humanos (H × H), que resultou em 0.82 contra 0.94, prova Bio, e 0.86 contra 0.85 prova Geo. Este estudo mostra que esta tecnologia está alcançando maturidade para ser utilizadas com grandes vantagens nestes ambientes virtuais de ensino: baixo custo, feedback imediato, libera o trabalho de correção e atende grandes turmas.