Avaliação Automática de respostas discursivas curtas baseado em três dimensões linguísticas

Resumo

Com o crescimento do uso de ambientes virtuais cresce a necessidade de um sistema avaliador automático para respostas discursivas. Este trabalho propõe um método para avaliação automática de respostas discursivas curtas baseado numa arquitetura de aprendizagem de máquina. O método preditivo é baseado na coleta de features (140) de similaridade entre textos numa taxonomia de três dimensões linguísticas: léxico, sintático e semântico. Como resultado obtivemos kappa quadrático 0.72 sistema x humano contra 0.94 humano x humano para a prova de Biologia e uma acurácia 0.76 sistema x humano contra 0.58 humano x humano para a prova de Geografia.