Avaliação da usabilidade do agente conversacional Cerebrum com professores em formação: uma abordagem educacional aplicada às equações algébricas

Abstract

Este artigo apresenta um estudo envolvendo o protótipo de agente conversacional desenvolvido na plataforma Watson Assistant (IBM). O objetivo da investigação é analisar a usabilidade do agente conversacional como ferramenta de aprendizagem de matemática em equações algébricas. Para a avaliação, foi utilizado um sistema de avaliação de agentes conversacionais, denominado como ChatAval. A metodologia utilizada é qualitativa exploratória, pois consiste em analisar os dados obtidos pelos aplicativos tecnológicos Cerebrum e ChatAval. Os resultados da investigação de usabilidade do Cerebrum, com alunos da graduação de Licenciatura de Matemática, permitem concluir que a usabilidade do agente conversacional apresentou efetividade, eficiência e satisfação do usuário, acima do escore, na utilização do Cerebrum, sendo assim, é possível qualificar positivamente o seu desempenho e dar continuidade no seu desenvolvimento, implementado melhorias na ferramenta em estudo.

This paper presents a study involving the conversational agent prototype developed on the Watson Assistant (IBM) platform. The objective of the investigation is to analyze the usability of the conversational agent as a tool for learning mathematics in algebraic equations. For the evaluation, an evaluation system of conversational agents, called ChatAval, was used. The methodology used is exploratory qualitative, as it consists of analyzing the data obtained by the technological applications Cerebrum and ChatAval. The results of the Cerebrum usability investigation, with undergraduate Mathematics students, allow us to conclude that the usability of the conversational agent showed effectiveness, efficiency, and user satisfaction, above the score, in the use of the Cerebrum, therefore, it is possible to qualify positively its performance and continue its development, implementing improvements in the tool under study.