O que sabemos sobre testes em chatbots? Uma revisão sistemática da literatura-Reference-Cited by-同舟云学术

O que sabemos sobre testes em chatbots? Uma revisão sistemática da literatura

Published:2024-07-21 Issue: Volume: Page:106-117
ISSN:
Container-title:Anais do IX Workshop sobre Aspectos Sociais, Humanos e Econômicos de Software (WASHES 2024)
language:
Short-container-title:

Author:

Santos Gabriel,Silva Williamson,Valle Pedro Henrique Dias

Abstract

O uso crescente de agentes conversacionais (chatbots) levanta questões complexas de design, implementação e, especialmente, testes. Conduzimos uma revisão sistemática da literatura e uma abordagem de snowballing para caracterizar quais ferramentas e métodos apoiam atividades de teste neste domínio de aplicação. Como resultado, evidenciamos diversas ferramentas que poderiam apoiar atividades de testes em chatbots, e percebemos que era necessário haver um consenso na área. A principal contribuição deste trabalho é a caracterização de ferramentas e métodos de teste de última geração que suportam a construção e validação de chatbots.

Publisher

Sociedade Brasileira de Computação - SBC

Reference22 articles.

1. Bird, J. J., Ekárt, A., and Faria, D. R. (2023). Chatbot interaction with artificial intelligence: human data augmentation with t5 and language transformer ensemble for text classification. Journal of Ambient Intelligence and Humanized Computing, 14(4):3129–3144.

2. Bozic, J., Tazl, O. A., and Wotawa, F. (2019). Chatbot testing using ai planning. In 2019 IEEE International Conference On Artificial Intelligence Testing (AITest), pages 37–44. IEEE.

3. Bozic, J. and Wotawa, F. (2019). Testing chatbots using metamorphic relations. In Testing Software and Systems: 31st IFIP WG 6.1 International Conference, ICTSS 2019, Paris, France, October 15–17, 2019, Proceedings 31, pages 41–55. Springer.

4. Božić, J. (2022). Ontology-based metamorphic testing for chatbots. Software Quality Journal, 30:227–251.

5. Bravo-Santos, S., Guerra, E., and de Lara, J. (2020). Testing chatbots with charm. In Quality of Information and Communications Technology: 13th International Conference, QUATIC 2020, Faro, Portugal, September 9–11, 2020, Proceedings 13, pages 426–438. Springer.