Skill check: Some considerations on the evaluation of gamemastering models for role-playing games

Góngora, Santiago - Chiruzzo, Luis - Méndez, Gonzalo - Gervás, Pablo

Resumen:

In role-playing games a Game Master (GM) is the player in charge of the game, who must design the challenges the players face and narrate the outcomes of their actions. In this work we discuss some challenges to model GMs from an Interactive Storytelling and Natural Language Processing perspective. Following those challenges we propose three test categories to evaluate such dialogue systems, and we use them to test ChatGPT, Bard and OpenAssistant as out-of-the-box GMs.

Detalles Bibliográficos
2023
Agencia Nacional de Investigación e Innovación
Ministerio de Ciencia e Innovación (España)
Inteligencia Artificial
Procesamiento de Lenguaje Natural
Narrativa Interactiva
Ingeniería y Tecnología
Ingeniería Eléctrica, Ingeniería Electrónica e Ingeniería de la Información
Ingeniería de Sistemas y Comunicaciones
Inglés
Agencia Nacional de Investigación e Innovación
REDI
https://hdl.handle.net/20.500.12381/5199
https://doi.org/10.48550/arXiv.2309.13702
Acceso abierto
Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional. (CC BY-NC-ND)