Modelos GPT Encontram Aplicações Robóticas: Sistema de Conversação com Gesticulação Co-verbal
GPT Models Meet Robotic Applications: Co-Speech Gesturing Chat System
May 10, 2023
Autores: Naoki Wake, Atsushi Kanehira, Kazuhiro Sasabuchi, Jun Takamatsu, Katsushi Ikeuchi
cs.AI
Resumo
Este artigo técnico apresenta um sistema de robô de conversação que utiliza os avanços recentes em modelos de linguagem de grande escala (LLMs, do inglês Large-Scale Language Models), como GPT-3 e ChatGPT. O sistema é integrado a um sistema de geração de gestos co-verbais, que seleciona gestos apropriados com base no significado conceitual da fala. Nossa motivação é explorar maneiras de utilizar o progresso recente em LLMs para aplicações robóticas práticas, o que beneficia o desenvolvimento tanto de chatbots quanto de LLMs. Especificamente, ele possibilita o desenvolvimento de sistemas de chatbot altamente responsivos ao aproveitar os LLMs e adiciona efeitos visuais à interface do usuário dos LLMs como um valor adicional. O código-fonte do sistema está disponível no GitHub para nosso robô interno (https://github.com/microsoft/LabanotationSuite/tree/master/MSRAbotChatSimulation) e no GitHub para o Toyota HSR (https://github.com/microsoft/GPT-Enabled-HSR-CoSpeechGestures).
English
This technical paper introduces a chatting robot system that utilizes recent
advancements in large-scale language models (LLMs) such as GPT-3 and ChatGPT.
The system is integrated with a co-speech gesture generation system, which
selects appropriate gestures based on the conceptual meaning of speech. Our
motivation is to explore ways of utilizing the recent progress in LLMs for
practical robotic applications, which benefits the development of both chatbots
and LLMs. Specifically, it enables the development of highly responsive chatbot
systems by leveraging LLMs and adds visual effects to the user interface of
LLMs as an additional value. The source code for the system is available on
GitHub for our in-house robot
(https://github.com/microsoft/LabanotationSuite/tree/master/MSRAbotChatSimulation)
and GitHub for Toyota HSR
(https://github.com/microsoft/GPT-Enabled-HSR-CoSpeechGestures).