IA au service de l’assistance : Aide proactive avec des lunettes intelligentes
AI for Service: Proactive Assistance with AI Glasses
October 16, 2025
papers.authors: Zichen Wen, Yiyu Wang, Chenfei Liao, Boxue Yang, Junxian Li, Weifeng Liu, Haocong He, Bolong Feng, Xuyang Liu, Yuanhuiyi Lyu, Xu Zheng, Xuming Hu, Linfeng Zhang
cs.AI
papers.abstract
À une époque où l'IA évolue d'un outil passif vers un compagnon actif et adaptatif, nous introduisons l'IA pour les services (AI4Service), un nouveau paradigme qui permet une assistance proactive et en temps réel dans la vie quotidienne. Les services d'IA existants restent largement réactifs, répondant uniquement aux commandes explicites des utilisateurs. Nous soutenons qu'un assistant véritablement intelligent et utile devrait être capable d'anticiper les besoins des utilisateurs et d'agir de manière proactive lorsque cela est approprié. Pour réaliser cette vision, nous proposons Alpha-Service, un cadre unifié qui aborde deux défis fondamentaux : Savoir Quand intervenir en détectant les opportunités de service à partir de flux vidéo égocentriques, et Savoir Comment fournir des services à la fois généralisés et personnalisés. Inspiré par l'architecture informatique de von Neumann et basé sur des lunettes intelligentes, Alpha-Service se compose de cinq éléments clés : une Unité d'Entrée pour la perception, une Unité Centrale de Traitement pour la planification des tâches, une Unité Arithmétique et Logique pour l'utilisation des outils, une Unité de Mémoire pour la personnalisation à long terme, et une Unité de Sortie pour une interaction humaine naturelle. En tant qu'exploration initiale, nous implémentons Alpha-Service à travers un système multi-agent déployé sur des lunettes intelligentes. Des études de cas, incluant un conseiller en temps réel pour le Blackjack, un guide de musée et un assistant d'essayage pour les achats, démontrent sa capacité à percevoir de manière fluide l'environnement, à déduire les intentions de l'utilisateur et à fournir une assistance utile et opportune sans demandes explicites.
English
In an era where AI is evolving from a passive tool into an active and
adaptive companion, we introduce AI for Service (AI4Service), a new paradigm
that enables proactive and real-time assistance in daily life. Existing AI
services remain largely reactive, responding only to explicit user commands. We
argue that a truly intelligent and helpful assistant should be capable of
anticipating user needs and taking actions proactively when appropriate. To
realize this vision, we propose Alpha-Service, a unified framework that
addresses two fundamental challenges: Know When to intervene by detecting
service opportunities from egocentric video streams, and Know How to provide
both generalized and personalized services. Inspired by the von Neumann
computer architecture and based on AI glasses, Alpha-Service consists of five
key components: an Input Unit for perception, a Central Processing Unit for
task scheduling, an Arithmetic Logic Unit for tool utilization, a Memory Unit
for long-term personalization, and an Output Unit for natural human
interaction. As an initial exploration, we implement Alpha-Service through a
multi-agent system deployed on AI glasses. Case studies, including a real-time
Blackjack advisor, a museum tour guide, and a shopping fit assistant,
demonstrate its ability to seamlessly perceive the environment, infer user
intent, and provide timely and useful assistance without explicit prompts.