Les chercheurs de Columbia ont construit un visage robotisé à 26 moteurs qui apprend le couplage lip-syncing de la vidéo à l'aide de l'IA, améliorant l'interaction homme-robot. Columbia researchers built a 26-motor robot face that learns lip-syncing from video using AI, improving human-robot interaction.

Des chercheurs de l'Université Columbia ont créé un visage robotisé avec 26 moteurs qui apprennent à faire du lip-sync en observant les humains sur vidéo, en utilisant l'IA pour associer les sons aux mouvements réalistes des lèvres. Researchers at Columbia University have created a robot face with 26 motors that learns to lip-sync by observing humans on video, using AI to match sounds to realistic lip movements. Le système, formé par l'auto-observation et l'étude de la parole et de la chanson, peut synchroniser les lèvres avec l'audio dans les langues et les tons, améliorant l'interaction homme-robot naturel. The system, trained through self-observation and studying speech and song, can synchronize lips with audio across languages and tones, improving natural human-robot interaction. Bien que certains problèmes subsistent, la technologie vise à améliorer la connexion émotionnelle dans des applications comme les soins de santé et l'éducation en s'attaquant à un écart clé dans l'expression robotique. Though challenges remain with certain sounds, the technology aims to enhance emotional connection in applications like healthcare and education by addressing a key gap in robotic expression.