La cinese Galbot, insieme a ricercatori di Tsinghua University, Peking University, Beijing Institute of Technology e Harbin Institute of Technology, ha presentato RoboGesture, un sistema che genera in tempo reale i gesti con cui un robot umanoide accompagna il proprio parlato. Il modello riceve l'audio in streaming e produce il movimento mentre la voce viene emessa, senza passare dalla trascrizione del testo. Il lavoro � in programma a ECCV 2026.
What if humanoid robots could gesture as naturally as they speak? ?Introducing RoboGesture � enabling humanoids to listen, respond, and gesture with meaning.RoboGesture closes the listen ? respond ? gesture loop in ~2 seconds, bringing us closer to natural human�humanoid� pic.twitter.com/zrJ7vzBDlm� Galbot (@GalbotRobotics) September 5, 2026
La piattaforma di prova � un Unitree G1 equipaggiato con mani antropomorfe BrainCo, per uno spazio di stato cinematico di 41 gradi di libert�, 17 fra busto e braccia e 24 nelle mani. Il generatore di movimento sostiene circa 120 fotogrammi al secondo, un ritmo che consente di produrre il gesto nello stesso momento in cui la frase viene pronunciata. Alla base c'� un dataset omonimo con oltre 300 categorie di gesti semantici e una pipeline automatica che ne ricava 1.000 ore di coppie audio-movimento specifiche per il robot.
