Un robot aprende a mover los labios como un humano y mejora su comunicación

En una innovadora investigación, un equipo de Columbia Engineering presentó un robot capaz de aprender a mover los labios de manera realista, imitando el comportamiento humano. Este avance es significativo, ya que los humanos prestan una atención especial a los labios durante la conversación, y los robots han tenido dificultades para replicar estos movimientos de manera convincente.

El nuevo robot, desarrollado por el equipo de Hod Lipson, profesor de innovación en el Departamento de Ingeniería Mecánica, aprendió a realizar movimientos labiales observando su propio reflejo en un espejo y analizando videos de humanos hablando y cantando en línea. Este proceso le permitió hablar y cantar con movimientos faciales sincronizados, sin necesidad de ser programado explícitamente.

El fenómeno conocido como la "valle inquietante" se refiere a la incomodidad que sienten las personas al interactuar con robots que se asemejan a humanos pero que no logran replicar sus expresiones faciales de manera natural. Según los investigadores, el aprendizaje de los movimientos labiales podría ser un paso crucial para que los robots superen esta barrera.

El robot fue diseñado con 26 motores faciales que le permiten controlar su expresión. A través de la observación, comenzó a experimentar con miles de combinaciones de movimientos faciales, similar a cómo un niño aprende frente a un espejo. Este enfoque se basa en un modelo de lenguaje de visión a acción (VLA), que le permite asociar los sonidos con los movimientos labiales.

Una vez que el robot comprendió cómo funcionaba su propio rostro, se le mostraron videos de personas hablando y cantando. A través de esta observación, el sistema de inteligencia artificial pudo aprender a sincronizar sus movimientos labiales con los sonidos que escuchaba, incluso sin entender el significado de las palabras.

Los investigadores probaron el sistema en múltiples idiomas y estilos de habla, y aunque reconocieron que aún existen desafíos, como la dificultad con ciertos sonidos, creen que estas habilidades mejorarán con el tiempo y la práctica.

El objetivo final de este proyecto no es solo lograr una sincronización labial precisa, sino también dotar a los robots de formas más ricas y naturales de comunicarse con los humanos. Yuhang Hu, quien lideró el estudio como parte de su trabajo de doctorado, destacó que la combinación de esta habilidad con inteligencia conversacional podría profundizar la conexión entre humanos y robots.

Los investigadores también subrayaron la importancia de las expresiones faciales en la comunicación humana, argumentando que el enfoque actual de la robótica humanoide ha estado demasiado centrado en el movimiento de las piernas y las manos, descuidando la expresión facial, que es fundamental para cualquier interacción social.

Con la expectativa de que más de mil millones de robots humanoides sean producidos en la próxima década, los investigadores creen que es esencial que estos robots tengan la capacidad de mover sus ojos y labios de manera adecuada para evitar que sean percibidos como inquietantes.

Finalmente, el equipo de Columbia Engineering enfatizó la necesidad de avanzar con responsabilidad en el desarrollo de estas tecnologías, reconociendo los riesgos éticos que conlleva crear máquinas que puedan interactuar emocionalmente con los humanos.

Temas