Codec Avatars 2.0 se acerca al realismo total

Codec Avatars 2.0 se acerca al realismo total


Los investigadores de Meta se están acercando al realismo total con Codec Avatars 2.0, sus prototipos de avatares de realidad virtual que utilizan técnicas avanzadas de aprendizaje automático.

Facebook mostró por primera vez el trabajo en «avatares de códec» en marzo de 2019. Impulsados ​​por múltiples redes neuronales, los avatares se generan utilizando un dispositivo de captura dedicado de 171 cámaras. Una vez generados, pueden ser controlados en tiempo real por un prototipo de casco VR con cinco cámaras; dos vistas internas para cada ojo y tres vistas externas para la base. Desde entonces, los investigadores han mostrado varios avances en el sistema, incluidos ojos más realistas y una versión que solo requiere seguimiento ocular y entrada de micrófono.

En el taller Virtual Beings & Being Virtual del MIT en abril, Yaser Sheikh, quien lidera el equipo de Codec Avatars, compartió un video de la última versión del proyecto, denominado «Codec Avatars 2.0»:

«Diría que un gran desafío de la próxima década es ver si podemos habilitar interacciones remotas que no se pueden distinguir de las interacciones cara a cara.‘ comentó el jeque.

En un artículo publicado el año pasado, Sheikh y sus colegas afirman que sus últimos modelos son más pequeños y más eficientes que sus investigaciones anteriores, y que la red neuronal ahora solo calcula los píxeles visibles para los auriculares. Con este avance, un auricular Quest 2 parece capaz de representar cinco avatares a 50 fotogramas por segundo en una escena que de otro modo estaría en blanco.

Aún así, la compañía parece tener un largo camino por recorrer para lograr este tipo de fidelidad en el envío de productos. Los metaavatares de hoy tienen un estilo de dibujos animados simple. De hecho, su realismo ha disminuido con el tiempo y probablemente sea más adecuado para grupos más grandes con entornos complejos en aplicaciones como Horizon Worlds en el procesador móvil de Quest 2.

Sin embargo, los avatares de códec pueden terminar como una opción separada en lugar de una actualización directa de los avatares de dibujos animados de hoy. En su entrevista con Lex Fridman, el director ejecutivo Mark Zuckerberg describió un futuro en el que podría usar un avatar «expresionista» en juegos casuales y un avatar «realista» en reuniones de trabajo.

Durante el taller, Sheikh señaló que es imposible predecir qué tan lejos estarán los Codec Avatars del envío real. Sin embargo, dijo que estaba «a diez maravillas de distancia» cuando comenzó el proyecto, y ahora cree que está a «cinco maravillas de distancia».

Related post

La innovadora tecnología de carburo de silicio acerca los dispositivos implantados flexibles a las aplicaciones clínicas

La innovadora tecnología de carburo de silicio acerca los…

La electrónica implantada flexible está un paso más cerca de la aplicación clínica gracias a una tecnología innovadora desarrollada recientemente por…
Piloto automático y conducción autónoma total: el DMV de California acusa a Tesla de publicidad engañosa

Piloto automático y conducción autónoma total: el DMV de…

Elon Musk tenía un ojo en el espejo mientras daba gavotas en la reunión anual de accionistas de Tesla la semana…
Se acerca la entrega de drones, pero persisten los desafíos

Se acerca la entrega de drones, pero persisten los…

Historias recientes en Bloomberg y axios Muéstranos que la promesa de la aviación eléctrica no solo ya existe, sino que se…

Leave a Reply

Tu dirección de correo electrónico no será publicada.