Meta sigue investigando la forma de llevarnos al metaverso de la forma más inmersiva posible gracias a los avatares fotorrealistas con Codec Avatars 2.0. Unos nuevos prototipos de avatares con aprendizaje automático que te dejaran con la boca abierta.
Por otro lado Meta está desarrollando un chip específico que ayudará a la transferencia de información sobre el movimiento de nuestra cara y minimizará el impacto del avatar en el procesador principal del visor.
Ya hemos podido ver como Meta se toma muy en serio los avatares en las plataformas de Quest y la antigua Oculus. Puedes echarle un vistazo a la evolución de los avatares en nuestro artículo Primer paso al Metaverso con los Avatares de Meta.
¿Cómo se crea un avatar realista?
De momento el único método para crear avatares fotorrealistas para Codec Avatars es mediante una captura realizada en una plataforma especial que cuenta con 171 cámaras. Esta plataforma está impulsada por múltiples redes neuronales que generan nuestro avatar.
Una vez conseguida la captura y generado el avatar este es conducido por un prototipo de visor VR con cinco cámaras. Dos se encuentran grabando el movimiento de nuestros ojos y otras tres registran los movimientos de nuestra cara y boca.
Gracias a estas cámaras interiores del visor VR se consigue un movimiento realista del avatar al mover los ojos o gesticular con la cara. Una función que según el CEO de Meta Mark Zuckerberg es indispensable para el desarrollo del metaverso.
¿Pueden las Meta Quest 2 usar Codec Avatars?
El equipo de Codec Avatars afirman que con el hardware actual de Meta Quest 2 podría cargar hasta 5 avatares fotorrealistas simultáneamente a 50 frames por segundo. Pero claro esto debería darse en unas condiciones especiales como encontrarse en un entorno completamente vacío.
Pero estos avatares además estarían desprovistos de las funcionalidades de seguimiento ocular y facial. Por este motivo los ingenieros de Meta han construido un prototipo de chip para mejorar el rendimiento de los Avatares fotorrealistas.
Este chip esta pensado para manejar una parte de la carga del trabajo de Codec Avatars y esta ubicado cerca de las entradas de las cámaras de seguimiento oculares donde extrae la información de nuestra mirada liberando al procesador de esa tarea.
¿Cómo de Realista es Codec Avatars 2.0?
Yaser Sheikh, el encargado de dirigir el equipo de Codec Avatars, mostró un vídeo de la última versión en el taller “Virtual Beings & Being Virtual” del MIT. En el vídeo muestra un modelo realizado de su propia cara y la retransmisión de las cámaras interiores del visor.
Durante la breve presentación podemos ver un avatar fotorrealista capaz de captar a la perfección las gesticulaciones de Sheikh. Además de el prototipo de visor VR que muestra lo capturado por las cinco cámaras interiores.
En el futuro no todo será fotorrealista
Aunque el proyecto va cogiendo forma aún queda bastante tiempo para que nuestras caras puedan verse a la perfección en el metaverso. De hecho en cuanto a Realidad Virtual se refiere hay más tendencia a preferir avatares caricaturizados.
No obstante Mark Zuckerberg describió un futuro donde tendríamos avatares expresivos para jugar y usar aplicaciones casuales y por otro lado avatares mas realistas para las reuniones de trabajo realizadas en las plataformas virtuales.
Durante su presentación Sheikh señaló que es imposible predecir cuando Codec Avatars será un producto finalizado y listo para su uso. Pero si quiso hacer un apunte de que en 2019 se encontraban a “diez milagros de distancia” y a día de hoy está a “cinco milagros de distancia”.
Si quieres saber más cosas sobre la Realidad Virtual te recomiendo que le eches un vistazo a Se filtra el precio de Cambria y Meta traerá tres nuevos visores. Además estamos por las noches en directo a partir de las 22h de lunes a sábado en la plataforma de Twitch y siempre en Discord.
Relacionadas
¿Apple está preocupada? Nuevo Snapdragon XR de Qualcomm en 2024
Meta Quest 3 ya está aquí. La Revolución de la Realidad Mixta
Quest 2 y Quest Pro se actualizan a la V55 en el PTC