Los “Avatares de Códec Gaussiano Reiluminables”, son un revolucionario método para la construcción de avatares de cabeza de alta fidelidad capaces de generar expresiones novedosas mediante animación creado por el equipo de Meta AI.
El modelo geométrico, basado en gaussianos 3D, captura detalles submilimétricos en secuencias faciales dinámicas, como mechones de cabello y poros.
La investigación muestra un modelo de apariencia reiluminable que unifica la representación de materiales como ojos, piel y cabello, permitiendo una reiluminación en tiempo real.
Método de avatares de códec gaussiano reiluminables
Los avatares se condicionan con un código de expresión latente, información de mirada y una dirección de vista de destino.
La geometría subyacente, parametrizada por gaussianos 3D, se renderiza eficientemente mediante salpicado gaussiano.
Para lograr una reiluminación eficiente con diversas condiciones, presentamos una transferencia de radiación aprendible basada en armónicos esféricos difusos y gaussianos esféricos especulares.
Controles desenredados
Dicho modelo permite el control desenmarañado de la expresión, mirada, vista e iluminación, proporcionando flexibilidad y precisión en la manipulación de avatares.
Aplicación
Los Avatares de Códec Gaussiano Reiluminables encuentran aplicaciones destacadas en realidad virtual, permitiendo reiluminación y renderizados interactivos desde cualquier punto de vista de un casco VR (realidad virtual).
Gracias a este desarrollo, también se demostró su capacidad para ser controlados en tiempo real mediante transmisión de vídeo desde cámaras montadas en la cabeza (HMC), ampliando las posibilidades de animación basada en vídeo.
Este método supera los enfoques existentes sin comprometer el rendimiento inmediato, lo cual se ilustra mediante la reiluminación en un casco de realidad virtual de consumo atado.
La eficiencia y fidelidad de los “Avatares de Códec Gaussiano Reiluminables” prometen una experiencia inmersiva y personalizada en entornos virtuales. Consulte el documento para obtener más detalles sobre este avance en la creación de avatares aquí.
More Stories
IA Copilot de Microsoft llega a nuevos portátiles Intel y AMD
¿Se están reduciendo las emisiones de carbono de Meta?
Unigine: Motor 3D en tiempo real para simulaciones