[ad_1]
Un resultado de firmware sugiere que Meta está en camino de llevar sus «avatares códec» fotorrealistas a sus auriculares Quest.
Codec Avatars es un proyecto de investigación y desarrollo de larga data de Meta destinado a revolucionar la comunicación a larga distancia mediante la creación de avatares fotorrealistas verdaderamente atractivos controlados en tiempo real mediante auriculares con sensores de seguimiento facial y, eventualmente, gafas. Meta anunció por primera vez la existencia del proyecto en 2019 y desde entonces ha presentado varias actualizaciones de fidelidad, así como una versión de cuerpo completo.
No está claro en esta entrevista si los avatares fueron decodificados y renderizados a bordo o si una PC hizo este trabajo. Hay un cable USB-C conectado a ambos auriculares.
Si bien los avatares de códec siempre se han descrito como un tema de investigación, un nuevo hallazgo sugiere que ahora podrían estar en camino de llegar a los auriculares Quest como una característica.
Luna, entusiasta de la realidad virtual, encontró evidencia de avatares de códec al descompilar la versión 62 del firmware Meta Quest, que actualmente está disponible para los evaluadores en el Public Test Channel.
Las próximas funciones de misiones ya se han descubierto de esta manera varias veces en el pasado. En él aprendemos que Meta está trabajando para integrar una función en los auriculares Quest. Sin embargo, no nos dice qué tan lejos está la función o si alguna vez estará disponible. Por ejemplo, Space Sense llegó al mercado unos meses después de ser descubierto en el firmware, mientras que Quest Pro tardó más de un año. Y durante años se han detectado indicios de una integración de Project Avalanche Discord y una función de transmisión de realidad virtual para PC en la nube, pero ninguna se ha hecho pública.
En marzo del año pasado, el CTO de Meta, Andrew Bosworth, dijo que la compañía estaba haciendo «progresos» en el envío de avatares de códecs, pero advirtió que «aún faltan años».
![](https://www.uploadvr.com/content/images/2024/01/Codec-Avatars-strings.png)
Tampoco está claro si esta característica se desarrollará para los auriculares Quest existentes o para un futuro Quest Pro 2.
En marzo del año pasado, se filtró a The Verge una reunión sobre la hoja de ruta del hardware de Meta Quest. Además de revelar detalles sobre Quest 3 y los próximos auriculares más baratos, que se rumorea que se llamarán Quest 3 Lite, la hoja de ruta también menciona un nuevo auricular Quest Pro que estará «disponible en el futuro» e incluirá avatares de códec.
Pero es posible que Meta tenga la intención de integrar avatares de códec en el Quest Pro existente o incluso en el Quest 2 y Quest 3.
Los avatares de códec se decodifican en Quest 2 Standalone.
En 2021, los metainvestigadores demostraron un método significativamente más eficiente para decodificar avatares de códecs. En Quest 2, el nuevo método podría representar un avatar de códec en una escena en blanco a 72 FPS completos, tres avatares de códec a alrededor de 63 FPS o cinco a alrededor de 43 FPS.
Pero, ¿cómo podrían controlarse estos avatares en Quest 2 y Quest 3, que carecen de seguimiento facial y ocular? Los metainvestigadores también han demostrado una versión de avatares códec que no requiere seguimiento facial y, recientemente, incluso una versión que no requiere ningún seguimiento. En cambio, el sonido del micrófono se introduce en una red neuronal que estima la postura facial probable para el patrón de habla actual.
Aún así, es muy posible que Meta quiera reservar avatares de códec para un futuro Quest Pro 2 que sea lo suficientemente potente como para admitir avatares de códec en reuniones de Horizon Workrooms y controlarlos con seguimiento facial real.
![](https://www.uploadvr.com/content/images/2024/01/Codec-Avatars-MUGSY-capture-rig.jpg)
Independientemente de para qué auriculares Quest específicos esté destinada la función Codec Avatar, es casi seguro que la calidad no será la misma que la de las demostraciones más impresionantes de Meta, como la entrevista de Lex Fridman con Mark Zuckerberg. Estas demostraciones y esta entrevista utilizaron avatares de códec creados utilizando un dispositivo de grabación especial con más de 100 cámaras.
Los metainvestigadores han estado trabajando para reemplazar este proceso con un escaneo de teléfonos inteligentes, que es necesario para enviar avatares de códec a escala, pero esto da como resultado un resultado de menor calidad. Quest Pro 2 puede tener una pantalla frontal y sensores de profundidad para la configuración de avatares como los que usa Apple Vision Pro para sus personajes, pero aún así no estaría a la par con el dispositivo de captura dedicado.
Aún así, cualquier versión de Codec Avatars debería ser una mejora dramática con respecto a los avatares actuales de Meta, que tienen un estilo artístico básico de dibujos animados que no podría estar más lejos del fotorrealismo. Estaremos atentos a Meta en los próximos meses para detectar más indicios de que los avatares de códec están en camino a la producción.
La aplicación asesina de la realidad virtual podrían ser avatares de códec de cuerpo completo
La demostración final durante una visita de un día a las oficinas de investigación de Meta en el estado de Washington fue sin duda la más memorable: la verdadera telepresencia. Lograr una verdadera telepresencia en el hardware de consumo puede ser una de las ideas más difíciles de implementar para los consumidores. También podría ser la clave para desbloquear al asesino de la realidad virtual.
![](https://www.uploadvr.com/content/images/size/w1200/2022/10/codec-avatars-2.0-scanning-room-scaled.jpg)
[ad_2]