[ad_1]
En SIGGRAPH 2023 probé Flamera, el prototipo de investigación de Meta para AR de paso libre de reflejos.
Los auriculares opacos como Quest Pro, Apple Vision Pro y Quest 3 utilizan cámaras de alta resolución en la parte frontal para mostrarte el mundo real. Sin embargo, debido a que estas cámaras están en una posición diferente a la de sus ojos, se utilizan algoritmos de procesamiento de imágenes para reproyectar las vistas de la cámara y mostrar lo que verían sus ojos.
Esta reproyección es un proceso imperfecto que aumenta la latencia e introduce artefactos en el procesamiento de imágenes, aunque mejora cada vez más con el hardware más nuevo a medida que mejoran las cámaras y los conjuntos de chips para procesarlas.
Flamera pretende evitar por completo el enfoque de reproyección mediante el desarrollo de un diseño de hardware completamente nuevo que está diseñado para el paso desde cero.
Tiene 53 lentes delante de cada ojo, cada una con una apertura que sólo deja pasar la luz desde un ángulo específico con respecto al ojo. Luego, la luz de estas lentes se enfoca en un sensor de imagen convencional y aparece como 53 círculos. Luego, el software «reordena los píxeles y estima un mapa de profundidad aproximado para permitir la reconstrucción dependiente de la profundidad», un proceso que, según Meta, es significativamente menos intensivo desde el punto de vista computacional que la reproyección, por lo tanto tiene una latencia más baja y casi no causa artefactos visuales.
¿Entonces, cómo estuvo?
Lo extraño de los auriculares Flamera de Meta es que sistema de visualización usarlo es bastante terrible. Es una pantalla de persistencia total de 60 Hz del tipo que se encuentra más comúnmente en los sistemas AR transparentes, con un campo de visión de solo aproximadamente la mitad que el de un Quest. Esto es algo irónico ya que, al igual que Butterscotch Varifocal, Flamera es presentado por el equipo de «Investigación de sistemas de visualización» de Meta.
Pero el sistema de visualización de Flamera se eligió para lograr el grosor mínimo de los auriculares utilizando componentes disponibles en el mercado. Y la demostración no trata sobre el sistema de visualización, sino sobre el nuevo sistema de detección.
Lo que vi fue una vista real sin distorsión ni desplazamiento de ningún tipo, con la geometría de los objetos que vi a través de la pantalla siendo idéntica a la que vi cuando la levanté. Flamera cumple lo que promete.
Aún así, el terrible sistema de visualización distraía la atención de apreciar los verdaderos méritos de lo que presenta Flamera. Por ejemplo, debido a la frecuencia de actualización, la latencia era inherentemente alta y la resolución y la reproducción del color daban como resultado una imagen borrosa y descolorida.
En los próximos años, espero que Meta combine el sistema de imágenes de Flamera con las igualmente delgadas lentes «holocake» que presentó el año pasado para ver cómo se ve realmente este enfoque de imágenes cuando se combina con el sistema de visualización adecuado.
¿Pero es práctico?
El equipo de Investigación de sistemas de visualización (DSR) de Meta parece estar centrado en dos tareas distintas: investigar la sensación de ciertas capacidades de visualización XR a largo plazo y, ocasionalmente, desarrollar tecnologías específicas para lograr esas capacidades.
El otro auricular que probé en SIGGRAPH este año, Butterscotch Varifocal, fue definitivamente el primero. No se presenta como una forma realmente práctica de lograr resolución varifocal o retiniana en los productos.
Pero Flamera parece ser a la vez una exploración de la sensación del paso libre de reflejos. Y una propuesta para un curso de acción concreto. Entonces surge la pregunta: ¿veremos esto en los productos?
Le pregunté a Grace Kuo, líder del proyecto Flamera (quien también tuvo la idea original). Descubrí que la única parte inherentemente costosa del enfoque Flamera es el sensor de imagen extremadamente grande, que se requiere para capturar todas las perspectivas y también genera mucho calor: puedes ver los disipadores de calor a cada lado del auricular.
Sin embargo, existen posibles soluciones a esto, como utilizar sensores de imagen separados y mucho más pequeños para cada lente, o al menos para grupos de lentes.
Otro posible enfoque futuro sería un punto medio entre reproyección y flamera, usando menos lentes para reducir la complejidad y el costo de los componentes, y aplicando una reproyección más suave que antes, lo que daría como resultado algunos artefactos visuales, aunque mucho menos severos que el enfoque actual de la cámara tradicional. Esta fusión de hardware y software es algo que Mea quiere explorar.
Meta reconoce que las tecnologías de Flamera «quizás nunca lleguen a un producto orientado al consumidor». Pero incluso si este es el caso, todavía muestra que el espíritu de innovación novedosa está vivo y coleando en los términos de investigación de la compañía, y sugiere que hay muchas soluciones no obvias a los problemas de las que se inventan hoy en las próximas décadas. Podrían existir auriculares.
[ad_2]