No hay nada mejor que la llamada del camino abierto. Ya sea una conversación de calidad en un viaje por carretera épico, escuchar un podcast o escuchar su álbum favorito, casi todos tienen buenos recuerdos de los autos. Pero, ¿y si pudiéramos hacer que nuestro tiempo en el automóvil sea más productivo, social y divertido que nunca?
Esta pregunta está en el corazón de Meta asociación con BMW. Anunciado en 2022, el objetivo de este proyecto de investigación colaborativo es explorar cómo la realidad virtual y aumentada (AR y VR) podría integrarse algún día en los automóviles inteligentes para mejorar la experiencia del pasajero.
Si lo hacemos bien, esta tecnología podría revolucionar los viajes en automóviles, trenes, aviones y más, abriendo nuevas formas de comunicación, entretenimiento y utilidad manos libres que nos brindarán mucho más valor que las pantallas y las herramientas que tenemos. .solía ver en los vehículos de hoy.
Oculus Insight frente a la carretera abierta
Los auriculares VR están equipados con una variedad de sensores, pero los vehículos en movimiento presentan un desafío ya que la tecnología de seguimiento como Oculus Insight utiliza sensores de movimiento inercial (IMU) y cámaras para estimar con precisión la ubicación y el movimiento del auricular.
En un entorno en movimiento, más específicamente, en un marco de referencia no inercial, estas dos modalidades están en conflicto, ya que las cámaras observan el movimiento en relación con el interior del automóvil, mientras que la IMU mide la aceleración y la velocidad de rotación en relación con el mundo circundante. Esta discrepancia significa que un auricular VR como Meta misión 2 actualmente no puede mostrar contenido virtual estable cuando se conduce dentro de un vehículo cuando está girando y/o acelerando.
Al menos así ha sido hasta ahora.
Desafío aceptado
Para resolver este problema, nos asociamos con BMW para incorporar datos IMU en tiempo real del conjunto de sensores del vehículo BMW en el sistema de seguimiento de nuestro vehículo. Gafas de investigación del Proyecto Aria. Esta información adicional permite que el sistema calcule la posición de los vidrios en relación con el vehículo.
Esta fue una gran hazaña, porque después de portar el sistema de seguimiento a Meta Quest Pro, nos permitió vincular con precisión objetos virtuales a un automóvil en movimiento utilizando el gemelo digital del automóvil. Con este nuevo sistema de rastreo y Meta Quest Pro. El siguiente paso es agregar la ubicación del automóvil en relación con el mundo, lo que hará que el mundo renderizado quede anclado.
En el futuro, esperamos continuar trabajando con BMW para aprovechar aún más las crecientes percepciones de los vehículos de hoy para proporcionar casos de uso futuros. El acceso al sistema de posicionamiento preciso de 6 grados de libertad del vehículo puede permitirnos mostrar contenido virtual bloqueado mundialmente fuera del vehículo, como identificar puntos de referencia y otros puntos de interés. Esperamos que esta capacidad sea invaluable para futuras gafas de realidad aumentada y asistentes de IA personalizados.
Esta es una visión emocionante y este es el camino que buscamos recorrer.
