Apple ha estado desarrollando tecnología abiertamente para sus nuevos auriculares de realidad mixta durante años.

Se espera que Apple presente sus auriculares de realidad mixta que se rumorea desde hace mucho tiempo como parte de WWDC 2023. Esto sorprende a pocos, en parte porque Apple ha estado elogiando la realidad aumentada desde al menos la WWDC 2017. Fue entonces cuando Apple comenzó a sentar las bases. para la tecnología utilizada en los auriculares a través de las herramientas de desarrollo de iPhone y iPad.

Fue entonces cuando Apple presentó por primera vez su marco de realidad aumentada ARKit, que ayuda a los desarrolladores a crear experiencias inmersivas en iPhones y iPads.

ARKit ha sido un enfoque tan importante para Apple en los años siguientes que dedicó gran parte de su reciente presentación en vivo a presentar y demostrar nuevas funciones de AR. ¿Quién podría olvidar las delgadas mesas de madera que servían como superficies para construir juegos virtuales de LEGO en el escenario?

Al destacar estas herramientas, Apple comunicó la importancia de la tecnología de realidad aumentada como parte del futuro de sus plataformas.

El software de iPhone y iPad no son las únicas cosas que han comenzado a diseñarse para el futuro de la realidad mixta. Los dispositivos iPhone y iPad también se han vuelto más equipados para servir como ventanas portátiles al mundo de la realidad aumentada.

Comenzando con Face ID y la función Animoji (y luego Memoji) de Apple, Apple comenzó a modificar el iPhone para las capacidades AR. Internamente, Apple ajustó el motor neuronal del iPhone para manejar la realidad aumentada sin sudar.

La cámara principal de los iPhone incluso ha agregado un sensor LiDAR dedicado, como los rovers lunares que navegan por la superficie de la luna y los automóviles sin conductor que leen su entorno.

Incluso hubo una actualización de hardware para el iPad Pro que se centró casi por completo en agregar un escáner LiDAR a la cámara trasera.

¿Por qué? Por supuesto, ayudó con el enfoque y la profundidad para las fotos en modo Retrato, pero también había aplicaciones de iPad dedicadas para decorar su habitación con muebles virtuales o tener anteojos sin marco.

Estaba claro desde el principio que ARKit no estaba completamente diseñado para una experiencia inmersiva en iPhone y iPad. La pantalla del teléfono es demasiado pequeña para ser realmente inmersiva, y el peso de la tableta es demasiado pesado para usarlo durante largos períodos de tiempo.

AR es absolutamente para iPhones y iPads. Atrapar monstruos de bolsillo del mundo real en Pokémon GO es más caprichoso que en un entorno completamente digital. Desmembrar una criatura virtual en el salón de clases también podría ser más agradable que tocar las entrañas reales.

Sin embargo, las experiencias más inmersivas que realmente engañan a su cerebro haciéndole creer que en realidad está rodeado por cualquier contenido digital que esté viendo requieren anteojos.

¿Significa eso que todos se preocuparán por AR y VR lo suficiente como para hacer que los auriculares sean un éxito? Las reacciones a AR en el iPhone y el iPad a veces han sido que Apple ofrece una solución en busca de un problema.

Sin embargo, hay algunas experiencias de realidad aumentada que son claramente agradables.

¿Quiere ver todos los tamaños de iPhone o MacBook anunciados pero no lanzados? AR probablemente como muchas personas han experimentado la Mac Pro y Pantalla profesional XDR: primera vez.

Proyectar un cohete espacial virtual a escala 1:1 en tu salón también te dará una buena idea de la escala de estas máquinas. Una experiencia de lanzamiento de un cohete virtual que te permite mirar hacia atrás a la Tierra como si fueras un pasajero también puede ser estimulante.

La realidad aumentada también es el mejor método para presentarles a mis hijos los dinosaurios sin correr el riesgo de viajar en el tiempo y traer el T-Rex de vuelta a nuestros días.

En cuanto a ARKit, Apple está preparando abiertamente herramientas que se utilizarán para desarrollar la experiencia de los auriculares a partir del próximo mes.

Para empezar, el marco introdujo una forma de proporcionar a los desarrolladores las herramientas, las API y las bibliotecas necesarias para crear aplicaciones AR en primer lugar. El seguimiento de movimiento, la detección de escenas, la detección de luz y la integración de cámaras son esenciales para implementar aplicaciones AR.

El seguimiento del mundo real es otro factor importante. ARKit introdujo las herramientas necesarias para usar sensores de hardware, como la cámara, el giroscopio y el acelerómetro, para rastrear con precisión la posición de objetos virtuales en entornos del mundo real usando dispositivos Apple.

Luego está el seguimiento facial. ARKit permite a los desarrolladores incorporar las mismas capacidades de seguimiento facial que Apple usa para conectar Animoji y Memoji reflejando expresiones faciales.

AR Quick Look es otra tecnología mencionada anteriormente. Esto es lo que usan las experiencias de RA para colocar objetos virtuales, como productos, en el entorno real que te rodea. Medir estos objetos correctamente y recordar su posición en relación con su dispositivo ayuda a crear la ilusión.

Las versiones más recientes de ARKit se centran en admitir experiencias AR compartidas que pueden permanecer estables entre usos, detectar objetos en su entorno y bloquear las vistas de las personas. El rendimiento también se ha ido perfeccionando constantemente a lo largo de los años, por lo que la tecnología central detrás de la experiencia de realidad virtual y aumentada en los auriculares debería ser bastante sólida.

Esperamos nuestro primer vistazo oficial a los auriculares de Apple el lunes 5 de junio, cuando Apple inicie su próximo gran evento. 9 a 5 Mac estará presente en el evento especial, así que esté atento para una cobertura completa y cercana. ¡Toda la suerte! HTC Vives y: Metaauriculares del mundo.