Apple ha estado desarrollando tecnología abiertamente para sus nuevos auriculares de realidad mixta durante años.

Se espera que Apple presente los auriculares de realidad mixta que se rumorea desde hace mucho tiempo como parte de WWDC 2023. Esto será una sorpresa para algunos, ya que Apple ha estado cantando alabanzas a la realidad aumentada desde al menos la WWDC 2017. Fue entonces cuando Apple comenzó a sentar las bases. para la tecnología de auriculares a través de las herramientas de desarrollo de iPhone y iPad.

Fue entonces cuando Apple presentó por primera vez su marco ARKit para realidad aumentada, que ayuda a los desarrolladores a crear experiencias inmersivas en iPhones y iPads.

ARKit fue un enfoque tan importante para Apple en los años siguientes que dedicó gran parte de su último discurso de apertura en vivo a presentar y demostrar nuevas funciones de realidad aumentada. ¿Quién podría olvidar las pocas mesas de madera que sirven como superficies para construir juegos virtuales de LEGO en el escenario?

Al destacar estas herramientas, Apple señaló la importancia de la tecnología de realidad aumentada como parte del futuro de sus plataformas.

El software de iPhone y iPad no es lo único que comenzó a diseñarse para el futuro de la realidad mixta. El hardware del iPhone y el iPad se volvió correspondientemente mejor equipado para actuar como ventanas portátiles al mundo de la realidad aumentada.

Comenzando con Face ID y la función Animoji (y luego Memoji) de Apple, Apple comenzó a ajustar el iPhone para las funciones AR. Internamente, Apple adaptó el motor neuronal del iPhone para manejar la realidad aumentada sin sudar.

La cámara principal de los iPhones incluso agregó un sensor LiDAR separado, como el rover lunar que navega por la superficie de la Luna y los autos sin conductor que leen su entorno.

Incluso hubo una actualización de hardware del iPad Pro que se centró casi por completo en agregar un escáner LiDAR a la cámara trasera.

¿Por qué? Claro, ayudó con el enfoque y la percepción de profundidad en modo retrato, pero también había aplicaciones especiales para iPad para decorar una habitación con muebles virtuales o probarse anteojos sin montura.

Lo que ha quedado claro desde el principio es que ARKit no estaba destinado en su totalidad a experiencias inmersivas a través del iPhone y el iPad. La pantalla del teléfono es demasiado pequeña para ser realmente inmersiva, y el peso de la tableta es demasiado pesado para sostenerla durante largos períodos de tiempo.

Definitivamente hay usos para AR en iPhones y iPads. Atrapar monstruos de bolsillo en el mundo real es más complicado en Pokémon GO que en un entorno totalmente digital. Cortar una criatura virtual en el aula también puede ser más cómodo que tocar el interior real.

Aún así, las experiencias más inmersivas que realmente engañan a su cerebro haciéndole creer que en realidad está rodeado de cualquier contenido digital que requiera gafas para ver.

¿Significa esto que todo el mundo se preocupa por AR y VR lo suficiente como para que los auriculares sean un éxito? Las reacciones a AR en el iPhone y el iPad a veces han sido que Apple ofrece una solución en busca de un problema.

Aún así, hay algunas experiencias de realidad aumentada que son claramente deliciosas.

¿Quiere ver las dimensiones completas del iPhone o MacBook anunciado pero no lanzado? AR es probablemente cuántas personas experimentaron la Mac Pro y Pantalla profesional XDR por primera vez.

Proyectar un cohete espacial virtual en su sala de estar a escala 1:1 también da una buena idea de la escala de estas máquinas. Experimentar el lanzamiento de un cohete virtual que te permite mirar hacia atrás como si fueras un pasajero también puede ser estimulante.

La realidad aumentada también ha sido la mejor manera de presentarles a mis hijos los dinosaurios sin arriesgarse a viajar en el tiempo y traer al T-Rex de regreso al presente.

En cuanto a ARKit, Apple ha estado creando abiertamente herramientas que se utilizarán para desarrollar los auriculares a partir del próximo mes.

Primero, el marco introdujo una forma de proporcionar a los desarrolladores las herramientas, las API y las bibliotecas necesarias para crear aplicaciones AR. El seguimiento de movimiento, la detección de escenas, la detección de luz y la integración de cámaras son esenciales para implementar aplicaciones AR.

El seguimiento del mundo real es otro factor importante. ARKit introdujo las herramientas necesarias para usar sensores de hardware como cámara, giroscopio y acelerómetro para rastrear con precisión la ubicación de objetos virtuales en el entorno real a través de dispositivos Apple.

Luego está el seguimiento facial. ARKit permite a los desarrolladores incorporar las mismas funciones de seguimiento facial que Apple usa para mejorar Animoji y Memoji con la duplicación de expresiones faciales.

AR Quick Look es otra tecnología mencionada anteriormente. Esto es lo que usan las experiencias de RA para colocar objetos virtuales, como productos, en el entorno real que te rodea. Escalar correctamente estos objetos y recordar su ubicación en relación con el dispositivo ayuda a crear la ilusión.

Las versiones más nuevas de ARKit se han centrado en admitir experiencias AR compartidas que pueden permanecer consistentes entre usos, detectar objetos en su entorno y bloquear la vista de las personas. El rendimiento también se ha ajustado constantemente a lo largo de los años, por lo que la tecnología central detrás de las experiencias de realidad virtual y aumentada de los auriculares debería ser bastante sólida.

Esperamos nuestro primer vistazo oficial a los auriculares de Apple el lunes 5 de junio, cuando Apple inicie su próximo evento principal. 9-5Mac participará en el evento especial, así que esté atento para una cobertura completa y cercana. Buena suerte HTC Vives y Metaauriculares del mundo.