Los auriculares Vision Pro MR, presentados en la muy esperada WWDC 2023, representan el futuro de la tecnología MR con sus características innovadoras. Los auriculares incorporan una arquitectura de chip de última generación que combina almacenamiento y computación, conocida como "estructura de computación en memoria".

MR, que significa Realidad Mixta, va más allá de la Realidad Virtual (VR) al combinar a la perfección el contenido virtual con el mundo real. Vision Pro, el primer dispositivo de computación espacial de Apple, tiene como objetivo integrar a la perfección el contenido digital en la experiencia del mundo real del usuario, lo que les permite estar presentes y conectados.

A diferencia de los auriculares VR tradicionales, Vision Pro no depende de los controladores de mano. En cambio, ofrece una experiencia de manos libres a través de comandos de voz, seguimiento ocular y gestos. Los usuarios pueden buscar íconos de aplicaciones mirándolos, hacer selecciones con toques suaves, desplazarse deslizando o emitir comandos de voz.

Las capacidades multifuncionales de Vision Pro imponen exigencias específicas a la arquitectura del chip. Se deben cumplir los siguientes requisitos:

· Informática de alto rendimiento: el chip necesita gestionar una cantidad considerable de tareas informáticas en tiempo real, como el seguimiento de la posición, la percepción del entorno y el reconocimiento de poses. Por lo tanto, el chip debe poseer capacidades computacionales sólidas para ejecutar de manera eficiente algoritmos complejos y procesamiento de datos en tiempo real, lo que garantiza un rendimiento fluido y receptivo.

· Potencia de procesamiento de gráficos: Vision Pro requiere renderizar y mostrar contenido virtual de alta calidad, mezclándolo perfectamente con el mundo real. Por lo tanto, el chip debe ofrecer potentes capacidades de procesamiento de gráficos para representar escenas, objetos y efectos virtuales complejos en tiempo real, con baja latencia, lo que garantiza una experiencia visual de alta calidad para el usuario.

· Bajo consumo de energía y alta eficiencia energética: se espera que los auriculares MR tengan tiempos de uso prolongados, y los usuarios dan prioridad a los dispositivos livianos con batería de larga duración. Por lo tanto, el chip debe diseñarse con bajo consumo de energía y alta eficiencia energética, prolongando la vida útil de la batería, minimizando la generación de calor y optimizando la duración general del uso.

· Baja latencia y altas velocidades de fotogramas: las experiencias de MR dependen en gran medida de la capacidad de respuesta en tiempo real. El chip debe capturar los movimientos y las poses del usuario con una latencia mínima, lo que permite una respuesta rápida y precisa a los comandos e interacciones del usuario. Además, los auriculares requieren velocidades de fotogramas altas para una reproducción fluida y estable del contenido virtual, lo que evita el mareo o la incomodidad del usuario.

· Capacidades de procesamiento y transmisión de datos: los auriculares MR procesan grandes cantidades de datos de sensores, incluidas imágenes de cámaras, mapas de profundidad y datos de posición, para fusionarlos con contenido virtual. El chip debe manejar el procesamiento y la transmisión de datos de manera eficiente, procesando y transmitiendo rápidamente cantidades sustanciales de datos para garantizar la precisión y la confiabilidad en tiempo real.

La arquitectura del chip WTM2101 , con su diseño integrado de computación y almacenamiento, aborda estos requisitos. A diferencia de las arquitecturas tradicionales de von Neumann, donde el almacenamiento y la computación son entidades separadas, el diseño integrado de computación y almacenamiento minimiza el movimiento de datos y reduce el consumo de energía. Aprovecha las operaciones de multiplicación y suma de matrices dentro de las redes neuronales para lograr mejoras significativas en la eficiencia energética computacional. La eficiencia informática de la IA se multiplica por 100, con un consumo de energía que oscila entre 5 uA y 3 mA.

Además, el chip incorpora algoritmos de voz inteligentes, lo que permite el reconocimiento de voz avanzado, compatibilidad con frases de comando, reducción de ruido impulsada por IA y cancelación de eco de baja latencia en 10 ms. La serie WTM-8, equipada con algoritmos visuales, ofrece una resolución de 4K a 60 fps e implementa la interpolación de fotogramas para una experiencia de juego más fluida. Incluso en condiciones de poca luz, logra una reproducción perfecta de los detalles, brindando una experiencia visual que coincide con la percepción humana.

En resumen, los auriculares Vision Pro MR imponen demandas específicas a la arquitectura del chip, lo que requiere computación de alto rendimiento, procesamiento de gráficos potente, bajo consumo de energía, baja latencia y capacidades eficientes de transmisión y procesamiento de datos. La integración de almacenamiento y computación en el diseño del chip, como el WTM2101, garantiza una mayor eficiencia computacional.