Realidad mixta: de dónde viene el término, qué hace y con qué visores

Realidad mixta

La realidad mixta presenta objetos físicos y virtuales juntos en una misma vista, y en su uso actual el nombre se reserva para cuando lo digital reconoce las superficies y los objetos del entorno y se oculta detrás de ellos. Paul Milgram y Fumio Kishino introdujeron el término en 1994 para todo lo que queda entre un entorno completamente físico y uno completamente virtual.

Glosario de realidad virtual de Fyware, con la fuente de cada definición.

De dónde sale la definición

Realidad mixta, en el glosario de realidad virtual de Fyware
Olga Chávez

Olga Chávez

Gerente Comercial en Fyware®

¿Cómo podemos ayudarte?

Hablemos

La definición

La realidad mixta presenta objetos físicos y virtuales juntos en una misma vista, y en su uso actual el nombre se reserva para cuando lo digital reconoce las superficies y los objetos del entorno y se oculta detrás de ellos. Paul Milgram y Fumio Kishino introdujeron el término en 1994 para todo lo que queda entre un entorno completamente físico y uno completamente virtual.

Milgram y Kishino ordenaron las pantallas en un continuo. En un extremo pusieron los entornos hechos solo de objetos físicos, vistos de forma directa o por video; en el otro, los hechos solo de objetos virtuales, como una simulación por computadora. Lo que presenta los dos juntos cae en medio y es realidad mixta. Desde esa óptica, la realidad aumentada es un caso del tramo, un entorno físico al que se le agregan objetos generados por computadora, y la virtualidad aumentada es su inverso, un mundo generado al que se le agrega video del físico.

Con el uso, el nombre tomó varios sentidos. Al revisar el continuo en 2021, Skarbez, Smith y Whitton documentan que realidad mixta se ha usado como combinación de aumentada y virtual, como sinónimo de aumentada, como versión más fuerte de la aumentada y en el sentido original de 1994. La abreviatura más común, escriben, es que un sistema de realidad mixta sabe cosas del mundo físico y uno de realidad aumentada no. En la práctica eso se nota en que el objeto digital se apoya en la mesa sin flotar y queda oculto cuando alguien pasa por delante. Los mismos autores sostienen que ni la realidad virtual llega al extremo del continuo, porque el sistema no controla los sentidos internos del cuerpo, como el equilibrio, y la persona sigue sabiendo dónde está el piso.

Para construirla hay dos caminos, y los dos ya aparecen entre las clases de pantalla del artículo de 1994. Uno es ver el entorno directamente, a través de un vidrio que le sobrepone la imagen, como en HoloLens. El otro es verlo por video: cámaras al frente del visor capturan el cuarto y lo muestran en pantallas cerradas junto con lo virtual, lo que hoy se llama passthrough, o paso de video. Meta presentó el Meta Quest 3 en septiembre de 2023 como su visor de realidad mixta, con passthrough a todo color y, según el fabricante, más de diez veces los píxeles de passthrough del Quest 2; con dos toques en el costado, el mismo visor cambia de la inmersión completa a la mezcla con el entorno.

Una aclaración, porque el buscador la mezcla: el «portal de realidad mixta» es una aplicación de Windows para usar en la PC y en SteamVR los visores de la plataforma Windows Mixed Reality. Microsoft declaró obsoleta esa plataforma en diciembre de 2023 y anunció su retiro en Windows 11, versión 24H2.

En una planta, la pregunta que decide es si lo digital tiene que convivir con el entorno o basta con mostrarlo encima. Ensayar dónde cabe un brazo robótico entre las máquinas o practicar con fuego sobre el piso de la nave piden lo primero, con las manos libres. Enseñar un modelo sobre la mesa se resuelve con realidad aumentada en una tableta, más barata de comprar y de administrar que un visor de realidad mixta.

Cómo se ve en un proyecto

Para una empresa austriaca de realidad aumentada industrial, publicada sin nombre, Fyware construyó entre 2023 y 2024 un gemelo digital configurable de brazos robóticos en realidad mixta sobre HoloLens 2. En la interfaz se elige de dos a seis ejes y se captura la longitud de cada eslabón; el brazo aparece a escala 1:1 sobre el piso donde iría la celda, anclado a una marca de cinta y con la malla espacial del cuarto a la vista, y el efector final se lleva con la mano hasta un cono que marca el destino. El arranque sobre la celda física no se hizo, porque el cliente entró en insolvencia en septiembre de 2024. La realidad mixta acompaña a Fyware desde su primer proyecto, en 2017: un montaje de eventos a escala 1:1, en el primer visor de realidad mixta del mercado, para un proveedor de audiovisuales que opera dentro de cadenas hoteleras.

De dónde sale la definición

«real world and virtual world objects are presented together within a single display»

Es el artículo que introduce el continuo entre lo físico y lo virtual y llama realidad mixta a cualquier presentación conjunta de objetos físicos y virtuales; entre sus clases de pantalla ya separa la vista óptica de la vista por video.

Fuente: Paul Milgram y Fumio Kishino, «A Taxonomy of Mixed Reality Visual Displays», IEICE Transactions on Information and Systems, vol. E77-D, núm. 12, diciembre de 1994, pp. 1321 a 1329, sección 1, Introduction: Mixed Reality

«MR systems possess knowledge about the physical world, while AR systems do not»

Al revisar el continuo en 2021, los autores registran que el término se usa de varias formas y que la abreviatura más común es que la realidad mixta conoce el mundo físico.

Fuente: Richard Skarbez, Missie Smith y Mary C. Whitton, «Revisiting Milgram and Kishino’s Reality-Virtuality Continuum», Frontiers in Virtual Reality, vol. 2, artículo 647997, 24 de marzo de 2021, DOI 10.3389/frvir.2021.647997, sección 3, The Meaning of Mixed Reality

«full-color Passthrough keeps your physical surroundings in sight with over 10 times more pixels [...]»

Meta presentó el Quest 3 como visor de realidad mixta con passthrough a todo color y más de diez veces los píxeles del Quest 2; la cifra es del fabricante.

Fuente: Meta, «Meet Meta Quest 3, Our Mixed Reality Headset Starting at $499.99», Meta Newsroom, 27 de septiembre de 2023

«Windows Mixed Reality is deprecated and will be removed in Windows 11, version 24H2.»

El «portal de realidad mixta» pertenece a la plataforma Windows Mixed Reality, que Microsoft declaró obsoleta en diciembre de 2023.

Fuente: Microsoft Learn, «Deprecated features for Windows client», entrada Windows Mixed Reality, diciembre de 2023

Preguntas frecuentes

¿Qué dispositivos utiliza la realidad mixta?

Visores que ven el entorno, de dos tipos. Los de vista óptica, como HoloLens 2, dejan ver el cuarto a través de un vidrio y le sobreponen la imagen; los de video, como Meta Quest 3, lo capturan con cámaras y lo muestran junto con lo virtual, que es el passthrough. Milgram y Kishino ya distinguían las dos variantes en 1994.

¿El Meta Quest 3 es de realidad mixta?

Sí. Meta lo presentó en septiembre de 2023 como su visor de realidad mixta, con passthrough a todo color, y con dos toques en el costado pasa de la inmersión completa a la mezcla con el entorno. Fyware lo usa así en sus extintores en realidad mixta: el visor escanea el área y siembra el fuego encima del piso, de modo que la persona sigue viendo la planta mientras elige el extintor y lo descarga.

¿Qué es el portal de realidad mixta de Windows?

Es una aplicación de Windows, cosa distinta de la tecnología que describe esta ficha: servía para usar en la PC y en SteamVR los visores de la plataforma Windows Mixed Reality. Microsoft declaró obsoleta la plataforma en diciembre de 2023 y anunció su retiro en Windows 11, versión 24H2. Los equipos que se quedan en la versión 23H2 siguen funcionando con Steam hasta noviembre de 2026; después dejan de recibir actualizaciones y soporte.

Hablemos de tu planta

Cuéntanos qué quieres resolver en tu planta. Fyware diseña la realidad extendida con los equipos y las restricciones de tu operación, y la construye para crecer del piloto a toda la planta.

Olga ChávezOlga Chávez, Gerente Comercial en Fyware® Te respondemos en menos de 24 horas hábiles, con alcance, tiempo y rango de inversión.

En la reunión ves el simulador funcionando y qué tomaría llevarlo a tu planta, con escenarios adaptados a tu layout. Y si necesitas venderlo adentro, esta página es tu presentación: compártela con tu equipo.