Caminando en Marte con microsoft hololens

La semana pasada, me pareció que estaba caminando en Marte. Estaba usando el nuevo HoloLens de Microsoft (en la foto), que anunció como parte de la introducción de Windows 10, y la demostración de Mars fue una de las pocas que la compañía permitió que la prensa intentara usar una versión de prueba de los auriculares y las extensiones holográficas para El sistema operativo.

Utilicé varios auriculares de realidad virtual y de realidad aumentada en los últimos años y pasé mucho tiempo con Google Glass. De alguna manera, HoloLens se siente como una extensión de lo que algunos de esos productos están tratando de hacer; en otros, se siente muy diferente.

"Bienvenido a Windows Holográfico", dijo el jefe de proyecto Alex Kipman (arriba) cuando se presentó el producto. El concepto conducirá a formas más inmersivas de jugar, nuevas formas de aprender, colaborar y crear, dijo.

Microsoft hizo todo lo posible para no llamar al proyecto realidad virtual o realidad aumentada, y en su lugar utilizó el concepto de ser hologramas constantemente. Es un poco diferente de los hologramas que puedes ver en las películas, en la ficción, generalmente no necesitas un auricular especial, pero las imágenes que muestra son tridimensionales, así que supongo que el nombre tiene sentido.

Kipman habló sobre los muchos usos posibles de los hologramas en el mundo real, como un ingeniero que ve las instrucciones en una superposición sobre un objeto que estaba tratando de construir o reparar, un arquitecto que camina por un diseño, un cirujano que aprende un procedimiento, o simplemente convertir la sala de estar en un entorno de juego surrealista.

Microsoft en realidad anunció dos productos: uno es una serie de API centradas en la comprensión humana y holográfica llamada Windows Holográfico que formará parte de Windows 10, y el segundo es una pieza de hardware llamada HoloLens. Microsoft claramente quiere que los desarrolladores y potencialmente otros fabricantes de dispositivos de hardware creen las aplicaciones y dispositivos que lo convertirán en un mercado real, y llamó específicamente a los desarrolladores que trabajan en Oculus Rift, Magic Leap y Google Glass de Facebook para "crear hologramas con nosotros". Por supuesto, un problema es que hay muchas plataformas, y el propósito del anuncio es tratar de comenzar el proceso de conseguir una masa crítica de desarrolladores detrás de Windows Holographic. Al menos para la realidad virtual, Oculus parece tener la mayor expectación en este momento.

HoloLens es un conjunto de lentes holográficas transparentes con sonido y sensores. Tiene los componentes normales de CPU y GPU, así como lo que la compañía describió como una tercera unidad de procesamiento holográfico (HPU) que comprende los gestos y los mapas espaciales del mundo que nos rodea. El dispositivo funciona sin cables mientras procesa terabytes de información, dijo Kipman, pero la compañía aún no ha dado detalles reales del hardware.

La compañía hizo una serie de demostraciones interesantes en el escenario, pero yo estaba más interesado en probarlo yo mismo, y Microsoft creó cuatro "experiencias" de demostración para la prensa en el laboratorio donde se creó HoloLens, ubicado en el sótano de la compañía. centro de Visitantes.

Uno de ellos fue realmente una demostración de Microsoft de HoloStudio, un entorno para crear hologramas y opcionalmente imprimirlos en 3D (que generalmente se realiza a través de un servicio 3D, ya que los hologramas generalmente involucran múltiples colores y son más elaborados que la mayoría de las impresoras 3D personales). puede manejar). La demostración en el escenario implicó la creación de un quad-helicóptero personalizado, y luego una demostración de un grupo más pequeño nos mostró cómo hacer una llave USB personalizada con la imagen de un "koala espacial".

El entorno parecía un estudio de diseño interesante, uno en el que puede comenzar con bastante facilidad pero que en realidad tiene una buena cantidad de profundidad. Probablemente me lleve algún tiempo acostumbrarme a usarlo, pero supongo que las personas que usan productos como Autodesk's 3D Studio Max o un software similar lo encontrarían bastante sencillo.

Para las otras tres demostraciones, pusimos versiones prototipo de los auriculares HoloLens. En lugar de las unidades rojas relativamente compactas que se mostraron en el escenario, realmente se sentían como prototipos de ingeniería: el hardware que ejecutaba los auriculares estaba en una caja separada que usaba, y ambos estaban conectados a una computadora. (El hardware terminado parece ser considerablemente más grande que Google Glass, pero un poco más pequeño que el auricular Oculus Rift, y funciona de forma inalámbrica. No es tan elegante como te gustaría, pero parece un producto de consumo). Parece que el auricular tiene Una serie de cámaras y sensores en la parte frontal y lateral. Lo coloca sobre su cabeza (sobre sus anteojos, si los usa), aprieta en su lugar, y luego la unidad parece proyectar una imagen frente a las lentes en la unidad, mientras le permite ver el mundo exterior..

El primero de ellos fue de HoloBuilder, un programa que te permite crear, mover y destruir lo que parecen ser objetos en la habitación que te rodea. Se parecía mucho a Minecraft en la forma en que manipulas objetos pequeños pero con algunas diferencias clave. Podrías poner objetos virtuales en una mesa en el mundo físico, o colgarlos en una pared, y realmente parecía que las imágenes holográficas eran en realidad objetos reales sentados frente a ti. En partes de la demostración, parecía que se podían ver cosas encima de objetos del mundo real; en otros casos, parecía que estabas cortando la mesa y viendo cosas debajo. Parecía bastante genial. Puedo imaginar fácilmente una versión futura atractiva para los fanáticos de Minecraft.

Otra demostración mostró cómo puede usarlo con una versión de Skype para HoloLens. En esta demostración, la tarea era instalar un interruptor de luz, mientras alguien del otro lado de la conversación hablaba a través del proceso y estaba usando la versión normal de Skype en una computadora portátil. Dentro de los HoloLens, pude ver a la persona hablando en una ventana, que podría flotar frente a mí mientras miraba a mi alrededor o estaba clavada en un lugar específico. A su vez, él podía ver lo que estaba viendo a través de los HoloLens. Entonces vio las herramientas, el interruptor y la abertura para el interruptor de la luz. La visera tiene micrófonos y parlantes, por lo que la conversación parecía bastante estándar. La persona al otro lado de la conversación fue capaz de dibujar punteros a la herramienta que quería que usara y diagramas que me mostraban cómo orientar el interruptor y qué cables iban a dónde. Cuando terminé, volvieron a encender y el interruptor de la luz funcionó.

Ahora, no estoy seguro de que necesitemos esto para operaciones tan simples, pero se puede imaginar fácilmente que se usa en una variedad de aplicaciones industriales, desde el ensamblaje hasta la reparación, donde desea instrucciones con manos libres. La idea no es nueva: he visto ideas similares en una serie de "gafas inteligentes" diseñadas para usuarios industriales, como las gafas Moverio de Epson y las gafas M-100 de Vuzix. Pero la realidad aumentada en aplicaciones industriales tiene mucho sentido, y la posibilidad de que los dibujos aparezcan directamente sobre lo que ves parece un buen paso adelante.

Pero la demostración más interesante fue de la superficie de Marte, utilizando una aplicación desarrollada con el Laboratorio de Propulsión a Chorro (JPL) de la NASA a través de datos e imágenes recopiladas por el Curiosity Rover en la superficie del planeta. El objetivo es utilizar HoloLens para ayudar a los científicos a controlar el rover y comprender mejor el paisaje marciano. (JPL mostró anteriormente explorar el mundo en una demostración usando Oculus Rift, aunque no lo he intentado).

Como primer paso después de ponerme las gafas, pude experimentar caminar por el área de Dingo Gap de Marte, y lo que me impresionó fue que mientras caminaba por la habitación, realmente me parecía como si estuviera caminando sobre el superficie del planeta Fue aquí donde el aspecto tridimensional de los hologramas realmente cobró vida.

En el segundo escenario, podría explorar el área conocida como John Klein, donde podría mirar alrededor e incluso debajo de los objetos para tener una idea de la dimensionalidad del área. En un momento, podría mirar a través de la visera a una pantalla que mostraba las imágenes originales en blanco y negro, pero se veían muy estáticas; Ver lo que parecía ser el paisaje real en color y en 3D fue una experiencia completamente diferente. Era como si el mundo real se hubiera abierto paso en el artificial en el que caminaba.

La parte final de la demostración de Marte implicó explorar un punto de referencia conocido como "The Kimberley" cerca del monte. Sharp, donde pude colaborar con alguien de JPL, que también estaba usando la tecnología HoloLens. Apareció en la pantalla como un avatar con traje de oro, se parecía un poco a un alienígena de ciencia ficción de la década de 1950, y pudo hablarme sobre el paisaje y lo que estábamos viendo. Pude colocar banderas en una sección del paisaje para que el rover use su MastCam, que puede tomar imágenes más detalladas, y elegir algunas rocas para el ChemCam del rover, que envía un láser para quemar una sección de rocas para determinar su producto químico. composición.

Esto fue solo una demostración, pero puedes imaginar fácilmente cómo un equipo de científicos de la NASA podría usar la tecnología para comprender mejor la superficie de Marte y controlar el rover para aprovecharla al máximo. Y, por supuesto, puedes imaginar algunas experiencias muy inmersivas.

En general, HoloLens fue una de las demostraciones más impresionantes que he visto. Otros auriculares de realidad aumentada han sido bastante interesantes, y ciertamente veo su potencial en aplicaciones industriales, y he visto un par de juegos muy inmersivos en Oculus Rift. Pero el efecto holográfico, la idea de que todo aparece en 3D y que realmente puedes moverte por el mundo, incrustado en HoloLens, parecía algo muy nuevo. Tendremos que esperar para probar el visor final y las aplicaciones reales para ver si este concepto está realmente listo para un mercado convencional, pero ciertamente es impresionante.