Video: Technology that knows what you're feeling | Poppy Crum (Noviembre 2024)
La realidad virtual y aumentada fueron temas candentes en SXSW este año, pero las conversaciones se extendieron más allá de los auriculares. Para ser verdaderamente inmersivos, las experiencias deben incorporar los cinco sentidos. Vista, sonido, tacto, olfato e incluso sabor.
Crum también es profesor adjunto en la Universidad de Stanford en el Centro de Investigación Informática en Música y Acústica y el Programa en Sistemas Simbólicos. Crum estuvo en SXSW como parte de la serie Tech for Humanity de IEEE. Ella entiende el sonido y mucho más.
Costa: Poppy, muchas gracias por acompañarnos hoy.
Crum: Gracias por invitarme. Es genial estar aquí.
Así que vamos a hablar sobre los sanos, vamos a hablar sobre la realidad aumentada, vamos a hablar sobre quizás una pequeña realidad virtual, tal vez hablemos sobre esas migrañas indoloras que los dos experimentamos de vez en cuando a tiempo En primer lugar, tu papel en Dolby. ¿Cómo es un día de trabajo para ti? ¿Qué haces cuando llegas a la oficina?
Tenemos un gran equipo de neurocientíficos computacionales y personas expertas en percepción sensorial. Si miras hacia atrás a la historia de Dolby y vuelves, incluso 50 años, al centro de la empresa, siempre ha sido una comprensión de la experiencia humana. Creo que ayudó a diferenciar cómo pensamos sobre la tecnología de construcción.
Entonces, a diario, las personas de mi equipo y las personas con las que trabajo, miramos a través de las tecnologías. Ya no somos solo sonido, se trata realmente de un sentido holístico. Tenemos laboratorios y hay muchos experimentos que se llevan a cabo durante todo el día.
Nuestro nuevo edificio tiene hasta 100 laboratorios, pero tenemos algunos laboratorios biofísicos increíbles. Mi experiencia es como neurofisiólogo, lo mismo con mucha gente en nuestros equipos. Y hay una fisiología humana que ocurre diariamente para pensar en nuevas tecnologías, y hay un trabajo muy seminal sobre cómo experimentar la información que es multisensorial y realmente cómo vamos a consumir contenido en el futuro que es tan rico y lo que eso significará para cómo afecta nuestros cuerpos, cómo afecta cómo nos relacionamos con los demás y nuestros sentidos.
Una de las cosas de las que ha hablado en el show y que hemos cubierto mucho más en PCMag es este segmento de los hearables. Hearables no es una palabra con la que creo que mucha de nuestra audiencia esté familiarizada. Cuando escuchas la palabra hearables, ¿qué te abarca? Qué significa eso?
En este momento, creo que es un término que aún se está definiendo. Me gusta tomarlo como un gran subconjunto de productos y posibilidades. Es un dispositivo inalámbrico o, en algunos casos, incluso cableado. Debido a que Amazon Echo llamaré a un dispositivo audible y está enchufado, pero es un dispositivo que tiene micrófonos o sensores, pero está capturando datos del entorno, utilizando esos datos de alguna manera para mejorar su experiencia. También hay muchas compañías en este momento que están pensando en el espacio portátil, un dispositivo que es inalámbrico, usado en su cuerpo, pero también hay elementos estáticos si miramos Google Home y Amazon Echo, y esos son transformadores.
También hay muchas preocupaciones con esto. Una cosa que vemos que creo que vale la pena mencionar, y creo que es lo que va a transformar y ayudar a definir qué cambios en las regulaciones son este espacio.
En este momento, los audífonos son sanables. Los audífonos son un dispositivo de realidad aumentada, pero tiene esta clase de dispositivos de consumo que tienen la capacidad de ayudar a mitigar la pérdida de audición, tienen la capacidad de ser un dispositivo de realidad aumentada para alguien con audición normal, incluso tienen la capacidad de ser un dispositivo de juego. Obtendrá el cruce de estos campos con el dispositivo médico que está cayendo en esta clase más amplia y tendrá una clase de dispositivo de consumo que claramente está cruzando estos límites y está haciendo un procesamiento similar para nosotros.
En términos de audífonos, las personas piensan en los audífonos como una vez que comienzas a perder la audición, entonces puedes obtener un audífono que luego te devolverá parte de tu audición, pero hay muchas cosas interesantes que podrían suceder si las personas comenzaron a aumentar su audición con… tienen audición normal, pero quieren tener algo más que audición normal.
Absolutamente. Siempre creo firmemente en no crear este límite arbitrario donde decimos: "Ahora tengo pérdida auditiva". Nuestra audición, debido a muchos elementos en el mundo y el sonido, incluso la aspirina es un ototóxico que debe ser:
¿Está bien?
Absolutamente. La combinación de elementos que pone en nuestra audición comienza a degradarse a principios de los 20 años y probablemente incluso antes con algunos de los sonidos fuertes que la gente escucha.
Especialmente sur por suroeste.
Si. Los hearables tienen tantas capacidades diferentes que puedes tener. Ya sea que tenga control sobre la transmisión de su contenido directamente a su dispositivo, de forma inalámbrica, el control de elementos, la espacialización de la información. Cosas de las que hablamos -. ha habido un gran impulso para tomar información, aumentar nuestro sentido visual con Google Glass o algunos de estos dispositivos de otras compañías, y realmente, lo que queremos, el componente sónico de eso puede ser muy crítico para permitirnos superar lo que podría llamar una limitación de capacidad. Y para tomar información de nuestro mundo y realmente representarla como un sonido.
Me parece que lo que ha hecho que las personas piensen de manera diferente sobre los controles de sonido y voz y las interacciones de voz, pero también sobre la privacidad, son dispositivos como Google Home y Amazon Echo, que son realmente las primeras interfaces de voz convencionales que hemos tenido para este digital mundo y viene con todas estas consecuencias diferentes, que creo que estamos empezando a resolver. ¿A dónde ves ese rumbo del mercado?
Esa es una gran pregunta. Tengo que decir que creo que estos dispositivos son transformadores de muchas maneras, y soy un usuario fuerte y uno de los que más los comparto, en parte también para comprender y ver hacia dónde evolucionarán y cómo los usaré. mi vida a diario La idea de que las personas estén dispuestas a tener micrófonos siempre encendidos es un gran salto. ¿Qué podemos hacer con eso?
En este momento, la voz es una cosa maravillosa. Le está dando control a la gente; los lleva a bordo para tener este dispositivo como asistente en sus vidas. Diez años más adelante, no quiero tener que controlar más cosas en mi vida. Quiero que mis dispositivos… Confíe en mis datos más de lo que voy a confiar en mí para saber lo que necesito en algunos casos y quiero que los dispositivos sean…
Anticipado.
Absolutamente. Quiero que sean proactivos y que capturen mucha información sobre los sonidos que me rodean, ya sea que haya estado tosiendo y modulando mi temperatura. O simplemente para hacer mis citas cuando sea necesario o para poder también hacer que nuestras vidas avancen sin tener que controlar todos los dispositivos.
Podrías imaginar que el Eco podría detectar si has estado husmeando. Puede detectar si suena o no como si tuviera dolor de garganta o si ha estado tosiendo, y luego le informa que suena como si estuviera resfriado.
Para seguir adelante y programar la cita con su médico antes que usted. Suena un poco lejos de querer eso, pero al mismo tiempo creo que vamos a llegar allí. Creo que el paso de tener control de voz, integrarlos en nuestras vidas nos hará sentir cómodos con él.
En el futuro, el único momento en que nos sentiremos incómodos es cuando las cosas no funcionan, cuando desaparece y cuando está ausente.
Tuve una experiencia con un Echo que me permitió darme cuenta de cuánto había trascendido las interacciones que estaba teniendo y podía ayudar a las personas a través de diferentes datos demográficos. Pero sí, creo que la gente ha pensado mucho en estos dispositivos para la accesibilidad, lo cual es maravilloso. Como el acceso que puede proporcionar tanto a niños muy pequeños como a diferentes rangos de edad o diferentes personas que…
Personas que tienen discapacidades o deficiencias o lagunas que podrían llenarse utilizando la tecnología.
Absolutamente. En mi caso, tuve un pariente que estaba en el hospital y falleció hace unas semanas. Lo había comprado, justo cuando salió Echo; Le compré un Echo como dispositivo de accesibilidad. Aquí está la transformación. Lo llevé al hospital, y dispositivos como este son fenomenales para un entorno hospitalario. Es importante tener en cuenta los problemas de privacidad, pero lo usamos principalmente para reproducir música en ese entorno.
Pero en este momento, mi pariente no era muy vocal, no había estado hablando, y habíamos estado tocando música en el Echo que pensamos que era lo que él querría escuchar, Bach y música muy relajante y, sinceramente, algunos de Las últimas palabras que dijo, y no estoy bromeando, lo que recuerdo, fueron: "Alexa, juega Al Green". Quería a Al Green, Sly y The Family Stone y este dispositivo le dio esa accesibilidad. Fue empoderador y en un momento en que era muy poderoso.
Hay muchas tecnologías en juego allí. Tienes el hecho de que Al Green está disponible y que hay una gran biblioteca de música que está a un comando de voz y luego tienes el comando de voz en sí, lo que hace posible que él lo solicite personalmente. Así que están pasando muchas cosas allí.
Creo que cuando mencionas el problema de privacidad, esa es otra pregunta: antes de que Alexa haga las citas con el médico, sospecho que alguna compañía farmacéutica nos ofrecerá una mesa de medicamentos para el resfriado o nuestras alergias están actuando y ofreciendo un Zyrtec, y creo que es casi un paso intermedio que tenemos que pasar a través de quién controlará todos los datos que se están capturando y que estamos regalando en este formato de audio.
Tenemos que abrazarlo. Si no pensamos en el lado de la regulación y no pensamos en cómo vamos a hacer que las personas se sientan cómodas para proporcionarle, incluso más, datos de lo que somos actualmente. Creo que Amazon ahora dice: "Solo estamos escuchando cuando dices Alexa", pero estos dispositivos para hacer lo que realmente pueden hacer tienes que estar escuchando todo el tiempo.
Hay una gran tendencia en este momento de compañías, compañías de seguros, ya sea seguro de automóvil o seguro de salud que ofrecen a los consumidores un trato o una forma de tener tarifas más bajas si permiten que se rastreen sus datos, si entregan sus datos. Creo que es muy poderoso. Creo que será parte de nuestro futuro, no hay dudas al respecto, pero ese futuro de cuáles son las ramificaciones de compartir esos datos, que aún no se ha definido, y es difícil de predecir. Entonces, realmente tenemos que pensar en cómo se ve ese futuro.
Además, creo que hay un problema de permanencia en el que las personas dicen: "No me importa si le doy a mi compañía de atención médica o a mi proveedor de seguros la cantidad de pasos que hago cada semana", pero esa información no llega a ningún lado, y los pasos lo que hagas esta semana se podrá buscar e indexar dentro de 30 años, y esa idea de permanencia digital con la que vivimos hoy, que realmente, en la historia de la humanidad, nunca antes había sucedido. Cuando agrega el hecho de que podría tener un micrófono encendido en su cocina todo el tiempo, todos esos datos no irán a ninguna parte. Amazon siempre lo tendrá.
Ese futuro no está escrito, y no sabemos las ramificaciones. No hemos definido estas regulaciones, pero incluso pueden cambiar en el futuro porque muchas cosas pueden cambiar.
Y aquí hay otra cosa. Creo que culturalmente, la UE ha tratado de promulgar mucha más legislación reguladora de protección al consumidor en este momento, pero no está claro lo que significa porque los datos existen. Necesitamos asegurar la interoperabilidad cuando viaja. Necesitamos garantizar la seguridad de los dispositivos IoT pequeños. Eso es algo realmente crítico. Creo que grupos como NIST son muy activos para resolver esto.
Cuando miras lo que hace Dolby y todas las tecnologías en las que están trabajando, comienzas a ver temas comunes, y uno de ellos es que la compañía realmente está tratando de dar a los humanos una percepción súper sensorial, poderes sobrehumanos. Suena exagerado. Suena hiperbólico, pero hay muchos ejemplos de personas que obtienen poderes sobrehumanos utilizando la tecnología. ¿Podemos hablar de un par de esos?
Absolutamente. Así que vengo de un fondo como neurofisiólogo, que está pensando en cómo integramos estas cosas a la tecnología y hay un par de cosas que son importantes. Cuando pensamos en qué es la realidad aumentada o qué puede hacer la tecnología por nosotros hoy… cuando me uní a Dolby, tal vez estábamos en el proceso de trabajar en Dolby Vision y Dolby Vision es un alto rango dinámico y una tecnología de imagen de gama de colores más amplia.. Solo para tener una idea, la pantalla típica que habría comprado hace unos tres años habría sido de 300 a 400 candelas por metro cuadrado. La luna, la luna natural es de aproximadamente uno a dos mil, la luz del sol en el pavimento negro, está obteniendo hasta 15, 000 candelas por metro cuadrado.
Por lo tanto, la tecnología de visualización estaba muy lejos de lo que nuestro sistema sensorial real podía manejar. Y en el proceso de desarrollo, estábamos trabajando con algunos contenidos y dispositivos que nos permitieron obtener hasta 20, 000 candelas por metro cuadrado en el brillo que se produjo.
Y esto no es necesariamente contraste, no es resolución, es brillo.
Sí, desde el punto de vista de la percepción y la perspectiva sensorial, para muchas distancias de visualización, estamos bastante al límite de lo que nuestros sistemas sensoriales, su sistema perceptivo pueden manejar con respecto a la resolución. Pero con respecto al brillo y la gama de colores, no estábamos cerca. Por lo tanto, es bastante emocionante decir: "está bien, hay un área en la que podemos mejorar la experiencia y podemos liderar en este campo". Eso es muy emocionante.
Entonces, basándome en la luminosidad que estaba llegando a la retina, mi cerebro dice: "Está bien, nunca he experimentado una llama que fuera tan brillante que no fuera real, por lo que es probable que mi cerebro se comporte con ese fuego como si fuera real."
Entonces, ahora que pensamos en tecnologías inmersivas y creamos superpoderes y creamos experiencias, podemos pensar en que comprometan nuestro sistema fisiológico de una manera natural, auténtica, y luego podemos mejorarlas. Tenemos la capacidad de ir más allá de lo que pueda experimentar en el mundo natural, y eso se vuelve bastante poderoso.
Sí, es un gran ejemplo. También hemos hablado un poco sobre cómo en PCMag hemos probado un montón de sistemas ER. Hay tecnologías muy prometedoras en los trabajos allí. Siempre nos centramos en cómo se ve en la pantalla, en la resolución, pero el componente de audio para la realidad virtual y la realidad aumentada es tan importante como el componente visual y ayuda a vender la experiencia. ¿Puedes hablar un poco sobre lo que estás encontrando allí y cuánto se agrega a la experiencia?
Una gran tendencia, no solo en nuestra empresa, sino en otras, es el reconocimiento de que no se puede estudiar un sentido sin el otro. Si estamos buscando dispositivos futuros y dispositivos holísticos en AR y VR. En este momento, todos los principales dispositivos de realidad virtual son visuales, pero, en lo que a mí respecta, un audífono, aunque no quieran llamarse así, es un dispositivo de realidad aumentada. Está tratando de aumentar desde el sistema fisiológico base, el estado del mismo. Los implantes cocleares, son uno de los primeros dispositivos biofísicos implantados.
Si piensas en lo que queremos en realidad aumentada? Queremos mejorar nuestra experiencia del mundo. Queremos que no sea algo que interfiera y nos brinde demasiados datos que no podemos hacer las cosas que solíamos hacer. En este momento, estamos en la tendencia de experiencias realmente geniales, pero no hemos mejorado ni tocado en la forma en que espero mejorar las actividades mundanas en nuestras vidas. Y nos permite estar más comprometidos con las personas porque esas cosas se mejoran. Daré un ejemplo de eso en un segundo, pero realmente, queremos estar conectados. Queremos comprometernos con nuestras vidas. Queremos poder recibir más información. Queremos tener experiencias intensificadas y queremos tener control sobre cuán ricas son estas experiencias.
Entonces, si tomamos todos los datos que podemos capturar o… más datos no siempre es mejor, pero si estamos tratando de mejorar nuestra visión… He visto que esto sucede en el ejército, lo he visto. sucede con la tecnología donde quiero crear un AR, y tomo información que estoy tratando de mejorar, y la pongo todo en mi sistema visual. Lo pongo todo en vasos o lo pongo en lugares donde tengo que mirarlo. Bueno, nuestro cerebro no puede procesar tanta información. No podemos asimilarlo al mismo tiempo.
Entonces, ahí es donde el sonido… tenemos una limitación de capacidad en un sentido, pero ¿adivina qué? Tenemos otros sentidos Y de repente abrimos toda esta tienda a la que podemos ir y realmente usar para mejorar nuestras experiencias, ¿y adivina qué? Esto es un cliché, pero con respecto a la creación de una experiencia fisiológica, ¿qué hago cuando estoy viendo una película de miedo y asustada? Apago el sonido. Entonces, no solo es una parte realmente visceral, es una oportunidad completa para mejorar y enriquecer nuestro estilo de vida en términos de cuánta información podemos incorporar y cuánta información podemos procesar. Simplemente teniendo voces separadas o elementos de sonido espacialmente dispares, podemos procesarlos al mismo tiempo en lugar de que nuestros cerebros y la información sean completamente inútiles. Nos impide tener toda nuestra capacidad cerebral y cognitiva absorbida al hacer eso. Realmente abre nuestra conciencia situacional y lo que podemos hacer.
El componente de audio y todas estas cosas de realidad virtual, a medida que comenzamos a probarlas, es algo que estamos poniendo en cada revisión, es que se ve así, suena así, y luego los dos generalmente deberían sumar algo más grande que el suma de las partes
Hay tantas cosas diferentes que podemos hacer con el sonido en AR o VR. Obviamente, crear una experiencia espacializada es importante, pero es una parte clave. Dolby Atmos es un ejemplo de entrega y renderización de sonido basado en objetos. Entonces, cuando las cosas se crean en Atmos y los elementos de sonido viven con un paquete de datos, se adjunta un flujo de datos. Entonces, se pueden imaginar, eso puede ser muy poderoso. Eso puede decirte dónde debería estar un sonido. Independientemente de cómo estés recreando ese sonido, tiene esa ubicación. Tiene un ancho, tiene un volumen, pero también puede coordenadas GPS. También puede tener todo tipo de información. Podemos tener contenido emocional en el futuro sobre cómo se supone que debe afectarlo si sabemos algo sobre la interacción que está sucediendo.
Estos son los tipos de cosas futuras que podrían suceder. Si piensa en un dispositivo AR, puede proporcionar mucha información. Actualmente utilizamos mapas para mirar nuestro teléfono o en un automóvil. Estas cosas se pueden hacer en un laboratorio muy fácilmente para crear una versión sonificada que le brinde información de seguimiento y le diga, no verbalmente, sino que le dé pings que le digan dónde están los sonidos, hacia dónde debe ir. El problema es que tenemos que asegurarnos de que sea robusto y consistente para todos los usuarios, y ese es un problema más complicado.
Las asignaciones son un gran ejemplo de que todavía se basa en la pantalla en general y cuando salió Google Glass, se podía ver toda esta información, esta pequeña ventana pequeña en su pantalla visual. Lo que realmente quería era que me dijera en mi oído si debía girar a la derecha o a la izquierda.
Sí.
Y estás justo allí, justo al lado del oído, podrías darme el comando de voz. Pensé que era un mejor sistema de audio y sonido que el sistema visual con respecto a las soluciones portátiles.
Absolutamente. Y de nuevo, bueno, no de nuevo, creo que has tocado el punto principal, que son todas estas herramientas, y en este momento, hoy, tenemos herramientas que podemos usar de maneras increíbles, incluido el control neurológico y otras cosas, pero la pregunta no es… vamos a elegir las herramientas adecuadas para los datos, la tecnología y la experiencia del usuario a la que intentas apuntar. Debe optimizar y personalizar contextualmente para su individuo y para lo que está tratando de lograr, y eso ha sido una gran brecha en lo que estamos construyendo en este momento. Tecnología increíble y se va a enriquecer. Pero va a moverse y creo que tenemos que aceptar lo que estamos tratando de alcanzar y pensar cómo, como sistema humano, podemos experimentarlo mejor.
Una de mis cosas favoritas para hacer es mirar otras especies. Puedes ver si se trata de una rana o una mosca, o un murciélago, especies que tienen estas increíbles superpotencias para hacer cosas que van mucho más allá de lo que sus cuerpos físicos y una mirada tosca a tu cerebro podrían decirte. Comprender cómo resuelven ese problema y más, por qué su evolución resolvió ese problema para ellos, nos da una idea. Tenemos que pensar de esa manera. Tenemos que pensar más sobre cuáles son las presiones ambientales en nuestros sistemas y cómo la tecnología nos ayudará a resolverlo mejor.
Y entregar más y más datos probablemente no siempre sea la solución correcta.
Raramente, raramente. Quiero decir, lo que nos hace exitosos como humanos es lo que nuestro cerebro tira. Siempre estoy hablando de ilusiones, me encantan las ilusiones. Son divertidos, pero también son esta hermosa visión de cuándo nuestros cerebros se equivocan. Si experimentamos los datos exactamente como son en el mundo, en realidad terminas con una condición patológica de que no eres funcional en el mundo. Y lo que nuestro cerebro hace constantemente es ayudarnos a ponderar cierta información y ni siquiera notar información diferente. Si notáramos todos los cambios de luminancia creados por la luz, nunca veríamos objetos holísticos. Necesitamos funcionar, y necesitamos saber en qué actuar, y eso es lo poderoso.
Déjame hacerte algunas preguntas que hago a todos mis invitados. Número uno, ¿qué es lo que te mantiene despierto por la noche? ¿Qué tendencia tecnológica le preocupa más en el futuro?
Dos cosas. Creo que ya hemos mencionado, hay mucho poder en la creación de este tipo de superpoderes, y lo que podemos hacer con AR y VR. Espero que consideremos todas las tecnologías que estamos construyendo como herramientas, y pensemos en usar las herramientas adecuadas de la manera más simple y más sólida, digo, pero es coherente entre todos nuestros usuarios para llegar a la experiencia que se pretende. en lugar del que es el más sexy y brillante.
Sin embargo, el otro es: se trata realmente de los datos. Hay tanto poder en tener micrófonos siempre escuchando que hará avanzar nuestra tecnología, avanzará nuestras vidas. Pero tenemos que estar cómodos con lo que sucede con esos datos. Tenemos que sentirnos cómodos con las reglamentaciones, ya sean autos autónomos o autos pesados, o solo la seguridad en los dispositivos IOT. Si no tenemos normas y estándares sólidos y comprensión y, en muchos casos, transparencia para los algoritmos que impulsan algunas de estas decisiones probabilísticas y la IA detrás de algunos de estos dispositivos, creo que retrasará y frenará la innovación. Podría retrasar las capacidades de la tecnología para tener un gran impacto en una dirección positiva para tantas personas. Quiero ver que eso suceda. Así que creo que se tratará de estándares y regulaciones para ayudar a que eso cobre vida.
En el lado positivo, ¿qué es lo que más te entusiasma? ¿Qué crees que va a cambiar el mundo y te entusiasma ir a trabajar todos los días?
Hay una tendencia y un cambio que no pensamos en un sentido. Estamos pensando en la tecnología de manera integral. Estamos pensando en el impacto que tiene en la vista y el sonido juntos. Pensamos en todo nuestro sistema fisiológico y, creo, en cómo nos sentimos, nuestras emociones. Lo que a la gente le importa ahora y la forma en que describimos el impacto de la tecnología es mucho más rica con respecto a lo que significa para la conexión humana, y lo que significa solo por el poder que puede tener en nuestras experiencias. Eso es algo que definitivamente creo que es una nueva dirección.
Entonces, con respecto a un producto, un servicio, un dispositivo tecnológico que amas, que cambió tu vida. ¿Hay algo que se destaque y diga: "Esto es lo que mejora mi vida todos los días"?
Dispositivos estáticos sanables. Utilizo un Echo todos los días, y lo he visto utilizado en una brecha generacional tan amplia y casos de uso. Estoy realmente entusiasmado con el uso de tecnologías como esa y en este momento, está realmente en sus primeras etapas del impacto que tendrá.
Entonces, si las personas escuchan esta charla y están interesadas en su trabajo, ¿cómo pueden encontrarlo en línea e interactuar con usted?
Puedes encontrarme en línea en LinkedIn, Poppy Crum. También puedes encontrarme en Twitter @poppycrum.
