Es un escenario cotidiano:está conduciendo por la autopista cuando, con el rabillo del ojo, ve un automóvil que se incorpora a su carril sin señalizar. ¿Qué tan rápido pueden reaccionar tus ojos a ese estímulo visual? ¿Habría alguna diferencia si el auto infractor fuera azul en lugar de verde? Y si el color verde acortara ese período de una fracción de segundo entre la aparición inicial del estímulo y cuando el ojo comenzó a moverse hacia él (lo que los científicos conocen como movimiento sacádico), ¿podrían los conductores beneficiarse de una superposición de realidad aumentada que hiciera que todos los vehículos que se fusionaran fueran verdes?

Qi Sun, profesor adjunto en el Departamento de Informática e Ingeniería de Tandon y el Centro para la Ciencia y el Progreso Urbano (CUSP), está colaborando con neurocientíficos para averiguarlo.

Él y su Ph.D. El estudiante Budmonde Duinkharjav, junto con colegas de Princeton, la Universidad de Carolina del Norte y NVIDIA Research, recientemente escribió el artículo "Image Features Influence Reaction Time:A Learned Probabilistic Perceptual Model for Saccade Latency", que presenta un modelo que se puede usar para predecir comportamiento temporal de la mirada, particularmente la latencia sacádica, en función de las estadísticas de una imagen mostrada. Inspirado en la neurociencia, el modelo en última instancia podría tener grandes implicaciones para la seguridad vial, la telemedicina, los deportes electrónicos y en cualquier otro campo en el que se aprovechen la RA y la RV.

"Si bien es posible que la tecnología AR/VR no nos transforme en Superhumanos de inmediato", dice Sun, quien dirige el Laboratorio de Informática Inmersiva en Tandon, "el potencial de estas nuevas formas de medios emergentes para impulsar el rendimiento humano es muy emocionante".

"Image Features Influence Reaction Time" obtuvo los honores de mejor artículo en el SIGGRAPH 2022 de la Association for Computing Machinery (Grupo de interés especial en gráficos por computadora y técnicas interactivas), la principal conferencia anual del campo, y un segundo artículo del que Sun es coautor, "Joint Neural Phase Retrieval and Compression for Energy- and Computing-ficient Holography on the Edge", recibió una mención de honor.

En ese segundo artículo, él y sus coautores profundizan en los desafíos de crear pantallas holográficas de alta fidelidad, que requieren una demanda computacional y un consumo de energía mayores que los que pueden proporcionar muchos dispositivos; como señalan los investigadores, incluso realizar el cálculo completamente en un servidor en la nube no representa una solución efectiva, ya que puede resultar en una latencia y un almacenamiento prohibitivamente altos. En su lugar, proponen un marco innovador que genera y comprime conjuntamente hologramas de alta calidad mediante la distribución del cómputo y la optimización de la transmisión, lo que da como resultado una reducción del 83 % en los costos de energía y una reducción significativa de las tasas de bits promedio y los tiempos de decodificación.

En otro artículo reciente, Sun, un ex científico investigador del gigante de software Adobe, postuló que podemos predecir y cambiar la percepción del tiempo de las personas, incluso en un lapso de varios minutos, al alterar diferentes características visuales que se ven en la configuración de realidad virtual. "La percepción del tiempo es fluida", explica, "y nuestros hallazgos tienen el potencial de tener un impacto profundo en situaciones del mundo real. Imagine, por ejemplo, que pudiéramos reducir la cantidad de dolor que percibe un paciente durante un procedimiento médico con el uso de realidad virtual o ayudar a un piloto en entrenamiento a sentir menos fatiga. Incluso hay aplicaciones dentro de un campo como la planificación urbana, ya que los tiempos de espera percibidos para el transporte público son una fuente de insatisfacción para los viajeros en muchas ciudades".

A medida que los neurocientíficos hacen nuevos descubrimientos sobre cómo funciona el cerebro, Sun espera aplicarlos en los medios emergentes para desbloquear los beneficios del mundo real. "Piense en el cerebro como una computadora de baja potencia", dice. "Sabemos que las nuevas tecnologías tienen un efecto en nuestra cognición y comportamiento, y deberíamos aprovechar eso para el bien de la sociedad y ayudar a prevenir cualquier efecto negativo".