Las oportunidades que alguna vez estuvieron distantes para la comunidad de personas con problemas de audición se convertirán en una realidad con un innovador traductor de lenguaje de señas. Los ingenieros de la Universidad Estatal de Michigan desarrollaron y patentaron una tecnología que, a diferencia de los mecanismos de traducción anteriores, no es invasiva y es tan portátil como un tubo de Chapstick.

"Ofrecemos una solución omnipresente para la traducción de lengua de signos, "dijo Mi Zhang, profesor asistente de ingeniería eléctrica e informática. "Las personas con problemas de audición que necesitan comunicarse con alguien que no comprende el lenguaje de señas pueden tener una intérprete virtual en cualquier momento, en cualquier sitio."

Cientos de miles de personas con problemas de audición confían en el lenguaje de señas estadounidense, o ASL, comunicar. Sin un intérprete presente, no tienen las mismas oportunidades de empleo y, a menudo, se encuentran en desventaja en situaciones delicadas o sensibles, Dijo Zhang.

"Piense si estuviera en el hospital y necesitara comunicarse con un médico. Tendría que esperar a que llegue el traductor del hospital, si es que tiene uno, conectarse con un servicio gratuito o confiar en que un miembro de la familia esté presente, ", Dijo Zhang." Esto compromete su privacidad y podría empeorar una emergencia de salud. Este es solo un ejemplo que demuestra la necesidad crítica de tecnología de traducción de lengua de signos ".

Zhang y colegas, la estudiante de doctorado Biyi Fang y la estudiante de pregrado Jillian Co, vio una oportunidad para ayudar a la población con problemas de audición a romper la barrera de la comunicación hacia la mayoría auditiva.

La tecnología de Zhang, llamado DeepASL, presenta un algoritmo de aprendizaje profundo, o aprendizaje automático basado en datos inspirados en la estructura y función del cerebro, que traduce automáticamente los signos al inglés. La tecnología funciona a través de un dispositivo sensorial de tres pulgadas, desarrollado por Leap Motion, que está equipado con cámaras para capturar los movimientos de manos y dedos de manera continua.

"Leap Motion convierte los movimientos de las manos y los dedos en articulaciones en forma de esqueleto. Nuestro algoritmo de aprendizaje profundo recoge datos de las articulaciones en forma de esqueleto y los compara con los signos de ASL, "Dijo Fang.

Similar a configurar Siri en un nuevo iPhone, los usuarios firman ciertas palabras para familiarizar sus manos y articulaciones con la tecnología y los sensores. También pueden crear letreros personalizados para sus nombres o palabras que no están en el diccionario escribiéndolas, y tener más facilidad y comodidad para comunicarse.

"Una característica diferenciadora de DeepASL es que puede traducir oraciones completas sin necesidad de que los usuarios hagan una pausa después de cada signo. Otros traductores son palabra por palabra, requiriendo que los usuarios hagan una pausa entre los signos. Esta limitación ralentiza significativamente las conversaciones cara a cara, haciendo que las conversaciones sean difíciles e incómodas, ", Dijo Fang." Nuestra tecnología tampoco es intrusiva, a diferencia de otras tecnologías de interpretación que requieren que los firmantes usen guantes, haciéndolos sentir marginados porque literalmente puedes ver su discapacidad ".

Más allá de su capacidad para ayudar a las personas con problemas de audición a comunicarse con los demás, DeepASL puede ayudar a quienes están aprendiendo ASL virtualmente al brindar retroalimentación en tiempo real sobre su firma. Tecnología anterior, Zhang explicó, a través de tutoriales en video tuvo una asistencia personal limitada.

"Aproximadamente el 90 por ciento de los niños sordos nacen de padres oyentes. Estos padres están aprendiendo el lenguaje de señas para comunicarse con sus hijos, pero generalmente no tienen tiempo para asistir a clases en vivo, ", Dijo Zhang." Nuestra tecnología puede medir su fichaje para ayudarlos a aprender y mejorar ".

Si bien la tecnología de Zhang traduce el lenguaje de señas a una conversación verbal, explicó que existiendo, Las tecnologías de reconocimiento de voz exitosas pueden ayudar al otro lado de la conversación, Permitir que los comunicadores verbales hablen con personas con problemas de audición.

Los investigadores dicen que el siguiente paso de su tecnología es la comercialización, poniéndolo a disposición de los cientos de miles de personas que necesitan un intérprete más accesible. Movimiento de salto, ellos dijeron, se vende por alrededor de $ 78, convirtiéndola en una opción asequible. También planean hacer que la tecnología sea compatible con iPhones, además de enseñarle diferentes lenguajes de signos.