El reconocimiento automático de lenguajes de signos está en juego gracias al trabajo de un equipo en India que está utilizando un controlador de identificación de movimiento Kinect de Microsoft. Escribiendo en la Revista Internacional de Visión Computacional y Robótica, el equipo explica cómo su sistema usa solo 11 de las 20 articulaciones rastreadas por un Kinect y puede extraer características novedosas por cuadro, basado en distancias, anglos, y velocidad que afecta a las articulaciones de la parte superior del cuerpo. El equipo informa cómo el algoritmo reconoce 35 gestos del signo indio en tiempo real con casi un 90 por ciento de precisión.

Jayesh Gangrade y Jyoti Bharti del Instituto Nacional de Tecnología de Maunala Azad, en Bhopal, India, explicar cuántas personas con un déficit auditivo significativo utilizan la comunicación basada en gestos, movimientos de la mano, y la orientación junto con la expresión facial se utilizan dinámicamente para transmitir el significado de una manera tan matizada y expresiva como cualquier otro dialecto del idioma. El desarrollo de tecnología que también podría ser competente en lenguajes de signos daría a quienes confían en esta forma de comunicación un nuevo enfoque para interactuar con máquinas y computadoras. Cámara, guantes digitales, y otros gadgets se han investigado previamente en este contexto. Sin embargo, el potencial de un controlador de videojuegos económico, como el Kinect, que pueda rastrear los movimientos corporales podría facilitar esto rápidamente.

El equipo señala que su enfoque no requiere marcadores ni ropa especial con objetos de rastreo, como era necesario con algunos de los esfuerzos anteriores en esta área. "Hemos experimentado con un conjunto mínimo de características para distinguir entre los signos dados con precisión práctica, "escribe el equipo. Ahora están experimentando con el sensor Kinect v2, que es más preciso y podría acercar la investigación a su objetivo final.