Nos hemos acostumbrado a que nuestros relojes inteligentes y teléfonos inteligentes detecten lo que hacen nuestros cuerpos, ya sea caminando, conducir o dormir. Pero, ¿y nuestras manos? Resulta que los relojes inteligentes con algunos retoques, puede detectar una sorprendente cantidad de cosas que hacen sus manos.

Investigadores del Instituto de Interacción Humano-Computadora (HCII) de la Universidad Carnegie Mellon han utilizado un reloj inteligente estándar para averiguar cuándo un usuario estaba escribiendo en un teclado, lavando platos, acariciar a un perro, vertiendo de una jarra o cortando con tijeras.

Al realizar algunos cambios en el sistema operativo del reloj, Pudieron usar su acelerómetro para reconocer los movimientos de las manos y, en algunos casos, Sonidos bioacústicos asociados con 25 actividades manuales diferentes con una precisión de alrededor del 95 por ciento. Y esas 25 actividades son solo el comienzo de lo que podría ser posible detectar.

"Visualizamos los relojes inteligentes como una cabeza de playa única en el cuerpo para capturar imágenes actividades diarias, "dijo Chris Harrison, profesor asistente en el HCII y director del Future Interfaces Group. "Se podría hacer una amplia variedad de aplicaciones más inteligentes y sensibles al contexto si nuestros dispositivos conocieran la actividad de nuestros cuerpos y manos".

Harrison y HCII Ph.D. El estudiante Gierad Laput presentará sus hallazgos sobre esta nueva capacidad de detección en CHI 2019, la Conferencia de la Asociación de Maquinaria de Computación sobre Factores Humanos en Sistemas de Computación, 4-9 de mayo en Glasgow, Escocia. Hay un video disponible.

Así como los teléfonos inteligentes ahora pueden bloquear los mensajes de texto mientras un usuario conduce, los dispositivos futuros que detectan la actividad de las manos pueden aprender a no interrumpir a alguien mientras realiza cierto trabajo con las manos, como picar verduras u operar equipos eléctricos, Dijo Laput. La detección de la actividad de la mano también se presta a aplicaciones relacionadas con la salud, como monitorear actividades como cepillarse los dientes, lavarse las manos o fumar un cigarrillo.

La detección manual también puede ser utilizada por aplicaciones que brindan retroalimentación a los usuarios que están aprendiendo una nueva habilidad, como tocar un instrumento musical, o someterse a rehabilitación física. Las aplicaciones pueden alertar a los usuarios sobre hábitos de escritura que podrían provocar lesiones por esfuerzo repetitivo (RSI), o evaluar la aparición de alteraciones motoras como las asociadas con la enfermedad de Parkinson.

Laput y Harrison comenzaron su exploración de la detección de actividad manual al reclutar a 50 personas para que usen relojes inteligentes especialmente programados durante casi 1 año. 000 horas mientras realiza sus actividades diarias. Periódicamente los relojes grabarían el movimiento de las manos, orientación de la mano e información bioacústica, y luego pida al usuario que describa la actividad de la mano:afeitarse, aplausos, rascarse ponerse lápiz labial, etc. Más de 80 actividades manuales fueron etiquetadas de esta manera, proporcionando un conjunto de datos único.

Por ahora, los usuarios deben usar el reloj inteligente en su brazo activo, en lugar del brazo pasivo (no dominante) donde las personas suelen usar relojes de pulsera, para que el sistema funcione. Los experimentos futuros explorarán qué eventos se pueden detectar usando el brazo pasivo.

"Las 25 actividades manuales que evaluamos son una pequeña fracción de las formas en que involucramos nuestros brazos y manos en el mundo real, "Laput dijo. El trabajo futuro probablemente se centrará en clases de actividades, aquellas asociadas con actividades específicas como dejar de fumar, cuidado de ancianos, o escribiendo y RSI.