La Universidad de Twente está desarrollando actualmente una tecnología para teléfonos inteligentes basada en el uso de localización y mapeo simultáneo (SLAM) y realidad aumentada (AR). Esta tecnología permite al personal médico reconstruir secciones del cuerpo en 3-D rápidamente, solo sosteniendo el teléfono inteligente alrededor del área de interés. Este teléfono inteligente mostrará las capas aumentadas de la superficie de la piel en 3D para visualizar información invisible para el personal médico.

"Nos gustaría superponer la información de la resonancia magnética y otras exploraciones de venas (de dispositivos sensores que utilizan moteado láser) y hacerlas visibles con realidad aumentada", dice el Dr. Eng. Beril Sirmacek (Ciencias de la Computación). Esto permite a los médicos ver los segmentos internos del cuerpo, tumores, venas y el estado de las úlceras diabéticas con el uso de realidad aumentada. Este apoyo visual permite a los médicos supervisar mejor la situación y tomar mejores decisiones. En una situación de biopsia, este soporte visual puede ayudar a guiar los brazos del robot para llegar al tumor para la biopsia en el primer intento, en lugar de arriesgarse y buscar la ubicación correcta trabajando con un paciente durante todo un día y haciendo orificios de biopsia fallidos en el cuerpo del paciente.

La visualización aumentada de big data y la guía con la aplicación para teléfonos inteligentes se basa en gran medida en la tecnología de localización y mapeo simultáneos (SLAM). "Aunque no tenía experiencia médica, nuestro enfoque común en SLAM y AR proporciona una gran plataforma ".

Caja SLAM

"Cuando comenzamos este proyecto, Nuestro objetivo era desarrollar una caja SLAM en el grupo de investigación RAM (Robótica y Mecatrónica) de la UT. Podemos usar nuestro software de localización y reconstrucción 3D en diferentes sensores y no solo con el uso de teléfonos inteligentes. Nuestra visión conducirá a muchas aplicaciones sanitarias, y otras aplicaciones de robótica se volverán más inteligentes. Con esta tecnología, los algoritmos comprenden rápidamente los modelos 3-D de los objetos circundantes independientemente de los sensores de imagen que se utilicen ".

Prof. Dr. Ir. Stefano Stramigioli (presidente del grupo, Robótica y Mecatrónica):"SLAM es una tecnología central en robótica, pero su uso universal solo será posible si tenemos métodos para conectar fácilmente muchos sensores en un sistema robótico. Un tranvía, Tenemos la intención de crear una caja SLAM modular que se reconfigurará automáticamente si se conectan sensores adicionales en forma de Plug &Play. Entonces sería posible conectar este "SLAM Box" a un sistema robótico completo, dándole poderosas capacidades de percepción ".