Jason Weston, con un doctorado en aprendizaje automático en la Universidad de Londres y Douwe Kiela, con doctorado de la Universidad de Cambridge con tesis sobre semántica de base en modalidades perceptuales, son científicos investigadores de Facebook Research y han presentado al mundo el Talk the Walk de su formidable equipo.

Talk the Walk es una revelación para los científicos interesados ​​en hacer más por la IA como agente de conversación. Estos días, no solo se regodean con los asistentes de voz que le dicen a la gente cuándo comienza el concierto o si va a llover. Los científicos están explorando diálogos dirigidos a objetivos.

¿Qué tan fácil suena eso? No se engañen. Intentar llegar allí es difícil.

Empresa rápida Se dirigió a Kiela por razones de por qué el esfuerzo de la guía turística tiene peso investigador. "Esta tarea es muy importante para la investigación de la IA porque es muy difícil, "Kiela dice, "y porque combina todos estos problemas interesantes:la percepción visual de trescientos sesenta, navegación basada en mapas, razonamiento visual, y comunicaciones en lenguaje natural a través del diálogo ".

Hicieron el punto antes que nada, que el lenguaje natural es comprensible para la mayoría de la gente "sin necesidad de pasos o conocimientos adicionales para descifrar su significado". Hacia ese fin, El grupo de investigación de inteligencia artificial de Facebook, JUSTA, están enganchados a una cierta estrategia para que la inteligencia artificial demuestre una comprensión del lenguaje a nivel humano.

Esa estrategia, ellos escribieron, "es entrenar esos sistemas de una manera más natural, al vincular el lenguaje a entornos específicos. Así como los bebés aprenden a nombrar lo que pueden ver y tocar, este enfoque, a veces denominado IA incorporada, favorece el aprendizaje en el contexto del entorno de un sistema, en lugar de entrenar a través de grandes conjuntos de datos de texto (como Wikipedia) ".

Ingrese Talk the Walk. Están enseñando sistemas de inteligencia artificial para navegar por las calles de Nueva York mediante intercambios de idiomas que suenan naturales entre guía y turista. Dos bots tienen tareas. El robot turístico quiere navegar a través de imágenes de 360 ​​grados de los vecindarios de la ciudad de Nueva York. El robot guía es para ayudar con un mapa del vecindario. El equipo usó MASC (Atención enmascarada para la convolución espacial) para que el robot guía pudiera enfocarse en el lugar correcto del mapa.

Dijeron que su objetivo es "lograr ese alto grado de rendimiento sintético a través de la interacción del lenguaje natural, y desafiar a la comunidad a hacer lo mismo ".

La información de Talk the Walk está en GitHub. "Compartir este trabajo proporcionará a otros investigadores un marco para probar sus propios sistemas de IA incorporados, particularmente con respecto al diálogo ".

Una cámara de 360 ​​grados capturó 5 vecindarios, Cocina del infierno, East Village, Distrito financiero, Lado este superior, y Williamsburg en Brooklyn. Daniel Terdiman en Empresa rápida dijo que el robot guía usaba un mapa 2D estándar con puntos de referencia genéricos:"banco, " "cafetería, "" deli ":para entregar sus instrucciones sobre cómo navegar.

El trabajo de IA involucrado se trata de percibir un determinado entorno, navegando a través de él, y comunicarlo. Lucas Matney en TechCrunch escribió que "In" Talk the Walk, "El robot de IA guía tenía todos estos datos de mapas 2D y el robot turístico tenía todos estos datos visuales de 360 ​​grados, pero fue sólo a través de la comunicación entre ellos que pudieron llevar a cabo sus directivas ".

Turista:Woo encontré un Chipotle

Guía:"Genial".

El documento que analiza su trabajo se puede encontrar en arXiv. Se titula "Talk the Walk:Navegando por la ciudad de Nueva York a través del diálogo fundamentado, "por Harm de Vries, Kurt Shuster, Dhruv Batra, Devi Parikh, Jason Weston y Douwe Kiela.

© 2018 Tech Xplore