¿Qué pasaría si le dijeran que puede crear dibujos animados simplemente trabajando con descripciones de texto?

Hay informes en los que un grupo de investigadores dio a conocer una IA capaz de hacer videos originales de "Los Picapiedra" a partir de descripciones de texto.

Sí, estas son escenas creadas por una inteligencia artificial. Considere la descripción de la escena:Fred lleva un sombrero azul y habla con Wilma en la sala de estar. Wilma luego se sienta en un sofá.

Composición, Red de recuperación y fusión, o CRAFT, es el nombre de su modelo. Los autores señalaron que mostraron CRAFT en Flintstones, un conjunto de datos con más de 2, 500 videos y cada uno de 75 cuadros de largo.

Han escrito un papel titulado "Imagine This! Scripts to Compositions to Videos" y está en arXiv. Los cinco investigadores son Tanmay Gupta, Dustin Schwenk, Ali Farhadi, Derek Hoiem y Aniruddha Kembhavi. Las afiliaciones de los autores incluyen el Instituto Allen de Inteligencia Artificial (AI2), La Universidad de Illinois Urbana-Champaign y la Universidad de Washington.

Los autores dijeron que una vez que se le da una descripción novedosa, "Craft compone secuencialmente un diseño de escena y recupera entidades de una base de datos de video para crear videos de escenas complejas".

Tristan Greene, La próxima web , explicó cómo funciona la tecnología:"Craft utiliza las anotaciones de los videos para determinar cómo las imágenes originales se corresponden con las palabras utilizadas para describirlas. Con el tiempo, crea un conjunto de parámetros que le permite" comprender "lo que hace que los personajes y objetos individuales la caricatura coincide con sus contrapartes en lenguaje sencillo. Una vez que comprende esta relación, es capaz de generar videoclips basados ​​en entradas de texto novedosas que se parecen mucho a la caricatura en la que se entrenó ".

Los autores también discutieron su modelo basado en texto:

"A diferencia de los enfoques de generación de píxeles, nuestro modelo de apariencia se basa en la recuperación de segmento de texto a entidad de una base de datos de video. Los segmentos espacio-temporales se extraen de los videos recuperados y se fusionan para generar el video final. La composición del diseño y la recuperación de la entidad funcionan de manera secuencial que está determinada por la entrada del idioma ".

Los autores declararon que "CRAFT supera a los enfoques de generación directa de píxeles".

Curiosamente, Los espectadores de video escribieron respuestas que iban desde asombrosas hasta tibias y confusas.

Varios pensaron que era impresionante; uno comentó que era "más avanzado de lo que hubiera imaginado" y otro dijo "todavía parece que si alguien intentara animar por primera vez en un software de demostración. Parece que tiene potencial, aunque."

Otro observador estaba más confundido que sorprendido. "Estoy confundido. Tengo entendido que la IA aprendió 25.000 dibujos animados completamente anotados. Y luego los investigadores escribieron en un escenario de texto, ¿Y la IA acaba de encontrar imágenes que se ajustan a ella? ¿No es solo una simple recuperación del fragmento de video correspondiente basado en una búsqueda de texto de la base de datos anotada? ¿Qué me estoy perdiendo?"

Los escritores de los sitios de tecnología ofrecieron su perspectiva sobre esta investigación. Refiriéndose a los videos, La próxima web intervino. De acuerdo, es un "pequeño clip con fallas, "como dijo Tristan Greene. De todos modos, él agregó, "El pequeño clip con fallas de hoy, generado a partir de frases de texto simples, podría llevar a que el entretenimiento del mañana sea creado desde cero por IA en lugar de estudios llenos de gente ".

Andrew Liszewski en Gizmodo De manera similar, descubrió que la calidad de las animaciones que se generaron era "horrible en el mejor de los casos" y "nadie se dejará engañar para que piense que estos son los originales de Hanna-Barbera". Sin embargo, él agregó, ver una IA generar una caricatura, con personajes icónicos, todo por sí mismo, fue "un fascinante adelanto de cómo se podrían hacer algunas películas y programas de televisión algún día".

Lucy Black escribió el domingo, en Yo programador que "Esto es más que otro truco inteligente con las redes neuronales. Es una señal de que la IA se está moviendo hacia sistemas más grandes donde las redes neuronales profundas realizan diferentes trabajos y trabajan juntas para crear la solución. Podría llamarlo la segunda etapa de las redes neuronales profundas redes ".

OK, Pregunta sin respuesta:¿Perderían los animadores sus trabajos? Black dijo, "Sí, supongo que con tiempo y esfuerzo, algo como CRAFT podría convertirse en un generador de dibujos animados y dejar sin trabajo a miles de animadores, pero los gráficos por computadora ya están destruyendo ese mercado laboral ".

© 2018 Tech Xplore