• Home
  • Química
  • Astronomía
  • Energía
  • Naturaleza
  • Biología
  • Física
  • Electrónica
  •  science >> Ciencia >  >> Astronomía
    La IA aumenta las imágenes lunares del Apolo a 60 FPS

    Crédito:Dutchsteammachine

    Tan emocionante y emocionante como es ver todas las imágenes históricas de los alunizajes de Apolo, tienes que admitir la calidad a veces no es tan buena. Aunque la NASA ha trabajado para restaurar y mejorar algunas de las imágenes más populares de Apolo, algo todavía es granulado o borroso.

    Pero ahora, nuevos desarrollos en inteligencia artificial han venido al rescate, brindando a los espectadores una experiencia casi nueva al ver el video histórico de Apollo.

    Un especialista en restauración de fotografías y películas que se conoce con el nombre de DutchSteamMachine ha trabajado algo de magia de IA para mejorar la película original de Apollo, creando clips de vídeo e imágenes sorprendentemente claros y vívidos.

    "Tenía muchas ganas de ofrecer una experiencia en este metraje antiguo que no se haya visto antes, ", le dijo a Universe Today.

    Eche un vistazo a estas imágenes mejoradas de una travesía del rover lunar del Apolo 16 con Charlie Duke y John Young, en el que el metraje que se filmó originalmente a 12 fotogramas por segundo (fps) se ha aumentado a 60 fps:

    Impresionante, ¿Derecha? Y me quedé impresionado por la vista nítida de la superficie de la luna en esta vista mejorada del lugar de aterrizaje del Apolo 15 en Hadley Rille:

    Crédito:Dutchsteammachine

    O eche un vistazo a la claridad con la que se ve a Neil Armstrong en esta versión mejorada del video del "primer paso" que se ve a menudo del Apolo 11 tomado por una cámara de video de 16 mm dentro del Módulo Lunar:

    Crédito:Dutchsteammachine

    La IA que utiliza DutchSteamMachine se llama INterpolación de fotogramas de vídeo con reconocimiento de profundidad, o DAIN para abreviar. Esta IA es de código abierto, gratis y en constante desarrollo y mejora. La interpolación de movimiento o la interpolación de cuadros con compensación de movimiento es una forma de procesamiento de video en la que se generan cuadros de animación intermedios entre los existentes en un intento de hacer que el video sea más fluido. para compensar la borrosidad, etc.

    "La gente ha utilizado los mismos programas de inteligencia artificial para revivir antiguas grabaciones de películas de la década de 1900, en alta definición y color, ", dijo." Esta técnica parecía una gran cosa para aplicar a imágenes mucho más nuevas ".

    Pero es posible que no pueda probar esto en casa. Se necesita un poderoso GPU de gama alta con ventiladores de refrigeración especiales. DutchSteamMachine dijo que un video de solo cinco minutos puede tardar entre seis y 20 horas en completarse. Pero los resultados hablan por sí mismos.

    Explicó cómo hace este trabajo:"Primero me propuse buscar videos originales de la más alta calidad, que afortunadamente encontré como archivos de video de 720p de alta tasa de bits, ", dijo." Así que el problema de la calidad se resolvió. Es importante comenzar con la fuente más alta posible y editar desde allí. Sin embargo, la mayoría de las secuencias filmadas todavía estaban muy entrecortadas. Esto se debe a que para ahorrar película y grabar durante largos períodos de tiempo, la mayor parte del metraje del rover se filmó a las 12, seis o incluso un fotograma (s) por segundo. Si bien las personas han intentado anteriormente aplicar estabilización y / o tipos de combinación de marcos para aliviar este efecto, Nunca he estado realmente satisfecho con eso ".

    DutchSteamMachine busca determinar la velocidad de fotogramas del metraje original, que generalmente se puede encontrar en documentos de la NASA o, como en el caso del metraje del Apolo 16 anterior, los astronautas lo anuncian cuando encienden la cámara.

    "Desafortunadamente, algunas veces, la velocidad de fotogramas parece estar fuera de lugar o fluctuar, no siempre funciona como se esperaba, ", dijo." Así que la mejor manera de encontrar la velocidad de fotogramas es escuchar los puntos de referencia de los que hablan los astronautas y hacer coincidir las imágenes con eso. Divido el archivo de origen en marcos PNG individuales, introdúzcalos en la IA junto con la velocidad de fotogramas de entrada (uno, seis, 12 o 24) y la tasa de fotogramas de salida deseada por tasa de interpolación (2x, 4x, 8x). La IA comienza a usar mi GPU y mira dos reales, fotogramas consecutivos. Usando algoritmos, analiza los movimientos de los objetos en los dos fotogramas y genera otros completamente nuevos. Con una tasa de interpolación de, por ejemplo, 5 veces, es capaz de renderizar cinco fotogramas "falsos" a partir de solo dos fotogramas reales. Si el metraje se grabó a 12 fps y la velocidad de interpolación se establece en 5x, la velocidad de fotogramas final será de 60, lo que significa que con solo 12 fotogramas reales, hizo 48 marcos "falsos". Luego, ambos se exportan de nuevo a un video y se reproducen a 60 fps con los fotogramas reales y falsos. Aplico corrección de color, ya que a menudo los archivos de origen tienen un tinte azul o naranja. Sincronizo el metraje con el audio, y si es posible, también televisión y fotos tomadas al mismo tiempo. Algunas veces, dos cámaras de 16 mm estaban funcionando al mismo tiempo, para poder reproducirlos uno al lado del otro ".

    Aquí hay un video que compartió de su estudio y su equipo especializado:

    Crédito:Dutchsteammachine

    DutchSteamMachine hace este trabajo en su tiempo libre, y lo publica gratis en su página de YouTube. Su lema es "Preservar el pasado para el futuro, "y también usa las mismas técnicas para mejorar los videos caseros antiguos, imágenes y diapositivas.

    "Es genial leer las reacciones de la gente en mis imágenes, ", dijo." Entonces, cuando la gente publica cosas como, '¡Guau! ¡Esto es increíble! ¡Nunca he visto esto antes!, 'esto me mantiene en marcha ".

    Si desea apoyar el increíble trabajo de restauración / mejora que está haciendo DutchSteamMachine para las imágenes de Apollo, aquí está su página de Patreon. Apoyando su trabajo, obtendrás extras, acceso anticipado y vistas previas del próximo trabajo, y la oportunidad de hacer preguntas sobre el proceso. Y planea que todo siga viniendo.

    "Planeo mejorar toneladas de metraje de Apollo como este, ", dijo." Se publicarán muchas más imágenes relacionadas con el espacio y la historia en mi canal de YouTube de forma continua ". También tiene una página de Flickr con imágenes mejoradas.


    © Ciencia https://es.scienceaq.com