Generar escenas naturales de visión infinita a partir de una imagen
Generar escenas naturales de visión infinita a partir de una imagen, la realidad virtual, los efectos visuales, normalmente tratan de generar o simular algo que no existe realmente, generar una visión infinita a partir de una imagen, abre otra puerta de este amplio abanico.
Un estudio reciente centrado en el problema de la generación de visión infinita explica cómo pueden lidiar con la generación a largo plazo de vistas novedosas utilizando una sola imagen.
Este es un problema desafiante que va mucho más allá de las posibilidades de los métodos de síntesis de vista actuales, que funcionan para una gama limitada de puntos de vista y degeneran rápidamente cuando se presentan con un gran movimiento de cámara.
Los métodos diseñados para generar el vídeo también tienen una capacidad limitada para producir secuencias de vídeo largas y a menudo son agnósticos para la geometría de la escena.
El nuevo artículo describe un enfoque híbrido que se basa tanto en la geometría como en la síntesis de imágenes en un marco iterativo de renderización, refinación y repetición.
Se dice que este nuevo marco es capaz de una generación de largo alcance que cubre grandes distancias después de cientos de fotogramas.
Este enfoque híbrido que integra la geometría y la síntesis de imágenes en un marco de renderización, refinación y repetición iterativa permite un generar un video de cientos de fotogramas.
El enfoque se puede entrenar desde un conjunto de secuencias de vídeo monoculares sin ninguna anotación manual.
El equipo detrás de la investigación propone un conjunto de datos aéreos de escenas costeras naturales, a partir de ahí los algoritmos comparan el método con la síntesis de vistas recientes y las líneas base de generación de vídeo condicional, mostrando que puede generar escenas plausibles durante horizontes de tiempo mucho más largos sobre grandes trayectorias de cámara en comparación con los métodos existentes.
Los desarrolladores del estudio han publicado el código, es libre y gratuito para cualquiera que quiera experimentar, se puede ver más en esta página de Github.
https://youtu.be/oXUf6anNAtc
