Японские ученые научили нейросеть оживлять статичные фотографии и делать из них 40-секундные видеоролики. Пока что алгоритм опробовали на пейзажных снимках: лучше всего нейросети удаются кадры, где есть вода и небо. Проект получил название Animating Landscape.
В отличие от предыдущих попыток создания алгоритмов для преобразования фото в видео Animating Landscape не создает новые кадры на основе исходного, а предсказывает, как будет изменяться исходное изображение.
Авторы проекта рассказали, что, по их наблюдениям, различные действия на одном кадре, например движения облаков и течение воды, происходят с разной скоростью, и им, соответственно, требуется разное количество времени.
Авторы проекта даже записали видео, наглядно объясняющее работу их детища. И, кстати, озвучила его другая нейросеть!
