Нейросеть научили частично оживлять фотографии

Созданная исследователями из Университета Вашингтона нейросеть способна оживлять фрагменты статических фотографий, заставляя их двигаться, как на видео. Результаты впечатляют, а в качестве исходного материала достаточно одного изображения.

Созданный метод глубокого обучения позволяет оживить некоторые части на картинке. Это может быть любой подвижный материал, включая дым, облака и воду. После этого система создаёт плавное зацикленное видео с высоким разрешением, отличить которое от реального почти невозможно.

Разработчики отмечают, что создание технологии оказалось сложной задачей, поскольку потребовалось построить модель на основе машинного обучения. С этой целью было решено разбить алгоритм на две части, одна из которых оценивает прошлое, а другая предсказывает будущее. В итоге нейронная сеть научилась угадывать движение на видео по одному кадру.

В процессе обучения было задействовано реальное видео, а прогнозирование осуществляется на основе большого объёма информации о различных объектах. Технология будет представлена на Конференции по компьютерному зрению и распознаванию образов 22 июня.

Источник: 4pda.ru