Оригинальные видео обработаны Денисом Ширяевым с помощью известных алгоритмов, использующих нейросети. Ранее мы уже упоминали о замечательном телеграм-канале Дениса @denissexy.
Обсудим немного детальнее, в чём заключаются улучшения видеороликов.
Повышение кадровой частоты (англ. frames per second, FPS). Нейронная сеть, обученная с помощью искусственно замедленных фильмов, генерирует промежуточные кадры, которые вставляются между теми, что уже присутствуют в фильме. Это позволяет сделать движение более плавным. Даже 14 кадров в секунду достаточно, чтобы получить 60 кадров в секунду.
Улучшение разрешения до 4K. Нейронная сеть «дорисовывает» недостающие детали, увеличивая разрешение кадра в 4 и более раз.
Колоризация. Хотя окраска не является исторически точной, она выглядит довольно естественной. Цветную картинку наша собственная сеть нейронов воспринимает как более комфортную.
Один из первых фильмов, снятых и публично показанных братьями Люмьер. Премьера фильма состоялась в январе 1896 года. Качество оригинального видео было улучшено до 4K с помощью Gigapixel AI. Есть и колоризованная версия.
Оригинальный фильм снят в мае 1896 г. Шарлем Муассоном из компании Lumière.
В этом видео собраны различные фрагменты, снятые Митчеллом и Кеньоном в Северной Англии в 1900–1901 гг. Демонстрируются некоторые более мрачные качества работы тех дней.
Список оригинальных источников:
Снято шведской компанией Svenska Biografteatern.
На этом видео астронавт Чарльз Дьюк заснял на 16-мм пленку то, как другой астронавт – Джон Янг – совершает демонстрационную поездку на «Ровере», выполняя заранее оговорённые на Земле манёвры.
Улучшенная версия видео Барда Каннинга о спуске марсохода Curiosity 6 августа 2012 г.
Хотите узнать, как работают нейросети? У нас есть наглядное введение на примере распознавания цифр. А если вам просто интересны достижения, недавно мы делали подборку о том, что уже умеют нейросети.