136
«Жил-был пёс», «Трое из Простоквашино», «Шайбу! Шайбу!» и другие примечательные мультфильмы детства — в качестве вплоть до 8K и 60 fps.Развитие нейросетей и сервисов на их основе привело к созданию полноценного направления — восстановление, реставрация и улучшение качества очень старых видео. И занимаются этим не только специалисты в сфере машинного обучения, но и энтузиасты — они улучшают первые фильмы в истории, архивные ролики и даже мутные видеомемы.
Помимо этого, на YouTube любят улучшать советские мультфильмы, которые в большинстве своём не получили полноценных переизданий под современные экраны. Нейросети позволяют посмотреть любительские ремастеры «Ну погоди!» или «Трое из Простоквашино» в качестве вплоть до 8K и 60 кадров в секунду. Некоторые из этих работ замечают в соцсетях, и к началу 2021 года заниматься этим стали десятки энтузиастов.
Один из них — Александр, который работает в IT-сфере и с 2020 года ведёт канал «Чётко», где улучшает качество мультфильмов, кино и роликов из прошлого. По словам автора, сначала он заинтересовался созданием дипфейков, а затем стал погружаться в тематику нейросетей. «Увидел первые ролики [менеджера по продукту ИД „Комитет“] Дениса Ширяева на YouTube, а потом и телеграм его для себя открыл. И понеслась», — добавил Александр.
Сначала Александр, как поклонник футбола, улучшил отрывки старых матчей, например, игру на Кубке СССР 1937 года. Затем пришла очередь научпоп-лент и реклам из прошлого, и только потом автор стал улучшать качество советских мультфильмов: «Их стали заказывать пользователи, да и они мне близки, ведь я смотрел их, когда был маленьким».
Александр поделился процессом улучшения мультфильмов с помощью нейросетей. Подобным образом работают и многие другие авторы. На улучшение одного видео у автора канала «Чётко» уходит от одного до пяти дней: зависит от длины видео и технических характеристик компьютера, где обрабатывается ролик.
Из исходника берётся минутный отрезок (или компиляция), раскладывается на кадры и улучшается различным софтом (waifu2x, Gigapixel или Video Enhance от Topaz Labs). Помимо этого, если требуется, предварительно ролик стабилизируется, очищается от шума, пыли и царапин (с помощью нейросети, естественно).
Готовые кадры обратно собираются в ролик, и результаты сравниваются. Далее следует выбор, каким улучшением воспользоваться, и улучшается весь видеоряд целиком. Затем — постобработка картинки, если обрабатывался звук, то наложение обработанного звука.
yaplakal.com