У НАСА (Национальное управление по воздухоплаванию и исследованию космического пространства — ведомство, принадлежащее федеральному правительству США) накопилось огромное количество архивов, которые некоторому привести в порядок из-за недочета финансирования агентства. Потому оно вынуждено доверять эту работу личным лицам, вроде студии DutchSteamMachine, которая занимается «модернизацией» старенькых видеохроник. Одна из крайних работ проекта посвящена посадке американских космонавтов на Луну – изначальное видео с частотой 12 FPS улучшили до 60 FPS.
Главным инвентарем для обработки старенького видео, которое снято с низкой частотой, стала разработка Depth-Aware video frame INterpolation (DAIN). Это ИИ с открытым кодом, бесплатный и интенсивно развивающийся. Он берет два поочередных кадра необычного видео и анализирует их, чтоб осознать, какие объекты и куда сместились. Дальше ИИ генерирует промежные кадры, которые визуализируют этот процесс смещения. Так как вначале кинофильм был «дерганым» (из-за низкого фреймрейта), такое насыщение новенькими кадрами идет ему на пользу, добавляет плавности движениям и улучшает четкость рисунки.
Самое сложное – отыскать пригодный источник и избрать правильные характеристики обработки. ИИ может сделать и в два раза больше новейших кадров, и в восемь раз больше, что дозволяет из 12 настоящих кадров получить еще 48 «виртуальных» и уместить их все в 1 секунду видео. Так и создается неосуществимое для времен миссии Аполлон-11 изображение с 60 FPS, которое неотличимо от исторических записей.
Способы, которые применяет DutchSteamMachine, отлично подступают для реставрации хоть какого исторического видео низкого свойства, включая архивные записи и немое кино столетний давности. Правда, требуется большая вычислительная мощность и значительный размер времени – 5 минут видео могут генерироваться целые день. Но если это поможет сохранить и популяризировать исторические видеозаписи, то дело того совершенно точно стоит.
Источник — Universe Today