Нейросеть YandexART научилась восстанавливать архивные видеозаписи и кинохронику

Нейросеть YandexART, разработанная командой Яндекса, совершила значительный прорыв в области реставрации архивных видеозаписей и кинохроники. Эта технология позволяет кинокомпаниям, музеям, историкам и другим специалистам улучшать качество значимых видео и работать с историческим наследием. Уже сейчас нейросеть успешно восстановила видеохронику из материалов «Мосфильма» и Российского государственного архива кинофотодокументов для нового сериала Кинопоиска «Игры», посвященного подготовке и организации Олимпиады-80.

Восстановление исторических событий

Благодаря YandexART события сорокалетней давности стали доступны современному зрителю в высоком качестве. Нейросеть смогла улучшить размытые и нечёткие кадры, добавив фактуру и недостающие детали. Например, нейросеть прорисовала кирпичную кладку на стене, узоры на женском платье, а у машины восстановила фары и поворотники, которые ранее было плохо видно. Кроме того, технология увеличила разрешение и резкость видеокадров, существенно повысив их качество.

Технологии и методы работы

Разработчики Яндекса уделили особое внимание тому, чтобы модель YandexART не «галлюцинировала», то есть не придумывала детали, которых не было в оригинале. Нейросеть научилась превращать шумные, размытые и сильно сжатые кадры в контент с высокой детализацией объектов и текстур благодаря поэтапному обучению на материалах низкого качества.

Над восстановлением архивных видео работали команды компьютерного зрения Яндекса, Yandex Research и Плюс Студии. Среди восстановленных кадров зрители смогут увидеть хронику со спортсменами Олимпиады-80, улицы Москвы тех лет, любительские съёмки, материалы прессы и другие архивы.

Сериал «Игры» и его значимость

Отреставрированная видеохроника использована в драме «Игры», которая рассказывает о событиях вокруг Олимпиады-80. Этот турнир должен был стать значимым событием для всего мира, ради которого Советский Союз был готов приподнять железный занавес. Главным героям предстоит столкнуться со сложностями организации масштабного спортивного события и стать свидетелями не только Олимпийских, но и политических игр. Премьера сериала состоится на Кинопоиске 3 августа.

О YandexART

Yandex AI Rendering Technology (YandexART) — диффузионная нейросеть, создающая и улучшающая изображения и анимацию, а также обрабатывающая загруженные фотографии в ответ на текстовые запросы. Она обучалась на примере 850 миллионов картинок с описанием, знает российский культурный код и использует особый алгоритм распознавания текстов для точного понимания пожеланий пользователей. YandexART может качественно прорабатывать мелкие детали, работать в заданном художественном стиле и создавать фотореалистичные портреты. Нейросеть интегрирована в Шедеврум и используется в Яндекс Бизнесе, Директе, Браузере и Маркете. Компании могут получить доступ к API YandexART в Yandex Cloud.

О Кинопоиске

Кинопоиск — крупнейший онлайн-кинотеатр в России и самое популярное российское медиа о кино. На протяжении 20 лет зрительские оценки на Кинопоиске являются ориентиром для всей российской медиаиндустрии. Аудитория онлайн-кинотеатра превышает 12,2 миллиона подписчиков, которые получают доступ к эксклюзивным сериалам, фильмам, спортивным трансляциям и музыкальным клипам по подписке Яндекс Плюс.