«Яндекс» улучшил качество видеоряда старых мультфильмов с помощью нейросетей

Возврат к списку

«Яндекс» улучшил качество видеоряда старых мультфильмов с помощью нейросетей

28.09.2018     

В «Яндексе» придумали способ улучшить видеоряд старых фильмов или мультфильмов, доступных в сети только в плохом качестве, разработав для этого технологию DeepHD.

В блоге компании заявили, что отыскать в архивах нужную пленку и отсканировать ее заново не всегда возможно. Более реальный вариант в этом случае – увеличить изображение, используя технологии компьютерного зрения. Нейронные сети, улучшающие качество изображений и фотографий, уже существуют и обозначаются термином super-resolution. В «Яндексе» эту технологию интерпретировали по-своему. 

 

Принцип работы DeepHD

 

Как это работает

Отличительная особенность технологии DeepHD в том, что она умеет обрабатывать как картинки, так и видео.

Обработка осуществляется в два этапа, на каждый из которых приходится своя нейронная сеть. На первом этапе картинка готовится к обработке и «избавляется» от помех. Далее она поступает к другой нейронной сети – генератору, выполняющему основную работу и выдающему большую картинку в хорошем качестве вместо маленькой.

Нейросеть-генератор в качестве образцов использует картинки, уже доступные в высоком разрешении. Их уменьшают и пропускают через генератор, чтобы получить пару больших изображений: настоящее и искусственное.

Обучение генератора контролируют еще две нейронные сети: классификатор и дискриминатор. Первая следит за тем, чтобы генератор не добавил в картинку лишних деталей, а вторая отвечает на вопрос «Настоящая ли картинка?». Если дискриминатор путает искусственную картинку с настоящей, то генератор хорошо справился со своей задачей.

Где применяется

Технология DeepHD помогает «Яндексу» улучшать разрешение кинофильмов и мультипликации не только на главной странице, но и в результатах поиска. Технология работы с видеорядом такая же, как со статичным изображением, когда вместо полученной маленькой картинки нейросеть выдает большую.

 

 

 

Напомним, что ранее ученые технологического университета Карнеги-Меллона научили нейросеть оперативно и реалистично передавать мимику и действия персонажа из одного видео в другое. Происходит это с помощью неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN). Технология часто используется при подделке фотографий.



Источник: https://infostart.ru/journal/news/tekhnologii/yandeks-uluchshil-kachestvo-videoryada-starykh-multfilmov-s-pomoshchyu-neyrosetey_912242/
Автор:
Дарья Расина Редактор


Комментарии
Избранное Подписка Сортировка: Древо
1. roman77 67 28.09.18 10:14 Сейчас в теме
Молодцы. Но тех, кто про..ли исходные плёнки надо наказать построже.
3. Timur.V 33 28.09.18 10:47 Сейчас в теме
(1)
Так, кажется, не было технологии сохранения пленок.
Кажется около года назад Путин вручал государственную награду кому-то из Госфильмофонда за то, что разработали технологию
сохранения или восстановление старых пленок.
6. roman77 67 28.09.18 11:29 Сейчас в теме
(3) С плёнками всё в порядке, если их хранить в хранилище. А если их выбросить на помойку, как у нас делалось, тогда, конечно, нужны супер технологии. Фильм такой был культовый "Через тернии к звёздам". Ни осталось ни одной исходной копии. Только несколько заезженных и порванных плёнок из тех, что побывали в прокате в кинотеатрах.
2. Student1C 37 28.09.18 10:42 Сейчас в теме
А можно как то попробовать свое фото/видео конвертировать?
4. Неопределено 40 28.09.18 10:54 Сейчас в теме
(2) В своей статье на Хабре Яндекс написал, что пока нельзя.
vrednyi_glavred; Student1C; +2 Ответить
5. dimisa 105 28.09.18 11:21 Сейчас в теме
Яндекс, многих пользователей интернета интересует вопрос : "Когда нейросети доберуться до порнохаба, там слишком много контента в плохом качестве но с интересным сюжетом ?"
shard; CyberCerber; товарищ Ын; +3 Ответить
7. buganov 49 28.09.18 11:44 Сейчас в теме
Вспомнился мем про увеличение изображения в записи, когда в болте крепления номера автомобиля виден преступник=)
АлександрЯрославичъ; CyberCerber; mavom; TreeDogNight; +4 Ответить
8. agent00mouse 181 28.09.18 12:20 Сейчас в теме
Полную статью читайте на хабре.
9. PerlAmutor 33 28.09.18 17:39 Сейчас в теме
2030 год, при просмотре фильма тот внезапно становится на паузу, главные персонажи разворачивается к зрителю и начинают рекламировать сайт казино...
Оставьте свое сообщение

См. также