Нейросеть увеличила разрешение изображения из 64 пикселей в 16 раз

Разработчики из подразделения машинного обучения Google Brain опубликовали работу о том, как нейронная сеть улучшала изображения в очень низком разрешении.

Нейронной сети давали фотографии знаменитостей: разрешение снимков было уменьшено до 8 × 8 пикселей. На выходе исследователи получали фотографии с разрешением, увеличенным до 32 × 32, пишет Ars Technica.

Качество улучшалось с участием двух нейросетей. Первая перебирала фотографии знаменитостей в большом разрешении, уменьшала разрешение снимков до 64 пикселей и сравнивала результат с изображением, которое нужно улучшить. Вторая детализировала и добавляла пиксели к улучшенному изображению. Для этого она также использовала снимки людей в большом разрешении и сравнивала их с изображениями из 1024 пикселей.

Изображения после обработки не являются фотографиями настоящих людей в очень низком разрешении. Они остаются предположением нейросетей о том, кто был изображен на фотографии с разрешением 8 × 8 пикселей. Исследователи показали фокусной группе настоящие фотографии знаменитостей (но в разрешении 32 × 32 пикселя) и сгенерированные изображения — только 10% респондентов ошиблись, когда пытались определить, на каком изображении был настоящий человек. Когда такой же тест проводили с фотографиями спален, ошиблись 28% респондентов. Это хороший результат, поскольку изображения, увеличенные традиционными методами, не смогут никого обмануть.

Новое и Лучшее

423

828

35
240
Больше материалов