Искусственный интеллект воссоздает размытые фотопортреты с 64 кратным увеличением (3 фото)
Современные сети активно используются при обработке изображений человека. Недавно были обнародованы данные об «оживлении» искусственным интеллектом портрета Джоконды и других художественных образов и вот теперь приходит сообщение от ученых из университета Дьюка из Северной Каролины о новых успехах ИИ в обработке фотографий. Ученые смогли воплотить в реальность процедуру «превращения» размытого фотообраза человека в четкую фотографию. Такой прием можно часто видеть в кинофильмах, когда следователи по данным кадров нечеткого, увеличенного во много раз видео идентифицируют личности преступников.
Разработка ученых получила название PULSE и позволяет, используя практически несколько пикселей, создать реалистично выглядящее лицо с детализацией, в 64 раза превышающим исходное изображение. Ранее было доступно масштабирование изображения лица только до 8 раз. Предыдущие методики основаны на генерации AI средних деталей, наиболее подходящих для восстанавливаемого фото.
Ученые из Северной Каролины использовали иной подход. Новая система PULSE задействует в работе две нейросети, специально обученные на одинаковых наборах фотографий. Одна сеть генерирует предположительные образы, основываясь на исходной картинке из пикселей. Вторая сеть сравнивает, насколько такая фотография будет идентична исходнику при аналогичном размытии кадра.
Использование PULSE позволяет превращать кадры с разрешением 16 на 16 пикселей в высокоточную фотографию разрешения 1024х1024 пикселей. При этом искусственный разум весьма точен в деталях и восстанавливает фотографию достаточно точно вплоть до узоров на одежде, волос морщин и пор на лице.
Учитывая, что технология не восстанавливает фотографию, а выбирает наиболее подходящую, такой метод сложно использовать при решении важных заданий и может быть применен для создания демонстрационных фотографий. Метод PULSE можно применять при формировании облика далеких экзопланет, «фотографий» вирусов и бактерий, которые в дальнейшем будут использованы в учебных целях.
Источник: techxplore