Facebook разработала искусственный интеллект для создания объемных фотографий
Группа исследователей искусственного интеллекта Facebook совместно с американскими и тайваньскими учеными разработала новый метод создания 3D-фотографий. Подобные алгоритмы для придания изображениям объемного вида уже существуют, но выдаваемые ими результаты портятся артефактами в виде размытия и других искажений. Основанная на машинном обучении технология устраняет практически все эти минусы.
Новая нейронная сеть способна придавать объем двум видам изображений. Во-первых, она поддерживает фотографии формата RGB-D, которые можно снять при помощи двойной камеры iPhone, контроллера Kinect и других устройств с возможностью определения глубины сцены. Во-вторых, она может работать и с обычными 2D-изображениями - главное, предварительно задать параметры глубины.
Способности нейросети были продемонстрированы на примере случайно отобранных фотографий из набора RealEstate10K. Для демонстрации качества обработки 2D-фотографий, были взяты исторические кадры XX века.
Благодаря внедрению технологии Inpainting, разработчики смогли удалить артефакты, которые возникали при создании трехмерных изображений другими методами. В ходе этого процесса искусственный интеллект обнаруживает недостающие пиксели и воссоздает их - как результат, на объемных фотографиях нет размытия и искажений.
Подробнее о работе новой нейронной сети написано в статье, опубликованной на сервере arXiv. Разработанная технология предъявляет меньше требований к исходным изображениям, чем все остальные. Возможно, в будущем она станет еще лучше и будет использоваться в виртуальной реальности.
Одной из самых известных технологий подобного рода является Facebook 3D Photos. Она тоже может придать объем любой фотографии - подробнее о ней можно почитать в этом материале.
