Facebook разработала искусственный интеллект для создания объемных фотографий

[Ippolitovich]

Группа исследователей искусственного интеллекта Facebook совместно с американскими и тайваньскими учёными разработала новый метод создания 3D-фотографий. Подобные алгоритмы для придания изображениям объёмного вида уже существуют, но выдаваемые ими результаты портятся артефактами в виде размытия и других искажений. Основанная на машинном обучении технология устраняет практически все эти минусы.

 

Новая нейронная сеть способна придавать объем двум видам изображений. Во-первых, она поддерживает фотографии формата RGB-D, которые можно снять при помощи двойной камеры iPhone, контроллера Kinect и других устройств с возможностью определения глубины сцены. Во-вторых, она может работать и с обычными 2D-изображениями — главное, предварительно задать параметры глубины. Способности нейросети были продемонстрированы на примере случайно отобранных фотографий из набора RealEstate10K. Для демонстрации качества обработки 2D-фотографий, были взяты исторические кадры XX века.

 

Благодаря внедрению технологии Inpainting, разработчики смогли удалить артефакты, которые возникали при создании трёхмерных изображений другими методами. В ходе этого процесса искусственный интеллект обнаруживает недостающие пиксели и воссоздаёт их — как результат, на объёмных фотографиях нет размытия и искажений.

 

Подробнее о работе новой нейронной сети написано в статье, опубликованной на сервере arXiv. Разработанная технология предъявляет меньше требований к исходным изображениям, чем все остальные. Возможно, в будущем она станет ещё лучше и будет использоваться в виртуальной реальности. Одной из самых известных технологий подобного рода является Facebook 3D Photos.