Быть можно дельным человеком и постить красивые фотки в соцсетях, — решили разработчики Facebook и представили новый алгоритм обработки снимков. Программа на основе нейронной сети придает глубину и объем любым фотографиям, избавляя их от размытий и искажений.
Функция 3D фото для Facebook не новость. Еще в 2018 году соцсеть предложила пользователям делиться объемными фотографиями. Впрочем, делать такие снимки можно было только с помощью смартфонов последнего поколения, оснащенных двойными камерами или алгоритмами определения глубины сцены.
Новый метод делает объемные снимки доступными даже для телефонов со стандартной камерой без фронтального датчика и вспомогательных сенсоров. Таким образом, придать глубину можно обычным 2D изображениям. Кроме того, алгоритм автоматически находит и устраняет артефакты, возникающие при создании трехмерных изображений. Например, он находит недостающие пиксели и восполняет их, устраняя размытость и визуальные дефекты снимка.
Разработка новой технологии вызвала немало трудностей. Программисты Facebook использовали сверточную нейросеть, обучив её на нескольких миллионах пар изображений и соответствующих им картах глубины. Для оптимальной работы сети пришлось также использовать методы мобильной оптимизации FBNet и ChamNet. Именно они отвечают за то, чтобы новый алгоритм безошибочно интегрировался с типичными мобильными процессорами и выдавал результат за несколько секунд.
То, что получилось в результате, действительно впечатляет. Для демонстрации итогового качества снимков разработчики выбрали серию исторических фотографий XX века. Молодая Елизавета, Уинстон Черчилль, Мартин Лютер Кинг, Пабло Пикассо и Романовы выглядят так, как если бы их снимали на iPhone SE. Но приятнее всего, что опубликовать селфи подобного качества теперь сможет каждый — даже гордый обладатель самого последнего кнопочного телефона на Земле.
Источник:
https://3dnews.ru/1011859