ИИ может воссоздать 3D-сцены только по фотографиям

Возник метод машинного обучения, который может перевоплотить фотографию достопримечательности в 3D-анимацию. правда, пока ИИ необходимы лишь высококачественные снимки, по другому может появиться ошибка.

Исследователи из Гугл представили детальные 3D-сцены именитых достопримечательностей по всему миру. Они употребляли фото, которые скачали из веба и обработали их при помощи машинного обучения.

На страничке проекта в GitHub исследователи поделились 3D-сценами Бранденбургских ворот в Берлине, храма Базилика Сакре-Кер в Париже и фонтана Треви в Риме. Машинное обучение (педагогический процесс, в результате которого учащиеся под руководством учителя овладевают знаниями, умениями и навыками) сделало из этого материала детализированный 3D-рендеринг, в каком можно перемещать вид, а наружная сцена изменяется под действием световых эффектов.

Our paper, “NeRF in the Wild”, is out! NeRF-W is a method for reconstructing 3D scenes from internet photography. We apply it to the kinds of photos you might take on vacation: tourists, poor lighting, filters, and all. https://t.co/lawLB4eEup (1/n) pic.twitter.com/UuvUm4eVzm

— Daniel Duckworth (@duck) August 6, 2020

Исследователи растолковали, что их метод может столкнуться с трудностями при использовании изображений с «необыкновенными параметрами». фото обрабатываются неправильно при нехорошем свете, неверной экспозиции либо постобработке. Не считая того, на снимках из веба нередко есть передвигающиеся объекты — к примеру, люди либо авто. Они также могут помешать методу.

«Два фотографа могут стоять на одном месте и создать снимок одной и той же достопримечательности, но один кадр метод обработает корректно, а 2-ой — попортит. Нам необходимо доработать ИИ, чтоб он работал корректно», — отметили исследователи.

Приобретенная модель может содержать глитчи либо остальные ошибки. Исследователи разрабатывают особые расширения, которые смягчают обработку при помощи ИИ, это приводит к наиболее высококачественным результатам.

Читайте также:

— Крайний шельфовый ледник в Канаде обвалился в океан. Он растерял 40% за два денька

— Поглядите, что способен узреть в мироздании преемник Хаббла. Обзор телескопа Уэбб

— Наша родина открыла авиасообщения с государств. Как неопасно туда лететь?

Источник