Фото туристов стали исходниками для создания 3D-сцен
Специалисты Google создали невероятно подробные 3D-сцены известных достопримечательностей мира, используя для этого фотографии, взятые из Интернета, которые были обработаны с помощью искусственного интеллекта.
В частности, на странице проекта GitHub выложены трехмерные сцены Бранденбургских ворот в Берлине, базилики Сакре-Кер в Париже и фонтана Треви в Риме. 3D-изображения не только показаны со всех сторон, но и при разном освещении.
Метод обработки снимков, получивший название NeRF-W, основан на технологии Neural Radiance Fields (NeRF), которая изучает свет на фото, убирает посторонние предметы (включая прохожих) и моделирует объемную сцену.
«Два фотографа могут стоять на одном и том же месте и снимать один и тот же объект, но делать это в разное время: автомобили и пешеходы, времена года и погода меняются, а солнце перемещается по небу», — рассказывают разработчики ПО.
В результате последующей обработки снимков с помощью NeRF появляются ореолы, чрезмерное сглаживание и другие огрехи. NeRF-W решает эту проблему, вмешиваясь в технологию, что приводит к отличному результату — созданию реалистичной трехмерной реконструкции, которая может пригодиться для приложений дополненной и виртуальной реальности.