Создание 3D-моделей из видео: стоит ли тратить время?
Видеограмметрия — это технология измерения, которая собирает трехмерную информацию из видеоматериалов для создания трехмерной сетки. Как и фотограмметрия, 3D-модели из видео могут показаться заманчивыми, поэтому мы обсудим два основных различия между использованием неподвижных изображений и видео.
Преодоление проблемы создания 3D-моделей из видео.
1. Разрешение.
Разрешение имеет решающее значение для получения наилучших результатов при 3D-сканировании. Разрешение зависит от того, сколько деталей содержится в пространстве, и оно будет влиять на то, насколько хорошо в конечном итоге получится 3D-сканирование. Низкое разрешение и любые артефакты, которые могут возникнуть на изображении, станут серьезным препятствием в процессе захвата. Помните: если изображение содержит больше деталей, то и их будет больше и в 3D-объекте.
Хотя на рынке есть камеры 8K, они чрезвычайно дороги. В конце концов, нет смысла использовать дорогую высококачественную видеокамеру для увеличения разрешения, когда вместо этого можно использовать неподвижные изображения. В каждой категории фотографии будут давать более чистые изображения с более высоким разрешением за меньшую цену.
2. Размытие изображений в движении.
Следующая серьезная проблема, с которой вы столкнетесь при использовании видео для создания 3D-моделей, — это размытие изображения в движении. Размытие происходит только на неподвижных изображениях, снятых с низкой выдержкой движущейся или ручной камерой. Когда дело доходит до 3D-захвата, это не должно быть проблемой. Используя штатив, можно получить чистые изображения без размытия нужного объекта под любым углом.
С другой стороны, для видео проблему размытия в движении решить не так просто. Лучший способ борьбы с размытием изображения в видео — снимать с более короткой выдержкой. Съемка с более высокой частотой кадров вполне осуществима, однако имейте в виду, что более короткая выдержка также означает, что датчиков камеры достигает меньше света. Чтобы компенсировать это, нужно находиться в условиях контролируемого освещения для достижения наилучших результатов. Добавление слишком большого количества света может привести к появлению теней и светлых участков, что также негативно повлияет на окончательный отсканированный объект.
Изображение: Andrew Palmer.
Преимущество видеограмметрии: простота использования.
Мы обсудили две основные причины, по которым следует использовать неподвижные изображения вместо видео, поэтому давайте поговорим о том, какое место в этом пространстве занимает видео и почему можно рассмотреть возможность его использования.
Создание десятков отдельных изображений, необходимых для успешного 3D-сканирования, может занять много времени. Существует несколько решений, обычно приложения для смартфонов, которые предлагают варианты преобразования видео в 3D из-за простоты использования видео. Записывать объект гораздо быстрее, чем делать снимок за снимком.
Если вы ищете быстрый ответ и у вас есть доступ к смартфону, то создание 3D-моделей из видео с помощью приложения может быть для вас самым простым решением. Тем не менее вы всегда получите лучшие результаты, используя неподвижные изображения с высоким разрешением. Важно помнить, что эти приложения используют отдельные кадры из вашего видео, которые в любом случае — неподвижные изображения. Каждый художник, создающий модели из видео, должен спросить себя, перевешивает ли сэкономленное время улучшение качества, которое вы получите, просто делая фотографии самостоятельно с помощью штатива и камеры.
Изображения: Andrew Palmer.
Аппаратные требования.
Если вы используете телефон, для достижения наилучших результатов понадобится смартфон с датчиками LiDAR, например iPhone 12 и 13 Pro.
В рамках Adobe Substance 3D мы предлагаем Substance 3D Sampler, мощное и простое в использовании программное обеспечение для 3D-захвата для создания 3D-объектов из фотографий. Для точного фото- или видеосканирования объекта требуется много вычислительной мощности. Для Sampler в 2023 году мы рекомендуем процессор Intel i7 или AMD Ryzen 7 или аналогичный. Пользователям также понадобится мощный графический процессор, например, серии 30-го уровня или выше. Для ОЗУ хватит 32 ГБ, хотя для многих проектов оптимально 64.
Полное руководство по аппаратным требованиям и рекомендациям Sampler можно найти в нашей документации.
Создавайте захватывающие 3D-ресурсы с помощью Adobe.
Substance 3D Sampler — отличный способ начать работу с фотограмметрией. Хотя мы не поддерживаем решения для преобразования видео в 3D-объекты, наша технология на базе ИИ упрощает этот процесс. Если можно делать чистые снимки при хорошем освещении, Sampler сделает все остальное.
Используя ту же технологию маскировки, что и в Photoshop, Sampler автоматически замаскирует изображения, чтобы воссоздался только основной объект. После того, как вы будете удовлетворены маскировкой, Sampler обработает изображения, создаст облако точек и 3D-сетку с текстурами.
Sampler позволяет смешивать и перемешивать материалы, чтобы быстро изменить внешний вид модели.
Исследуйте 3D-захват с помощью Substance 3D Sampler.