https://main--cc--adobecom.hlx.page/cc-shared/fragments/merch/products/substance3d/sticky-banner/default

Stawianie czoła wyzwaniu generowania modeli 3D z wideo

Przyjrzymy się dwóm poważnym wyzwaniom, jakie mogą wystąpić przy próbie wydzielenia obiektów 3D z nagrań wideo zamiast na podstawie obrazów statycznych.

1. Rozdzielczość

Jakość wyników skanowania 3D zależy w dużej mierze od rozdzielczości. Decyduje ona o tym, ile szczegółów zawiera dany obszar oraz jak dobre są uzyskiwane skany 3D. W przypadku niższych rozdzielczości potencjalne artefakty na obrazach znacznie utrudniają proces rejestrowania. Pamiętaj, że im więcej informacji zawiera obraz, tym bardziej szczegółowy obiekt 3D możesz uzyskać.

Dostępne na rynku kamery 8K są bardzo drogie. Nie jest ekonomiczne zwiększanie rozdzielczości przy użyciu kosztownych, zaawansowanych kamer wideo, gdy zamiast tego można używać obrazów statycznych. W każdej kategorii fotografie zapewniają wyraźniejsze obrazy o wyższej rozdzielczości przy niższych kosztach.

2. Rozmycie ruchu

Drugą poważną przeszkodą napotykaną podczas tworzenia modeli 3D na podstawie wideo jest efekt poruszenia (rozmycia ruchu). W przypadku obrazów statycznych rozmycie występuje tylko w przypadku długiego czasu otwarcia migawki, gdy aparat jest w ruchu lub zdjęcia są robione z ręki. Jeśli chodzi o rejestrowanie obiektów 3D, nie powinno to stanowić problemu. Wystarczy użyć statywu, aby uzyskać wyraźne zdjęcia bez rozmycia — z każdej potrzebnej strony obiektu.

W przypadku nagrań wideo efekt poruszenia jest trudny do rozwiązania. Najskuteczniejszą metodą zapobiegania temu artefaktowi jest używanie krótszego czasu otwarcia migawki. Można również nagrywać więcej klatek na sekundę. Pamiętaj jednak, że im krótszy jest czas otwarcia migawki, tym mniej światła dociera do czujników kamery. Aby skompensować ten brak i osiągnąć najlepsze wyniki, należy nagrywać w miejscu z odpowiednio ustawionym oświetleniem. Nadmiar światła może generować więcej cieni i obszarów oświetlonych, które również negatywnie wpływają na wygląd zeskanowanego obiektu.

Dinosaur 3d model from video
Obraz autorstwa: Andrew Palmer

Zaleta wideogrametrii — łatwość użytkowania

Omówiliśmy dwa powody używania obrazów statycznych zamiast wideo. Teraz przyjrzymy się zastosowaniom wideo w tym kontekście i powodom, dla których ten format może być przydatny.

Robienie dziesiątek zdjęć potrzebnych do uzyskania udanego skanu 3D może być czasochłonne. Istnieje mnóstwo rozwiązań, zazwyczaj w postaci aplikacji na smartfony, które oferują przekształcanie wideo w grafikę 3D, ponieważ wideo jest medium łatwym w obsłudze. Nagranie obiektu wymaga o wiele mniej czasu niż zrobienie serii zdjęć.

Jeśli poszukujesz szybkiej odpowiedzi i masz dostęp do smartfona, tworzenie modeli 3D na podstawie nagrań wideo przy użyciu aplikacji może być najprostszym rozwiązaniem. Wyniki są jednak lepsze, jeśli posługujesz się obrazami statycznymi o wysokiej rozdzielczości. Ważne jest zrozumienie, że aplikacje używają poszczególnych klatek wideo, które nadal są obrazami statycznymi. Artyści tworzący modele na podstawie wideo powinni zadać sobie pytanie, czy oszczędności czasu są warte więcej niż poprawa jakości, jaką można osiągnąć, robiąc zdjęcia aparatem ze statywu.

3d eye model from video using videogrammetry
Obrazy autorstwa: Andrew Palmer
videogrammetry software

Wymagania sprzętowe

Jeśli używasz telefonu, najlepsze wyniki osiągniesz przy użyciu smartfona z czujnikami LiDAR, takiego jak iPhone 12 lub 13 Pro.

W kolekcji Adobe Substance 3D oferujemy moduł Substance 3D Sampler — zaawansowane, proste w użyciu rozwiązanie do rejestrowania obiektów 3D i tworzenia ich na podstawie zdjęć. Dokładne skanowanie zdjęcia lub wideo obiektu wymaga dużej mocy obliczeniowej. W przypadku modułu Sampler w 2023 r. zalecamy używanie procesora Intel i7, AMD Ryzen 7 lub odpowiednika. Warto też dysponować wydajnym GPU, na przykład odpowiednikiem serii 30 firmy NVIDIA. 32 GB pamięci RAM powinno wystarczać, ale optymalną wartością w wielu projektach jest 64 GB.

Kompletny przewodnik obejmujący zalecenia i wymagania sprzętowe dotyczące modułu Sampler znajdziesz w dokumentacji.

Rejestrowanie atrakcyjnych zasobów 3D — Adobe

Moduł Substance 3D Sampler oferuje doskonały sposób zapoznania się z fotogrametrią. Choć nie obsługuje on rozwiązań konwertujących wideo na obiekty 3D, technologia oparta na sztucznej inteligencji upraszcza ten proces. Wystarczy zrobić wyraźne zdjęcia przy dobrym oświetleniu, a moduł Sampler zajmie się resztą.

Przy użyciu technologii maskowania znanej z programu Photoshop moduł Sampler automatycznie nakłada maski na obrazy, aby przetwarzać tylko ich główne tematy. Po uzyskaniu prawidłowej maski moduł Sampler przetwarza obraz, tworzy chmurę punktów i generuje siatkę 3D z teksturami.

Korzystając z modułu Sampler, możesz błyskawicznie mieszać i łączyć materiały, w doskonały sposób modyfikując wygląd modeli.

Zapoznanie z rejestrowaniem obiektów 3D przez moduł Substance 3D Sampler

Jak widać, tworzenie modeli 3D na postawie wideo to interesujący proces, ale nie zawsze stanowi on najlepszą metodę. Aby uzupełnić swoją wiedzę na temat rejestrowania obiektów 3D i możliwości modułu Adobe Substance 3D Sampler, zapoznaj się z tym wideo wprowadzającym, w ramach którego utalentowany grafik 3D przedstawia cały proces rejestrowania na przykładzie obrazów statycznych.
https://main--cc--adobecom.hlx.page/cc-shared/fragments/products/substance3d/discover/create-3d-models-from-video/explore-3d#video-tools1 | ImageLink | :play:

Często zadawane pytania

CZYM SIĘ RÓŻNI FOTOGRAMETRIA OD WIDEOGRAMETRII?

Fotogrametria jest to proces mierzenia fotografii w celu obliczania zawartych w nich danych. Gdy istnieje odpowiednio wiele zdjęć obiektu zrobionych pod różnymi kątami, można za pomocą programu odtworzyć obiekt jako model 3D. Wideogrametria działa na podobnych zasadach, ale pomiary są wykonywane na nagraniach wideo.

CZY MODUŁ SUBSTANCE 3D SAMPLER TWORZY MODELE 3D NA PODSTAWIE WIDEO?

Moduł Sampler nie obsługuje bezpośrednio wideogrametrii. Użycie narzędzia modułu Sampler do rejestrowania obiektów 3D wymaga przesłania serii zdjęć do kreatora. Można oczywiście wydzielić obrazy statyczne z wideo za pomocą programu do obróbki wideo, takiego jak Photoshop. Jeśli oczekujesz dobrych wyników, zalecamy rejestrowanie obrazów w wysokiej rozdzielczości.

KIEDY WARTO STOSOWAĆ REJESTROWANIE OBIEKTÓW 3D?

Tworząc obiekty 3D na podstawie obrazów, możesz znacznie usprawnić przetwarzanie grafiki 3D. Niektóre elementy ujęć mają duże znaczenie, warto więc przykładać wagę do ich szczegółów, modelując je ręcznie. Wiele ujęć składa się natomiast z mnóstwa różnych obiektów. Artyści lub zespoły mogą oszczędzać mnóstwo czasu, tworząc realistyczne zasoby 3D przy użyciu fotogrametrii.

https://main--cc--adobecom.hlx.page/cc-shared/fragments/products/substance3d/bottom-blade-cta-s3d-collection