GET3D

GET3D generuje gotowe do zastosowań produkcyjnych siatki 3D z teksturami na podstawie kolekcji obrazów 2D. Ten model generatywny, opracowany przez NVIDIA Toronto AI Lab i zaprezentowany na NeurIPS 2022, łączy jawną geometrię siatki z fizycznie realistycznymi teksturami w jednym kompleksowym procesie.

Najważniejsze funkcje

• Generowanie kompletnych siatek 3D z oddzielnymi właściwościami geometrii i materiałów
• Obsługa różnych kategorii obiektów, od pojazdów i postaci po budynki
• Generowanie warunkowane tekstem dzięki połączeniu z reprezentacjami CLIP
• Tworzenie efektów oświetlenia zależnych od kąta widzenia bez ręcznego przygotowywania materiałów
• Przestrzenie ukryte umożliwiające interpolację i płynne przejścia między kształtami

Model jest dostępny na GitHub jako open source do badań i prototypowania. Wdrożenie komercyjne i licencjonowanie wymagają formalnej rejestracji w NVIDIA. GET3D sprawdzi się u twórców gier 3D, autorów zasobów cyfrowych, studiów VFX i zespołów badawczych, które chcą zautomatyzować generowanie zasobów 3D z danych treningowych 2D.