Właśnie teraz OpenAI nie działa CzatGPT 5, ale koncentruje się na opracowywaniu innych modeli generatywnych. W tych dniach firma przedstawiła Kształt, nowe narzędzie, które pozwala tworzyć Modele 3D począwszy od prostych ciągów tekstowych. Nie można obecnie oczekiwać wyjątkowych rezultatów, ale niewątpliwie jest to pierwszy krok w kierunku bardziej złożonego zastosowania. Zobaczmy wszystko szczegółowo.
Co to jest Shap-E, jak to działa
SHAP-E jest bezpłatnie dostępny na GitHub i umożliwia tworzenie obiektów trójwymiarowych otwieralny w Paint 3D i konwertowalny do plików STL, nadający się do użytku również z drukarkami 3D. Sztuczna inteligencja, o której mowa, opiera się na nowej technice wizualnej syntezy tzw NeRF (Neural Radiance Fields), które już wzbudziło duże zainteresowanie widzeniem komputerowym.
Ta nowa metoda syntezy wizualnej i rekonstrukcji 3D może być zastosowana w różnych dziedzinach, w tym w robotyce (co widzieliśmy ostatnio w przypadku ChatGPT i psa Boston Dynamics), kartografii, rzeczywistości wirtualnej i rozszerzonej oraz wielu innych.
W przypadkach przedstawionych przez OpenAI, Shap-E jest w stanie wygenerować obiekty takie jak miska z jedzeniem, pingwin, pies, statek kosmiczny, ale także krzesło i zielony but. Modele można renderować w ciągu kilku sekund, a jak wielu dowodzi, SHAP-E może być używany do tworzenia zasobów do gier wideo, filmów i doświadczeń VR. Jest to główny punkt zwrotny w modelowaniu i renderowaniu 3D.
Jednak organizacja Sama Altmana nie dostarczyła dokładnych instrukcji dotyczących korzystania z narzędzia, ale po zainstalowaniu za pomocą polecenia Pythona „pip install -e” można użyć jednego z notatników obecnych na GitHub jako „text-to-3d”, który generuje model 3D z monitu tekstowego lub „image-to-3d”, który przekształca obraz 2D w obiekt 3D.
Wyniki nie są świetne, zwłaszcza przy użyciu monitów tekstowych: więc generujesz głównie monochromatyczne pliki PLY i niezbyt przekonujące animowane kolorowe GIF-y. Ponadto SHAP-E wydaje się wymagać dużej ilości zasobów systemowych.