Oceny redaktorów: Oceny użytkowników: [Razem: 0 Średnia: 0] @media(min-width: 500px) { } @media(min-width: 800px) { }
Shap-E firmy OpenAI to wolny model generowania tekstu na obraz, ale zamiast generować zwykłe obrazy, może tworzyć obiekty 3D. Alternatywnie może również przekonwertować istniejący obraz na 3D. Jest to oprogramowanie typu open source i jeśli chcesz, możesz je uruchomić lokalnie. Ponadto dostępna jest internetowa wersja tego narzędzia, o której wspomnę w dalszej części tego wpisu.
AI przeszła długą drogę. Każdego dnia pojawiają się ciekawe narzędzia i produkty, dzięki czemu społeczność open source nie pozostaje w tyle. Po FreedomGPT i Alpaca mamy teraz niezwykły konwerter tekstu na obiekty 3D typu open source autorstwa OpenAI. Shap-E po otrzymaniu od ciebie monitu tekstowego generuje plik GLB, który jest formatem pliku 3D do zapisywania i przeglądania kształtów 3D.
Oba narzędzia; tekst do 3D i obraz do 3D są dostępne w tym samym modelu Shap-E. Oferuje nawet notebooki Jupyter za to samo, które można łatwo uruchomić w Jupyter Lab lub Google Colab. Co więcej, jeśli chcesz eksplorować kod, możesz to zrobić.
Używanie Shap-E przez OpenAI do konwersji tekstu na obiekty 3D:
Jak już wspomniałem już wtedy możesz uruchomić lokalnie Shap-E. Ale to będzie wymagało posiadania wysokiej klasy komputera z wysokimi wymaganiami dotyczącymi GPU i procesora. Jeśli nie masz takiego luksusu, możesz po prostu wypróbować model na Hugging Face tutaj.
Hugging Face to platforma freemium, na której ludzie mogą wdrażać swoje modele AI. Hostowany interfejs Shap-E wygląda tak.
Teraz wystarczy wpisać tekst, aby utworzyć obiekt 3D. Postaraj się, aby zachęta była krótka i prosta. Następnie uruchom narzędzie i poczekaj kilka sekund.
Kilka sekund później zobaczysz, że wygeneruje ono dla Ciebie obiekt 3D. Możesz w pełni wchodzić w interakcje z projektem obiektu 3D, który dla Ciebie wygenerował. Możesz powiększyć i obejrzeć go pod dowolnym kątem.
Aby zapisać go na komputerze, możesz użyć przycisku pobierania w prawym górnym rogu. GLB zostanie pobrany, a następnie będziesz mógł użyć tej dalszej edycji w oprogramowaniu do edycji 3D, które obsługuje format GLB.
Istnieją gotowe podpowiedzi, których możesz użyć do szybkiego renderowania 3D. Są tutaj, aby pokazać, do czego jest zdolny.
Używanie Shap-E przez OpenAI do konwersji obrazów do 3D:
Kolejną rzeczą, którą możesz zrobić, to przekonwertować Obraz obiektu 2D w 3D. Ta część Shap-E jest nieco prymitywna i nie daje zbyt zadowalających wyników. Niemniej jednak nadal możesz spróbować i być może później edytować plik obiektu 3D, aby poprawić kolory i inne nieprawidłowości.
Przełącz się na kartę Obraz do 3D, a następnie prześlij tam obraz. Upewnij się, że obraz, który zamierzasz przesłać, ma przezroczyste tło, a obiekt 2D jest wyraźnie widoczny.
Kliknij Uruchom, a następnie poczekaj na wynik. Po kilku sekundach zobaczysz, że wygeneruje wersję 3D przesłanego obrazu. Wyjście jest takie samo jak powyżej. Możesz obejrzeć i sprawdzić obiekt 3D oraz pobrać wynik w pliku GLB.
W ten sposób możesz użyć narzędzia obraz do 3D Shap-E do tworzenia obiektów 3D z tekstu i obrazów. Obecnie jest w fazie rozwoju i mam nadzieję, że zostanie ulepszony w późniejszych aktualizacjach.
Podsumowanie:
Shap-E oferuje zupełnie nowy sposób generowania obrazów AI. Generowane przez nią obiekty 3D mogą być wykorzystywane do różnych celów. Podobała mi się ogólna koncepcja i świetnie sprawdza się również w przypadku generowania prostych obiektów. Ale wciąż jest miejsce na ulepszenia i mam nadzieję, że programiści i opiekunowie udoskonalą model, aby generować dokładniejsze wyniki, które wymagają minimalnej edycji postów.
