Najnovší počin OpenAI umožňuje generovať 3D objekty z textu.
Podľa spoločnosti je Shap-E „podmienený generatívny model pre 3D aktíva. Na rozdiel od nedávnej práce na 3D generatívnych modeloch, ktoré vytvárajú jedinú výstupnú reprezentáciu, priamo generuje parametre implicitných funkcií, ktoré možno vykresliť ako textúrované siete aj neurónové polia žiarenia.“ V príspevku ďalej vysvetľuje, ako sa trénuje na kombinácii mapovania 3D aktív a podmieneného difúzneho modelu. Tento voľne spustiteľný program je však o niečo náročnejší na inštaláciu a nastavenie ako stále populárnejší ChatGPT. Model si možno bezplatne stiahnuť na GitHub a získať k nemu prístup v aplikácii Microsoft Paint 3D. Funguje aj po konverzii do súboru STL, ktorý umožňuje vytvorené rendery uviesť do praxe prostredníctvom 3D tlačiarní. Hoci sa tieto základné znalosti modelu môžu zdať dostatočne jednoduché, na jeho inštaláciu a spustenie môže byť potrebná určitá technická zdatnosť.
Avram Piltch vyskúšal model Shap-E, pričom podľa jeho slov mu trvalo osem hodín, kým sa zorientoval. Dodal, že OpenAI ponúka len málo návodov okrem vysvetlenia, že na inštaláciu treba použiť príkaz pip v jazyku Python. Po inštalácii tvrdí, že bol schopný testovať výzvy s farebne animovanými súbormi GIF a monochromatickými súbormi PLY, pričom animované súbory boli priaznivé, poznamenal. Niektoré výzvy zahŕňali žraloka, plíživého hráča Minecraftu a „lietadlo, ktoré vyzerá ako banán“, pričom všetky mali rôznu úroveň kvality v závislosti od typu súboru. Piltch použil aj funkciu modelu, ktorá umožňuje používateľom nahrať 2D obrázok na konverziu na 3D objekt. Redaktor upozornil, že tí, ktorí sa pokúšajú nainštalovať Shap-E a vykresľovať 3D objekty, by mali mať na pamäti, že model vyžaduje od počítača veľa systémových prostriedkov. Konkrétne, Shap-E je kompatibilný len s grafickými procesormi NVIDIA a vyžaduje vysoko výkonné CPU, aby sa vykreslil v priebehu niekoľkých minút na rozdiel od hodín.