Hi3DGen: Högdetaljerad 3D-Modellering från Bilder

Med en växande efterfrågan på högdetaljerade 3D-modeller från tvådimensionella bilder introducerar utvecklarna nu ett nytt verktyg: Hi3DGen.
Många modeller på marknaden kan generera 3D-objekt med hjälp av text och bildreferenser, men Hi3DGen tar utvecklingen ett steg längre.
Till skillnad från tidigare verktyg fokuserar Hi3DGen på att skapa 3D-geometrier med hög precision, där normal-mapping-teknik fungerar som mellanrepresentation.

Vad gör Hi3DGen unikt?

Hi3DGen kombinerar tre centrala komponenter som tillsammans levererar hög prestanda.
Först ut är bild-till-normal-estimatorn, som använder avancerad teknik för att skilja mellan lågfrekventa och högfrekventa bildmönster.
Resultatet blir skarpa och stabila normalberäkningar, vilket i sin tur ger mer detaljerade 3D-modeller.

Den andra komponenten, ”normal-till-geometri-lärande”, använder en metod som kallas normal latent diffusion. Denna metod höjer noggrannheten och detaljrikedomen i 3D-modeller genom att utnyttja de genererade normal-kartorna. Slutligen innehåller Hi3DGen en datasyntespipeline som skapar högkvalitativa datasets för att stödja träningsprocessen, däribland DetailVerse, en nyligen utvecklad databas av 3D-tillgångar med rika detaljer.

En normal-map bild lånad av LearnOpenGL — (image credit to LearnOpenGL)

Resultat och användningsområden

Studier visar att Hi3DGen genererar högkvalitativa 3D-modeller med en detaljrikedom som överträffar dagens toppmoderna metoder. Användartester har genomförts med både amatörer och professionella 3D-konstnärer, och resultaten visar att Hi3DGen inte bara levererar exceptionellt hög kvalitet för professionella tillämpningar som 3D-design och modellering, utan även är användarvänligt för hobbyister som arbetar med 3D-printning.

Hi3DGen öppnar dörrar för nya användningsområden inom allt från digital underhållning till simuleringar för autonom körning. Verktyget gör det möjligt att snabbt och exakt generera 3D-representationer från vanliga 2D-bilder, vilket kan revolutionera hur vi använder och skapar 3D-innehåll.

Framtiden för Hi3DGen

Även om tekniken redan är imponerande med sin förmåga att skapa detaljrika 3D-modeller, jobbar utvecklarna bakom Hi3DGen på att förbättra dess kapacitet ytterligare. Ett av deras nästa mål är att uppnå rekonstruktionsnivå på 3D-modeller, där ännu högre grad av detaljprecision och överensstämmelse med originalbilderna eftersträvas.

I och med lanseringen av denna teknologi sätter Hi3DGen en ny standard för 3D-modellering.
Genom att kombinera normal kart-teknik med avancerad AI visar den tydligt vad som är möjligt.
Samtidigt är det en fingervisning om framtiden för generativ AI och 3D-geometri.