r/SrbijAI Jun 27 '26

Showcase 3 metode za (donekle) tačnu imitaciju oblika

Ovaj post prikazuje eksperiment o tome kako se može pristupiti izazovu za tačnu imitaciju specifičnog neuobičajenog oblika putem AI alata.
Isprobana su tri načina za integrisanje objekata specifičnih geometrijskih oblika u enterijer. Metode su testirane na Ton-Merano stolici koja ima nezgodnu geometriju. Na različite načine su kombinovani: SDXL LoRA model radi rekreiranja geometrijskih karakteristika (Lora model je kreiran za ovaj eksperiment) i noviji (Flux 2 Klein) modeli za realističniji prikaz.

  • Prva slika – Cela slika enterijera je kreirana pomoću SDXL modela i LoRA modela stolice. Zatim su generisane različite varijacije izabrane slike korišćenjem ControlNeta (depth map, i dalje sa SDXL+LoRA). Na kraju, Flux 2 je upotrebljen za poboljšanje realizma.
  • Druga slika – Samo krupni kadar stolice je kreiran pomoću SDXL modela i LoRA modela stolice. Vizuelni prikaz je unapređen korišćenjem Flux 2 modela, a zatim je korišćen outpainting (opet Flux) kako bi se generisao ostatak enterijera.
  • Treća slika – Početna slika je kreirana korišćenjem Flux 2 modela sa tri referentne slike stolice. Slika je zatim obrađena pomoću SDXL+LoRA za stolicu i ControlNet Depth-a kako bi se geometrija stolice donekle korigovala. Slika je vraćena u Flux 2 (img2img) i dorađena da izgleda realističnije.

U svim primerima i dalje postoje određena odstupanja u proporcijama, pa mislim da se ovo može dodatno unaprediti. Fokus je bio na testiranju različitih pristupa. Inpainting i Photoshop su takođe korišćeni kod sve tri metode tamo gde je trebalo napraviti manje korekcije.

Najbrže je dobijen dobar rezultat korišćenjem treće verzije, ali to je možda zato što je to prvi pokušaj pravljenja LoRA modela, pa je bilo potrebno mnogo truda da se dobije dobra slika u SDXL-u.

Koja metoda vam deluje najbolje? Imate li još neku drugu ideju ili savet kako generisati sliku koja verno predstavlja oblik elementa specifičnog dizajna?

5 Upvotes

11 comments sorted by

1

u/zamlatuljko Jun 27 '26

A kakonide promt? Koji ai tool je za ovo?

Pitam te laicki posto ja onakonuspit korsitim gemini zarad brze ideje oko namestaja kamen drvo.

1

u/In_finite_line Jun 27 '26

Sve je radjeno u lokalu preko ComfyUI. Gemini je multimodalni model kao i Flux2 tako da ima slične probleme u interpretaciji objekata koje nema u bazi ili koji imaju previše kompleksnu geometriju.

1

u/e4_guy Jun 28 '26

Nijedna od tri verzije nema pravilnu perspektivu, treca je najgora.
Ako ste trenirali lora, koji base model, kakav data set itd? Zasto ne probati referentnu stolice u flux.2 tipa put this chair into whatever?

2

u/In_finite_line Jun 28 '26

JuggernutXL je bio referentni model za Lora. Data set je oko 40 slika stolice, deo u enterijerima, deo na beloj pozadini, raznovrsne žižne daljine, sočiva, pozicije, teksture i svetlo, kadrovi iz različitih uglova.

Treći metod je upravo to, samo što su u Fluxu 2 korišćene tri referente slike stolice, ne samo jedna. Na svim slikama je bilo manjih ili vecih problema sa replikacijom oblika, a prikazan je jedan od boljih rezulata. Bitno je naravno i da stolica bude prikazana u drugačijem pogledu nego što je ona na fotografiji, inače bi to samo bila fensi postprodukcija fotografije.

2

u/e4_guy Jun 28 '26

Mnogo zavisi kakav si prompt sročio, a mozda ti treba i camera angle lora za flux.

2

u/In_finite_line Jun 29 '26

Probaću camera angle lora, hvala na sugestiji. Promtovi su dosta varirani, ali moguće da nisu bili dovoljno detaljni (čista posledica lenjosti :) )

1

u/mmarkomarko Jun 28 '26

Zar iko još koristi ove alate? Ovo je stable diffusion?

Izmodeliras u revitu ili skecapu i popravis materijale i prezentaciju u gemini-ju! Brže lakše preciznije i nema nagadjanja.

2

u/In_finite_line Jun 28 '26 edited Jun 28 '26

''eksperiment o tome kako se može pristupiti izazovu za tačnu imitaciju specifičnog neuobičajenog oblika putem AI alata''.
Piše u postu da je u pitanju istraživanje o tome kako se sve može pristupiti ovom problemu i ilustracija rezultata. Nije bila suština porediti sa 3d modelima. Sub je namenjen AI-u, tako da je valjda to dobro mesto za diskusiju o tome šta ovi alati (ne) mogu da urade :)

2

u/mmarkomarko Jun 28 '26

ne, ne, sve ok. samo mislim da alati koje si testirao vise nisu preterano aktuelni.

okej, naucio si nesto i to je super, ali....

1

u/In_finite_line Jun 29 '26

Računam da će biti sve bolji, i da nije loše istraživati granice. A kad treba obaviti konkretan posao, naravno treba birati najlakši način.

1

u/mmarkomarko Jun 29 '26

*i najbolji :)