Ce înseamnă Inpainting și outpainting
Inpainting înseamnă să selectezi o zonă dintr-o imagine, de exemplu un trecător care a intrat în cadru, iar AI-ul o completează ca și cum acel lucru n-ar fi existat, sau o înlocuiește cu ce descrii tu („pune o bancă de lemn aici”).
Outpainting este operația inversă: AI-ul extinde imaginea dincolo de marginile ei, inventând ce s-ar fi putut afla în afara cadrului. Așa poți transforma o fotografie verticală într-una orizontală.
Cum funcționează
Se folosesc de obicei modele de difuzie. Zona marcată (numită mască) este umplută cu zgomot, iar modelul o curăță pas cu pas, ținând cont de pixelii din jur, ca lumina, perspectiva și texturile să se potrivească. Dacă scrii și un prompt, modelul îl folosește ca să decidă ce pune în zona respectivă.
Pe înțelesul tuturor
Este ca restaurarea unei fresce căreia i-a căzut o bucată de tencuială: restauratorul pictează porțiunea lipsă privind ce e în jur, ca să nu se vadă unde a intervenit.
Exemplu
Funcțiile de tip „gumă magică” din aplicațiile de galerie ale telefoanelor și funcția „Generative Fill” din Adobe Photoshop folosesc inpainting: ștergi un stâlp de curent din fotografia de la Transfăgărășan și AI-ul pune în loc cer și munte. Pentru un banner lat, poți extinde prin outpainting o fotografie de produs care era prea îngustă.
De reținut
- Inpainting modifică o zonă din interiorul imaginii; outpainting adaugă conținut în afara ei.
- Conținutul nou este inventat de model, așa că imaginea rezultată nu mai este o fotografie documentară.
- Poți folosi inpainting de mai multe ori, pe zone mici, pentru control mai bun.
Nu confunda
- Inpainting vs. text-to-image: text-to-image creează toată imaginea de la zero; inpainting păstrează restul imaginii și schimbă doar zona marcată.
Termeni înrudiți
- Model de difuzie: Tip de model generativ care creează imagini, sunet sau video pornind de la zgomot aleator și curățându-l pas cu pas.
- Text-to-image (generare de imagini): Modele AI care creează imagini noi pornind de la o descriere scrisă, numită prompt.
- Segmentarea imaginilor: Sarcina de computer vision care împarte o imagine în zone, marcând pixel cu pixel ce aparține fiecărui obiect.
- AI generativă: AI care creează conținut nou (text, imagini, sunet, video sau cod) pornind de la o cerere scrisă în limbaj obișnuit.
- Deepfake: Imagine, video sau înregistrare audio falsă, creată cu AI, în care o persoană pare să spună sau să facă ceva ce nu a făcut.