Az Adobe ecsettel és húzással szerkesztene a promptolás helyett
Tíz kutatási projektet mutatott be az Adobe a miami beachi MAX Sneaks eseményen, és a legtöbb közülük a begépelt prompt helyett ecsettel, húzással vagy gesztussal engedi szerkeszteni a képet és a videót.
Az Adobe Labs kutatói, Victoria Hollis és Kimberly Welchons szerint a chat a generatív AI leggyakoribb felülete, de precíz vizuális munkára nem elég. Az állítást nyolc, 2024 és 2026 között futtatott kutatásra alapozzák, 82 dolgozó és feltörekvő kreatív szakember részvételével, továbbá 27 kutatási tanulmányt is áttekintettek. Szerintük az alkotók a készítés közben találják meg, mit akarnak, nem előre leírva. A mintát ugyanakkor nem tekintik reprezentatívnak, és a vizuális szakterületek felé húz. (TNW)
Videó valós időben
Négy projekt videós. A Scene Sweep egyetlen szerkesztést visz át egy több jelenetből álló sorozaton, a változtatás a vágásokon és kameraszögeken át is megmarad. Az Adobe szerint a csapat saját szerkesztőmodellt tanított a többjelenetes videóhoz. A Live Set a videó lejátszása közben engedi módosítani az alanyt, a környezetet vagy a kamerát.
Az On Cue a generált klipben azt szabályozza, mikor történjen valami, például egy fényvillanás; az időzítést kézzel rajzolják meg, vagy egy videóból vagy zenéből veszik át. A Screen Test egy fiktív karakter külsejét, hangját és személyiségét építi fel, és a karakterrel beszélgetve tesztelhető, hogyan reagálna különböző jelenetekben.
Egy hang kiemelése a keverékből
A Sound Bender az egyetlen hangprojekt. A készítő leír egy hangot, az eszköz pedig kiemeli azt a kész keverékből, majd interaktív vásznon jelennek meg a változatok. Itt a hangot élőben lehet formálni, vagy mozgáshoz igazítani egy videóban.
Ecset, húzás és vászon
A kép- és dizájnprojektek a közvetlen szerkesztésre épülnek. A Deep Brush a fotót forma-, szín- és fényrétegekre bontja, az ecsetvonások pedig egy felület kontúrjait követhetik. A Hands On a képet elemzi, és vezérlőpontokat épít a vászonra, például egy bögre fülén; a részletet húzással formálják át, nem prompt átírásával. Az Adobe szerint ez a Firefly Edit object eszközéből nőtt ki, ahol az AI-modellek kezdetben túl lassúak voltak hozzá.
A Rinse Repeat egy kép egyik részéről másolja át a szerkesztéseket egy másik területre, natív Photoshop-eszközökkel, így azok szerkeszthetők maradnak. A Link Up a húzást utasítássá alakítja: egy autót egy illusztrált parkolóhelyre húzva az eszköz igazítja a perspektívát, a méretet és a stílust. A Sight Span egyetlen képből olyan teret épít, amelybe a készítő belépve új képkivágásokat vehet fel.
Mi próbálható ki most
Az Adobe Labs Playground a bemutatóval egy időben nyílt meg. Elérhető benne a Deep Brush és a Hands On korai előzetese, valamint a Project Custom Filters, amely szöveges leírásból élő Photoshop-szűrőt készít saját csúszkákkal. A beszélgetős karaktereszköz és a hangkinyerő eszköz csak hamarosan érkezik.
A visszajelzés az [email protected] címre küldhető. Az előzetesek nemrég jelentek meg, egy nappal azután, hogy az Adobe kiadta az MAX-kiadásait, köztük a munkát megtervező Firefly-agentet és a Photoshop új Relight eszközét. Az Adobe egy Disney-megállapodáson keresztül a filmgyártás felé is nyitott.
A Hands On kapcsán az Adobe szerint a projekt lehetséges lépés a szövegalapú szerkesztéstől a grafikus felületek felé, és azt szeretnék megtudni, hogy a megoldott probléma valóban fontos-e a kreatívoknak. Az Adobe szerint ezt a Playgroundon derítik ki. A kutatási előzetesek nem termékek: az Adobe nem közölte, melyik projekt kerül piacra, és mikor.