Med det nya AI-verktyget ”Generativ fyllning” från Adobe Photoshop kan du lägga till text till bilder

Funktionen ”Generativ fyllning”, som använder molnbaserad bildsyntes för att fylla specifika delar av en bild med ny AI-genererad information baserad på en textbeskrivning, lades till av Adobe till Photoshop beta på tisdagen. Generative Fill, som använder Adobe Firefly, fungerar på samma sätt som ”inpainting”-metoden som har använts i uppdateringar av DALL-E och Stable Diffusion sedan förra året.

Adobe Firefly, en unik bildsyntesmodell skapad av Adobe, är kärnan i Generative Fill. Firefly är en djuplärande AI-modell som har tränats på miljontals stockfotografier från Adobe för att länka specifika bilder till textbeskrivningar om den. Människor kan nu skriva in vad de vill se (till exempel ”en clown på en datorskärm”) och Firefly kommer att ge dem ett antal val att välja mellan. Generative Fill utvecklar en kontextmedveten generation som sömlöst kan integrera syntetiska bilder i en befintlig bild med hjälp av en välkänd AI-metod som kallas ” inpainting ”.

Användare väljer området i en befintlig bild de vill ändra innan de använder Generativ fyllning. En ”Kontextuell aktivitetsfält” som låter användare ange en beskrivning av vad de vill se genererat i den valda regionen visas när de har valt det. Efter att ha bearbetat dessa data på Adobes servrar returnerar Photoshop resultaten till programmet. Efter generering har användaren valet att välja bland ett antal generationers möjligheter eller skapa nya alternativ att granska.

Användningen av verktyget Generativ fyllning resulterar i skapandet av ett nytt ”Generativt lager”, som möjliggör oförstörande ändringar av bildinnehållet, såsom tillägg, tillägg eller borttagningar, med ledning av dessa textinstruktioner. Den ändras automatiskt till bildens synvinkel, ljussättning och estetik.

Photoshop-betan innehåller nu ytterligare AI-drivna funktioner utöver Generative Fill. Firefly har dessutom gjort det möjligt för Photoshop att helt radera element från en scen eller att utöka storleken på en bild genom att skapa nytt innehåll runt originalet, en process som kallas ” outpainting ” inom artificiell intelligens.

Adobe har just nu kommit ikapp med att lägga till dessa funktioner till sin flaggskeppsbildredigerare, även om OpenAI:s DALL-E 2-bildgenerator och -redigerare har haft dem sedan augusti förra året (och olika hembryggade utgåvor av Stable Diffusion sedan ungefär samma tid). Det är sant att handläggningstiden är snabb för ett företag som kanske redan har ett enormt ansvarsmål målat på ryggen på grund av oro över skapandet av skadligt eller socialt stigmatiserat innehåll, användningen av konstnärers bilder som utbildningsmaterial och drivkraften av propaganda eller desinformation.

På liknande sätt förlitar sig Adobe på användarvillkor som hindrar konsumenter från att skapa ”missbrukande, olagligt eller konfidentiellt” innehåll, förutom att blockera genereringen av vissa upphovsrättsskyddade, våldsamma och sexuella sökord.

Dessutom intensifierar Adobe sitt Content Authenticity Initiative, som använder innehållsreferenser för att lägga till metadata till genererade filer som hjälper till att spåra deras ursprung. Med Generative Fills förmåga att enkelt förvränga den uppenbara medieverkligheten i ett foto (visserligen något Photoshop har gjort sedan starten), kan Adobe enkelt ändra utseendet på ett fotos verklighet.

Alla Creative Cloud-användare som har en Photoshop-prenumeration eller gratis provperiod kan för närvarande få tillgång till Generative Fill in Photoshop beta-appen genom att gå till området ”Beta-appar” i Creative Cloud-appen. Den stöder ännu inte kinesiska användare, är inte tillgänglig för någon under 18 år och erbjuder för närvarande endast textinstruktioner på engelska. I slutet av året har Adobe för avsikt att göra Generative Fill tillgängligt för alla Photoshop-användare så att vem som helst snabbt kan skapa trädgårdsclowner.

Med en Adobe-inloggning och ett webbaserat verktyg kan du också prova Generative Fill gratis om du inte har en Creative Cloud-prenumeration på Adobe Firefly -webbplatsen. Firefly beta-väntelistan drogs precis tillbaka av Adobe.