Met de nieuwe AI-tool “Generative Fill” van Adobe Photoshop kunt u tekst aan afbeeldingen toevoegen

De “Generative Fill” -functie, die cloudgebaseerde beeldsynthese gebruikt om specifieke delen van een afbeelding te vullen met nieuwe AI-gegenereerde informatie op basis van een tekstbeschrijving, werd dinsdag door Adobe toegevoegd aan de Photoshop-bèta. Generative Fill, dat Adobe Firefly gebruikt, werkt op dezelfde manier als de “inpainting”-methode die sinds vorig jaar wordt gebruikt in DALL-E en Stable Diffusion-updates.

Adobe Firefly, een uniek beeldsynthesemodel gemaakt door Adobe, vormt de kern van Generative Fill. Firefly is een deep learning AI-model dat is getraind op miljoenen stockfoto’s van Adobe om specifieke afbeeldingen te koppelen aan tekstbeschrijvingen erover. Mensen kunnen nu typen wat ze willen zien (bijvoorbeeld “een clown op een computerscherm”) en Firefly biedt een aantal keuzes waaruit ze kunnen kiezen. Generative Fill ontwikkelt een contextbewuste generatie die synthetische beelden naadloos kan integreren in een bestaande afbeelding met behulp van een bekende AI-benadering die ‘ inpainting ‘ wordt genoemd.

Gebruikers kiezen het gebied van een bestaande afbeelding dat ze willen wijzigen voordat ze Generatieve vulling gebruiken. Een “contextuele taakbalk” waarmee gebruikers een beschrijving kunnen invoeren van wat ze willen zien gegenereerd in de geselecteerde regio, verschijnt zodra ze deze hebben gekozen. Na verwerking van deze gegevens op de servers van Adobe stuurt Photoshop de resultaten terug naar de toepassing. Na het genereren heeft de gebruiker de keuze om te kiezen uit een aantal generaties aan mogelijkheden of om nieuwe opties te creëren om te bekijken.

Het gebruik van het gereedschap Generatieve vulling resulteert in de creatie van een nieuwe “Generatieve laag”, die niet-destructieve wijzigingen in de afbeeldingsinhoud mogelijk maakt, zoals toevoegingen, uitbreidingen of verwijderingen, geleid door deze tekstinstructies. Het past zich automatisch aan het gezichtspunt, de belichting en de esthetiek van de afbeelding aan.

Naast Generative Fill bevat de Photoshop-bèta nu extra AI-aangedreven functies. Bovendien heeft Firefly het voor Photoshop mogelijk gemaakt om elementen uit een scène volledig te wissen of om de grootte van een afbeelding uit te breiden door nieuwe inhoud rond het origineel te creëren, een proces dat bekend staat als ” outpainting ” in kunstmatige intelligentie.

Adobe is net bezig met het toevoegen van deze functies aan zijn vlaggenschip foto-editor, ook al hebben de DALL-E 2-beeldgenerator en -editor van OpenAI ze sinds augustus vorig jaar (en verschillende homebrew-releases van Stable Diffusion sinds ongeveer dezelfde tijd). Het is waar dat de doorlooptijd snel is voor een bedrijf dat misschien al een enorm aansprakelijkheidsdoel op zijn rug heeft geschilderd vanwege zorgen over het maken van schadelijke of sociaal gestigmatiseerde inhoud, het gebruik van afbeeldingen van artiesten als trainingsmateriaal en het stimuleren van propaganda of desinformatie.

Evenzo vertrouwt Adobe op gebruiksvoorwaarden die voorkomen dat consumenten “beledigende, onwettige of vertrouwelijke” inhoud creëren, naast het blokkeren van het genereren van sommige auteursrechtelijk beschermde, gewelddadige en seksuele trefwoorden.

Daarnaast breidt Adobe zijn Content Authenticity Initiative uit, dat gebruik maakt van Content Credentials om metadata toe te voegen aan gegenereerde bestanden die helpen hun herkomst te volgen. Met het vermogen van Generative Fill om de schijnbare media-realiteit van een foto gemakkelijk te vervormen (toegegeven, iets wat Photoshop sinds het begin heeft gedaan), kan Adobe gemakkelijk het uiterlijk van de realiteit van een foto veranderen.

Alle Creative Cloud-gebruikers die een Photoshop-abonnement of gratis proefversie hebben, hebben momenteel toegang tot Generative Fill in de Photoshop-bèta-app door naar het gebied “Beta-apps” van de Creative Cloud-app te gaan. Het ondersteunt nog geen Chinese gebruikers, is niet toegankelijk voor iedereen onder de 18 jaar en biedt momenteel alleen tekstinstructies in het Engels. Tegen het einde van het jaar wil Adobe Generative Fill toegankelijk maken voor alle Photoshop-gebruikers, zodat iedereen snel tuinclowns kan maken.

Met een Adobe-login en een webgebaseerde tool kunt u Generative Fill ook gratis uitproberen als u geen Creative Cloud-abonnement op de Adobe Firefly- website hebt. De Firefly-bètawachtlijst is zojuist ingetrokken door Adobe.