AI-verktyg färglägger automatiskt svartvita foton

Den svenska maskininlärningsforskaren Emil Wallner har släppt ett gratis webbverktyg som heter Palette.fm som automatiskt färglägger svartvita bilder med hjälp av artificiell intelligens. När bilden har laddats upp kan användare välja ett färgfilter eller förfina färgerna med en skriven textbeskrivning.

Palette.fm använder en modell för djupinlärning för bildklassificering som bestämmer baslinjegissningar om färgerna på objekt i ett foto eller en illustration. ”Jag skapade min egen AI-modell som använder en bild och text för att skapa en målarbok”, skrev Wallner i ett inlägg till Ars. ”En modell skapar texten, medan den andra tar bilden och texten för att färglägga.”

När du väl laddat upp en bild kommer webbplatsens eleganta gränssnitt att ge en grov bildtext (beskrivning) av vad den tror att den ser i bilden. Om du inte gillar något av de förinställda färgfiltren kan du klicka på pennikonen för att själv redigera bildtexten, som vägleder färgsättningsmodellen med en texttips.

För att testa detta tog vi ett foto på en liten pumpa och tog bort färgen med Photoshop. Vi laddade sedan ner den svartvita versionen och experimenterade med ett urval av förgjorda filter som Palette.fm tillhandahåller. När vi hittat ett bra filter, redigerade vi titeln för att förfina färgerna genom att beskriva objekten i scenen. Till exempel trodde Palette.fm först att pumpan var en ”klo” och kände inte igen trottoaren. Men när vi väl lade in dessa termer i den skriftliga uppmaningen blev färgerna mer begripliga. Vi förbättrade senare bilden (visas inte i exemplet nedan) genom att lägga till ”gröna löv” i bakgrunden.

För närvarande är Palette.fm tillgänglig som en gratistjänst, men Wallner planerar att lägga till ett betalalternativ. Webbplatsen bearbetar bilder online, i molnet. Angående integriteten för uppladdade bilder, säger Palette.fm-webbplatsen: ”Vi lagrar inte dina bilder.” Men, som med alla molntjänster, ta detta med en nypa salt när det kommer till personliga bilder. Noterbart, Palette.fm kräver för närvarande inte någon form av användarkontoregistrering.

Hittills har Palette.fm fascinerat människor på Hacker News som har använt verktyget för att färglägga foton av nära och kära, historiska foton och mer. En variant av Wallners färgsättningsteknik har också funnits som bot på Twitter sedan slutet av förra året. Ha kul med färgläggning.