Adobe heeft een openbare bèta gelanceerd voor zijn Firefly AI Assistant verandert later deze maand complexe creatieve workflows in eenvoudige chatinterfaces in apps zoals Photoshop, Premiere, Illustrator of Lightroom. Je typt in wat je wilt, en AI verbindt de punten achter de schermen om het te laten gebeuren. Omdat het een multimodale interface is, kan deze indien nodig nauwkeurig worden aangepast via contextuele bedieningspanelen, naast op tekst gebaseerde opdrachten. Dit is de eerste stap in het realiseren van de creatieve toepassingen van de toekomst, waarbij de complexiteit van de gebruikersinterface wordt geëlimineerd en de robuuste controle behouden blijft.
Als het eindproduct werkt zoals de demo, zal de nieuwe Firefly AI Assistant de manier waarop mensen omgaan met ontwerpsoftware fundamenteel veranderen, door de sleutels van een professioneel creatief kasteel te geven aan iedereen die bereid is te betalen, in gewoon Engels te schrijven en schuifregelaars te verplaatsen die contextueel verschijnen om aspecten van hun creaties te verfijnen wanneer dat nodig is. In plaats van nieuwkomers te dwingen een doolhof van menu’s, geneste paletten en pop-upvensters uit het hoofd te leren, laat de assistent hen complexe resultaten bereiken door simpelweg te vragen.
Tegelijkertijd is deze nieuwe assistent de eerste opstap naar een nieuw soort automatisering voor professionals. Dit geeft veteranen een snelle manier om het saaie werk te vermijden waarvan ze al weten hoe het moet. “We hebben een volledig spectrum van mensen die nieuw zijn in onze franchise en die niet de volledige kracht van Photoshop kennen en die geweldige bewerkingen willen. Ze kunnen er ook hun voordeel mee doen en gewoon met de assistent praten”, vertelde Adobe vice-president van AI en innovatie Alexandru Costin me in een interview. “Aan de andere kant kunnen creatieve professionals die onze tools volledig begrijpen, deze middelen ook daadwerkelijk gebruiken en ze in onze tools blijven bewerken.”
De tool is voortgekomen uit Project Moonlight, dat Adobe vorig jaar op de MAX-conferentie introduceerde en in een privébèta testte. Het kernidee kwam rechtstreeks van werkende professionals die op zoek waren naar een moderne upgrade naar Photoshop Actions, een decennia oude functie waarmee gebruikers muisklikken kunnen opnemen en opnieuw afspelen. Acties werken alleen voor vaste, repetitieve taken, zoals het aanpassen van de tint en verzadiging van duizenden afbeeldingen met behulp van vaste waarden. Maar gebruikers willen een slimmer type automatiseringsagent die zich kan aanpassen aan wat de agent in elke afbeelding, video of illustratie ziet. Adobe besloot iets te maken dat verder gaat dan de basisbewerking, door dingen op de media te veranderen op basis van de context en inhoud van de afbeelding of video zelf, en zelfs nieuwe afbeeldingen, mockups en uiteindelijke kandidaten voor illustraties te creëren.
Nieuwe en slimme ‘Photoshop-actie’
“Bij Adobe MAX ontmoette ik een grote groep professionals om hen te vragen naar agenten”, vertelde Costin me, waarbij hij de brancheterm gebruikte voor een AI die namens jou actief taken in meerdere stappen uitvoert in verschillende software. “Ze zeiden: ‘Kijk, ik wil dat jullie me een knop geven zoals een Photoshop-actie waarmee ik in de agent kan opnemen wat ik aan het doen ben en de agent het vervolgens voor me kan laten afspelen, zodat ik in principe kan beslissen… dat deze automatisering de dingen doet zoals ik dat wil.'”
Hoewel de nieuwe Firefly AI Assistant nog steeds twee beperkingen heeft die het geen directe vervanging van Actions maken (daarover later meer), heeft het zeker het potentieel om een enorme tijdbesparing te betekenen voor elke professional die met een team AI-bots wil werken.
Om dergelijke automatisering mogelijk te maken, heeft Adobe Creative Skills ontwikkeld. AI leert hoe bepaalde makers van inhoud in de loop van de tijd graag werken, leert hun favoriete tools en visuele stijlen, en kan die kennis toepassen bij het omgaan met uw bestanden. “Je kunt je specifieke smaak of aanpak als creatieve professional omschrijven en dat vervolgens ‘herspelen’ met behulp van het Firefly AI-systeem, zodat je tijd bespaart en delen van je werk kunt automatiseren, zodat je meer tijd hebt om te creëren”, aldus Costin.
De huidige bèta biedt om te beginnen een standaardset standaardvaardigheden, hoewel het volledig bewerkbaar en deelbaar maken van deze vaardigheden in de volgende versie zal komen (een van de beperkingen die het onderscheidt van Photoshop Actions, die volledig deelbaar zijn).
In plaats van te vertrouwen op rigide sjablonen, fungeert het systeem als een autonome digitale art director. Het evalueert actief het ruwe materiaal in uw canvas op de juiste context voordat het actie onderneemt, in plaats van eenvoudigweg blinde opdrachten uit te voeren op basis van bestandsmetagegevens. Deze software kaapt niet alleen uw cursor; hij neemt voortdurend contact met u op om duidelijk te maken wat u precies wilt bereiken, zodat u de drijvende kracht blijft achter het uiteindelijke kunstwerk.
Deze integratie gaat verder dan de eigen engine van Adobe en breidt het platform uit naar toonaangevende AI-modellen van derden, waaronder Claude van Anthropic. Het maakt ook verbinding met beoordelingsplatforms zoals Frame.io. Als een klant aantekeningen achterlaat over een project, kan het bureau de feedback verwerken en zijn eigen revisies uitvoeren, waarbij de software wordt gekozen die het beste in staat is om de klus te klaren.
Pathways voor adaptieve interfaces met meerdere modellen
De assistent introduceert ook Precision Flow, waarmee de vervelende taak van het schilderen van pixel-perfecte maskers wordt vervangen door semantische bewerking. In plaats van met ruwe pixels om te gaan, herkent de AI daadwerkelijke fysieke objecten in het frame, wetende dat een koffiekopje een kopje is en de bonen ernaast koffiebonen. “Precision Flow geeft je de mogelijkheid om generatieve AI te gebruiken om assets niet op pixelniveau, maar op de semantische kant te bewerken”, aldus Costin. “Net als in dit geval weet het systeem dat het een koffiefoto met koffiebonen is, dus creëert het een dynamische semantische schuifregelaar waarmee je de afbeelding semantisch kunt wijzigen zonder dat je opnieuw hoeft te vragen.”
Deze semantische mogelijkheid genereert automatisch nieuwe bedieningspanelen voor gedetailleerde controle. In het geval van een koffiekopje met koffiebonen die op vloeibare koffie spatten, ziet de gebruiker een paneel met schuifregelaars zoals “Koffiebonen” en “Splashes” die de gebruiker kan verplaatsen om de precieze hoeveelheid koffiebonen of spatten te verhogen of te verlagen. Dit is een stap in de goede richting voor toekomstige toepassingen. Natuurlijke taal is een geweldig uitgangspunt, maar taal is inherent interpreteerbaar, wat leidt tot onnauwkeurigheden en misverstanden. Er zit geen onnauwkeurigheid in de schuifregelaar waardoor het aantal koffiebonen in de afbeelding interactief en in realtime kan toenemen.
Omdat de assistent rechtstreeks is verbonden met de Creative Cloud-kern, worden standaardtools zoals tint en verzadiging rechtstreeks doorgegeven aan de hostapplicatie. Het resultaat is geen dood afbeeldingsbestand; het produceert native PSD-documenten, het standaardbestandsformaat van Adobe dat individuele bewerkingen op afzonderlijke, aanpasbare lagen stapelt.
“Het is eigenlijk een Photoshop-besturingselement waarmee we, zodra je de bewerkingen achter de schermen uitvoert, daadwerkelijk een PSD kunnen maken en die PSD in Photoshop kunnen laden”, aldus Costin. “Met behulp van echte Photoshop-functies pas je volledige aanpassingslagen toe in Photoshop.”
De huidige bètaversie stuit echter nog steeds op een muur als het gaat om geavanceerde semantische bewerking. Terwijl reguliere bedieningspanelen, zoals HUE en Verzadiging, bewerkbare lagen produceren in Photoshop, worden die specifieke wijzigingen nog niet op Photoshop toegepast als live schuifregelaars die kunnen worden gemanipuleerd als u Precision Flow gebruikt om objecten in de assistent te wijzigen. “We hebben Precision Flow nog niet in Photoshop geïntegreerd. Je kunt je voorstellen dat dit ook naar Photoshop zal komen, maar ik denk niet dat we dat al hebben aangekondigd”, aldus Costin. “Als je deze bewerkingen momenteel uitvoert, is de afbeelding die aan Photoshop wordt doorgegeven een rasterafbeelding.”
Dat betekent dat semantische veranderingen verschijnen als een platte, niet-bewerkbare laag pixels. Voor beginners zullen deze technische obstakels geen probleem vormen, zolang het uiteindelijke beeld er maar goed uitziet. Voor de high-end professionals die Adobe voor het gerecht probeert te brengen, denk ik dat dit eerder een tijdelijk ongemak is. Het is geweldig om het te hebben, maar ik kan ook zonder werken.
Het is duidelijk dat Firefly AI Assistant een enorme stap voorwaarts kan zijn in het laten werken van software voor de gebruiker, in plaats van andersom, waarbij je de AI opdracht geeft om te doen wat jij wilt, waarbij de AI jouw werkstijl leert en alleen de juiste bedieningselementen weergeeft wanneer dat nodig is.
