Elias legt het onderzoek achter de koppen uit in gewone taal.
Geïnspireerd door dit verhaal? Maak van het idee in seconden je eigen AI-kunst — gratis beginnen, geen kaart nodig.
Gratis aan de slagKies een companion en ontdek wat die van dit verhaal vindt
Amazon rolt een nieuwe functie uit voor Alexa voor Shopping waarmee klanten items kunnen kopen door de AI-assistent te sms'en, hetzij door gewenste producten te beschrijven, hetzij door een foto van het item te sturen. Deze update stroomlijnt het winkelproces, waardoor makers snel fysieke items kunnen vinden en verwerven door eenvoudigweg op een meer natuurlijke, multimodale manier met AI te communiceren, vergelijkbaar met hoe ze een afbeeldingsgenerator zouden aansturen.
Deze verbetering betekent dat gebruikers, in plaats van door de website of app van Amazon te navigeren, een sms-bericht kunnen sturen naar Alexa voor Shopping met details over wat ze nodig hebben, zoals „koop een nieuwe Wacom Intuos Pro Medium tablet” of „vind een sta-bureau vergelijkbaar met deze” met een bijgevoegde foto. Alexa verwerkt vervolgens deze invoer, doorzoekt Amazons uitgebreide aanbiedingen en stuurt relevante productaanbevelingen terug via sms. Het doel is om winkelen net zo intuïtief te maken als een gesprek, waarbij traditionele zoekinterfaces worden omzeild.
De mogelijkheid om zowel tekst als afbeeldingen als invoer te gebruiken, bekend als multimodale prompting, weerspiegelt direct de manier waarop veel AI-kunstmakers interactie hebben met tools zoals Charmloops afbeeldingsgenerator. Net zoals een gebruiker een referentieafbeelding kan uploaden en stilistische wijzigingen kan beschrijven om een nieuw kunstwerk te genereren, kunnen ze nu Alexa een foto laten zien van een specifiek item – zeg, een bepaald merk pigment of een uniek beeldhouwwerktuig – en de AI vragen het te vinden. Dit verschuift de interactie van trefwoordgebaseerd zoeken naar een meer visuele en beschrijvende dialoog, wat potentieel tijd bespaart bij het zoeken naar specifieke, moeilijk te beschrijven items.
Alexa voor Shopping stelt gebruikers nu in staat om productbeschrijvingen of afbeeldingen naar de AI-assistent te sms'en.
Afbeelding: Hugging Face Blog
Voor makers kan dit betekenen dat de aanschaf van fysieke goederen die nodig zijn voor hun ambacht wordt gestroomlijnd. Als een digitale kunstenaar bijvoorbeeld een specifiek type monitorstandaard ziet in de studio van een collega, kan hij er een foto van maken en deze naar Alexa voor Shopping sturen om een passend of vergelijkbaar product te vinden. Deze aanpak vermindert de frictie die vaak gepaard gaat met het vertalen van een visueel idee naar zoektermen die nauwkeurige resultaten opleveren. Het systeem is ontworpen om context te begrijpen uit zowel de afbeelding als eventuele begeleidende tekst, met als doel nauwkeurigere aanbevelingen te geven dan tekst-alleen zoekopdrachten zouden toestaan.
Hoewel deze functie voornamelijk gericht is op consumentenwinkelen, heeft de onderliggende technologie voor multimodale invoer bredere implicaties voor hoe we omgaan met AI in verschillende toepassingen. Het gemak van het combineren van visuele en tekstuele aanwijzingen zou het ontwerp van toekomstige AI-tools kunnen beïnvloeden, waardoor ze beter aanpasbaar worden aan natuurlijke menselijke communicatiestijlen. Voor makers betekent dit dat AI-tools nog meer geïntegreerd kunnen worden in dagelijkse workflows, van het inkopen van materialen tot het genereren van content, door simpelweg visuele voorbeelden en natuurlijke taalinstructies te interpreteren. De voortdurende ontwikkeling van robuuste multimodale AI-modellen, zoals die gebruikt worden bij het genereren van interactieve 3D virtuele werelden, blijft de mogelijkheden voor AI-gestuurde assistentie in creatieve velden uitbreiden. NVIDIA's Cosmos 3-release biedt bijvoorbeeld tools voor het creëren van complexe digitale omgevingen uit diverse invoer.
Deze update van Amazon benadrukt een trend naar meer intuïtieve, conversatiegerichte AI-interfaces die rijkere vormen van invoer begrijpen en daarop reageren. Naarmate AI-modellen beter worden in het interpreteren van complexe visuele en tekstuele prompts, kunnen makers steeds geavanceerdere en naadloze interacties verwachten over een breder scala aan platforms en diensten, van het genereren van unieke afbeeldingen op platforms zoals Charmloop tot het beheren van praktische taken zoals het kopen van benodigdheden. Om te ontdekken hoe multimodale prompting werkt in creatieve generatie, kunt u onze gidsen sectie bezoeken.