Tips voor goede prompts

Met al die keuzemogelijkheden van AI’s kan het kiezen van de juiste prompt best complex worden. Globaal leveren ze wel dezelfde resultaten op, maar het zijn de details die verschillen. Ook zelf had ik niet de tijd om ze allemaal uit te proberen. Ik zocht naar bronnen voor de beste prompts, en ook die bronnen hadden weer bronnen... dus in dit artikel een paar bronnen die tips geven voor het maken van de beste prompts.

Doordat de bronnen allemaal Engelstalig zijn, zou je de indruk krijgen dat dat de enig mogelijke taal is, maar dat blijkt onjuist. Zie hier het resultaat voor: "Uitgebreid ontbijt, Hagelslag op volkorenbrood, pindakaas, jam, glas melk, [stijlkenmerken in het Engels]" door Stable Diffusion v1.5. Helaas weet de AI niet wat hagelslag is, maar voor de rest komt het aardig in de buurt.

Ik heb nog niet geprobeerd om de stijlkenmerken in het Nederlands te schrijven. Doordat iedereen van elkaar leert op dit terrein, en de meesten in het Engels communiceren, houd ook ik het hier op Engelse termen.

Op naar de meest uitgebreide handleiding voor het schrijven van prompts.

Globaal is de structuur van je tekst-prompt als volgt:

[onderwerp]  [in omgeving]  [medium]  [kunststroming]  [in stijl van]  [POV]  [licht]  [kleur]  [kwaliteitswoorden]

Niet alles hoeft ingevuld te worden. [medium] kan ook helemaal vooraan worden geplaatst als de uitvoering hiervan het belangrijkst is. Ook voor de andere aspecten geldt dat ze verder naar voren moeten worden geplaatst als de impact te laag is naar je zin.

Voorbeelden:

• onderwerp = mens, dier, landschap, etc. die iets doet, of iets aan heeft, of iets is (blij, verdrietig, romantisch), bijvoorbeeld 'blije panda eet bamboe'
• in omgeving = in zijn kamer, op de berg, in het bos, indoor, outdoor, underwater, space
• medium = foto, schilderij, krijttekening, aquarel, klei, gehaakt, origami, of andere keuze, maar wees specifiek
• kunststroming = impressionism, film noir, baroque, post-apocalyptic, minimalism, modern art, ink painting, movie poster, naïve art, pointillism, pop art, splash art, storybook illustration, street art, surrealism, Ukiyo-e ... en dit is maar een kleine greep uit de mogelijkheden 
• in stijl van : by Vermeer, Van Gogh, Arthur Rackham, Hayao Miyazaki , Alphonse Mucha, Albrecht Dürer. ... deze lijst is in principe oneindig maar niet iedere artiest is even goed bekend; ook goed werken studio namen: Studio Ghibli, Pixar, Disney.
• POV (point of view): front, overhead, side, close-up, satellite, macro, telephoto, fish-eye lens, polaroid, long exposure, Gopro, drone photo, selfie
• licht: soft, ambient, ring light, neon, at night, sun, cinematic, sun rays, sundown, sunrise
• kleur: vibrant, dark, pastel, muted, monochrome, tetradic, triadic, warm colors, cool colors, en de kleuren zelf natuurlijk
• kwaliteitswoorden: zoals genoemd in de paragraaf hiervoor.

Experimenteer

Alles beïnvloedt alles. Kies je artiesten met een gedetailleerde stijl, dan is het niet meer zo nodig om te vragen om hyperdetailed, of intricately detailed. Matcht je onderwerp niet met de artiesten, dan valt een AI als Stable Diffusion terug op een fotorealistische stijl. Het is zinvol hier uitgebreid mee te experimenteren. De stijlwoorden die bij het ene onderwerp in de prompt goed werken, kunnen bij een ander onderwerp dus heel anders uitpakken.

Let op dat bij het veranderen van de verhoudingen van je afbeelding (vierkant naar landscape bv) alles kan veranderen, zelfs bij gelijke prompt en seed. De AI zijn getraind op een standaardgrootte van 512x512 pixels, vierkant dus. Wel krijg je bij landscape- of portrait-formaten gelijkwaardige kleuren en compositie.

Houdt altijd in het achterhoofd dat de AI getraind is met 2000 jaar aan kunst. Het kan erg omslachtig zijn om een modern onderwerp correct te laten weergeven in een heel oud medium. Sketch geeft bijvoorbeeld een tekening in grijstinten, en zal je onderwerp modern weergeven - denk bij 'auto' aan 'Tesla'; painting geeft een kleurig beeld, maar een ouderwetsere weergave van je onderwerp - 'auto' wordt sneller een jaren '60 model.

Op Aiwiki.ai wordt de wereld van de huidige AI uitgediept en uitgelegd. Relevant hier is https://aiwiki.ai/wiki/Prompt, waar wordt uitgelegd hoe prompts werken, vergelijkbaar met de uitleg hierboven. De website geeft daarnaast een lijst aan prompt-generators voor als je een beetje hulp of inspiratie nodig hebt.

• Midjourney Prompt Generator: onofficiële Midjourney prompt builder, op het HuggingFace platform. Het vult je onderwerp aan met extra details en stuurcommando's zoals --ar 3:2 (aspect ratio).
• Phraser: assisteert in het maken van sterke prompts voor Midjourney and DALL-E. Ook als je niet inlogt (en niet betaalt), kun je kijken naar voorbeeld plaatjes en de gebruikte teksten, om zo inspiratie op te doen.
• MidJourney Prompt Helper: text-to-image prompt builder ontwikkeld for Midjourney and DALL-E. Het helpt je stap voor stap door het opbouwen van de prompt heen door je op plaatjes te laten klikken van de gewenste stijlen. Als je de stuurcommando's voor Midjourney eruit haalt, wordt het ook bruikbaar voor Stable Diffusion.
• Drawing Prompt Generator: helpt tekenaars aan ideeën, ook als ze niet met AI werken. Dit is alleen gericht op het onderwerp van je prompt.
• Promptomania Builder: prompt builder voor verschillende AI art generators. Het werkt voor de meeste CLIP and VQCAN-based modellen. Ook hier klik je op plaatjes om je stijl te specificeren.
• MidJourney Random Commands Generator: onofficiële Midjourney prompt generator voor complexe outputs. Deze helpt vooral bij het schrijven van de stuurcommando's die je Midjourney kunt meegeven.
• Lexica.art: Lexica biedt haar eigen Stable Diffusion AI aan, maar daarnaast kun je ook zoeken in de reeds gemaakte afbeeldingen. Per plaatje zie je de prompt, zodat je hier veel kan opsteken.

Via verschillende kleinere bronnen kwam ik nog andere prompt generators tegen. Hier de interessantste.

• CLIP Interrogator en CLIP interrogator2 staan beide op het HuggingFace platform. Hier upload je een plaatje en de tool probeert erachter te komen wat een goede prompt zou zijn om nieuwe afbeeldingen te maken zoals deze.
• OpenAI ChatGPT Deze AI Chatbot kan ook worden gebruikt om prompts te ontwerpen voor AI. Gebruik "geef de bijvoeglijke naamwoorden van iets ...", "beschrijf in detail iets ..." om enkele trefwoorden te krijgen. Specificeer vooral voor welke AI je dit wil gebruiken.
• Random AI Prompt Generator geeft je random prompts, voornamelijk gericht op Midjourney. 
• Clip front werkt door de tekst om te zetten in een CLIP-insluiting en vervolgens die insluiting te gebruiken om meer plaatjes en/of keywords te tonen.
• ArtHub.ai heeft een prompt library waar je per stijl inspiratie kunt opdoen.
• PromptBase Prompt Marketplace voor DALL·E, GPT-3, Midjourney, Stable Diffusion. Hier kun je prompts kopen, maar erg zinvol is dit niet, omdat de uitvoering van je prompt verandert als het onderwerp teveel verandert.