GauGAN2 is een hulpmiddel voor het maken van door AI gegenereerde fotorealistische landschappen. Met GauGAN2, ontwikkeld door NVIDIA en beschikbaar als webdemo, kun je de afbeelding zo vaak aanpassen als je wilt, met een mix van schetsen en tekstinvoer om het AI-systeem te begeleiden.
Met een beetje tijd kun je het beeld verfijnen door details toe te voegen of weg te laten totdat het precies goed is. De afbeeldingen die het kan produceren, zien er vaak realistisch uit, maar één verkeerde streek en de afbeeldingen kunnen op fantasiekunstwerken gaan lijken in plaats van op echte landschappen.
Dit is wat u moet weten over GauGAN2 van NVIDIA.
Wat is GauGAN2 van NVIDIA?
GauGAN2 is een AI-kunstgenerator met een uniek bewerkingsvenster. Het is ontwikkeld door de onderzoeksafdeling van NVIDIA, hetzelfde bedrijf dat GPU's maakt, en kan door iedereen worden gebruikt via een webdemo.
Het is in zekere zin vergelijkbaar met met behulp van Dall-E 2, een AI-tekst-naar-afbeelding-generator, waar je zinnen als "zonsondergang boven de woestijn" kunt typen en het AI-systeem een afbeelding maakt op basis van die beschrijving. Dat is echter niet alles wat u kunt doen met GauGAN2; er zijn verschillende manieren waarop u de afbeelding kunt blijven bewerken.
Een optie is om de segmentatiekaart te gebruiken om de omtrek van objecten in de afbeelding te zien. Met deze informatie kun je bijvoorbeeld de vorm van een bergketen veranderen door de grenzen ervan opnieuw te tekenen of elementen helemaal te wissen.
U kunt ook het potlood gebruiken om bijvoorbeeld een cirkel te tekenen, die kan worden weergegeven als een zon. Hetzelfde geldt voor het tekenen van een paar pieken op de achtergrond, die een bergketen kunnen worden, vooral als je dit combineert met tekstinvoer die de scène beschrijft.
Nadat je GauGAN2 van NVIDIA hebt geprobeerd, wil je het misschien leren hoe u de Canvas-app van NVIDIA gebruikt, die is gebouwd op dezelfde technologie. Het is een gratis app gericht op artiesten en creatievelingen, maar het werkt alleen met een van NVIDIA's RTX GPU's.
Hoe werkt GauGAN2?
Achter de schermen is GauGAN2 gebouwd met behulp van generatieve vijandige netwerken (GAN). In feite is de naam een toneelstuk over de Franse postimpressionistische kunstenaar Paul Gauguin en GAN's.
De reden waarom het afbeeldingen kan genereren die er overtuigend uitzien als echte landschappen, is dat het tijdens de trainingsperiode 10 miljoen landschapsafbeeldingen van hoge kwaliteit heeft gekregen. De rekenkracht die nodig was om het model te trainen, was afkomstig van de NVIDIA Selene-supercomputer, een van de krachtigste supercomputers ter wereld.
GAN's worden in veel toepassingen gebruikt, waaronder tal van AI tekst-naar-kunst generatoren. Het belangrijkste verschil met GauGAN2 is de mogelijkheid om de door AI gegenereerde afbeelding in een speciale editor te wijzigen, met behulp van tools zoals pen, vulling en penseel om wijzigingen aan te brengen.
De interface is minimaal, maar niet bepaald gebruiksvriendelijk, en de retro-look doet je misschien denken aan de begindagen van Microsoft-verf, in tegenstelling tot geavanceerde software. Als de bedieningselementen in eerste instantie niet voor de hand lijken te liggen, kun je een korte zelfstudie uitvoeren of een video-walkthrough bekijken; klik gewoon op de knoppen in de rechterbovenhoek van de pagina.
Welke kunst kan GauGAN2 produceren?
Het doel van GauGAN2 is om fotorealistische afbeeldingen te maken van landschappen zoals bergen, meren en stranden.
Er is een bibliotheek met labels waaruit u kunt kiezen tijdens het schetsen en waarmee u de schetsinvoer verder kunt taggen, zodat de AI-generator een afbeelding kan weergeven die geschikt is. Deze omvatten zaken als mist, heuvel, steen, sneeuw en water, om er maar een paar te noemen.
Het is echter niet moeilijk om dingen fout te laten gaan, en je maakt net zo goed absurde en surrealistische beelden. Neem gewoon het potlood en teken een paar vreemde vormen, en GauGAN zal iets uitspugen dat meer op een experimenteel kunstwerk lijkt dan op iets herkenbaars.
Het invoeren van onzinzinnen in het tekstvak kan ook vreemde uitvoer opleveren. Soms hoeft u niet eens zo ver te gaan; gewoon vragen om een berglandschap produceerde wat lijkt op een rare combinatie van sneeuw en vacht.
In beide gevallen kunnen sommige artiesten een dergelijke tool nuttig vinden. Het kan worden gebruikt om het proces van storyboarding te versnellen of als een snelle manier om concept art voor een game of video te maken.
Hoewel deze demo nog lang niet een gepolijst product is dat klaar is voor gebruik, vertoont het wel een aantal interessante mogelijkheden.
GauGAN2: een hybride AI-kunstgenerator
GauGAN2 sluit zich aan bij de verzameling AI-beeldgeneratoren die tekst in afbeeldingen omzetten. In tegenstelling tot andere applicaties kun je de afbeelding echter in fasen bewerken, met behulp van schetsen en tekst als invoer, en de AI-afbeelding verfijnen zoals je wilt.
Als GauGAN2 op de juiste manier wordt gebruikt, kan het behoorlijk overtuigende fotorealistische afbeeldingen van de natuur produceren, wat handig kan zijn voor artiesten die een storyboard moeten vullen of snel concept art moeten maken. Het is echter maar al te gemakkelijk dat dingen bizar worden, en een paar verdwaalde pennenstreken kunnen tot interessante resultaten leiden.