A słowo obrazem się stało

KATEGORIA NOWA – MIEJSCE I – NAGRODA PUBLICZNOŚCI

Czy sztuczna inteligencja ma wyobraźnię? Generator oparty na modelach VQGAN + CLIP udowadnia, że jest to możliwe. To narzędzie typu tekst-do-obrazu, które komponuje ilustracje zainspirowane podpowiedziami tekstowymi. Celem Cezarego Kuika było stworzenie imitacji procesu wyobrażania sobie czegoś, co nie istnieje przez zastosowanie "wewnętrznego głosu". Dla AI tym głosem są wybrane słowa. Film jest interpretacją wyrazów ‘drzewo’ i ‘cukierki’, które przetworzył model VQGAN, a następnie model CLIP ocenił, czy powstałe obrazy są podobne do danych poznanych podczas trenowania. Cykl powtarza się kilka razy, a jego efektem jest obraz PNG oraz wideo przedstawiające krok po kroku proces kreacji. Modele działają ze sobą w ścisłej symbiozie. VQGAN ma talent malarski, ale nigdy nie wyszedł ze swojego pokoju. Potrafi jednak namalować coś, czego nie widział na podstawie opowieści CLIP o świecie zewnętrznym.

NEW CATEGORY – I PLACE – ONLINE VOTES

Does artificial intelligence have imagination? A generator based on VQGAN + CLIP models proves that it is possible. It is a text-to-image tool that composes illustrations inspired by text prompts. Cezary Kuik's goal was to create an imitation of the process of imagining something that does not exist by using an "inner voice". For the AI, this voice are selected words. The video is an interpretation of the words 'tree' and 'candy', which the VQGAN model processed, and then the CLIP model assessed whether the resulting images were similar to the data learned during training. The cycle repeats several times, resulting in a PNG image and a step-by-step video of the creation process. The models work in close symbiosis with each other. VQGAN has a talent for painting, but has never left his room. However, he is able to paint something he has not seen based on CLIP's stories about the outside world.

More from Digital Poland Foundation

Partnerzy Digital Festival 2023
Digital Poland Foundation
Robo Bou
Digital Poland Foundation
Anonim tak zwany Gall – Kronika Polska
Digital Poland Foundation
Rozumienie wiersza
Digital Poland Foundation