Демо мини–рализации синтеза изображений по словесному описанию DALL·E

https://ovalhalla.ru/my/dune/Dune_all.jpg

Очевидно, что OpenAI, разработчик передовой нейросетевой архитектуры GPT–3, уже обросшей разного рода достоверности слухами, всё больше превращается в типичную корпорацию из киберпанка будущего. Ну или Microsoft, купившая у них технологию. Открытого доступа для демонстрации возможностей, как это ещё не давно было принято, больше нет; по разным причинам, включая "опасность такого уровня ИИ в открытом доступе". Если без машинофобии, то как минимум сеть способна заполонить Интернет правдоподобно сгенерированными текстами, что "загрязнит" этот самый обширный и пока довольно чистый массив текстов, произведённых людьми. И дальнейшее обучение уже будет "не чистым".

Вот и про очередной их продукт на базе GPT–3 — генератор изображений по их словесному описанию DALL·E, приходится пока только читать статьи, с удивительными картинками — загляните, например, в "Капибара в поле на рассвете в разных художественных стилях". Но однако энтузиасты тоже не дремлют, статьи читают, "маленькие", в 1000 раз менее мощные, реализации тестируют. Их результаты, конечно, гораздо скромнее, и эффект "ну ничего себе", он видимо начинается где–то миллиардов с 50 параметров сети (у старшего GPT–3 их 175 млрд.)

И вот появилась реализация малого да удалого варианта DALL·E, которую можно попробовать в деле. С именно генерацией изображений у неё не очень (это самая ресурсозатратная часть), но то, что она "понимает" запросы, это очень сильно бросается в глаза. Особенно хорошо получается, если описывать общеизвестные вещи, детально и простыми словами. Ну или по крайней мере не самыми экзотическими. Например "Frodo throws The Ring into Orodruin" вряд ли даст хороший результат, но вот уже "Frodo throws The Ring into the fire of Mount Doom" будет гораздо лучше. Помните так же, что её "старший брат" прославился способностью выдавать правдоподобный результат на "Улитка сделанная из арфы", например.

На КПДВ Флот Атрейдесов прибывает на планету Дюна.

https://huggingface.co/spaces/flax–community/dalle–mini

Написал ksotar на science.d3.ru / комментировать