Hugging Face | Алиса глазами нейросети

Нейросеть Stable Diffusion: картинка на заставку.

Делимся своими результатами, спрашиваем и советуем.

Эта программа — дело рук разработчиков из компании stability.ai , которая занимается поддержкой и развитием проектов, связанных с искусственным интеллектом.

Stable Diffusion — новый инструмент с открытым исходным кодом, который, по словам создателей, «позволит миллиардам людей создавать потрясающие произведения искусства за секунды».

И правда, судя по примерам, представленным в анонсе программы stability.ai/blog/stable-diffusion-announcement , картинки получаются яркими и красочными — не в пример Midjourney, которая часто генерирует странные и мрачные изображения: vk.com/wall-740325_181652

Стоит сказать, что Stable Diffusion — не совершенно новая, написанная с нуля нейросеть. В её основе — лучшие подобные программы, в том числе Dall-E 2 от Open AI и Imagen от Google Brain. Однако эта нейросеть использует модель так называемой скрытой диффузии вместо стандартной диффузионной модели, которая лежит в основе работы большинства современных нейросетей, генерирующих изображения по текстовому описанию. Стандартные модели работают с отдельными пикселями, из-за чего создание с их помощью картинки в хорошем качестве занимает очень много времени и вычислительных ресурсов. Модель скрытой диффузии оптимизирует процесс генерации изображений за счёт предварительно обученных подпрограмм — это позволяет как сэкономить вычислительные мощности, так и добиться высокого разрешения картинки за короткое время.

Разработчики Stable Diffusion придерживаются принципов открытости, поэтому выложили исходный код нейросети на GitHub github.com/CompVis/stable-diffusion . Вы можете скачать файлы программы и попробовать запустить её на своём устройстве, однако учтите, что просто для того, чтобы нейросеть работала, ей нужно не менее 6,9 Гб видеопамяти.

Если ваш компьютер не такой мощный — можно воспользоваться одним из двух онлайн-сервисов:

Hugging Face huggingface.co/spaces/stabilityai/stable-diffusion — тут можно генерировать неограниченное количество изображений без регистрации.

DreamStudio beta.dreamstudio.ai/dream — здесь понадобится регистрация, но после неё можно также создавать сколь угодно много картинок.

Мы решили для теста сгенерировать изображения на Hugging Face по двум запросам:

- American McGee's ALICE

- Alice: Madness Returns

В расширенных настройках (Advanced settings) на шкале значений (Guidance Scale) установили параметр "7".

Результат перед вами!

Итог:

Stable Diffusion, несмотря на многочисленные похвалы, пока ещё довольно слабовата (по крайней мере при работе с лицами).

Использован материал: texterra.ru/blog/kak-rabotaet-stable-diffusion-neyroset-risuyushchaya-kartiny.html

Источник: huggingface.co

Комментарии: