Turbocharge Stable Diffusion: создавайте и редактируйте изображения со скоростью света.

Одной из наиболее популярных и используемых моделей генеративного искусственного интеллекта, способной создавать фотореалистичные изображения, является Стабильная диффузия. Он отличается от других модели генерации изображений потому что это значительно снижает требования к обработке: он может работать на настольном компьютере с графическим процессором NVidia на базе 8 ГБ ОЗУ (VRAM).

Чтобы использовать Stable Diffusion, вы должны предоставить быстрый то есть описание изображения, сцены или объекта, которое вы хотите получить. Качество создаваемого изображения, в свою очередь, зависит от качества быстрый указан как вход.

Иль исходный код и вес моделей был опубликован публично; а еще лицензия Креативный ML OpenRAIL-M позволяет использовать, модифицировать и распространять модифицированное программное обеспечение. Разработчик, создающий производное программное обеспечение, начиная со Stable Diffusion, должен поделиться им с ним. лицензия и приложите копию оригинальной лицензии Stable Diffusion.

На этапе обучения Stable Diffusion использовался огромный набор эталонных изображений. Добавляя шум в ряде последующих шагов, вы можете заставить модель использовать процесс обратной диффузии воссоздать образ.

В генеративных моделях «скрытое пространство” — это абстракция более низкой размерности, чем фактическое пространство признаков изображения. Это способ представления абстрактных концепций или соответствующих функций в более компактном формате. Вот почему, благодаря использованию уменьшенного скрытого пространства, Stable Diffusion может сочетать отличные результаты с общим скромным воздействием на оборудование.

Stable Diffusion WebUI Forge: как ускорить Stable Diffusion

Сегодня существует большое количество интерфейсов для Stable Diffusion, разработанных независимыми разработчиками по всему миру. Среди наиболее перспективных, которые мы предлагаем вам попробовать, безусловно, есть Стабильное распространение WebUI Forge.

Это инновационный интерфейс, созданный тем же автором, что и Контрольная сеть что позволяет вам создавать изображения и обрабатывать их намного быстрее, чем более традиционные подходы, всегда используя модель стабильной диффузии.

Для пользователей Windows с системой на базе графический процессор NVIDIA с объемом оперативной памяти не менее 8 ГБ, советуем посетите эту страницу на GitHub затем нажмите на ссылку «Нажмите здесь, чтобы загрузить пакет в один клик«.

В конце скачать, что может занять некоторое время (сжатый архив весит около 1,7 ГБ), вы получаете файл в формате .7z, который можно открыть утилитой 7-Zip. Его содержимое необходимо извлечь в локальную папку, например c:\sd. Для работы мы в любом случае предлагаем использовать программу 7-Zip, поскольку на момент написания этой статьи производительность, гарантированная Windows 11 для управления файлами .7z, заведомо ниже.

Следующий шаг — дважды щелкнуть файл update.bat, чтобы обновить Stable Diffusion WebUI Forge до последней версии полностью автоматически.

Запустите интерфейс и используйте его из веб-браузера.

Чтобы начать использовать Stable Diffusion WebUI Forge, в любой момент вам необходимо дважды щелкнуть файл c:\sd\run.bat. Только впервые требуется дополнительный этап загрузки и установки некоторых дополнительных компонентов программного обеспечения.

Пакет Stable Diffusion WebUI Forge фактически устанавливает сервер Веб local, который отвечает на адрес локального хоста на указанном порту. Страница, которая появляется в веб-браузере, настроенном по умолчанию в используемой системе, позволяет вам подробно настроить тип изображения, которое вы хотите получить.

Чтобы провести первый тестпросто нажмите на вкладку txt2img (что означает «текст в изображение»), введите описание в поле Быстрый стараясь быть как можно более ясным и точным в описании того, что вы хотите создать. Кнопка Генерировать позволяет вам запросить генерация изображения начиная с предоставленного ввода.

Сравнение результатов скорости Stable Diffusion WebUI Forge и.оригинальная реализацияизображения можно получить, уменьшив время генерации до 75%, в зависимости от используемой конфигурации.

Добавить больше шаблонов очень просто

Использование других моделей в сочетании со стабильной диффузией может быть очень полезным. Одной только стабильной диффузии может быть недостаточно для определенных задач или для получения сложных изображений.

Такой проект, как Stable Diffusion WebUI Forge, позволяет расширить возможности создания изображений и обеспечить большую гибкость вывода. Например, использование специализированных моделей «текст-изображение» в сочетании со Stable Diffusion позволяет генерировать фотореалистичные изображения начиная с текстовых описаний, чрезвычайно расширяя творческие возможности.

SDXL, также опубликованный Стабильность ИИэто может быть, например скачал с этой страницы затем сохраняется в папке c:\sd\webui\models\Stable-diffusion. Прямо там, где есть текстовый файл с именем Поместите контрольные точки стабильной диффузии здесь.txt.

Перезапуск Stable Diffusion WebUI Forge, щелкнув раскрывающееся меню. Контрольная точка стабильной диффузиивы можете выбрать дополнительную модель (в данном случае SDXL 1.0), а затем нажать кнопку справа, которая позволит запросить ее фактическую загрузку.

То, что было невозможно в оригинальной реализации, благодаря Stable Diffusion WebUI Forge также становится возможным использовать дополнительно. Контрольная сетьструктура нейронной сети, предназначенная для управления шаблонами распространения путем добавления дополнительных условий.

ControlNet соединяется со Stable Diffusion, предоставляя механизм влияния и контролировать процесс генерации изображений. Интегрируя ControlNet со Stable Diffusion, пользователи могут вводить дополнительные или конкретные условия для более точного и индивидуального создания изображений. Ознакомьтесь с имеющимися практическими примерами в этих параграфах.

Вступительное изображение предоставлено: iStock.com – БлэкДжек3D