Stable Diffusion WebUI Forge: Шаг 10. Текстовая инверсия
Текстовая инверсия (Textual Inversion) – это метод, который позволяет добавлять новые объекты или стили к имеющейся у нас модели. Файлы текстовой инверсии с объектами обычно имеют небольшой размер с расширением .pt или .safetensors. По сути, эти файлы являются дополнительными модулями для Stable Diffusion WebUI Forge и используемой нами модели FLUX.1 (например, flux1-dev-bnb-nf4-v2.safetensors), которые отображаются на закладке Txt2img / Textual Inversion.
Stable Diffusion WebUI Forge: Шаг 9. Модель LoRA
LoRA (Low-Rank Adaptation) – это вспомогательная модель, основное назначение которой заключается в ускорении обработки запросов (prompt) от пользователя и вычислений при генерации тех или иных специальных объектов на изображении.Другими словами, когда мы с вами используем модель FLUХ.1, а нам надо детально прорисовать на нашем изображении руки или фигуру человека, мы используем дополнительно вспомогательную модель LoRA, которая выполняет только одну определенную ей задачу.
Stable Diffusion WebUI Forge: Шаг 8. Txt2img. Скрытые возможности Hires.fix
Как мы с вами усвоили из прошлого урока, основная задача функции Hires.fix – не увеличение разрешения изображения, а улучшение качества мелких деталей финального изображения без изменения композиции.Важно отметить, Hires.fix работает более эффективно, если с улучшением деталей вы одновременно увеличиваете разрешение изображения.Но у Hires.fix есть и некоторые скрытые возможности, которые могут помочь изменить какую-то важную деталь нашего исходного изображения.Давайте узнаем, как нам это сделать.Для этого:· Переходим на закладку «Settings».· Находим слева в списке раздел «UI alternatives».
Stable Diffusion WebUI Forge: Шаг 7. Txt2img. Настройка параметров генерации изображения
На предыдущем уроке мы с вами создали, сохранили и улучшили наше первое изображение из запроса «smiling cyberpunk cat in purple bowler hat with blue cyber eye sitting in cafe drinking coffee, photorealistic, perfect composition, cinematic shot, intricate details, hyper detail, cool color palette, muted colors, very detailed, sharp focus». При этом мы с вами не рассматривали функциональное назначение и не использовали другие параметры генерации изображения, которые находятся слева на закладке Txt2img/Generation пользовательского интерфейса, как показано на рисунке ниже:
Вступительное слово ректора МГТУ им. Н. Э. Баумана к книге «Генеративный искусственный интеллект #Forge&flux»
Коллеги!На Хабр уже опубликована полностью моя книга "Генеративный искусственный интеллект #Forge&flux. Инструкция по установке и настройке". За пять основных уроков мы с вами научились устанавливать систему Stable Diffusion WebUI Forge и модель FLUX, а также создали первое изображение. Теперь нам предстоит овладеть Stable Diffusion WebUI Forge профессионально.В преддверии публикации на Хабр своей книги "Генеративный искусственный интеллект #Forge&flux. Учебное пособие для школьников старших классов и студентов первых курсов вузов
Stable Diffusion WebUI Forge: Шаг 5. На пути к успеху
Мы уже с вами познакомились с возможностью создания первого тестового изображения с помощью запроса (prompt): «Astronaut in a jungle, cold color palette, muted colors, very detailed, sharp focus».Для этого мы добавили наш запрос в окно ввода запроса (prompt) и нажали кнопку создания изображения «Generate», как это показано на рисунке ниже:
Stable Diffusion WebUI Forge: Шаг 4. Первый запуск и тест моделей FLUX.1
Казалось бы, нам нужно жать мышкой на файл run.bat, но, увы, это не так.Давайте возьмем для себя за первое правило всегда запускать перед работой файл update.bat. Да, именно он позволит нам всегда использовать самую последнюю версию нашей сборки Stable Diffusion WebUI Forge.
Stable Diffusion WebUI Forge: Шаг 3. Дополнительная настройка компьютера
Перед тем как запускать программу Stable Diffusion WebUI Forge, по рекомендации разработчика нам необходимо подготовить свой компьютер к тяжелой работе и сделать некоторые настройки, а именно изменить размер файла подкачки системы.Для этого наводим курсор мышки на иконку «Мой компьютер», нажимаем правой кнопкой мыши и выбираем «Свойства».В Windows 10 откроется следующее окно:
Stable Diffusion WebUI Forge: Шаг 2. Установка модели FLUX.1
После установки системы Stable Diffusion WebUI Forge, которая обеспечит нам удобный интерфейс и работу с большим числом различных функций и параметров, нам теперь необходимо скачать файл нужной нам версии модели FLUX.1, которая бы быстро и качественно работала на нашем компьютере.Напомню вам, что есть три основные версии модели, созданные разработчиками Black Forest Lab:FLUX.1 – самая мощная версия реализация коммерческой модели, доступная к использованию только через API у партнеров компании Black Forest Lab или в индивидуальном порядке.
Stable Diffusion WebUI Forge: Шаг 1. Установка
Для того чтобы определиться с выбором сборки (или дистрибутива), нам необходимо с вами получить нужную информацию от нашей операционной системы, чтобы узнать версию CUDA (Compute Unified Device Architecture).