Flux погружение

Flux - это семейство диффузионных моделей от Black forest labs.

Гайд составлен для телеграм канала НейроChill о нейросетях для фриланса

Простые в использовании версии для одного файла, которые вы можете легко использовать в ComfyUI, смотрите Ниже: версия контрольной точки FP8

ComfyUI это один из самых гибких юзер интерфейсов для работы с диффузионными моделями.(Как установить и что это такое тут)

Файлы для загрузки для обычной версии
Если у вас еще нет t5xxl_fp16.safetensors или clip_l.safetensors в вашем каталоге ComfyUI/models/clip /, вы можете найти их по: этой ссылке. Вместо этого вы можете использовать t5xxl_fp8_e4m3fn.safetensors для уменьшения использования памяти, но если у вас более 32 ГБ оперативной памяти, рекомендуется использовать fp16.

VAE можно найти здесь, и он должен находиться в вашей папке ComfyUI /models /vae /.

Советы, если у вас заканчивается память:

Используйте версию fp8 с одним файлом, которую вы можете найти, просмотрев ниже

Вы можете установить для параметра weight_dtype в узле “Модель распределения нагрузки” значение fp8, что снизит использование памяти вдвое, но может немного снизить качество. Вы также можете загрузить пример.

Модель Flux Dev можно найти здесь. Поместите файл flux1-dev.safetensors в папку: ComfyUI/models/diffusion_models/ .

Затем вы можете загрузить или перетащить следующее изображение в ComfyUI, чтобы получить рабочий процесс:

Как перетащить?!?!??!

Flux Schnell - это дистиллированная 4-ступенчатая модель.

Вы можете найти модели Flux Schnell здесь. Этот файл должен находиться в вашей папке: ComfyUI/models /unet/.

Затем вы можете загрузить или перетащить следующее изображение в ComfyUI, чтобы получить рабочий процесс:

Гайд составлен для телеграм канала НейроChill о нейросетях для фриланса

Вы можете найти простую в использовании контрольную точку для dev Flux здесь, которую нужно поместить в свой каталог: ComfyUI / models / checkpoint /.

Этот файл может быть загружен с помощью обычного узла “Load Checkpoint”. Убедитесь, что вы установили CFG равным 1.0 при его использовании.

Обратите внимание, что fp8 немного ухудшает качество, поэтому, если у вас есть ресурсы, рекомендуется официальная полная 16-разрядная версия.

Затем вы можете загрузить или перетащить следующее изображение в ComfyUI, чтобы получить рабочий процесс:

Для Flux schnell вы можете получить контрольную точку здесь, которую вы можете поместить в свой каталог: ComfyUI /models / checkpoint / .

Затем вы можете загрузить или перетащить следующее изображение в ComfyUI, чтобы получить рабочий процесс:

Для выполнения следующих примеров может потребоваться наличие некоторых обычных файлов flux, ссылки на которые вы можете найти в верхней части этой страницы.

Гайд составлен для телеграм канала НейроChill о нейросетях для фриланса

Вот пример, который вы можете перетащить в ComfyUI для рисования, напоминаю о том, что вы можете щелкнуть изображения правой кнопкой мыши в узле "Загрузить изображение” и “Открыть в MaskEditor”.

Вот пример для outpainting:

Модель Redux - это модель, которая может использоваться для запроса flux dev или flux schnell с одним или несколькими изображениями.

Загрузите модель sigclip_vision_patch14_384.safetensors и поместите ее в папку ComfyUI /models / clip_vision, а также загрузите flux1-redux-dev.safetensors и поместите ее в папку ComfyUI /models /style_models.

Затем вы можете загрузить или перетащить следующее изображение в ComfyUI, чтобы получить рабочий процесс:

Они опубликованы в двух версиях, в формате полной модели: flux1-canny-dev.safetensors и flux1-depth-dev.safetensors, поместите их в папку ComfyUI/models/diffusion_models/

Вот пример для полной модели canny:

Они также публикуются в формате lora, который может быть применен к модели flux dev: flux1-canny-dev-lora.safetensors и flux1-depth-dev-lora.safetensors, поместите их в папку ComfyUI/models/loras /

Вот пример для определения глубины lora.

XLab и InstantX + Shakker выпустили Controlnets для Flux. Вы можете найти файл модели InstantX Canny здесь (переименуйте в instantx_flux_canny.safetensors для примера ниже), Depth controlnet здесь и Union Controlnet здесь.

С Controlnet XLab можно ознакомиться здесь.

Поместите эти файлы в каталог ComfyUI/models/controlnet.

Попробуйте пример рабочего процесса Canny Controlnet, перетащив это изображение в ComfyUI.

Если вам нужен пример входного изображения для canny, используйте этот. Поместите его в ComfyUI / input.

Гайд составлен для телеграм канала НейроChill о нейросетях для фриланса