Как создать видео с ИИ бесплатно: руководство по Wan2.1 для начинающих и продвинутых

Перевел гайд для телеграм канала @creativeprompting – подписывайтесь

Wan2.1 – это лучшая бесплатная модель видео с искусственным интеллектом с открытым исходным кодом, которую вы можете запустить локально с помощью ComfyUI.

lummi.ai

Два набора рабочих процесса

Все ссылки на 100% бесплатны и общедоступны (без платной подписки)

Для запуска потребуется от 16 ГБ видеопамяти, а лучше от 24 ГБ. Можно на своем компьютере, либо через облачные сервисы (Runpod, immers.cloud и др.)

1. Native Wan2.1

Первый набор использует нативные узлы ComfyUI, которые могут быть проще запустить, если вы никогда не создавали видео в ComfyUI. Это работает для генерации текста в видео и изображения в видео. Единственные пользовательские узлы связаны с добавлением интерполяции видеокадров и предустановок качества.

Нативный Wan2.1 ComfyUI – бесплатная ссылка без подписки

2. Advanced Wan2.1

Второй набор использует узлы оболочки kijai wan, позволяющие использовать дополнительные функции. Он работает для генерации «текста в видео», «изображения в видео» и «видео в видео». Дополнительные функции помимо нативных рабочих процессов включают длинный контекст (более длинные видео), sage attention (~ на 50% быстрее), teacache (~ на 20% быстрее) и многое другое. Рекомендуется, если вы уже создавали видео с помощью Hunyuan или LTX, так как вы можете быть более знакомы с дополнительными параметрами.

Advanced Wan2.1 – бесплатная ссылка без подписки

Примечание: Sage Attention, Teacache и Triton требуют дополнительной установки для правильной работы. Вот простое руководство по установке, чтобы получить повышение скорости в ComfyUI: Простое руководство: установите Sage Attention, TeaCache и Triton

Каждый рабочий процесс имеет цветовую кодировку для удобства навигации:

🟥 Загрузка моделей: настройка необходимых компонентов модели
🟨 Ввод: загрузите текст, изображение или видео
🟦 Настройки: настройте параметры генерации видео
🟩 Output (Вывод): сохранение и экспорт результатов

Требования к рабочим процессам

💻 Native Wan2.1:

1. Диффузионные модель WAN2.1
Ссылка
Путь: ComfyUI/models/diffusion_models

2. Модель CLIP Vision
Ссылка
Путь: ComfyUI/models/clip_vision

3. Модель текстового энкодера
Ссылка
Путь: ComfyUI/models/text_encoders

4. Модель VAE
Ссылка
Путь: ComfyUI/models/vae

💻 Advanced Wan2.1:

Все следующие (диффузионная модель, VAE, Clip Vision, текстовый кодер) доступны по одной ссылке

1. WAN2.1 Диффузионные модели
Путь: ComfyUI/models/diffusion_models

2. Модель CLIP Vision
Путь: ComfyUI/models/clip_vision

3. Модель текстового энкодера
Путь: ComfyUI/models/text_encoders

4. Модель VAE
Путь: ComfyUI/models/vae

Видео-учебник для двух рабочих процессов Wan2.1

Black Mixture – 100% FREE WAN 2.1 AI Video Generator │ Create Stunning Videos! (Image/Text to Video)

Надеюсь, вам понравятся более чистые и бесплатные рабочие процессы ComfyUI!

Больше интересного про ИИ в @creativeprompting – подписывайтесь