Нейросеть Kling для оживления картинок и фотографий
Нейросеть Kling позволяет оживить любые фотографии и изображения с использованием текстового описания и/или финального кадра, также вы можете отправлять картинки для анимации без промта — в этом случае нейросеть Kling самостоятельно придумает необходимые движения в кадре.
Все ли так хорошо работает в Kling, как говорят?
В этой статье мы разберемся, чего Kling умеет, а что дается нейросети с трудом.
Недавно мы делали обзор возможностей нейросети для анимации изображений Luma, тогда мы говорили, что сфера оживления картинок еще только начинает развиваться и в скором времени нас ждет новый виток. Так и получилось, ведь Kling условно можно назвать "Luma 2.0", хотя она не имеет никакого отношения к разработчикам Luma.
Kling умеет делать почти все, что и Luma:
- анимация (оживление) изображений по первому кадру без промта (текстового описания)
- анимация изображений с текстовым описанием (промтом) и начальным кадром
- оживление картинок с начальным и конечным кадром
- анимация картинок с промтом, начальным и финальным кадрами
- продление ранее сгенерированных изображений (каждый цикл добавляет по 5 секунд анимации)
Если коротко, то Kling делает все эти вещи на порядок лучше, чем Luma, но есть исключения. Нейросеть KLING хорошо понимает то, что вы пишете в промтах (она гораздо реже их игнорирует).
❌ Разумеется, в Kling запрещено делать анимацию контента категории 18+.
Кстати, анимации в Клинг стоят дешевле, чем в Luma.
Пример анимации картинки из Kling без промта
Как подать задание в Kling на оживление картинки без промта
- откройте в мессенджере Телеграм @yes_ai_bot
- в нижнем меню нажмите на "Нейросеть: ... [изменить]"
- отправьте боту картинку или фотографию, которую хотите анимировать
- в появившемся меню выберите "👑 Kling"
- нажмите кнопку "🎞️ Анимировать изображение" и дождитесь результата
Процесс генерации видео занимает всего несколько минут. Также вы можете отправить боту текстовое описание того, что должно происходить в видео, для этого нажмите кнопку "Prompt" перед отправкой задания. Писать текст промта можно на любом языке, так как Yes Ai автоматически сделает перевод.
Как продлить видео, созданное в нейросети Kling
Если ранее вы уже делали генерации в Kling через Yes Ai Bot, то в меню будет отображена кнопка "⏩️ Продлить видео", нажмите ее.
Система предложит ввести промт, в котором требуется подробно описать то, что должно происходить в кадре в течение следующих 5 секунд.
С помощью функции продления вы можете создавать целые видеоклипы с определенным сюжетом, так как добавлять по 5 секунд к ранее созданным генерациям можно неоднократно.
Вы в любой момент можете продлить видео с того момента, с которого нужно, например, если одна из генераций вам не понравилась, то найдите в диалоге с ботом предыдущее сообщение с видео от Kling и продлите его с другим промтом.
Как оживить картинку в Kling с использованием финального кадра
При подаче задания на анимацию вы отправляете боту картинку, которая будет являться первым кадром, но еще вы можете отправить и финальный кадр — в этом случае нейросеть Kling попытается создать видеоряд, который сделает плавный переход между этими изображениями.
Стоит отметить, что Клинг не очень хорошо справляется с этой задачей. На момент написания этой статьи нейросеть часто выдавала резкий переход между стартовым и финальным кадрами без плавной бесшовной анимации. Однако с этой задачей неплохо справляется ранее упомянутая нейросеть Luma.
Если вам нужна функция перехода между стартовым и финальным фреймами через Luma, то прочтите эту инструкцию: https://forum.yesai.su/topic/187-kak-neyroset-luma-ozhivlyaet-foto-podrobnyy-gayd/
Если вы все же хотите поэкспериментировать именно в Kling, то вот порядок действий:
- как обычно, откройте @yes_ai_bot, нажимаете кнопку нижнего меню "Yes Video" > "Ani-Image" и отправьте боту картинку, которую нужно анимировать
- в появившемся меню нажмите "Финальный кадр"
Обратите внимание, что можно указать текстовое описание, на которое нейросеть Kling будет опираться при создании анимации — это снизит вероятность получения некачественного видео при использовании финального кадра. Чтобы указать промт, нужно перед отправкой задания нажать кнопку "Prompt", после чего бот попросит ввести текстовое описание того, что должно происходить в кадре.
Пример продления анимации видео по текстовому описанию
Как получать более предсказуемые анимации картинок?
Как вы могли заметить, в этой статье мы не описываем метод генерации изображений в Kling по промту без использования стартового кадра, причина очень проста — нейросеть Kling в первую очередь "заточена" под создание видео, а не на генерацию картинок.
Мы рекомендуем создавать стартовые изображения через нейросети, которые специализируются именно на этой задаче: Midjourney, Stable Diffusion или SDXL, Dalle и пр.
В Yes Ai Bot есть доступ ко всем перечисленным нейросетям, поэтому вы можете производить полный цикл генераций и анимаций не выходя из бота.
Если вы сгенерировали картинку в @yes_ai_bot и она вас удовлетворила по качеству, то в меню под ней нажмите кнопку "🎞️ Анимировать изображение" — это действие откроет меню выбора нейросети для оживления изображений. Выберите из списка "👑 Kling" и следуйте инструкциям, которые были описаны в этой статье.
Если вы хотите увидеть больше примеров генераций видео в Kling, то добро пожаловать на наш форум, где пользователи делятся своими работами из разных нейросетей. Прямая ссылка на каталог генераций Kling: https://t.me/yes_ai_chat/76168
ПРИМЕЧАНИЕ: В Клинге пока нет возможности делать зацикленные бесшовные видео (LOOP), но, если она появится, мы обновим эту статью.
Можно с уверенностью сказать, что Kling является более профессиональным инструментом, чем аналоги (Stable Video Diffusion и Luma), но в скором времени нас ждет запуск Sora от Open Ai. Мы обязательно расскажем о ней сразу после открытия доступа. Подписывайтесь на наш канал, чтобы не пропустить новости.
Желаем успехов в освоении нейросетей.
Если вы являетесь владельцем сервиса по нейросетям или разработчиком, то можете внедрить Kling в свой проект, для этого мы разработали API.
Подробнее об использовании API Kling от Yes Ai рассказано в документации: https://yesai.su/ru/docs/kling