Neurofox.pro. Об эмбендингах
Доброго времени суток, с вами Nanashi Eltnum. Сегодня я хочу поделиться с вами своим мнением об эмбендигах.
В этой статье я не буду рассказывать о том, какие есть эмбендинги на нашем сервисе и за что они отвечают. На эти вопросы уже есть ответы в статье от Mellicent Malkavian.
Я же хочу рассказать о практическом применении данных моделей и какие у них имеются плюсы и минусы.
Эмбеддинг (Embedding), он же Текстовая Инверсия (textual inversion) — это метод захвата новых понятий из небольшого количества примеров изображений.
Является небольшим файлом, содержащим в себе токены и веса, которые встраиваются в подсказку при активации.
Например это может быть стиль какого-либо художника, негатив (как у нас на сайте), или персонаж.
То есть, если говорить грубо, эмбендинг в большинстве своём содержат слова и закрепленные за ними примеры обучения, которых может и не быть в используемой вами модели.
Отсюда и возникает первая важная особенность. Эмбендинг может перерисовать ваш арт до неузнаваемости.
Если эмбендинг заточен на стиль, то это может стать плюсом такой особенности. Но если вы хотите сделать небольшие правки, а не перерисовывать изображение, но эмбендинг даже на низких настройках слишком сильный, то советую подыскать другой файл или использовать стандартные теги.
Другая же особенность кроется в разной работе эмбендингов на разных моделях. Эмбендинги ВСЕГДА ЗАТОЧЕНЫ под определенные модели, потому что они обучаются на них.
Поэтому не всегда эмбендинги, обученные на аниме моделях, работают с реалистичными, и наоборот. Так же эмбендинги, обученные на моделях, базирующихся на версии SD 1.5 в теории не будут работать на 2.0 и выше.
Но даже из этих правил есть исключения, тут уже зависит от качества самого эмбендига и того, как его обучали.
Вот простой пример сравнение более новой модели YesMix, и старой Anithing 3.0 с разными негативами.
Всегда читайте описание эмбендинга и для чего он предназначен, для каких моделей он подходит. Это очень важно.
Третье. Эмбендинги могут значительно сократить ваш промт. На самом деле это весьма важный параметр в виду специфики работы самой Stable Diffusion. Я скажу лишь то, что чем меньше ваша подсказка, тем может оказаться более лучше результат, если мы говорим об артефактах.
НО результат с небольшим промтом менее контролируемый, и тут все будет зависеть от удачного Seed и других обстоятельств. А учитывая, что эмбендинги уже содержат данные об обучении, то вы, опять же, меньше контролируете этот процесс.
В каких же случаях стоит использовать эмбендинги? Тут уже зависит от ваших потребностей, а так же нравится ли вам результат, которого можно достигнуть с эмбендингом или нет. Поможет ли он улучшить вашу генерацию на выбранной модели, или же вы можете обойтись ручным прописыванием тегов.
Пример на модели Elysium Anime 3.0
Так что мой главный совет — экспериментируйте и находите свои идеальные сочетания.