Что такое LoRA (Low-Rank Adaptation)

Вы можете “дообучить” нейросеть на фотографиях человека, и она сможет генерировать изображения именно с этим человеком.

LoRA — это метод дообучения нейросетей, который делает процесс максимально экономичным. Вместо того чтобы изменять всю модель, LoRA добавляет небольшие вспомогательные "слои" (или матрицы), которые встраиваются в уже существующую модель.

Как обучить свою LoRA

1. Запустите Телеграм-бот UniversusGPT @universus_neuro_bot
2. Выберите команду /lora
3. Загрузите в бот от 5 до 10 фотографий:
1. На них должен быть только сам объект, минимум фонового шума или других объектов.
2. Чем размер и качество выше - тем лучше
3. Фотографии должны быть цветными, высококачественными, и ничего не должно закрывать лицо.

Обучение модели займет около 20 минут. После завершения вы получите уведомление в боте и сможете использовать вашу LoRA.

Как генерировать изображения со своей LoRA

После обучения модели:

1. Вызовите команду /imagine для генерации изображений
2. Нажмите на кнопку “Сменить модель” и выберите “LoRa 1”
3. Задайте промпт для генерации

Как обучить несколько LoRA

Вы всегда можете запустить повторно команду /lora и прислать новые изображения. Тогда у вас в меню выбора моделей появится LoRA 2.

Если вы запустите снова /lora и обучите еще одну модель, то появится LoRA 3 и т.д.

Как писать промпты

Указывайте ключевое слово на английском “TOK”. При генерации изображения с помощью LoRA нейросеть может “догадаться”, что в вашем промпте вы просите сгенерировать именно тот объект, на котором она обучилась. Но лучше явно указывайте TOK.

LoRA может рисовать изображения любого пола, поэтому лучше указывайте, какого пола “TOK”

Придерживайтесь правил создания промптов в статье: Генерация изображений

Примеры изображений LoRA

Женщина с лицом TOK на фоне Эйфелевой башни

Женщина TOK пьет кофе в кафе, рядом сидит Дарт Вейдер

TOK как Wonder Woman

headshot photo of TOK in mars, ultra realistic, ultra details, octane render, 32k raw

Портрет женщины TOK в лесу, god rays

Photo portrait of a young TOK woman with sparkling eyes, detailed skin, dark background

High fashion photography of a Russian woman, with an intricate updo, walking down a runway, full body framing, on a dramatic fashion runway, under spot light, shot from a low angle, on a RED digital cinema camera, with a (desaturated grunge filter:1.3), (in the style of Paolo Roversi:1.4)

(Large format:1.3) photo of a beautiful woman TOK, with her tousled hair, dressed in a white linen dress, walking along a beach, upper body, against a sea backdrop, under overcast lighting, eye level, shot on ARRI ALEXA 65 with ND filter, (in style of Tim Walker:1.2)

Женщина TOK с яркими волосами, очками, кожаной курткой

lifestyle-фотография молодой женщины TOK

Гламурная фотография TOK

Женщина TOK в фильме Матрица

TOK as a rich woman rocking round glasses and clothing from the future

Beauty shot photo of a beautiful young woman with face of TOK looking to camera, upper body framing, with diffused lighting, from a low angle, shot on a Hasselblad 500CM with a Voigtländer Nokton 50mm f1.1 lens, in the style of Richard Avedon, ultra-details, octane render, 4k raw Low Angle

Портрет TOK, бой на мечах с Дартом Вейдером

cinematic photo of TOK, sleek black suit, mirrored shades, fighting alongside Neo, green code rain, matrix lighting, ARRI ALEXA

photo of TOK, witcher armor, silver sword, monster hunting with Geralt, in cursed forest, magical fog light, RED camera

Портрет TOK, бой на мечах с Дартом Вейдером

Портрет TOK, джедайская броня, бой с Дартом Вейдером, пустыня.

photo of TOK age 30, silver undercut with shaved sides, cyberpunk visor glasses, black turtleneck, in neon lab, purple rim lighting, ARRI ALEXA

(noir photography:1.4) photo of serious man age 30, as detective, wearing fedora, close up, in smoky vintage office, dramatic chiaroscuro lighting, shot on Leica M3, Tri-X 400

(Documentary photography:1.3) photo of a rugged middle-aged man, with salt and pepper beard, deep wrinkles, detailed skin, looking thoughtfully at camera, head shot framing, in a dimly lit studio, with (chiaroscuro lighting:1.4), shot on Leica M3 with Tri-X 400 film, in style of Yousuf Karsh

futuristic photo of TOK, rocking round glasses and clothing from the future, immersed in a high-tech cyberpunk realm, neon-lit skyscrapers. Head shot in detailed 4k on 35mm film.

TOK portrait, Vibrant backgrounds, minimalism, vector, glitch art, white background

portrait of TOK as Doctor Strange, sharp cheekbones, levitating mandala circles, mystical cloak, in sanctum library, blue magical lighting, RED camera

photo of TOK as Iron Man, nanotech suit assembling, arc reactor glow, in high-tech workshop, hologram lighting, ARRI ALEXA

portrait of TOK as Ken from Barbie, bleached hair and tanned skin, blue striped suit, in vibrant pink beach setting, soft pastel lighting, shot on ARRI ALEXA

(abstract:1.4) photo of mysterious man, emerging from wall of liquid mercury, detailed skin texture, upper body, metallic background, edge lighting, ALEXA 65 with glitch effect

TOK репер, татуировки, мощные бицепсы, город

Мужчина TOK рок-звезда, гитара, сцена.

Мужчина TOK держит плакат с текстом "UNIVERSUS”

TOK, дредлокер кожаная куртка, пустыня закат золотые часы.

Мужчина 20 лет с лицом TOK, идет по улице

Мужчина 99 лет с лицом TOK, идет по улице

Шпаргалка по контролю углов съемки

Список ключевых фраз, которые можно добавлять в конце промпта, чтобы получить разные углы съемки:

Macro — Макро.

Close-up — Крупный план.

Wide Angle — Широкий угол

Diagonal Angle — Диагональный ракурс.

Aerial — Снимок с воздуха.

High Angle — Снимок сверху.

Low Angle — Снимок снизу.

Oblique Angle — Снимок под наклоном.

Еще вариант использования углов съемки

Шпаргалка по кадрированию

Укажите в промпте один из текстов ниже, чтобы получить разные варианты кадрирования сгенерированного изображения.

Шпаргалка по фокусному расстоянию

Также в промпте вы можете указать тип фотограмеры, которую вы хотите “имитировать” при генерации изображений. Вместе с типом можете указать фокусное расстояние: