May 29, 2023

Нейро-фотошоп

К свежей бета-версии прикрутили «генеративною заливку» — собственную  адобовскую нейросеть Firefly, тренированную на базе Adobe Stock (с лицензией, подразумевающей отсутствие претензий со стороны авторов исходных фото, стилей, концептов; и результаты не будут на одно лицо с работами от Миджорни и Дали).

Бету дают погонять всем желающим. Триал — семь дней.

Принцип тот же, что и в браузерных рисовалках — картинка генерируется по текстовому описанию, и как родная встраивается в изображение.

В заданный участок (указанный с помощью инструмента «выделение»).

Все фотошоповские фишки на месте — всегда можно откатить, повторить, поменять сгенерированные слои местами, применить к ним кучу эффектов,  фильтров, трансформаций.

Рендерится сразу три варианта, достаточно быстро (двадцать секунд на полноразмерном фото из камеры)

С когтями и клыками те же траблы, что у всех

Качество — на уровне оппонентов: Леонардо (диффузия), Кандинский (Дали), MS bing.
Midjourney опережает... пока, но он сильно платный (а количество генераций ограничено, месячный тариф уходит за несколько дней, при том годных результатов не более чем один из десяти)

Думается Адоб с Микрософтом догонят.

В галерее работы весьма приличные и задания подписаны — никаких сложносочиненных «промтов» с указанием характеристик камеры, температуры вспышек и целой подборки мастеров, на стиль которых нужно ориентироваться, обычные описания, простым языком:

Кстати, креативные шрифты делать довольно просто (миджорни и прочие этого не умеют в принципе) — достаточно задать выделенную область в форме нужных букв:

Навскидку:

Промт из одного слова — мяч, во всю ширину исходной картинки (той, что в начале поста)

Щенок с мячом вписался  в пейзажное фото:

с тенями сложно, попытка есть, но неуверенная -

— в три приема накреативила:
тарелка, лесенка, бедуин на ослике собран из двух вариаций.
Перетащить объекты куда угодно — легко, это ж фотошоп.

Вспомогательные нейрофильтры в ФШ есть уже давно;
можно было поставить плагины со СтайблДифьюжен (но прежде установить саму программу на компьютер - весьма заморочный процесс).

Встроенная нейросеть — самое свежее обновление.

Можно задать генерацию и без исходной фото-подложки, непосредственно в новом документе ctrl N -> ctrl A (выделить всё), вписываем промт — всё как в онлайновых нейросетях, еще и количество попыток не ограничено, и подправить огрехи можно не сходя с места (знаменитые «фотошоповские» фишки — убрать-добавить-растянуть-заменить в одно касание)

Но фон отрисуется в любом случае, даже если начинать генерацию на прозрачном слое.

Новый инструмент «выделить объект» на основе ИИ справляется на ура,

удалим фон и на месте удаленного закажем сгенерировать что-нибудь поинтереснее —

Небольшой просчет с краем травы на ФШ не сложно исправить вручную