September 11, 2023

Подборка новых нейросетей, которые будут полезны Манимейкерам

Сегодня в статье вас ждет обзор на 10 самых полезных нейросетей, которые подойдут манимейкерам из любой сферы. Среди них есть программы для создания видео и фото, удаления вотермарок и даже генерации полноценных диалогов. Все они пригодятся при создании рекламных кампаний. Например, чтобы сгенерировать креативы или посмотреть, насколько хорошо сделан лендинг.

GEN-2

GEN-2 — нейросеть, которая работает с видео и фото. До недавнего времени она была способна убирать фон на видео и отдельные его части. Теперь же GEN-2 добавили еще несколько новых возможностей: генерация видео и фото по текстовому запросу, а еще создание нового видео из исходного.

Пока лишь несколько нейронок могут создавать видео из текстового промпта, и почти все они делают это не очень хорошо. Поэтому мы протестируем две новые функции и посмотрим, как GEN-2 справляется с ними.

Для начала работы нужно зарегистрироваться, затем переходим во вкладку Text/Image to Video и вводим промпт, в котором описываем нужную сцену. Чем подробнее, тем лучше:

Также в дополнение к тексту можно загрузить фото-референс справа. Мы попросили создать видео человека, который радуется выигрышу в казино, и вот, что получили:

Создание видео заняло пару минут, и в целом результат неплохой, но далекий от идеала.

Теперь попробуем сделать видео без промпта, но по фото-референсу. Для этого мы создали картинку в Midjourney с игроком в казино:

Вот такой результат мы получили спустя 2 минуты обработки:

Результат получился лучше. Из этого можно сделать вывод, что такие короткие четырехсекундные видео лучше делать из готовых изображений. Другими словами «оживлять» их.

В целом, GEN-2 работает хорошо, по сравнению с нейронками из категории Text-to-video и Image-to-video. Также большим плюсом является то, что GEN-2 можно использовать бесплатно и онлайн.

Dreamix: Video Editing Tool

Dreamix — нейронка от Google, которая генерирует видео из исходного изображения или видеофрагмента. Она может менять действующий объект в кадре, при этом не меняя сути движений.

Также в Dreamix есть функционал для замены или добавления отдельных объектов в видео.

Презентация на официальном сайте показывает интересные результаты, но протестировать эту нейросеть пока нельзя. Dreamix является внутренней разработкой Google, и неизвестно, появится ли в открытом доступе.

WatermarkRemover.io

Нейронка для удаления вотермарок с фотографий WatermarkRemover.io пригодится представителям любых профессий. Мы решили сразу проверить ее на прочность и взяли один из самых сложных вотермарок, которые трудно удалить без следа:

Сервис не требует регистрации, а обработка исходного изображения занимает около минуты. Вот такой результат мы получили:

Остался совсем небольшой след от сетки слева и в верхнем правом углу, но в целом это хороший результат.

Попробуем второе такое же изображение, но с большой надписью посередине:

Вот что вышло:

Полупрозрачная вотермарк-сетка ушла, но надпись осталась. Дело не в том, что нейронка сработала плохо, так как технически надпись — это не вотермарк.

WatermarkRemover.io — поезный инструмент, который пригодится каждому в работе. К тому же, за него не надо платить, а пользоваться можно без ограничений.

SoundStorm

SoundStorm — нейронка от Google для генерации полноценного человеческого диалога из текста. Для создания такого диалога нужно две вещи: текстовый промпт речи и образец голоса. Далее нейронка разбивает звуковые волны на нейронные аудиокодеки и синтезирует суперреалистичный диалог высокого качества.

SoundStorm способен синтезировать 30 секунд звука за полсекунды. Проблема, с которой столкнулись разработчики, заключалась в том, что нейросеть могли бы использовать злоумышленники и телефонные мошенники.

Вот еще один классный пример работы SoundStorm, где сначала проигрывается звуковой промпт, а затем синтезированный диалог:

Пока нейросеть не планируют выводить в открытый доступ, так как ей нужно продолжать обучение.

StyleDrop

И снова крутая нейросеть от Google — StyleDrop, которая считывает дизайн и генерирует изображения с идеальной точностью. Причем это касается как детских рисунков, так и картин великих художников.

Такой инструмент позволит дизайнерам и владельцам брендов решать любые визуальные задачи на основе набросков от руки и подгонять их под желаемое видение.

Также можно создавать уникальные шрифты на основе стиля выбранного изображения.

Также это работает и для создания логотипов, эмблем и аватарок:

Для общего пользования StyleDrop пока недоступна, но будем надеяться, что это случится в будущем.

Attention Insight

Эта программа на базе нейросети будет полезна всем, кто занимается созданием сайтов или владельцам бизнеса. Она анализирует дизайн сайта и составляет тепловую карту внимания. Обученный алгоритм понимает, куда падает взгляд посетителя страницы и отмечает их в своем отчете. Такой анализ может выявить проблемы дизайна и помочь их исправить.

Давайте посмотрим на анализ сайта рекламной сети

Внутри все интуитивно понятно, и есть всплывающие подсказки:

Дальше выбираем формат ресурса, и в нашем случае это Desktop-версия:

Затем загружаем скриншот сайта:

Вот так выглядит главная страница HilltopAds:

А вот анализ распределения пользовательского внимания и тепловая карта, которую составила Attention Insight. Справа можно увидеть диапазон четкости:

Тепловая карта показывает, что первое, на что обращает внимание посетитель страницы — надпись посередине. Затем взгляд спускается на две кнопки, а вот на само название рекламной сети в верхнем левом углу внимание почти не попадает. Так же, как и на разделы в хедере. Диапазон четкости сайта составил 69% — это в пределах оптимального значения:

Подводя итог: Attention Insight работает отлично и выдает релевантные результаты, на которые можно опираться. Семидневный пробный период позволит проверить личный сайт или протестировать функционал перед покупкой подписки. Всего их 4 варианта для разных целей:

Pika Labs

PikaLabs — это нейронка для генерации видео по текстовому промпту, которая недавно стала доступна всем желающим в Discord. Чтобы воспользоваться ей, нужно перейти по этой ссылке и нажать на любую из вкладок #generated:

Затем мы вводим промпт командой /create и в появившемся поле вводим текст:

Мы снова ввели тот же самый промпт про парня, который выиграл в казино. Спустя пару минут получаем результат:

Если не понравится работа нейронки, генерацию можно повторить. Для этого нужно нажать сюда:

Вот второй вариант из того же самого промпта:

Пользоваться PikaLabs можно бесплатно и без ограничений. Видео получаются хорошими для сгенерированных, и, возможно, если улучшить качество промпта, они будут получаться лучше.

Mixer от Artbreeder

Artbreeder — это программа на базе нейросети, в которой есть много полезных функций для работы с изображениями. Например, Mixer, Splicer, Collager и Outpainter. Mixer появился недавно, и поэтому мы протестируем именно его.

Mixer незаметно смешивает два изображения между собой и создает из них новое, сохраняя особенности каждого. Попробуем смешать несколько изображений и посмотреть, что из этого выйдет.

После авторизации нажимаем Create, а затем Mixer:

После этого выбираем изображения и нажимаем на кнопку Generate:

Мы взяли две картинки, совместили их, и вот результат:

Теперь совместим Шрека с аниме-тян и поглядим, что получится:

Первый и третий вариант классные. Обратите внимание, как перемешались стили двух изображений.

Напоследок мы попробовали совместить еще две картинки, и вот что вышло:

Также можно двигать ползунки сбоку от картинок, чтобы менять степень интенсивности смешивания и добавлять дополнительные изображения:

Пользоваться функциями Artbreeder можно бесплатно, нужна лишь регистрация. В целом Mixer заслуживает внимания и будет полезен манимейкерам для создания креативов и релевантных картинок.

AnimateDiff

AnimateDiff — нейронка, которая анимирует любое изображение. Другими словами, «оживляет» его с помощью диффузионной модели с civitai. Вот несколько примеров того, как нейронка делает GIF из обычного изображения:

Чтобы попробовать AnimateDiff, нужно скачать код

здесь, но требуется 60 Гб видеопамяти. Также можно сделать это онлайн через Colab вот здесь.

Vmake

Vmake — нейронка для улучшения качества видео и избавления от дефектов. Она полностью бесплатная, а воспользоваться ей можно онлайн вот здесь. Программы для улучшения качества фотографий часто плохо справляются с этой работой, поэтому мы проверим, насколько Vmake сможет улучшить плохое видео.

Главная страница очень простая и понятная. Для начала работы кликаем на кнопку загрузки файла:

Мы ухудшили самое первое сгенерированное видео и попробовали улучшить его в этой нейронке:

Видео и правда стало лучше, но теперь оно граничит с мультяшностью из-за сильного сглаживания и очерченных границ. На обработку видео ушло около 30 секунд. В целом, сервис достойный и пригодится всем, кто работает с видео.

Заключение

Мы протестировали 6 нейронок из 10, и большинство из них будут полезны при работе с фото, видео, дизайном и рекламой.

На этом у меня все! Если вам понравился материал, то распространите его среди друзей или в социальных сетях. Успехов ❤️

🔥 Подборка лучших способов заработка для новичков 🔥

• ​Получаем до 10 000 рублей от Альфа-банка

Как стать криптоинфлюенсером и зарабатывать от 2000$ в месяц

Кейс: Как заработать 8000$ на автопилоте и нутре

Простой способ заработка для новичков на товарке и Avito

10 актуальных способов заработка на ChatGPT

Зарабатываем от 100.000 рублей в месяц на фроде партнерских программ

Делаем от 100.000 рублей в месяц на своем бизнесе

Как заработать 7000$ с полного нуля на Youtube