Как создать персонажа в нейросети

Midjourney v4: как создать персонажа с разными выражениями лица

Да, это снова статья про нейросети, но подождите перелистывать, этого нет на просторах русскоязычного гугла (по крайне мере на первой странице).

Если кратко, то мои проекты связаны с разработкой обучающих программ под различные бизнес запросы (например, масштабирование), подробнее про проекты тут. На одном из таких проектов, появилась следующая задача:

Нужно создать персонажа с разными выражениями лица

Ну конечно, сразу же идем в одну из доступных нейросетей, к счастью, их сейчас развелось много. И после первого промта понимаем, что изображение каждый раз генерируются случайным образом. В целом, ничего удивительного, но изначально эта умная мысль мою голову не посетила.

Окей, вспоминаем про такую штуку, как сид, если очень простым языком — это случайное число используемое при генерации изображения. Указав его в новом промте можно получить практически идентичное изображение.

К сожалению, сид не помог, изображение действительно получается идентичным, но при добавлении эмоций оно либо не меняется совсем, либо становится совершенно другим.

Думаем дальше, и тут вспоминаем про то, что можно отправить ссылку на уже сгенерированное изображение и прописать обновленный промт. Но результат получился, мягко говоря, неожиданный …

Ответа на вопрос «почему так вышло?» я не нашел, хотя узнать было бы интересно.

И вот, прошло уже несколько часов за экспериментами, а все что было найдено никак не решало задачу. Когда оказываешься в подобной ситуации, есть только один выход:

Чего не хватило моему промту?

Как я уже сказал, на просторах русскоязычных интеренетов, ответа не нашлось. Поэтому пришлось обращаться к коллегам за бугром и этот канал на YT помог понять чего не хватало моему промту. От получения приемлемо-стабильного результата меня отделяли два важных момента:

1. Нужно использовать более одного изображения. Так модель собирает вашего персонажа из нескольких +- похожих изображений за счет чего повышается стабильность выдаваемого результата.
2. Нужно использовать тот же промт, который использовался для создания изначального изображения.

Сейчас перейдем к примерам и все станет понятно.

Инструкция создания персонажа

Процесс состоит из двух шагов:

1. Шаг 1. Генерация 2-3 изображений персонажа, которые +- похожи друг на друга, это можно назвать датасетом.
2. Шаг 2. Использование полученных изображений для генерации приемлемо-стабильного персонажа с различными выражениями лица.

Шаг 1. Подготовка датасета изображений

Для генерации первого изображения датасета, я использовал следующий промт:

photo of a regular 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed

Для нашего проекта мы выбрали изображение №2. Теперь нужно сгенерировать еще хотя бы одно изображение с +- похожим лицом. Для этого, необходимо нажать кнопку повторной генерации «��» и так до тех пор, пока не получится желаемое количество похожих изображений.

Суммарно, я планировал использовать два изображения, поэтому мне осталось найти лишь еще одно. Это удалось сделать с третьей попытки. Ниже результаты.

Шаг 2. Генерируем персонажа с разными выражениями лица

Вот и настала самая интересная часть.

Сначала генерируем стабилизованное изображение персонажа. Добавляем в начало того же промта ссылки на выбранные изображения. Промт будет выглядеть примерно так:

https://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of a regular 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed

Для простоты восприятия основную часть ссылки заменил на /. / . Самое главное, чтобы начало и конец ссылки были как в примере. И сразу после ссылок, через пробел, идет тот же самый промт. Результат ниже.

Да, мне повезло чуть меньше, и сами персонажи отличаются друг от друга, но после генерации всех изображений с эмоциями станет понятно, кого из низ выбрать.

Проделываем тоже самое но уже с эмоциями:

• Улыбка. Добавляем к основному промту smile on his face
  https://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of a regular 28 year old guy with smile on his face, short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed
• Счастливый. Добавляем к основному промту an extremely happy facehttps://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of an extremely happy 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed
• Расстроенный. Добавляем к основному промту an extremely upset, almost crying
  facehttps://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of an extremely upset, almost crying 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed
• Злой. Добавляем к основному промту an extremely angry facehttps://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of an extremely angry 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed
• Испуганный. Добавляем к основному промту an extremely horrified facehttps://cdn.discordapp.com/. /*.png https://cdn.discordapp.com/. /*.png photo of an extremely horrified 28 year old guy with short haircut, red hair colour, curly hair, blue eyes, dressed in a gray t-shirt, ultra realistic, face detailed

Финальный результат поближе можно посмотреть на самом первом изображении статьи.

Прорисовка контуров лица и волос получилась достаточно стабильна. Соглашусь, если скажете что, результат получился не идеальный, но для целей проекта он более чем достаточный.

Если бы мне требовалось улучшить результат с такими же вводными, я бы прописал в явном виде освещение и фон, возможно из-за них скачет выбор оттенка волос и кожи персонажа.

• midjourney
• разработка персонажей
• машинное обучение
• искусственный интеллект
• генеративный арт
• нейросети

Нейросеть для создания человека или персонажа

Искусственный интеллект умеет многое, в том числе создавать людей. Нейросети генерируют лица, придумывают характер и даже анимируют человека. Я протестирую нейросеть для создания людей по описанию. Посмотрю, как ИИ сгенерирует человека, а ещё персонажа для книги.

Этапы создания виртуального персонажа

Чтобы сделать персонажа, сначала нужно продумать характер и внешность, нарисовать его, потом оживить и написать для него текст. С человеком проще: можно сгенерировать лицо, а затем оживить. Даже можно сделать нейрочеловека в одном сервисе.

Характер и внешность

Давайте создадим героиню романа. Я не хочу прописывать её внешность и характер сама, это могут сделать нейросети, например, ChatGPT. Дальше я подробно расскажу и покажу, как это сделать.

Картинка

Для создания несуществующих людей нейросеть научилась рандомно генерировать лица или изображения людей по описанию. Пишем текст → нейросеть генерирует иллюстрацию. Это очень просто, но сервисы справляются по-разному, покажу как.

Текст

Искусственный интеллект легко сгенерирует прямую речь персонажа. Есть несколько сервисов, которые отлично с этим справляются.

Видео

Персонажа можно не только придумать и нарисовать, но и оживить. Некоторые сервисы сами создают персонажей, а потом делают с ними видео. Другие — оживляют тех, кого нарисовали ранее.

OkoCRM в Telegram

Только польза про OkoCRM. Обновления, новости, инструменты продаж и кейсы клиентов. Иногда шутим, но не сильно =)

Изображение людей

Несколько лет назад казалось, что нейросеть и создание человека — не связанные вещи. Но уже сейчас ИИ генерирует лица людей. Не всегда идеально, но всё же справляются неплохо.

1. Генератор Случайных Лиц (Этот Человек Не Существует)

Стоимость: бесплатно

Это нейросеть для создания лиц людей. Здесь генерируем мужчин, женщин и детей. Можно выбрать пол, возраст и этническую принадлежность. А потом генерировать картинку хоть 100 раз. Это очень просто, а главное — бесплатно.

В сервисе минимум настроек.

Вот такой результат получается.

Сервис разрешает использовать сгенерированные изображения, но просит разместить обратную ссылку на сайт. Вот такую: [email protected]

2. Bored Humans

Здесь нет настроек, как в предыдущем сервисе. Просто кликаем по кнопке и получаем результат. Внешность, возраст и пол выбрать нельзя. Результат неплохой, особенно если сравнивать с предыдущей версией этого ИИ.

Вот что получается. Картинку можно открыть в новой вкладке и скачать в большом размере.

А это разница двух версий ИИ — постарше и помоложе.

3. Unreal Person

Здесь тоже нет никаких настроек, просто генерация лица в случайном порядке. Если нужно создать мужчину или женщину определённого типажа, придётся пробовать несколько раз. Вот такие лица получаются в сервисе Unreal Person.

А ещё здесь можно сгенерировать кота или лошадь, вдруг понадобится. Но животные у ИИ получаются с помарками.

4. Which face is real

На этом сайте не просто создаём лицо, а участвуем в викторине. Сервис показывает 2 картинки, одна из них — настоящее фото, вторую создал ИИ. Надо угадать, кто реальный человек, а кого нарисовала нейросеть.

Нужно нажать на картинку, на которой, по нашему мнению, реальный человек.

Сервис покажет правильный вариант, а вторую картинку со сгенерированным лицом можно скачать. Или начинать всё по новой. На рисунке выше слева — человек, а справа — детище ИИ.

Подпишитесь на Telegram OkoCRM
Новости команды OkoCRM, обновления в системе, полезные инструменты для продаж.

Характер и внешность персонажа

Если создаём не человека, а вымышленного персонажа, для начала нужно продумать, каким он будет. Тут тоже помогут нейронные сети.

1. ChatGPT

ChatGPT напишет план к произведению или книгу, и легко придумает персонажа. Я попросила ИИ описать внешность и характер героини книги, путешественницы во времени. Нейросеть меня не поняла и начала описывать, как поэтапно придумать героиню. Тогда я написала, что полностью доверяю создание персонажа ChatGPT и на этот раз получила нужный мне ответ.

Так ChatGPT описывает внешность героини.

А так — её характер и особенности.

Мне с первого раза понравился персонаж, дальше буду создавать героиню по лекалу этой нейросети.

2. Inworld AI

Здесь можно создать готового персонажа: его характер, повадки, цели и даже пообщаться с ним. Inworld AI — это также нейросеть для создания голоса человека: пишем любой вопрос и сервис будет озвучивать ответы. Я указала только имя героя и род занятий — путешествия во времени, черты характера ИИ прописал сам.

Здесь можно автоматически сгенерировать увлечения, черты характера, эмоции персонажа.

А потом зайти в чат и пообщаться с ним. Ответ в чате сокращённый и коряво переведён на русский язык.

А вообще персонаж произносит свои реплики вот так.

2. CharacterGPT

Стоимость: частично бесплатно

Здесь нужно добавить описание персонажа и ИИ сгенерирует 3D-аватар, напоминающий живого человека. Не картинку или анимированного героя, а реалистичного человека. Вот, что получилось по моему запросу: Эми — брюнетка с голубыми глазами.

ИИ сгенерировал ведущую для рубрики «Прогноз будущего».

Какие профессии может заменить человек, созданный нейросетью?

Человек, которого создал ИИ, может быть не только ведущей. Сгенерированных людей можно использовать вместо моделей для рекламы или ведения влогов. Настоящих актёров, психологов, учителей, продавцов или дизайнеров нейролюди пока не смогут заменить, ведь они не умеют думать, сопереживать или чувствовать — могут только воспроизводить нужные реплики.

Новости OkoCRM в Telegram

Узнавайте первым про обновления и полезные инструменты продаж. Учим, как надо работать в системе. Собираем фидбек и делимся новостями.

Подытожим

Вот лучшие сервисы для создания людей:

→ Генератор Случайных Лиц — можно выбрать пол, возраст и этническую принадлежность человека.

→ ChatGPT — создаёт описание внешности, характера, пишем диалоги.

→ Midjourney — рисует персонажей и генерируем лица людей.

Поделиться:
А вы что думаете?
Добавить комментарий
Саша 16 мая 2023 в 02:05

Статья рассматривает интересный и актуальный для многих людей вопрос о том, как нейросети могут быть использованы для создания образов людей. Снежана Туманова – это, конечно, крутое создание!

Екатерина 24 мая 2023 в 08:05

Удивительно узнать, что нейросети могут генерировать фотореалистичные изображения лиц, которых на самом деле не существует. Однако, возникает вопрос этики и проблема возможного злоупотребления такими технологиями….

Как нейросети создают персонажей и киновселенные

Танос. Киновселенная Marvel Искусственный интеллект и основанные на нём сервисы активно проникают во все новые сферы жизни – общение в чатах, создание текста, картин и музыки, управление транспортом, замена операторов службы поддержки и многое другое. Нашёл он применение и в киноиндустрии.

Сценарии

Стоит отметить, что эксперименты по привлечению ИИ для написания сценариев начались уже давно. В 2016 году был анонсирован короткометражный фильм Sunspring с актёром Томасом Миддлдитчем. Картину создали в рамках необычного челленджа – авторам предлагалось за двое суток снять короткий фильм на тему фантастики. Такие жесткие временные рамки и способствовали возникновению идеи использовать для создания сценария нейросеть Benjamin. Фильм «Sunspring»

реклама

Позднее нейросеть привлекли к созданию ещё двух картин – Zone Out и It’s No Game. Отзывы о вышеупомянутых картинах однозначно указывали, что полученные сценарии сложно назвать качественными. Прогресс в разных кинокартинах чувствовался, однако в комментариях больше внимания уделяли мастерству актёров, которым пришлось озвучивать местами странный текст.

Оценка финансового успеха нового фильма

В современной киноиндустрии важную роль играет финансовый аспект создания нового фильма – оцениваются затраты и потенциальные кассовые сборы. В 2020 году корпорация Warner Bros в тестовом режиме начала использовать ИИ для оценки окупаемости своих картин. Именно данный инструмент определял, какие проекты финансировать в первую очередь.

Известно, что использовалось ПО от компании Cinelytic, в качестве входных данных была информация о длительности фильма, актёрах, рисках, спросе аудитории и т.д. Далее программа позволяет проанализировать, как изменение отдельного фактора повлияет на вероятность успеха.

Визуальные эффекты

реклама

Всё чащи нейросети привлекают непосредственно к созданию элементов фильма. Например, машинное обучение задействовали для создания образа Таноса в фантастическом фильме «Мстители: Война бесконечности».

В качестве основы специалисты использовали сканирование неподвижных объектов, а также захват движения. В последнем случае основную задачу доверили технологии Zurich Research Labs от Disney.

На начальном этапе при помощи камеры на специальном шлеме создается сетка движения лица. Далее информация загружается в нейросеть, которая создаёт соответствующую анимацию в высоком разрешении. Возможность обучения системы позволяет получить все необходимые детали мимики, даже малейшее движение лицевых мышц.

В отечественной киноиндустрии инструменты на базе ИИ также активно используют. В частности, нашумевшая технология дипфейк использовалась для омоложения Павла Майкова в популярном сериале «Контакт». Алгоритм предварительно обучили на более ранних фильмах с актёром, включая сериал «Бригада». Сериал «Контакт»

реклама

Есть информация об аналогичных преобразованиях тела актёра. Похожая схема использовалась, когда Павлу Прилучному для сюжета фильма «Девятаев» необходимо было похудеть на 36 килограмм. К данной задаче специалисты подошли основательно – актеру сделали МРТ, детально сохранив все слои: кости, жировую ткань, мышцы и кожу. Полученные данные использовались для создания цифровой модели тела, которую впоследствии модифицировали для имитации сильного похудения. Новая модель и использовалась для подмены реального тела Прилучного.

Комфортный просмотр фильмов

Инструменты на базе ИИ также используют в онлайн-кинотеатрах. Например, нейросети способны определять начало и конец заставки в начале каждой серии, предлагая пользователям пропустить её. Для этого все серии предварительно обрабатываются алгоритмом, который выделяет одинаковые кадры в каждом эпизоде.

Также нейросети вполне справляются с генерацией постеров. Алгоритм сам выбирает подходящий стиль и важные фрагменты из фильма. В дальнейшем они используются в качестве обложки к описанию фильма.

Создать персонажа нейросетью онлайн (ИИ)

Cклад со стеллажами, деревянными ящиками и картонными коробками, на переднем плане вилочный погрузчик, стиль реальное фото, тёплый фильтр.

Пример работы инструмента Показать пример
Пример запроса:
Аквариум с рыбками, круглый, в квартире, стиль реальное фото.

Пример работы инструмента Показать пример
Пример запроса:
Дизайн логотипа, строительство домов, 3д, современный.

У вас уже есть аккаунт? Авторизоваться.

Рейтинг инструмента

Преимущества использования нейросети Midjourney в генерации персонажей связаны с ее способностью распознавать и анализировать визуальные элементы, а также предсказывать, какие комбинации и композиции будут наиболее привлекательными для целевой аудитории. Искусственный интеллект в этой нейросети позволяет создавать уникальные дизайны, учитывая предпочтения пользователей и тренды в дизайне.

Онлайн-генератор персонажей на основе нейросети Midjourney предоставляет широкий спектр возможностей для создания качественных изображений. Он позволяет легко настроить параметры картинки, выбрать цветовую схему, шрифты, размеры и другие визуальные элементы. Благодаря этому, генерация персонажей становится быстрой и простой процедурой, не требующей специальных навыков или опыта в дизайне.

Примерами сфер, где использование нейросети Midjourney будет особенно полезным, являются маркетинговые кампании, веб-разработка, социальные медиа, электронная коммерция и многие другие. Благодаря автоматизации и оптимизации процесса создания изображений, компании могут значительно сэкономить время и ресурсы, получая при этом высококачественные результаты.

AI-генератор контента Пиксель Тулс предлагает удобный и интуитивно понятный интерфейс для генерации персонажей на основе нейросети Midjourney. Пользователи могут загружать собственные изображения или использовать предложенные варианты, а также настраивать различные параметры для создания уникальных и привлекательных картинок. Благодаря использованию искусственного интеллекта, процесс создания изображений становится простым и быстрым, а результаты – впечатляющими и привлекательными для целевой аудитории.

Готовые примеры, сгенерированные нейросетью

Примеры картинок, которые сгенерировали наши пользователи.

Пример запроса:

Человек-паук лежим в гамаке из паутины, реалистичное фото

Пример запроса:

Джокер грабит банк, реалистичное фото

Пример запроса:

Дарт вейдер на выборах в президенты сша, реалистичное фото

Пример запроса:

Марио готовит пиццу, реалистичное фото

Пример запроса:

Гарри поттер колдует волшебной палочкой в лесу, реалистичное фото

Промпт (prompt) — это запрос для нейросети, состоят из четко сформулированной задачи, которую она должна будет выполнить.

Правила для написания хорошего промпта:

Опишите изображение, которое вы хотите получить (объект, действие, фон, стиль + дополнительно можете указать любые другие детали, которые посчитаете важными)

Преимущества генерации картинок нейросетью в Пиксель Тулс

• Подключен к с одному из самых мощных генераторов картинок — нейросети Midjourney
• Не нужно устанавливать VPN, проходить регистрацию в чате, оплачивать доступ
• Не нужно формулировать промпт на английском языке, хорошо понимает запрос на русском языке, создает релевантные рисунки
• Простой и удобный интерфейс инструмента
• Экономит время и деньги: за несколько минут создает изображение, над которым фотограф, художник или дизайнер работали бы несколько часов.
• Генерирует не одного, а четырех персонажей на выбор.