Genjutsu от Higgsfield: перенос движения и замена в видео

Модель Genjutsu от Higgsfield на ai.neiroset переносит движение из вашего видео на героя с фото, заменяет персонажа или предмет в ролике и перерисовывает его в новом стиле. Работает в браузере, рядом с другими нейросетями сайта.

Motion Control: повторите движение с видео

Загрузите фото героя и видео с нужным движением: Kling Motion Control повторит его на вашем персонаже.

Что такое Genjutsu

Genjutsu, по-русски генджутсу, это нейросеть Higgsfield для работы с готовым видео. Она не придумывает движение сама, а берёт его из вашего ролика: как идёт человек, как поворачивается камера, как меняется план. На это движение модель ставит героя, товар или одежду с ваших фото.

У Genjutsu три задачи: перенос движения, замена объектов и смена стиля. Режим выбирается переключателем в окне модели, стиль отдельной плиткой. Описание сцены необязательно, но помогает уточнить результат. ai.neiroset не связан с компанией Higgsfield, модель подключена к сайту через их API.

Перенос движения: фото героя + видео-образец

Загрузите видео-образец от 4 до 30 секунд и фото того, кто должен повторить движение. Фото можно дать до восьми: например, лицо героя, его куртку и сумку в руках. Движение и работа камеры придут из образца, внешность из фото.

  • Танец из тренда на вашем персонаже или маскоте бренда.
  • Проход по подиуму в одежде с фото для карточки товара.
  • Товар в руках у человека: движение рук из образца, упаковка с фото.
  • Один образец на разных героях: меняется только фото.

Образец берите с похожим планом: для танца нужен герой на фото в полный рост, для жестов хватит снимка по пояс.

Замена персонажа или объекта в видео

В режиме замены объектов Genjutsu меняет человека или предмет в вашем ролике на того, кто на фото. Сцена, движение и камера остаются из исходника. Так в готовое видео можно поставить другого героя, переодеть его или заменить бутылку на столе своим товаром.

Если в кадре несколько людей или предметов, уточните в описании, что именно заменить. Для полной версии кадр исходника должен быть не меньше 854×480 или 640×640: меньшее видео окно модели не пропустит.

Видео в другом стиле

В полной версии Genjutsu есть 20 стилей. Выберите один, и модель перерисует ролик в нём. Среди стилей: аниме с cel-шейдингом, вязаный мир, войлочные куклы, ночной пиксель-арт, ретро-игра в 3D и игрушечная графика.

Со стилем фото необязательны. Без них перерисовывается то, что уже есть в кадре исходника. Добавьте до пяти фото персонажей, и модель поставит их в ролик в выбранном стиле. Пока стиль выбран, режим не важен: Genjutsu перерисовывает ролик целиком.

Light и полная: чем отличаются

Genjutsu Light делает те же перенос движения и замену объектов, но быстрее и за меньшее число токенов. Стилей в Light нет. Из видео она берёт первые 15 секунд и сохраняет звук исходника.

ПараметрGenjutsuGenjutsu Light
РежимыПеренос движения, замена объектовПеренос движения, замена объектов
Стили20 стилейНет
Исходное видеоMP4 от 4 до 30 секунд, до 150 МБMP4 от 4 секунд, до 150 МБ
Сколько берёт из видеоДо 30 секундПервые 15 секунд
ФотоОт 1 до 8, со стилем от 0 до 5От 1 до 8
Качество480p, 720p, 1080p480p, 720p, 1080p
ЦенаПо секундам исходника и качествуТак же, но дешевле

Light удобна для проверки идеи и коротких роликов, где нужен звук исходника. Полную берите для стилей, роликов до 30 секунд и чистовой версии.

Genjutsu или Kling Motion Control: что выбрать

Обе модели переносят движение с видео на героя с фото. Kling Motion Control проще: одно фото героя и видео-образец, тумблер «Звук из видео» и версия Pro, которая точнее держит лицо. Её берите для танцев и жестов, когда герой один.

Genjutsu нужна, когда задача шире. Она принимает до восьми фото сразу, умеет менять героя или предмет в готовом ролике и перерисовывать видео в 20 стилях, а качество можно поднять до 1080p.

Частые вопросы