Какой инструмент для какой задачи
| Работа | Начать с | Стоимость | Доказательства |
|---|---|---|---|
| Монтаж видео по промпту | Kling 4.0 Монтаж | $1.41 за 5 с при 1080p на fal | Наш вариант |
| Видео в видео, новые люди и локации | Kling 4.0 Редактирование, Wan 3.0 монтаж | $1.41 и $2.00 за каждые 5 с при 1080p на fal | Наш вариант |
| Удалить фон видео | Удаление фона VEED на fal | $0.16 за 7 с | Наш вариант |
| Бесплатное удаление фона | RobustVideoMatting на вашем компьютере | Бесплатно; 2 мин. для 7 с на процессоре ноутбука | Наш вариант |
| Удалить объект | Seedance 2.5 Видеомонтаж | Около $3.40 за 5 с при 1080p на BytePlus, оплата входных и выходных токенов | Заявлено |
| Недорогое удаление объектов | Gemini Omni Flash | Примерно $0.50 за 5 с при 720p на API Google, плюс входные токены | Заявлено |
| Заменить человека | HiggsfieldGenjutsu Lite, Kling 4.0 Монтаж | ≈ $0.98 и $1.41 за 5 с | Наш вариант |
| Изменить стиль всего клипа | Gemini Omni Flash, Seedance 2.5 Видеомонтаж | См. ниже | Репортаж, наш |
Монтаж видео с помощью промпта
Редактирование промпта изменяет часть клипа, сохраняя движение. Пишите это как команду: что меняется, а что должно остаться прежним. «Замени два грузовика на двух слонов на том же месте и оставь остальные кадры без изменений». Всегда спрашивайте себя после этого, действительно ли произошла правка или же кадр был просто незаметно перегенерирован. Сравните результат с исходником: если люди стоят неподвижно или меняется кадрирование, значит, это была новая генерация.
Монтаж тарифицирует входные и выходные данные, поэтому обрежьте исходник до того кадра, который вы изменяете. В Kling, если входной файл длиннее выходного, это увеличивает стоимость.
Видео в видео
Наш тест с заменой актеров включал 16-секундный рекламный ролик с одиннадцатью склейками, реализованными четырьмя способами с использованием одних и тех же утвержденных изображений. Kling 4.0 Edit и Wan 3.0 сохранили склейки и жесты, Higgsfield Genjutsu Lite обработал все 16 секунд за один проход, а Seedance 2.5 Preview в мультимодальном режиме Dreamina перестроил кадр. Чтобы также изменить формат, редактируйте из горизонтального оригинала, а не используйте outpainting для вертикального.
Удаление фона в видео
Существует два подхода, и они подходят для разных задач. Маттинг находит человека и сохраняет его оригинальные пиксели, поэтому лицо остается неизменным, и вы можете поместить его на любой фон. Генеративное замещение перерисовывает комнату и может подстроить освещение, но оно также перерисовывает и человека.
| Инструмент | Время | Стоимость | Что получилось |
|---|---|---|---|
| Удаление фона VEED, fal | 1 мин 16 с | $0.16 | Самый чистый; наложения сохранены; легкая кайма на волосах |
| RobustVideoMatting, процессор ноутбука | 2 мин 01 с | Без оплаты | Старая комната вокруг волос; наложения заменены |
| BiRefNet, Hugging Face | 3 мин 52 с | В рамках бесплатной квоты GPU | Мерцание краев в каждом кадре; пушистые волосы |
Все три модели плохо справились с тонкими волосами на фоне светлой стены. Не добавляйте наложения в клип, который отправляете, а накладывайте их уже при монтаже. Если говорить честно о бесплатных инструментах для удаления фона, то открытые модели работают, но требуют времени и дают менее качественные края. Полный тест представлен в клипах.
Удаление объекта из видео
Наша заметка по редактированию объектов охватывает шесть инструментов. Для удаления назовите объект в коротком промпте и укажите, что всё остальное остается без изменений. Seedance 2.5 Video Edit принимает текстовый промпт, а некоторые хостинги добавляют возможность выделить объект на кадре, где он виден полностью. Мы еще не пробовали удаление с его помощью.
В нашей собственной работе с Genjutsu модель пропустила около половины объектов, которые мы просили изменить, поэтому проверяйте каждый кадр.
Существуют бесплатные онлайн-сервисы для удаления объектов, но мы их не тестировали. Ожидайте ограничений по длине, разрешению и наличию водяного знака. Мы добавим тест, прежде чем что-то рекомендовать.
Замена лиц и персонажей
В нашем случае речь идет о замене лиц всех людей в рекламном ролике, где новые лица сначала утверждаются в виде фотографий. Мы не тестировали узкоспециализированные приложения для замены лиц. Рекастинг сохраняет игру актера, но меняет самого исполнителя, поэтому он вызывает те же вопросы, что и любая замена лица: используйте только тех людей, которые дали согласие, и не изображайте реального человека совершающим действия, которых он не совершал. Некоторые платформы также отказываются работать с клипами с реальными людьми, как это сделал Seedance 2.5 в нашем тесте.
Перенос стиля
Рестайлинг означает сохранение движения при изменении всего внешнего вида. Ближайшим примером является рестайлинг комнаты и одежды, где Seedance 2.5 Video Edit использовал одно референсное изображение в качестве целевого образа. Google заявляет, что Gemini Omni Flash может редактировать загруженные видео с помощью новых промптов и параметров примерно за $0.10 за секунду 720p видео на его API, но мы это не тестировали. Мы также не проводили контролируемых тестов переноса художественного стиля, например, превращения игрового видео в аниме, поэтому пока не даем рекомендаций по этому направлению.
Нужен ли вам вообще ИИ-видеоредактор?
Для монтажа, субтитров и звука обычный редактор все еще быстрее. Используйте ИИ, когда меняете содержимое в кадре. CapCut и Canva теперь встраивают генерацию в редактор, о чем рассказывает наш обзор, и наша платформа работает над тем же пробелом для производственных нужд. Для финальной доработки прочтите заметку об апскейлинге, прежде чем переходить к 4K.
Храните исходник, монтаж и экспорт вместе
Я создаю easyai.video, чтобы хранить исходные клипы, референсы и каждый монтаж в одном месте. Проект находится на стадии финальной разработки.
Вступить в список ожидания ↗