Удалить предмет с видео

Машина, припаркованная не там. Провод через весь кадр. Кружка на столе в деловой съёмке. Реквизит, который забыли убрать перед дублем. Неподвижный предмет — самый благодарный случай для нейросети после надписи: он закрывает один и тот же кусок фона всё время, поэтому достроить этот участок нужно по сути один раз и удержать стабильным.

До
После
Запрос: «убрать велосипед у стены, стену и плитку не трогать». Неподвижный предмет на ровном фоне — самый чистый случай: и штукатурка, и швы плитки достроились без пятна и без блюра.

Что решает исход

  • Что за предметом. Ровная стена, асфальт, брусчатка, трава, вода — восстановятся почти идеально. Сложная витрина с деталями или толпа за предметом — заметно труднее.
  • Тень и отражение. Это отдельная деталь, о которой забывают: у предмета почти всегда есть тень, а у блестящего — ещё и отражение. Если не сказать про них, они могут остаться в кадре после того, как сам предмет исчез. Формулируйте: «убрать красную машину вместе с тенью».
  • Размер в кадре. Мелкая деталь уходит бесследно. Предмет, занимающий половину кадра, требует достроить половину сцены — и результат будет ближе к «пересняли похоже», чем к «убрали».
  • Движение камеры. Статичный штатив проще, чем проезд.

Разницу по размеру видно на втором примере. Велосипед выше занимал малую часть кадра и ушёл бесследно; автомобиль закрывает половину двора — фон восстановился правдоподобно, но результат ближе к «пересняли похоже»:

До
После
Запрос: «убрать автомобиль из кадра». Брусчатка и тени восстановились правдоподобно, но границы двора встали чуть иначе, чем в оригинале.

Как это работает — и где предел

Нейросеть не стирает предмет «заплаткой» на вашем файле — она пересобирает ролик заново по исходнику и вашему описанию. На месте предмета не остаётся мутного пятна, как после блюра, но мелкие детали кадра могут слегка разойтись с оригиналом, и чем длиннее ролик, тем заметнее расхождение. Честный рабочий диапазон — короткие фрагменты в несколько секунд; длинное видео стоит нарезать и чистить по кускам.

Загрузите ролик и скажите, какой предмет убрать и где он стоит. Обработка видео дороже фото: первая операция доступна после регистрации и онбординга — за неё начисляются стартовые токены.

Загрузка…

Как описать, чтобы вышло чисто

  • Предмет + место + тень. «Красная машина справа у бежевой стены, вместе с тенью на брусчатке».
  • Что должно остаться. «Стену, фонарь и разметку не трогать».
  • По одному предмету за заход. Так надёжнее, чем списком.
  • Проверьте в движении, а не на стопкадре.

Где это нужно

  • Карточки товара. Убрать посторонний предмет из кадра, не переснимая — см. видео для маркетплейса.
  • Недвижимость и интерьеры — лишняя мебель, коробки, техника в кадре.
  • Продакшен — микрофон, стойка, провод, забытый реквизит.

Соседние задачи

Убрать не вещь, а человека — убрать человека с видео. Убрать текст — убрать надпись с видео. Общая механика и границы метода — в главе удалить объект из видео.

Частые вопросы

Как удалить предмет с видео?
Загрузите ролик и опишите, какой предмет убрать и где он в кадре — нейросеть уберёт его на всех кадрах и достроит фон за ним. Неподвижный предмет — один из самых простых случаев, потому что он всё время закрывает один и тот же участок сцены. Сделать это можно в чате Twelver.
Почему после удаления предмета осталась его тень?
Потому что тень — это отдельный объект в кадре, и модель убирает только то, что вы назвали. Добавляйте её в запрос прямо: «убрать красную машину вместе с тенью на брусчатке». То же касается отражений блестящих предметов в витринах, полу и воде.
Как удалить лишний предмет с видео без размытия?
Размытие остаётся, когда редактор замазывает область блюром или плашкой. Нейросеть вместо этого достраивает то, что было за предметом, поэтому мутного пятна не остаётся. Взамен модель пересобирает ролик заново, так что мелкие детали могут слегка разойтись с оригиналом.
Какой предмет убрать не получится?
Тот, что занимает существенную часть кадра или стоит перед лицом героя: за ним пришлось бы достроить слишком много сцены, и результат будет ближе к «пересняли похоже», чем к «убрали». Также сложнее, когда за предметом мелкая детализация — витрина, толпа, текст.
Какой длины ролик можно почистить?
Надёжнее всего короткие фрагменты — несколько секунд. Модель пересобирает ролик заново по вашему описанию, поэтому чем длиннее видео, тем сильнее мелкие детали расходятся с оригиналом. Длинное видео стоит нарезать и почистить по кускам.

В чате Twelver можно загрузить ролик и убрать из него лишний предмет — онлайн, в одной переписке, без отдельных приложений. Стартовые токены на обработку видео начисляются после регистрации и онбординга.

Попробуйте сами

Всё из этого руководства работает в Twelver

Один чат для текста, картинок, видео, музыки и озвучки — без отдельных сервисов и подписок.

Открыть чат Twelver
Лендинг по темеУдалить объект из видеоTwelver на AndroidТот же чат в приложенииДоступно в RuStore
Оцените свой опыт