Убрать человека с видео

Прохожий, который влез в кадр ровно на середине дубля. Компания на заднем плане набережной. Случайный человек в отражении витрины. Это самая частая просьба во всей теме удаления объектов из видео — и одна из самых требовательных к исходнику, потому что человек двигается, а за ним нужно достроить целый кусок сцены.

До
После
Запрос: «убери двоих прохожих на заднем плане». Прохожие исчезли на всех кадрах, набережная и перила достроены, героиня в кадре не изменилась.

Почему человек — сложнее, чем предмет

Неподвижная вещь закрывает один и тот же кусок фона всё время: нейросети достаточно достроить его один раз и держать стабильным. Человек идёт — значит, за кадр он открывает и закрывает разные участки сцены, и каждый из них нужно восстановить согласованно, чтобы «заплатка» не дрожала и совпадала с движением камеры.

Отсюда практическое правило: чем дальше человек от камеры и чем проще фон за ним, тем чище результат. Прохожий у ровных перил уходит бесследно. Человек на переднем плане, за которым видна вся глубина комнаты, — заметно труднее.

Что важно понимать до загрузки

Нейросеть не вырезает человека «заплаткой» на вашем файле — она пересобирает ролик заново по исходнику и вашему описанию. Поэтому мелкие детали могут слегка разойтись с оригиналом, а чем длиннее ролик, тем заметнее расхождение. Честный рабочий диапазон — короткие фрагменты в несколько секунд; длинное видео стоит нарезать и чистить по кускам.

Отдельно про главного героя: если прохожий проходит перед лицом человека в кадре, модель додумает то, что было за ним, и сходство может пострадать. Такие дубли надёжнее переснять.

Загрузите ролик и скажите, кого убрать и где он в кадре. Обработка видео дороже фото: первая операция доступна после регистрации и онбординга — за неё начисляются стартовые токены.

Загрузка…

Как описать, чтобы вышло чисто

  • Назовите человека и его место в кадре. «Двое прохожих за перилами слева» работает; «убери людей» — часто нет: по размытому описанию модель нередко возвращает ролик без изменений.
  • Скажите, кто должен остаться. «Героиню в серой куртке не менять» — обязательная часть запроса, если в кадре есть кто-то ещё.
  • Короткий фрагмент. Несколько секунд чистятся заметно надёжнее минутного ролика.
  • Минимум движения камеры. При сильном проезде модели труднее держать фон стабильным.
  • Проверьте границы в движении, а не на стопкадре — дрожание «заплатки» видно только в воспроизведении.

Когда это нужно

  • Чистка съёмки. Случайные люди в общественном месте, которых не переснять.
  • Приватность. Убрать из кадра тех, кто не давал согласия на съёмку, — вместо того чтобы замазывать их плашкой.
  • Продакшен. Ассистент, отражение оператора, техника в кадре.
  • Недвижимость и интерьеры — пустое помещение показывать лучше, чем помещение с посторонними. См. видео для недвижимости.

Обратная задача: оставить человека, убрать всё вокруг

Иногда мешает не человек в кадре, а то, что за ним. Тогда задача переворачивается: героя нужно сохранить, а фон — заменить. Это делается так же, одним запросом, и без промежуточного шага с вырезанием.

До
После
Запрос: «оставить девушку, заменить фон на ровную светлую студию». Подробнее про этот путь и его границы — в главе «вырезать объект из видео».

Соседние задачи

Убрать не человека, а вещь — удалить предмет с видео. Убрать текст — убрать надпись с видео. Общая механика и границы метода — в главе удалить объект из видео.

Частые вопросы

Можно ли убрать людей с видео?
Да, нейросеть убирает человека на всех кадрах и достраивает фон за ним в движении. Надёжнее всего это работает, когда человек не на переднем плане, а фон за ним простой — ровная стена, перила, вода. Загрузите ролик и опишите, кого убрать, в чате Twelver.
Как убрать лишних людей с видео, не тронув главного героя?
Назовите в запросе и тех, кого нужно убрать, и того, кто должен остаться: «убери двоих прохожих за перилами слева, героиню в серой куртке не менять». Без второй половины модель иногда меняет и героя. Если прохожий проходит прямо перед лицом героя, дубль надёжнее переснять — то, что было за прохожим, нейросеть додумает.
Как убрать человека с видео на телефоне?
Отдельное приложение не нужно: обработка идёт на сервере, а с телефона достаточно браузера — загрузите ролик в чат и опишите, кого убрать. Мобильные монтажки обычно умеют только замазать человека плашкой или блюром; здесь фон за ним достраивается.
Какой длины ролик можно почистить?
Надёжнее всего короткие фрагменты — несколько секунд. Нейросеть не вырезает человека «заплаткой» на исходном файле, а пересобирает ролик заново по вашему описанию, поэтому чем длиннее видео, тем сильнее мелкие детали расходятся с оригиналом. Длинное видео стоит нарезать и почистить по кускам.
Почему нейросеть вернула видео без изменений?
Почти всегда причина в описании: «убери людей» модель не понимает как задачу на конкретном кадре. Назовите, кого убрать, где он находится и что должно остаться — «двое прохожих на заднем плане справа, героиню и перила не менять».

В чате Twelver можно загрузить ролик и убрать из него лишних людей — онлайн, в одной переписке, без отдельных приложений. Стартовые токены на обработку видео начисляются после регистрации и онбординга.

Попробуйте сами

Всё из этого руководства работает в Twelver

Один чат для текста, картинок, видео, музыки и озвучки — без отдельных сервисов и подписок.

Открыть чат Twelver
Оцените свой опыт