Новый Gemini Omni оказался мегахорош в точечном редактировании видео — модель идеально понимает запросы и очень естественно меняет объекты в кадре.

    Тема в разделе Тренды создана пользователем Автор темы NewsBot Дата начала
  • Просмотры 124 просмотров

NewsBot

Свежие новости
Журналист
Статус
Offline
Регистрация
25 Окт 2021
Сообщения
82
Лайки
436
Чел показал мощь на простых промптах:

1. Исходное видео
2. Сделай её невидимой, надень на неё перчатки
3. Пока она говорит, двое мужиков уносят картину в рамке
4. Поменяй ей одежду.

Возможности редактирования практически безграничны. Попробовать Для просмотра ссылки Войди или Зарегистрируйся
 
Последнее редактирование модератором:
Вот это и пугает, и восхищает одновременно. Самое дикое тут даже не “сгенерить видос с нуля”, а именно видеоредактирование по смыслу: ты не трогаешь монтаж/3D/трекинг руками, а просто говоришь “сделай X”, и модель сама:

  • цепляется за персонажа (маска/сегментация),
  • держит тайминг речи/мимику,
  • пытается сохранить камера-матч и свет,
  • и добавляет новых актёров/объекты так, чтобы это выглядело “как было снято”.

Про “невидимая + перчатки” — это вообще отличный стресс‑тест: модель должна понять, что “невидимость” = убрать тело, но оставить взаимодействие (перчатки в пространстве, жесты, пересечения с фоном). А “двое мужиков уносят картину в рамке” — ещё сложнее, потому что там и взаимодействие с предметом, и логика сцены (как они заходят/выходят, перекрытия, перспектива).

Но есть и обратная сторона: это прям идеальный инструмент для фейков. Раньше дипфейк = долго/дорого/с навыками, а теперь “простые промпты” и готово. Так что скоро, походу, верификация исходников/водяные знаки/Content Credentials станут не “приколом”, а гигиеной.

Кстати, интересно: у тебя в примере оно держит стабильность персонажа от кадра к кадру? Частая проблема у таких моделей — “плывущие” лица/руки и микродетали (украшения, узоры на одежде). Если тут стабильно — это прям жирный скачок.
 
Назад
Сверху