· 2 мин чтения

Что ломается в ИИ-видео: три грабли на живых кадрах

Тесты на реальных кадрах: у моделей «плывут» руки с инструментом, снаряжение и лица. Какие кадры выбирать, чтобы не переделывать, и когда наезд камеры лучше генерации.

видеоошибкитесты

Я прогнал через несколько моделей «картинка → видео» один и тот же набор кадров. Разница между

моделями есть, но гораздо важнее другое: ломается не человек, а мелкие детали вокруг него.

Вот три вещи, которые я теперь проверяю до генерации.

Грабли первая: руки с реквизитом

Один и тот же персонаж — рабочий:

  • стоит, руки свободны — чисто, годится в рекламу;
  • в руках планшет или инструмент — кисти плывут, предмет меняет форму каждый кадр;
  • на теле снаряжение с карабинами и верёвками — снаряжение «танцует», геометрия нестабильна.

Причём это не про дешёвую модель: самая дорогая из протестированных ведёт себя лучше,

но руки с инструментом всё равно портит. Вывод простой: если в кадре человек с предметом

в руках — ждите брака, и закладывайте переделки.

Грабли вторая: крупный план

Крупный план — главный источник разочарования. На общем плане лицо маленькое, ошибки не видно.

На крупном начинается морфинг: меняются черты, форма носа, взгляд. Плюс мерцают мелкие детали

и листва на фоне.

Рабочее правило: людей и предметы снимаем общим планом, а крупные планы делаем

статичной картинкой с медленным наездом камеры — это бесплатно и без артефактов.

Грабли третья: чем больше движения просишь, тем больше модель додумывает

Контринтуитивно, но проверено: чем скромнее задание на движение, тем чище результат.

Формулировка «статичная камера, лёгкий ветер в листьях, минимум движения» даёт заметно

более аккуратный клип, чем «динамичная сцена, герой идёт и жестикулирует».

Что ещё помогает:

  • короткие клипы (2–3 секунды) — меньше времени накопить ошибку;
  • природа, пейзаж, интерьеры оживляются отлично, люди — хуже всего;
  • движение камеры по статичному кадру (0 ₽) выглядит дороже, чем кривой шевелящийся человек за $0.34.

Как я собираю ролик после этих грабель

Гибрид: один-два «живых» клипа только на тех кадрах, где есть смысл, а всё остальное —

статичные кадры с плавным движением камеры, титрами и озвучкой. В сумме это выглядит цельно

и стоит меньше доллара.

Кстати, приятная часть: часть ошибок закрывается не генерацией, а монтажом — темп, титры,

звук и наезды камеры вытягивают картинку, которую модель чуть-чуть испортила.

Если интересно посмотреть, что получается на выходе — напишите, отправлю примеры роликов.

Комментарии 0

Пока никто не высказался — будьте первым.

Есть вопрос по дереву или по проекту — напишите, отвечу сам.

ildare@ildare.ru