Кейс
Почему видео с ИИ проходит все проверки, а всё равно выглядит неправильно
Видео с ИИ может пройти все автоматические проверки и всё равно посадить ведущего туда, где человек сидеть не может. На платформе клиента одна такая картинка испортила вторую половину продающего видео; вот что мы нашли и изменили.
Главное
- Автоматические проверки могут подтвердить форму и лицо, но не то, что сцена имеет смысл.
- Общее мнение одной модели ненадёжно; узкие вопросы с чёткими правилами устойчивее.
- Проверяйте картинку, на которой строится каждая следующая сцена, до начала съёмки.
- Испытайте новую проверку на прошлых результатах, в том числе на тех, о которых вы знаете, что они были неправильными.
- Ставьте самую сильную проверку туда, где ошибка испортит больше всего работы.
Когда видео с ИИ выглядит неправильно на середине, причина часто в одной картинке, которую не проверила ни одна автоматическая проверка. На платформе клиента продающее видео на середине переносило ведущего в машину, и картинка, нарисованная для этого места, посадила его туда, где человек сидеть не может. Исправление заработало в тот же день: новые картинки теперь проверяют до того, как по ним снимают видео, а невозможную ловят и перерисовывают.
Что видит зритель, а ваши проверки — нет
Зритель замечает человека, висящего там, где нет сиденья, даже если все автоматические проверки пройдены. В видео ведущий на середине переходит на второе место: сиденье внутри машины. Картинка, нарисованная для этого места, поставила его между передними сиденьями, над серединой приборной панели, головой в потолок. Все кадры после смены снимались по этой одной картинке, поэтому вторая половина несла ту же ошибку. Зритель может простить мелкий огрех, но не тело там, где его быть не может. Команда обычно узнаёт об этом, посмотрев готовый результат, когда работа уже сделана.
Почему видео с ИИ выглядит неправильно после смены сцены
Картинка прошла все автоматические проверки качества, потому что каждая проверка измеряла лицо и кадр, а не то, возможна ли сцена физически. Платформа проверяла форму изображения, искала чёрные полосы, проверяла, что рот на нужной высоте для движения губ, и сравнивала лицо с фото ведущего. Каждая проверка делала своё дело. Ни одна не спрашивала, сидит ли человек там, где человек может сидеть. В инструкции для рисования нового места тоже не было сказано, как в нём размещают человека, поэтому инструмент ИИ, который рисует картинку, заполнил пробел как посчитал нужным.
Расследование: от мнения модели к простым вопросам
Сначала мы попробовали быструю и недорогую модель зрения (инструмент ИИ, который смотрит на картинку и отвечает на вопросы о ней) и просили её дать общее мнение о каждом новом месте. Это оказалось ненадёжно: одну и ту же картинку машины она пропускала с первого раза и не пропускала со второго. Мнение, которое меняется от взгляда к взгляду, не может быть единственной защитой на длинном видео. Переломный момент — перестать просить общее мнение и задать несколько простых вопросов с ответом «да» или «нет». Затем наши собственные чёткие правила превращали эти ответы в пропуск или отказ.
Что мы изменили
Теперь каждую картинку, нарисованную для нового места, проверяют до того, как по ней снимают видео, как только подтверждено, что лицо принадлежит ведущему. Модель зрения отвечает на шесть вопросов с ответом «да» или «нет». В машине: сидит ли он в кресле, спинка которого за ним, и никогда не между сиденьями? В любом месте: нет ли невозможной позы, размера или тела? Наши правила превращают эти ответы в пропуск или отказ. В машине решает более сильная модель; в остальных местах пропуск от быстрой модели остаётся в силе, а любой её отказ ещё раз проверяет более сильная. Картинку с отказом рисуют ещё раз, поставив позу в начало инструкции, а если она снова не прошла — отбрасывают, чтобы она не попала в видео. В инструкции для рисования теперь сказано, как размещать ведущего в каждом новом месте: в машине — на сиденье, которое называет сценарий, иначе на водительском, с пристёгнутым ремнём и видом от приборной панели.
Что теперь есть у бизнеса
Проверка работает на платформе клиента, поэтому картинку в невозможном положении ловят и перерисовывают до начала съёмки. До запуска новая проверка прошла примерно на двадцати картинках второго места из прежних видео: все картинки машины не прошли, все остальные прошли. Новые картинки машины, нарисованные по новой инструкции, тоже прошли.
Что вы можете проверить сами
- Смотрите первые секунды после каждой смены сцены, а не только начало видео. Ведущий между сиденьями, тело не того размера или поза, которую человек не удержит, — вот что стоит искать.
- Перечислите, что на самом деле проверяют ваши автоматические проверки. Затем спросите, что заметит зритель, а они — нет.
- Покажите одну и ту же картинку вашему ИИ-проверяющему дважды. Если вердикт меняется, ему нельзя доверять в одиночку.
- Спросите, может ли одна плохая картинка испортить всё, что построено после неё. Если может, проверяйте эту картинку раньше остального.
- Просмотрите готовое видео на обычной скорости на телефоне. Ошибку, которую трудно заметить на стоп-кадре, часто хорошо видно в движении.
Что делать дальше
Перед следующим видео с ИИ проверьте стык после каждой смены сцены и спросите, может ли человек действительно быть там. Если ответ «нет», остановитесь до шага съёмки и перерисуйте картинку, явно задав позу. Такую проверку наши инженеры делают для клиентов, которые создают видео с ИИ, и её стоит опробовать на старом результате, о котором вы уже знаете, что он был неправильным.
Частые вопросы
Почему моё видео с ИИ в начале выглядело нормально, а на середине — неправильно?
Первые сцены строились по одной картинке, а более поздние — по другой. Если картинка для нового места физически невозможна, каждый кадр по ней несёт ту же ошибку, даже когда проверки лица, формы и кадра пройдены.
Можно ли доверить модели ИИ решать, правильно ли выглядит сгенерированная картинка?
Не как единственному судье с общим мнением. Модель может отвечать на узкие вопросы с ответом «да» или «нет», но по одной и той же картинке она может дать разный вердикт, поэтому решать должны чёткие правила, а любой отказ стоит проверять ещё раз.
Как не дать плохой картинке от ИИ испортить остаток длинного видео?
Проверяйте картинку каждой новой сцены до начала съёмки. Если она не прошла, перерисуйте её один раз, явно задав позу, а если снова не прошла — отбросьте, а не пропускайте дальше.
Куда смотреть при проверке видео с ИИ перед публикацией?
Начните с первых секунд после каждой смены сцены, потому что именно там вступает новая картинка. Затем просмотрите остальное на обычной скорости: не то сиденье, висящее тело или невозможный размер легче заметить в движении, чем на стоп-кадре.