В этой статье
При проверке видеоаватара в реальном времени замерьте ожидание первого ответа, проследите за остановками после его начала и проверьте совпадение речи с движением губ. Записывайте наблюдения отдельно. Даже быстрый ответ может сопровождаться застывшим изображением или звуком, который опережает движение рта.
Что измеряла Runway
В отчёте от 5 ноября Runway указала медиану 2,13 секунды от конца речи пользователя до слышимого ответа, по 51 реплике в 12 сеансах. В исследовательской работе описано создание по четыре кадра для воспроизведения при 24 кадрах в секунду. Каждая группа занимает около одной шестой секунды. Темп нужно поддерживать непрерывно. Учитывайте, к какой выборке относится медиана, и задавайте критерии под свою аудиторию.
Замерьте ожидание со стороны зрителя
Представьте вымышленный стенд на ярмарке мастеров. Живой персонаж объясняет сборку настольного органайзера. Подготовьте короткий вопрос об одной детали и более длинный о порядке сборки. Повторите их на устройстве стенда с теми же формулировками, чтобы сравнить попытки.
На записи демо отметьте конец речи посетителя и начало первого слышимого слова персонажа. Запишите, что видит посетитель во время ожидания. Индикатор прослушивания или обработки может пояснить состояние. Фиксируйте задержку и индикатор отдельно, чтобы команда могла работать над каждым.
Проследите за ответом до конца
Смотрите до последнего слова. Отметьте, где замирает изображение или пропадает звук. Укажите, остановилось лицо, голос или оба. Команда сможет найти этот момент на записи. При длинном ответе уточните, случилось это в начале или после нескольких фраз.
Запишите устройство и условия связи каждой попытки. Если на сети реального стенда воспроизведение меняется, отметьте разницу и повторите там те же вопросы. Решите по наблюдениям, что проверять дальше.
Сопоставьте речь с движением губ
Воспроизведите короткий отрывок с явным смыканием губ, например фразу со словом «план». Смотрите и слушайте одновременно. Отметьте, опережают ли губы голос или отстают и меняется ли смещение по ходу ответа. Проверьте и начало, и отрывок ближе к концу.