Липсинк
Синхронизация движения губ с речью.
Отдельная задача генерации видео: модель должна попадать артикуляцией в звуковую дорожку.
Как влияет. Плохой липсинк — первое, что замечает зритель, даже не понимая, что именно не так. Порог терпимости у людей к рассинхрону речи очень низкий.
Что важно знать. Качество липсинка сильно зависит от языка: модели заметно лучше справляются с английской артикуляцией.
Где встречается. Точность синхронизации — узкое место говорящего аватара и всей озвучки с переводом: позиции губ привязаны к фонемам конкретного языка.