Dictionnaire IA / Lip-sync

🎨 Image, vidéo et son

Le lip-sync dans le contexte de l'IA est la synchronisation automatique du mouvement des lèvres d'un personnage sur vidéo avec une piste audio ajoutée. Le modèle analyse le son et modifie les lèvres (et souvent toute la mimique) pour que le personnage semble vraiment prononcer ces mots. C'est la technologie derrière la nouvelle génération de doublage - un film « parle » en langue étrangère avec les lèvres de l'acteur - et derrière les avatars parlants pour cours et marketing. En duo avec le clonage de voix, cela donne un package complet de locuteur synthétique, avec toutes les bonnes et mauvaises conséquences que cela implique.