Si la bouche de votre avatar n'est pas synchronisée, nommez le modèle de synchronisation avant de modifier. Un retard fixe, une dérive croissante et le mouvement de la bouche pendant le silence indiquent différentes causes. Vérifiez l'exportation brute, puis corrigez la plus petite entrée audio, photo ou timeline.
Ne commencez pas par un rendu complet. Décidez d'abord si la bouche est toujours en retard, s'aggrave plus tard, bouge lorsque personne ne parle ou si elle a simplement l'air mal. Ces problèmes sont similaires, mais ils ont besoin de tests différents.
Nommez le modèle de synchronisation avant de modifier
Jouez à l'exportation d'avatar brut et vérifiez trois moments :
- Le premier mot prononcé
- Une pause tranquille
- Le dernier mot parlé
Étiquetez ensuite le problème.
| # | Ce que tu vois | Modèle de synchronisation | Réparer d'abord |
|---|---|---|---|
| 1 | La bouche reste tôt ou tard du même montant | Décalage fixe | Vérifiez le démarrage audio, le premier mot coupé et modifiez l'alignement |
| 2 | L'ouverture semble proche, puis les mots ultérieurs sont à la traîne | Dérive | Diviser l'audio long et vérifier le rythme, les jointures ou les modifications de vitesse |
| 3 | La bouche bouge pendant le silence ou la musique | Faux mouvement | Respirations propres, ton de la pièce, écho, bruit ou musique de fond |
| 4 | La bouche s'ouvre à l'heure mais semble étirée | Problème de forme de la bouche | Améliorer l'angle du portrait, les lèvres visibles, les dents, le recadrage ou l'invite |
Un modèle de timing est meilleur qu'un sentiment. "Ça fait mal" ne vous dit pas quoi réparer. "Le premier mot commence tard, mais la fin reste tout aussi tard" vous donne un test utile.
Vérifiez l'exportation brute avant la modification
Comparez toujours l'exportation brute avant de juger de l'édition finale. Si le fichier brut est synchronisé mais que la version publiée ou modifiée ne l'est pas, la génération d'avatar n'est pas le premier problème.
Vérifiez pour :
- Une carte de titre qui déplace la vidéo mais pas l'audio
- Audio détaché déplacé de quelques images
- La vitesse change sur une seule piste
- Une transition placée avant le clip d'avatar
- Une exportation de plate-forme sociale qui a changé le timing
Dupliquez la chronologie d'édition, supprimez les transitions et les changements de vitesse, et alignez les points de départ audio et vidéo. Si l'exportation brute fonctionne, corrigez la chronologie. Ne régénérez pas l'avatar.
Pour une vue plus large de l'emplacement de chaque outil DomoAI dans la chaîne de production, utilisez le Guide DomoAI Avant de reconstruire le projet.
1. Décalage fixe : La bouche commence tôt ou tard
Le décalage du premier mot provient souvent du début de l'audio. L'audio peut avoir trop d'espace vide avant le premier mot. Il peut également couper la première consonne.
Ce sont des problèmes opposés. Réparez-les différemment.
Corrigez d'abord : Ajustez uniquement le début audio ou l'alignement de la chronologie avant de toucher le portrait ou l'invite.
Si le fichier a une longue date d'exécution, coupez le silence. Si le premier son est coupé, restaurez une petite marge propre avant le mot. Ne coupez pas directement au pic de la forme d'onde.
Utilisez une ligne de test avec un premier son clair :
Veuillez vérifier le dossier bleu avant la réunion.
Testez uniquement le point de départ. Conservez la même longueur de portrait, de voix, d'invite et de clip.
Noms de version :
Sync_start-original_v01
Sync_start-trimmed_v02
Sync_start-restauré-marge_v03
Si le délai reste exactement le même après deux tests de démarrage propre, arrêtez de couper. Vérifiez plutôt l'exportation brute, modifiez l'alignement ou la sortie de l'outil.
2. Drift : Le retard s'aggrave plus tard
Drift signifie que le timing semble acceptable au début, puis s'aggrave plus tard. Ne corrigez pas la dérive en coupant le premier cadre. Cela ne fait que déplacer tout le problème.
Corrigez d'abord : Divisez la ligne en sections naturelles plus courtes et comparez le même portrait avec la même invite.
Divisez le même audio en sections naturelles plus courtes et testez-les par rapport au même portrait.
| Test | Audio | Gardez le même | Revue |
|---|---|---|---|
| A | Ligne complète de 20 secondes | Portrait et invite | Premier mot, pause du milieu, dernier mot |
| B1 | Les 10 premières secondes | Portrait et invite | Premier mot et fin |
| B2 | Deuxième 10 secondes | Portrait et invite | Nouveau premier mot et fin |
Si les parties plus courtes restent proches, votre section complète peut être trop longue pour un examen propre ou un contrôle d'édition. Placez les joints où le spectateur s'attend à un changement :
- À la fin d'une phrase
- Sous une carte de légende
- Pendant un enregistrement d'écran
- Sous un gros plan de produit
- Avant qu'une nouvelle idée ne commence
Si une courte section brute dérive encore, vérifiez le rythme audio et vocal de cette section. Les phrases précipitées, les longues respirations et le volume inégal peuvent rendre la bouche en retard même lorsque le fichier commence proprement.
Vérifiez également si vous avez édité l'audio après la génération. Si vous avez étiré, compressé, désamorcé ou remplacé la piste, comparez-la avec le fichier exact qui a généré l'avatar. Un rendu propre ne peut pas corriger une inadéquation qui s'est produite plus tard dans la chronologie.
3. Faux mouvement : la bouche bouge pendant le silence ou la musique
Le mouvement de la bouche pendant le silence signifie généralement que l'avatar entend toujours quelque chose. Il peut s'agir d'un souffle, d'un ton de pièce, d'une queue de musique, d'un bruit de clavier, d'un écho ou d'un montage approximatif.
Corrigez d'abord : Générer à partir d'audio vocal uniquement ou vocal uniquement, puis ajouter de la musique après l'exportation.
Utilisez l'audio vocal ou vocal uniquement pour la génération. Ajoutez de la musique de fond après l'exportation dans un éditeur vidéo.
Pour une voix générée proprement, créez la narration en DomoAI Texte à la parole, Puis envoyez-le dans le flux de travail de l'avatar. Utilisez un test court avec une pause réelle :
Ouvrez le projet. Pause pour un battement. Vérifiez maintenant le cadre final.
Avant de générer, écoutez avec des écouteurs. Zoomez sur la pause et vérifiez si la forme d'onde est vraiment silencieuse. La réduction du bruit peut également créer des artefacts, alors comparez l'audio traité avec l'original.
Pour un avatar chanteur, ne générez pas à partir d'une chanson mixte complète lorsque vous avez besoin d'un timing précis de la bouche. Utilisez la piste vocale pour l'avatar. Ajoutez l'instrumental ou le mix complet après l'exportation.
4. Problème de forme de la bouche : le timing est bon, mais la bouche semble toujours mauvaise
Parfois, la bouche s'ouvre au bon moment, mais la forme semble fausse. Ce n'est pas un problème de timing. C'est un problème de lisibilité visuelle.
Corrigez d'abord : Testez le même audio avec un portrait plus clair avant de réécrire le script.
Vérifiez le portrait :
- Le visage est-il trop tourné sur le côté ?
- Les cheveux, une main ou un microphone couvrent-ils la bouche ?
- La bouche est-elle déjà ouverte dans le premier cadre ?
- Les dents ou les lèvres sont-elles floues ?
- La coupe coupe-t-elle le menton ou la mâchoire trop serrée ?
Exécutez le même son avec un portrait plus clair face à l'avant. Ne réécrivez pas le script pendant ce test.
Si le portrait a besoin d'une petite correction, utilisez le Générateur et éditeur d’images multimodèle Pour nettoyer la culture, l'arrière-plan ou l'obstruction. Gardez l'identité du visage et la forme de la bouche stables pendant le test.
Cas spécial : chansons de test, lignes traduites et mots durs séparément
Certains problèmes de synchronisation n'apparaissent que sur une seule phrase. Les noms, les abréviations, les nombres, les lignes traduites et les terminaisons chantées peuvent exposer des problèmes de synchronisation qu'une phrase de test simple manque.
Pour un nom difficile, testez d'abord la ligne exacte :
La migration du SKU du troisième trimestre commence le douze août.
Testez ensuite une version parlée plus claire :
La mise à jour commence le douze août. Cela affecte les variantes de produits archivés.
Si le libellé exact doit rester, soutenez-le avec des légendes. Ne forcez pas l'avatar à rendre une ligne dense simple.
Pour les lignes traduites, utilisez l'audio localisé final. Ne jugez pas un clip japonais, espagnol ou allemand avec un espace réservé en anglais. Passez en revue la prononciation, les pauses de légende, le timing du premier mot et la fermeture finale de la bouche pour chaque langue.
Pour chanter, testez la vraie phrase vocale. Un substitut parlé ne révèle pas les mêmes formes de bouche ou les mêmes terminaisons retenues. Incluez un espace instrumental propre afin que vous puissiez voir si la bouche s'installe lorsque la voix s'arrête.
Exécuter Un Test De Synchronisation De Même Portrait
Utilisez un court test avant de reconstruire la vidéo complète. Le but est d'isoler le timing, pas de faire la scène finale.
Préparer :
- Un portrait clair
- Une ligne audio propre de 8 à 12 secondes
- Une pause visible
- Une simple invite d'action
- Une feuille d'horodatage
Scénario :
Veuillez emballer la boîte bleue. Pause pour un battement. Mettez-le près de la porte d'entrée.
Invite d'action :
Présentateur calme, contact visuel direct, expression détendue, rester immobile pendant la pause, un petit sin de tête après le dernier mot.
Exécutez le test dans DomoAI Talking Avatar. Modifiez une entrée à la fois.
Noms de version :
sync_portraitA_audio-original_v01
sync_portraitA_audio-cleanpause_v02
sync_portraitA_audio-slower_v03
Comparer V01 Avec V02 Pour tester la pause. Comparer V02 Avec V03 Pour tester le rythme. Ne comparez pas deux versions où le portrait et l'audio ont changé.
Si le même problème survit à chaque test propre
Parfois, le même problème de synchronisation persiste après avoir testé un son propre, un portrait clair et une courte section. À ce moment-là, arrêtez de faire des modifications aléatoires.
Enregistrez un petit paquet de preuves :
- Portrait source ou vidéo d'avatar
- Fichier audio exact utilisé pour la génération
- Exportation brute avant l'édition
- Échec de l'horodatage
- Invite d'action
- Longueur du clip
- Noms de version et changement entre les versions
Cela vous aide à décider de la prochaine étape. Vous pouvez essayer un portrait source différent, reconstruire uniquement la section défaillante ou envoyer les fichiers au support avec une description précise.
N'envoyez pas seulement l'exportation sociale finale. Les applications sociales peuvent compresser, couper ou changer de temps. L'exportation brute et l'audio source exacte sont plus importants.
Utilisez cette phrase lorsque vous documentez le problème :
Dans l'exportation brute, le premier mot commence à l'heure, mais la bouche continue de bouger pendant la pause silencieuse à 00:06.
Une note comme celle-là donne à un critique un vrai point de départ. "La bouche est bizarre" ne le fait pas.
Utiliser une feuille d'examen à cinq horodatages
Revoir l'intégralité du clip à la fois rend la synchronisation subjective. Utilisez des horodatages.
EXAMEN DE LA SYNCHRONISATION D'AVATAR
Nom du fichier :
Portrait :
Version audio :
Invite d'action :
00:00 premier mouvement visible de la bouche :
00:__ premier mot prononcé :
00:__ pause silencieuse :
00:__ mot ou nom difficile :
00:__ fermeture finale de la bouche :
Modèle :
Cause probable :
Un prochain changement :
Remplissez ceci avant de vous rendre à nouveau. Si vous ne pouvez pas nommer le modèle, exécutez un test plus court.
Utilisez la feuille pour les fichiers bruts et édités. Étiquetez-les clairement :
Feuille_de_synchronisation_d'exportation brute_v01
Éditer_chroniel_feuille_synchrone_v01
Si la feuille brute passe et que la feuille modifiée échoue, corrigez l'édition. Si les deux échouent au même endroit, corrigez l'entrée ou réexécutez le test de génération courte.
Foire aux questions
WAV est-il toujours meilleur que le MP3 ?
Non. Utilisez un format pris en charge et comparez le même enregistrement. Un discours clair, des débuts de mots complets, des pauses propres et un volume stable comptent plus que l'extension du fichier.
La force de synchronisation labiale peut-elle réparer une bouche qui commence tard ?
Pas par lui-même. Lip Sync Strength peut ajuster l'effet de mouvement de la bouche appliqué, mais il ne corrige pas un décalage fixe. Vérifiez d'abord le démarrage audio et l'alignement de la chronologie.
Devrais-je régénérer tout le clip après une mauvaise phrase ?
Non. Remplacez la plus petite section qui contient le problème. Rejoignez-le à la fin d'une phrase, d'un changement de légende, d'un enregistrement d'écran ou d'une coupe planifiée.
Une photo à angle latéral peut-elle causer des problèmes de synchronisation ?
Cela peut rendre la forme de la bouche déformée. Testez le même audio avec une source transparente orientée vers l'avant avant de décider que l'audio est incorrect.
La mise à l'échelle peut-elle corriger la synchronisation de la bouche ?
Non. La mise à l'échelle peut améliorer la netteté finale, mais elle ne peut pas déplacer la bouche vers le bon horodatage. Utilisez le Améliorateur vidéo Après avoir choisi la prise synchronisée.
Correction du premier horodatage échoué
Ouvrez l'exportation brute, marquez le premier mot, une pause et la fermeture finale de la bouche. Corrigez le premier horodatage ayant échoué avec un petit changement. Ensuite, réecarnez un court test avant de reconstruire le clip complet.
