Faire parler un personnage IA : lip-sync, voix et dialogues
Faire parler un personnage IA avec une vraie synchronisation labiale : dialogues dans le prompt, voix clonée, voix off ou parole à l'écran. Méthode et exemples.
Pour faire parler un personnage IA, la méthode la plus simple aujourd'hui consiste à écrire la réplique directement dans le prompt vidéo, en précisant qui parle et sur quel ton : les modèles récents comme Seedance 2.5 ou Happy Horse génèrent l'image, la voix et la synchronisation labiale en une seule passe. Pour que le personnage ait toujours la même voix, on lui associe une voix clonée qui lui sert de référence. Ce guide explique les deux approches, comment écrire un dialogue que l'IA comprend, et comment choisir entre voix off et parole à l'écran.
Voix off ou parole à l'écran : deux besoins différents
Avant de générer quoi que ce soit, décidez ce que vous voulez vraiment.
| Voix off | Parole à l'écran | |
|---|---|---|
| Ce qu'on voit | Des images, sans bouche qui parle | Le personnage articule face caméra |
| Lip-sync nécessaire | Non | Oui |
| Méthode | Générer la voix à part, la poser au montage | Dialogue dans le prompt vidéo, audio natif |
| Contrôle | Total sur le texte et le timing | Le modèle décide du jeu et du rythme |
| Idéal pour | Tutoriels, récits, pubs produit | Sketchs, séries, UGC, influenceur IA |
La voix off est plus simple et plus prévisible. La parole à l'écran est plus vivante, mais c'est là que la synchronisation labiale compte — et c'est surtout elle qui nous intéresse ici.
Méthode 1 : écrire le dialogue dans le prompt vidéo
Seedance 2.5 génère l'audio en natif : il lit le dialogue de votre prompt et fait parler le personnage en synchronisant les lèvres. Pour qu'il comprenne, trois éléments doivent être présents dans chaque réplique :
- Qui parle — le nom du personnage, ou son tag
@Noms'il est enregistré dans le studio. - Ce qu'il dit — entre accolades
{…}(la notation de Seedance pour la parole) ou entre guillemets. - Comment il le dit — un mot de ton : chuchote, crie, calmement, en riant.
Dans un prompt Seedance, {…} signale un dialogue, (…) une musique et <…> un bruitage. Ne les mélangez pas : un texte entre parenthèses sera traité comme de la musique, pas comme de la parole.
Exemple en français :
Cuisine d'appartement parisien, matin, lumière douce. Plan rapproché sur @Lina qui tient une tasse.
@Lina dit en souriant : {Bon. Aujourd'hui, on arrête de remettre à demain.}
Elle pose la tasse. <tasse posée sur le plan de travail> (petite musique guitare acoustique en fond)
Les modèles vidéo comprennent souvent mieux la mise en scène en anglais. Une bonne pratique : écrire la description en anglais et garder la réplique en français, puisque c'est la langue qu'on veut entendre.
Night, rainy street, neon reflections. Medium close-up on @Leo under a bus shelter, out of breath.
@Leo whispers: {Ils sont encore là. Ne te retourne pas.}
<rain on the shelter roof> <distant siren>
Deux personnages qui se répondent :
Two friends on a park bench, autumn, handheld camera, natural light.
@Maya says, laughing: {Tu as vraiment mis du ketchup sur ta raclette ?}
@Leo replies calmly: {C'est ce qu'on appelle de l'innovation.}
Les règles d'or d'un dialogue que l'IA joue bien
- Une ou deux répliques par clip court. Un monologue de 80 mots dans 8 secondes donnera un débit de commissaire-priseur.
- Attribuez chaque réplique. Sans locuteur clair, le modèle choisit au hasard qui parle — ou personne.
- Toujours un mot de ton. « Dit » tout court donne une lecture neutre ; « murmure », « s'énerve », « hésite » donnent un jeu.
- Gardez une réplique entière dans un même plan. Une phrase coupée entre deux clips sera souvent répétée ou tronquée.
- Visage visible. Pour un lip-sync convaincant, cadrez en plan rapproché ou moyen, personnage tourné vers la caméra.
Le bouton générateur de prompt IA du studio sait écrire ce format : il attribue chaque réplique à un personnage (avec le @tag pour vos personnages enregistrés) et ajoute un mot de ton.
Méthode 2 : la voix clonée du personnage, automatiquement
Laisser le modèle inventer une voix, c'est risquer une voix différente à chaque clip. Pour une série, il faut que votre personnage sonne pareil à chaque épisode.
Dans Framiq, un personnage peut être lié à une voix clonée (créée dans l'onglet Voix). Activez ensuite l'interrupteur Voix dans le panneau vidéo :
- Le studio repère les répliques de votre prompt et identifie qui parle.
- Il génère chaque réplique avec la voix clonée du personnage, en tenant compte du mot de ton.
- Il transmet ces enregistrements à Seedance comme audio de référence.
- Seedance anime le personnage sur cette voix, et génère en plus le reste de la bande-son : ambiance, musique, bruitages.
Quelques précisions utiles :
- L'option est désactivée par défaut, car elle coûte un supplément (la génération des voix).
- Si un personnage cité n'a pas de voix liée, le studio vous dit lequel, plutôt que de l'ignorer en silence.
- Une réplique sans locuteur identifiable n'est pas doublée.
- Ne clonez que votre propre voix ou celle d'une personne qui a donné son accord explicite. Cloner la voix de quelqu'un d'autre sans consentement, c'est un deepfake.
Pour créer la voix elle-même (enregistrement, modèle Eleven v4, balises d'émotion), suivez notre guide comment générer une voix IA.
Happy Horse : un autre modèle pour le lip-sync multilingue
Parmi les modèles vidéo du studio, Happy Horse (Alibaba) génère lui aussi l'audio en natif, avec une synchronisation labiale multilingue. C'est une option intéressante à tester quand votre personnage parle une autre langue que le français, ou pour comparer le jeu d'acteur sur une même réplique. Le format d'écriture reste le même : qui parle, quoi, comment.
Le bon réflexe : générer la même scène courte sur Seedance 2.5 et sur Happy Horse, puis garder le modèle dont le rendu vous convient pour toute la série.
Faire parler une photo
Vous avez une photo (de vous, ou d'un personnage fictif) et vous voulez qu'elle parle ? Utilisez-la comme image de début dans Seedance 2.5 et écrivez la réplique dans le prompt. Le clip part exactement de votre image et l'anime en parlant. Mieux encore : créez un personnage à partir de cette photo pour retrouver le même visage dans les vidéos suivantes. Pour l'animation de photo en général, voir animer une photo avec l'IA.
Une seule règle : la photo doit être la vôtre, celle d'une personne qui a donné son accord, ou une image générée. Pas de célébrité, pas de photo d'un tiers.
Les erreurs les plus courantes
| Problème | Cause probable | Solution |
|---|---|---|
| Le personnage ne parle pas | Réplique sans accolades ni guillemets, ou entre parenthèses | Mettre la parole entre {…} |
| Le mauvais personnage parle | Réplique non attribuée | Écrire @Nom dit : {…} |
| Débit trop rapide | Trop de texte pour la durée du clip | Raccourcir, ou allonger le clip (jusqu'à 30 s sur Seedance 2.5) |
| Lecture plate | Aucun mot de ton | Ajouter « chuchote », « en riant », « calmement » |
| Voix différente d'un clip à l'autre | Voix laissée au modèle | Lier une voix clonée et activer Voix |
| Plus de musique ni d'ambiance | Prompt qui ne décrit que le dialogue | Ajouter <bruitages> et (musique) dans le prompt |
| Lèvres floues ou décalées | Personnage de dos ou trop loin | Plan rapproché, visage vers la caméra |
Combien ça coûte ?
La vidéo est facturée à la génération : au tarif standard sur le plan Gratuit, au prix de l'API sur le plan Pro (30 par mois). Les voix clonées générées par l'interrupteur Voix s'ajoutent, mais pèsent peu face au prix de la vidéo. Repère : un clip Seedance 2.5 de 30 secondes en 720p coûte environ 7 $ de coût API. Tout est détaillé sur la page tarifs, et les générations échouées sont remboursées.
FAQ
Comment faire parler un personnage IA gratuitement ?
Créez un compte gratuit Framiq : les crédits offerts permettent de générer vos premiers clips parlants avec Seedance 2.5. Écrivez la réplique entre accolades avec le nom du personnage et un mot de ton.
Quelle IA fait la meilleure synchronisation labiale ?
Les modèles à audio natif, comme Seedance 2.5 et Happy Horse, génèrent la voix et les lèvres ensemble, ce qui donne une synchronisation plus naturelle qu'un doublage ajouté après coup. Testez la même réplique sur les deux.
Comment donner toujours la même voix à mon personnage IA ?
Liez-le à une voix clonée dans le studio et activez l'interrupteur Voix : chaque réplique est générée avec cette voix et transmise au modèle vidéo comme référence.
L'IA peut-elle faire parler un personnage en français ?
Oui. Écrivez la réplique en français entre accolades ; vous pouvez laisser la mise en scène en anglais si le modèle la comprend mieux.
Peut-on faire parler la photo d'une vraie personne ?
Seulement la vôtre, ou celle d'une personne qui a donné son accord explicite. Faire parler quelqu'un sans son consentement est un deepfake. Et pensez à étiqueter vos vidéos : TikTok et Instagram exigent de signaler les contenus réalistes générés par IA (label « contenu généré par IA » sur TikTok).
Faut-il un logiciel de montage pour la voix off ?
Pour une voix off classique, oui : générez la voix dans l'onglet Voix et posez-la sur votre vidéo. Pour une parole à l'écran, non : tout est généré dans le clip.
Essayez sur une seule réplique
Commencez petit : un personnage, un plan rapproché, une réplique avec un mot de ton. Générez-la dans le studio Framiq, écoutez, ajustez le ton, puis liez une voix clonée pour la suite de la série. Pour le reste du workflow vidéo, voyez comment générer une vidéo IA et le tutoriel Seedance 2.5.
Essayez sur Framiq
Compte gratuit, crédits offerts pour démarrer. Tous les modèles de cet article dans un seul studio. Sans carte bancaire.
Commencer gratuitement