Comment traduire la voix des personnages dans une vidéo sans perdre les caractéristiques d'expression originales des personnages

En général, lorsque l'on parle de Traduction vidéo (traduction vocale de vidéo), cela fait référence à l'utilisation de voix préenregistrées pour remplacer les voix dans la vidéo. Cela permet effectivement de traduire le contenu parlé en différentes langues, mais après la traduction d'une vidéo, même si chaque phrase est compréhensible, cela n'a pas le même effet à l'écoute : il n'y a plus le goût de la voix originale des personnages, ni ce style particulier.

C'est précisément le problème que la traduction de la voix humaine des vidéos à l'audio original doit résoudre : non seulement permettre au public de comprendre une autre langue, mais aussi préserver autant que possible les caractéristiques d'expression que les spectateurs apprécient déjà dans la vidéo originale.

La traduction de la voix originale dans les vidéos consiste à convertir le contenu oral de la vidéo en langue cible et à générer une voix synchronisée avec les images. Certains outils offrent également des fonctionnalités de traduction de sous-titres, d'édition de la voix et de synchronisation des mouvements des lèvres des personnages.

Surtout la fonction d'édition de la voix dans les vidéos, si vous souhaitez des vidéos de traduction de meilleure qualité, vous devez vérifier et relire vous-même en tant qu'humain, et effectuer des ajustements ciblés sur le résultat.

Qu'est-ce que la traduction vocale vidéo ? En quoi est-elle différente de la traduction de sous-titres ?

Le processus typique de traduction de la voix dans les vidéos comprend : l'identification de la voix originale, la traduction du texte, la génération du doublage dans la langue cible, puis l'intégration du doublage avec la vidéo. Les sous-titres peuvent également être générés en même temps.

Par rapport à une simple traduction de sous-titres, sa différence la plus intuitive est que le spectateur peut entendre directement dans la langue cible un timbre, une émotion et un rythme similaires à ceux des voix originales des personnages dans la vidéo, sans toujours avoir besoin de se fier aux mots affichés à l'écran pour comprendre le contenu, ni regarder la vidéo en écoutant des voix qui diffèrent clairement du style de parole des personnages originaux.

Quelques concepts faciles à confondre peuvent être distingués de cette manière :

La traduction audio automatisée (automated audio translation) est la même chose. Contrairement à la traduction vidéo, la traduction audio n'a pas besoin de synchronisation entre le son et l'image, alors que la traduction vidéo doit non seulement être précise, mais aussi que le son et l'image soient coordonnés. Par exemple, même si une instruction opérationnelle est correctement traduite, si le bouton correspondant a déjà disparu de l'écran, le spectateur peut toujours ne pas suivre.

Comment traduire des vidéos de meilleure qualité ?

Conservez d'abord le sens et l'intention de la traduction des sous-titres

Par exemple, les vidéos de tutoriel nécessitent des étapes précises, les démonstrations de produits nécessitent des explications claires des fonctionnalités, et les histoires personnelles nécessitent un contexte émotionnel complet.

Même de petits changements peuvent modifier le sens : « vous pouvez désactiver ce paramètre » et « vous devriez désactiver ce paramètre » ne sont pas la même chose. Les noms de produits, les chiffres, les unités ainsi que les mots de négation méritent une vérification prioritaire.

Même la voix la plus agréable ne peut pas compenser le problème des informations traduites de manière erronée.

Faites en sorte que la traduction ressemble à de la conversation, et non à un manuel rigide.

Une traduction adaptée à la lecture n'est pas forcément adaptée à la récitation directe. La correspondance mot à mot conserve parfois la structure de la phrase, mais perd l'expression naturelle originale.

Le critère de jugement n'est pas que plus court est mieux, mais qu'il soit précis, naturel et qu'il corresponde à la relation entre le locuteur et le public.

Conserver les pauses et le rythme nécessaires

Exprimer la même idée dans différentes langues ne prend pas le même temps. Une traduction qui semble courte peut paraître trop rapide lorsqu'elle est insérée dans un clip vidéo.

Vérifiez s'il y a des pauses avant les informations importantes, s'il y a de l'espace pour respirer entre les instructions consécutives, et si les explications suivent les changements de caméra. Si nécessaire, simplifiez les formulations sans perdre d'informations, ce qui est plus approprié que d'essayer de forcer l'ajout de mots supplémentaires.

Restaurer autant que possible la voix originale des personnages de la vidéo

En plus de traduire les sous-titres de manière naturelle, précise et en accord avec le rythme des images, la voix des personnages dans la vidéo, lorsqu'elle prononce la traduction, doit également conserver autant que possible le timbre, l'émotion et le rythme de la voix originale lorsqu'ils disaient la même phrase. Imaginez qu'un personnage que vous aimez puisse soudainement vous parler dans la langue que vous attendez, ce serait une expérience formidable ! Ainsi, pour les produits qui fournissent la traduction vocale des vidéos, ils devraient également offrir la capacité de restaurer automatiquement la voix des personnages de la vidéo et permettre de régénérer plusieurs fois la même séquence vocale afin d'obtenir le résultat de traduction le plus satisfaisant possible.

Pourquoi est-il encore nécessaire de relire après la traduction automatique ?

La génération automatique fournit une version qui peut être évaluée, ce n’est pas une garantie que chaque phrase soit adaptée à une publication immédiate.

Il est recommandé de vérifier d'abord la reconnaissance du texte original, puis de vérifier la traduction, et enfin de combiner l'image et l'audio. Le bruit de fond, les conversations simultanées de plusieurs personnes et les noms propres inconnus peuvent tous provoquer des erreurs avant même le début de la traduction. Si le nom d'un produit est mal identifié dans le texte original, aucune fluidité ultérieure du doublage ne pourra résoudre ce problème.

La phase de traduction met l'accent sur la vérification du sens, des termes, des chiffres et du naturel de l'oral. La phase d'écoute se concentre sur la prononciation, les pauses, ainsi que la coordination entre le récit et l'image. Cet ordre peut vous aider à identifier exactement où se situe le problème, plutôt que de modifier à plusieurs reprises des parties qui n'ont pas de problème.

Si vous ne maîtrisez pas la langue cible, il est préférable de faire relire les contenus importants par quelqu'un qui connaît bien cette langue. La traduction inversée peut aider à vérifier certaines informations, mais elle ne peut pas prouver que le doublage réel sonne naturellement.

Comment vérifier et améliorer les résultats de traduction dans SoulDub ?

SoulDub combine les sous-titres automatiques, la traduction et la synthèse vocale par IA, et offre la possibilité de vérifier le texte ainsi que d'ajuster manuellement les segments audio. Par conséquent, il ne s'agit pas seulement de savoir si l'on peut générer des vidéos, mais également de savoir si l'intervention humaine est possible pour continuer à améliorer après avoir identifié des problèmes.

Première étape : commencer par une courte vidéo représentative

Choisissez des matériaux pour lesquels vous détenez le droit d'utilisation, le droit de traduction et les autorisations sonores connexes, tels que des tutoriels courts, des explications de produits ou des présentations personnelles.

Il est préférable d'inclure un nom de produit, une pause intentionnelle, et une phrase que vous souhaitez le plus que le public se souvienne. Ainsi, il y aura un objet de vérification clair une fois généré.

Téléchargez la vidéo, choisissez la langue actuellement prise en charge et créez une tâche.

Deuxième étape : vérifier le texte original des sous-titres et le texte traduit

Écoutez d'abord le son original tout en lisant le texte reconnu, corrigez les erreurs de noms, de chiffres et de termes, puis déterminez si la traduction exprime correctement le sens original.

SoulDub offre des fonctions de vérification et d'édition des sous-titres en texte original et en traduction. Lors de la modification, vous pouvez vous demander : le public cible comprendra-t-il cette phrase la première fois qu'il l'entend ? Est-ce conforme au ton de la vidéo originale ? Des conditions nécessaires ont-elles été omises ?

Ne réécrivez pas chaque phrase simplement parce qu'une autre formulation est également valable. Donnez la priorité aux problèmes qui affectent la compréhension ou l'expérience de lecture.

Troisième étape : régénérer la voix selon les besoins

La modification du texte ne mettra pas automatiquement à jour la voix off ou la vidéo déjà générée. Après avoir ajusté la traduction, il faut régénérer la voix correspondante selon les opérations disponibles dans la tâche et vérifier que la sortie finale utilise la nouvelle version.

Les opérations spécifiques et les fonctionnalités disponibles dépendent de l'état de la tâche. Lors du traitement de phrases difficiles à exprimer, il est plus facile de faire une modification claire à la fois pour déterminer s'il s'agit de raccourcir la formulation, de corriger les termes ou de modifier la structure de la phrase pour apporter une amélioration.

Quatrième étape : combiner l'image pour un visionnage et une écoute complets

Écouter chaque segment individuellement ne pose aucun problème, mais lorsqu'ils sont reliés, cela peut encore sembler brusque. Par conséquent, avant l'exportation, il faut le lire du début à la fin, vérifier que la voix, les sous-titres et les images clés sont cohérents, et confirmer que les dernières modifications ont été intégrées dans la vidéo finale.

Vous pouvez d'abord faire une petite expérience : traduire un court extrait vidéo dans SoulDub, en mettant l'accent sur un nom, une pause et une information clé. Comparé à simplement vérifier si le fichier a été généré, c'est beaucoup plus facile de déterminer si le résultat convient à votre contenu.

Questions fréquentes

La traduction de la voix dans la vidéo est-elle un clonage vocal ?

Non. Le premier change la langue, le second simule certaines caractéristiques spécifiques de la voix. Quant à Souldub, il combine les deux, puis va encore plus loin, sans avoir besoin de fournir d'échantillons de voix pour le clonage en dehors de la vidéo.

L'IA peut-elle conserver complètement les émotions de l'orateur original ?

On ne peut pas considérer ce point comme une garantie. L'effet dépend des capacités du système, du matériau, de la traduction et du contexte. L'accent devrait être mis sur le ton et l'accent pour voir s'ils soutiennent l'intention originale, et pas seulement sur la similarité de la couleur de la voix. Cela dit, souldub a fait des efforts pour préserver cet aspect, et nous avons hâte que vous l'essayiez vous-même.

Après le doublage, a-t-on encore besoin de sous-titres ?

Les sous-titres sont toujours précieux : ils peuvent aider les spectateurs regardant en silence, les personnes sourdes et malentendantes, et faciliter la compréhension des noms inconnus et des termes techniques. Après avoir modifié le doublage, n'oubliez pas de vérifier la synchronisation des sous-titres.

Peut-on modifier la traduction de SoulDub ?

Vous pouvez vérifier et éditer les sous-titres du texte original et de la traduction, ainsi que modifier les segments audio. Après modification, il est nécessaire de confirmer si le doublage et la sortie finale sont synchronisés, selon l'interface de tâche actuelle.

Laissez l'expression franchir la barrière des langues, et pas seulement remplacer des mots

La signification de la traduction vidéo est de permettre à un autre groupe de spectateurs de comprendre un contenu qui mérite d'être partagé. Le sens précis, un langage naturel, un rythme approprié et une voix claire constituent ensemble cette expérience.

Il n'est pas nécessaire de commencer par toute la vidéothèque. Choisissez d'abord un extrait de matériel que vous connaissez et une langue cible, générez-le, relisez-le, écoutez-le, puis déterminez les points à améliorer.

Utilisez SoulDub pour traduire votre première vidéo, commencez par une tentative avec un objectif d'examen clair, et voyez à quoi ressemble votre expression dans une autre langue.