Як перекласти голос персонажа у відео, не втрачаючи його оригінальні особливості вираження

Зазвичай, коли говорять про відео переклад (відео з озвученням), мають на увазі заміну голосу людини у відео на попередньо підготовлений голос. Дійсно, це може перекласти оригінальний зміст на різні мови, але після перекладу відео, хоча кожне речення зрозуміле, на слух воно не передає того самого відчуття: немає того самого стилю і манери говоріння оригінальної людини у відео.

Саме це і є проблема, яку потрібно вирішити при перекладі голосу людини в оригінальному відео (Original audio video human voice translation): не лише зробити так, щоб глядач розумів іншу мову, але й максимально зберегти ті особливості вираження, які сподобалися людям у оригінальному відео.

Так званий переклад голосу у відео — це перетворення усного змісту відео на цільову мову та створення голосу, який відповідає зображенню. Деякі інструменти також надають функції перекладу субтитрів, редагування голосу та синхронізації руху губ персонажів.

Особливо функція редагування голосу у відео, якщо ви хочете отримати відео високої якості у перекладі, ви повинні особисто перевіряти і коригувати результати як людина, роблячи цільові налаштування.

Що таке переклад голосу у відео? Чим він відрізняється від перекладу субтитрів?

Типовий процес перекладу голосу у відео включає: розпізнавання оригінальної мови, переклад тексту, створення озвучення цільовою мовою, а потім об’єднання озвучення з відео. Субтитри також можуть генеруватися одночасно.

У порівнянні з простим перекладом субтитрів, його найочевидніша відмінність полягає в тому, що глядач може безпосередньо чути цільовою мовою, що максимально близька за тембром, емоцією та ритмом до голосу персонажів у відео, і йому не потрібно постійно покладатися на текст на екрані, щоб розуміти зміст, або слухати голос, який явно не відповідає стилю мовлення оригінальних персонажів, щоб дивитися відео.

Кілька легко сплутуваних понять можна розрізнити таким чином:

Автоматичний аудіопереклад (automated audio translation) також такий самий. На відміну від відеоперекладу, аудіопереклад не потребує синхронізації звуку та зображення, тоді як відеопереклад крім точності перекладу також оцінюється за тим, наскільки звук та зображення узгоджені. Наприклад, навіть якщо інструкція по виконанню перекладена правильно, якщо відповідна кнопка вже зникла з екрану, глядач все одно може не впоратися.

Як перекласти відео вищої якості?

Спочатку збережіть зміст і намір перекладу субтитрів

Наприклад, відео-уроки потребують точних кроків, відео з демонстрацією продукту – чіткого пояснення функцій, а особисті історії – повного емоційного контексту.

Навіть незначні зміни можуть змінити значення: «ви можете вимкнути цю настройку» і «вам слід вимкнути цю настройку» — це не одне й те саме. Назви продуктів, числа, одиниці та заперечні слова варто перевіряти в першу чергу.

Найприємніший голос не може компенсувати проблему неправильно переданої інформації.

Нехай переклад буде як розмова, а не як суха інструкція

Придатний для читання переклад не обов'язково підходить для безпосереднього виголошення. Дослівне відповідність іноді зберігає структуру речення, але втрачає природне вираження оригіналу.

Критерієм оцінки є не те, що коротше, тим краще, а те, що точно, природно і відповідає відносинам між мовцем і аудиторією.

Зберігайте необхідні паузи та ритм

Виражаючи одну й ту ж саму думку різними мовами, потрібний час буває різним. Переклад, який здається коротким, може виглядати поспішним, коли його вставляють у відеофрагмент.

Перевірте, чи є паузи перед важливою інформацією, чи є перепочинок між послідовними інструкціями, а також чи встигає пояснення за змінами кадру. За необхідності спрощуйте формулювання, не втрачаючи інформацію, це більш доречно, ніж примусово вставляти більше слів.

Намагатися відтворити оригінальний голос персонажів відео якомога точніше

Окрім того, що переклад субтитрів повинен бути природним, точним і відповідати ритму відео, голос персонажів у відео при вимові перекладу також повинен максимально зберігати тембр, емоції та темп оригінальної вимови тієї ж фрази. Уявіть, що ваш улюблений персонаж раптом може говорити з вами мовою, якої ви очікуєте — хіба це не чудовий досвід! Тому для продукту, який надає переклад голосу у відео, слід одночасно забезпечувати можливість автоматично відтворювати голос персонажа у відео, а також надавати можливість повторного генерування тієї самої аудіозаписи кілька разів, щоб ми отримали максимально задовільний результат перекладу.

Після автоматичного перекладу, чому все ще потрібно коректуру?

Автоматично згенерована версія є оцінюваною версією, а не гарантією того, що кожне речення підходить для негайної публікації.

Рекомендується спочатку перевірити розпізнавання оригінального тексту, потім перевірити переклад, і нарешті звірити з відео та аудіо. Фоновий шум, одночасна розмова кількох людей та незнайомі власні назви можуть призвести до помилок ще до початку перекладу. Якщо назва продукту в оригіналі розпізнана неправильно, навіть найплавніше озвучення не вирішить цю проблему.

На етапі перекладу основна увага приділяється перевірці змісту, термінології, цифр та природності усної мови. На етапі прослуховування звертають увагу на вимову, паузи та відповідність розповіді зображенню. Така послідовність допомагає визначити, на якому етапі виникає проблема, а не постійно виправляти те, що не потребує змін.

Якщо ви не розумієте цільову мову, важливий зміст найкраще перевірити у людини, яка добре знає цю мову. Зворотний переклад може допомогти перевірити частину інформації, але не може довести, що фактичне озвучення звучить природньо.

Як перевірити та покращити результати перекладу в SoulDub?

SoulDub поєднує автоматичні субтитри, переклад і AI-дубляж, а також надає можливість корекції тексту та ручного редагування голосових фрагментів. Тому варто звертати увагу не лише на те, чи можна створити відео, а й на те, чи можлива подальша доопрацювання людиною після виявлення проблем.

Перший крок: почніть з короткого відео, що є представницьким

Вибирайте матеріали, щодо яких ви маєте право на використання, переклад та відповідні голосові права, наприклад, короткі навчальні посібники, пояснення продукту або особисті презентації.

Краще включити назву продукту, навмисну паузу та речення, яке ви найбільше хочете, щоб глядач запам’ятав. Так, після генерації буде чіткий об’єкт для перевірки.

Завантажте відео, оберіть підтримувану мову та створіть завдання.

Крок другий: перевірка оригінальних субтитрів та перекладу тексту

Спершу слухайте оригінальне звучання та читайте розпізнаний текст, виправляйте помилки в іменах, числах та термінах, а потім оцінюйте, чи точний переклад передає первісний сенс.

SoulDub надає функції перевірки та редагування оригінальних і перекладених субтитрів. Під час редагування можна запитати себе: чи зрозуміє цю фразу цільова аудиторія при першому прослуховуванні? Чи відповідає вона тону оригінального відео? Чи не пропущено необхідні умови?

Не переписуйте кожне речення лише тому, що інший варіант також можливий. Спрямовуйте пріоритет на вирішення проблем, які впливають на розуміння або перегляд.

Крок третій: за потреби повторно згенерувати голос

Зміни в тексті не оновлюють автоматично вже створений дубляж або готовий відеоматеріал. Після корекції перекладу слід повторно згенерувати відповідну аудіодоріжку, використовуючи доступні в завданні опції, та переконатися, що кінцевий результат використовує нову версію.

Конкретні дії та доступні функції залежать від стану завдання. Під час обробки складних для вираження речень краще робити одне чітке виправлення за раз, тоді легше оцінити, чи покращення пов'язане зі скороченням формулювань, виправленням термінів, чи з коригуванням структури речення.

Крок четвертий: об'єднати зображення та завершене прослуховування

Окремо прослуховування кожного фрагмента не викликає проблем, але при їх об'єднанні це все одно може виглядати різко. Тому перед експортом слід програти відео від початку до кінця, перевірити, чи збігаються голос, субтитри та ключові кадри, а також переконатися, що останні зміни внесені у фінальне відео.

Можна спочатку провести невеликий експеримент: перекласти невеликий фрагмент відео у SoulDub, звертаючи особливу увагу на одне ім'я, одну паузу та одне ключове повідомлення. Це легше, ніж просто перевіряти, чи створено файл, щоб оцінити, чи підходить результат для вашого контенту.

Поширені запитання

Переклад людського голосу у відео — це те ж саме, що клонування голосу?

Ні. Перше змінює мову, друге імітує окремі характеристики конкретного голосу. А Souldub поєднує обидва підходи і йде ще далі, не потребуючи додаткових зразків голосу для клонування, окрім тих, що надані у відео.

Чи може штучний інтелект повністю зберегти емоції оригінального мовця?

Не можна розглядати це як гарантію. Ефект залежить від здатності системи, матеріалу, перекладу та контексту. Основна увага повинна бути зосереджена на тому, чи підтримують інтонація та наголос оригінальний намір висловлювання, а не лише на тому, чи подібний тембр голосу, хоча, кажучи це, souldub намагався зберегти це в цій частині і ми дуже сподіваємося, що ви спробуєте самі.

Після перекладу та озвучення, чи потрібні ще субтитри?

Субтитри все ще мають значення: вони допомагають глядачам, які дивляться без звуку, людям з порушенням слуху, а також полегшують розуміння незнайомих імен та професійних термінів. Після зміни дубляжу не забудьте синхронно перевірити субтитри.

Чи можна змінювати переклад SoulDub?

Можна перевіряти та редагувати субтитри оригіналу та перекладу, а також редагувати голосові фрагменти. Після внесення змін потрібно підтвердити, чи синхронізовано дублювання з остаточним вихідним файлом, конкретно відповідно до поточного інтерфейсу завдання.

Дозвольте вираженню переступати через мови, а не тільки замінювати слова

Значення відеоперекладу полягає в тому, щоб інша група глядачів зрозуміла контент, який варто поділитися. Точне значення, природні формулювання, відповідний ритм і чіткий звук разом формують цей досвід.

Не обов'язково починати з усієї відеотеки. Спершу оберіть знайомий матеріал і одну цільову мову, згенеруйте, перевірте та прослухайте, а потім визначте, що ще потребує покращення.

Перекладіть своє перше відео за допомогою SoulDub почніть із спроби з чіткою метою перевірки і подивіться, яким буде ваш вислів іншою мовою.