одиниця 6 / 11

Дубляж, клонування голосу та багатомовний дубляж

Прибуток:

  • Здатність розуміти інструменти перетворення тексту в мову (TTS), клонування голосу та штучного дубляжу (дубляж/синхронізація губ), а також створювати чернетки голосу за кадром
  • Досягніть природної вокалізації з інструкціями щодо тону, темпу, наголосу та вимови та вмійте планувати багатомовну версію
  • Для клонування голосу людини потрібна згода, авторські та особисті права; Розуміння того, що несхвалена голосова імітація є етикою та правом

Аудіо – це половина відео. Глядач може пробачити поганий образ; не прощає поганого звуку. У традиційному виробництві дубляж дорогий і повільний: знайти виконавця дубляжу, створити студію, запис і передзвонити, якщо сталася помилка. Штучний інтелект змінив цю картину: інструменти синтезу мовлення можуть перетворити текст на природний голос за лічені хвилини; клонування голосу може «вивчити» голос людини і змусити її говорити нові речення; Інструменти штучного дубляжу можуть перевести відео на іншу мову в гармонії з рухами губ. Кожна з цих потужних здібностей також несе серйозну етичну та юридичну відповідальність. У цьому розділі ми розглянемо як техніку, так і кордон.

Терміни. Синтез мовлення (TTS) — це технологія, яка перетворює письмовий текст на синтетичний голос. Клонування голосу — це створення моделі, яка імітує голос реальної людини за зразком голосу. Штучний дубляж — це переклад мовлення відео іншою мовою та дубляж цією мовою, що часто робить його сумісним із рухом губ (синхронізація губ). Просодія — це модель інтонації, наголосу та ритму мови — «емоція» речення здебільшого походить від просодії. Фонема — найменша звукова одиниця в мові; Проблеми з вимовою часто вирішуються на рівні фонеми.

Голос поверх тексту в мовлення

Інструменти TTS сьогодні напрочуд природні; але щоб отримати «хороший» голос за кадром, потрібно правильно керувати транспортним засобом. Вставлення необробленого тексту та вказівка ​​«прочитати» дає плоский і роботизований результат. Для гарної озвучки керуйтеся: характером голосу (вік, стать, теплота), тембром (щирий, серйозний, схвильований), темпом (повільна розповідь чи енергійна реклама), наголосом (яке слово має виділятися), паузами (дихання, пунктуація) і вимовою (власні назви, скорочення, іншомовні слова). Багато інструментів дають вам такий контроль, додаючи до тексту знаки пунктуації та короткі інструкції або використовуючи спеціальну розмітку.

Ваша роль: помічник режисера озвучування. Текст: [60-секундний текст розповіді нижче]Голосова директива:- Озвучка: жіночий голос років 30, теплий і заспокійливий.- Тон: спокійний, щирий; БЕЗ рекламних криків.- Темп: середньо-повільний; коротке дихання в кінці кожного речення.- Наголос: злегка виділяє слова «безкоштовно» і «30 днів».- Вимова: «AiEdu» -> «ey-edu»; «%» -> «відсоток». Завдання: Підготувати текст, позначений відповідно до цієї інструкції (вказати, де буде ставитися наголос/пауза).

Обов’язково прослухайте та перевірте вихід TTS: неправильно вимовлені власні імена, дивні наголоси та неприродні паузи є звичайним явищем. У турецькій мові слова іншомовного походження, особливо слова, абревіатури та цифри, викликають проблеми ("2024" -> "дві тисячі двадцять чотири" чи "двадцять двадцять чотири"?).

Клонування голосу: сила і відповідальність

Клонування голосу створює модель, яка імітує голос людини з кількох хвилин запису. Він має правомірне використання: завершити голос за кадром голосом ведучого, за його чи її згодою, у день хвороби; послідовне використання затвердженої «звукової ідентичності» бренду; змусити власний голос говорити іншими мовами. Але саме ця влада проводить найбільшу етичну межу: клонування та використання голосу людини без її явної згоди є порушенням особистих прав і в багатьох місцях тягне за собою юридичну відповідальність. Голос є частиною особистості людини; Імітація може призвести до шахрайства, наклепу та шкоди репутації.

Основні принципи, яких слід дотримуватися при клонуванні голосу:

принцип

застосування

Явна згода

Письмовий дозвіл від власника голосу з певним обсягом

Чіткість сфери застосування

Де, як довго і з якою метою він буде використовуватися?

прозорість

При необхідності інформація "цей звук є штучним виробництвом"

обмежене використання

Не виходячи за рамки згоди (новий проект, інший продукт)

відкатність

Право особи відкликати згоду

Застереження: клонування голосу знаменитості, політика чи когось із ваших знайомих без їхньої згоди та створення вмісту — навіть з метою «жарту» чи «експерименту» — є серйозним порушенням. Розповсюдження створеного вмісту поза вашим контролем неможливо скасувати.

Багатомовний дубляж

Синтетичний дубляж — це найшвидший спосіб відкрити відео різними мовами: інструмент перекладає мову, дублює її цільовою мовою та іноді синхронізує рухи губ. Це революційно для творців контенту, які хочуть охопити глобальну аудиторію. Але це одна з найбільш вразливих точок, оскільки три окремі рівні помилок перетинаються: помилка перекладу (ідіома, термін, контекст), помилка голосу (неправильний тон, вимова) і помилка синхронізації (невідповідність губ, невідповідність часу). Тому при багатомовному дубляжі необхідно, щоб особа, яка володіє цільовою мовою на рідному рівні, перевіряла як переклад, так і дубляж. Цілісність бренду, значення та емоції можуть бути захищені лише людським контролем.

три міні-чохла

Випадок 1 — Швидке та етичне озвучення. Групі електронного навчання довелося оновити розповідь курсу з 40 відео; Згадувати художника з кожним оновленням було дорого. Вони уклали письмовий контракт із виконавцем, у якому вказано обсяг його/її голосу, який буде клоновано для цього курсу. Тому вони внесли зміни в текст за лічені хвилини, з його голосом і його схваленням. Художник і отримував свій гонорар, і зберігав контроль; Команда набрала обертів.

Випадок 2 — Скандал із клонами без згоди. Творець контенту клонував голос відомого актора озвучення зі своїх відео на YouTube і використав його в рекламі. Артист впізнав його голос, почав судовий процес і про інцидент повідомили в пресі. Репутація бренду постраждала, контент був видалений, а компенсація винесена на порядок денний. Урок: використання аудіо без згоди є як етичною, так і правовою катастрофою.

Випадок 3 — Неперевірений дубляж. Один канал штучно дублював свої відео іспанською мовою, але ніколи їх не перевіряв. Технічний термін було неправильно перекладено, а голос за кадром зробив наголос, який змінив значення речення. Іспанські глядачі вказали на помилку в коментарях, довіра була підірвана. Правильний спосіб полягав у тому, щоб його перевірив хтось, хто знає цільову мову.

Слабка підказка / Сильна підказка

Слабка підказка:

Промовте цей текст.

Немає вокального характеру, тону, темпу чи вимови. Результат стає плоским і роботизованим.

Потужна підказка:

Ваша роль: режисер озвучування. Мета: 45 секунд розповіді про просування товару. Голос: 35 років, теплий чоловічий голос, заспокійливий. Тон: інформативний, але щирий; без перебільшення. Темп: середній; трохи сповільнюється в технічних реченнях. Наголос: виділіть слова ціна і гарантія. Вимова: «3D» -> «тривимірний»; назва бренду [БРЕНД] як є. Вихід: закадровий текст із позначеними наголосами та паузами. Обмеження: використовуйте лише згоду/синтетичний голос; видавати себе за реальну особу.

Поширені помилки

  • Читання необробленого тексту без керівництва. Якщо тон, темп і наголос не задані, голос звучатиме роботизовано.
  • Використання вихідного сигналу TTS без його прослуховування. Часто зустрічається неправильна вимова (власна назва, число, абревіатура).
  • Клонування голосу без згоди. Етичне та правове порушення; Виправдання «експеримент/жарт» не є дійсним.
  • Перевищення обсягу згоди. Використання дозволу на проект в іншій роботі є порушенням.
  • Не перевіряю дубляж. Переклад + дубляж + помилка синхронізації перекриваються.
Порада: У TTS чітко пишіть у тексті цифри, абревіатури та власні назви («тридцять відсотків», «тривимірний», «ей-еду»). Ви визначаєте вимову, а не залишаєте її вгадувати модель.

Підсумовуючи

Синтетичний дубляж, клонування голосу та дубляж радикально прискорюють аудіо роботу у відеовиробництві та забезпечують глобальне охоплення. Щоб отримати хороші результати, керуйте TTS тоном, темпом, наголосом і вказівками щодо вимови та обов’язково слухайте вихід. Клонування голосу є потужним, але воно проводить найчіткішу етичну межу: голос людини можна використовувати лише за чіткої, чіткої, письмової згоди; Імітація без згоди є порушенням. Оскільки при багатомовному дубляжі помилки перекладу, дубляжу та синхронізації збігаються, перевірка особою, яка знає цільову мову, є важливою. Генерує звук автомобіля; Згода, точність і значення - це ваша відповідальність.

Аплікаційне завдання

Напишіть 60-секундний розповідний текст. Озвучте це за допомогою інструмента TTS із вказівками щодо тону/темпу/наголосу/вимови, як зазначено вище. Послухайте вихідні дані та знайдіть і виправте принаймні три неправильно вимовлені місця (число, власна назва, абревіатура). Потім складіть просту «форму згоди» на клонування голосу: чий голос, який проект, на який термін, для якого використання, право відмовитися. Підведіть підсумки своєї роботи.

контрольний список

  • [ ] Чи керував я вокалізацією тоном, темпом, наголосом і рекомендаціями щодо вимови?
  • [ ] Чи я прослухав вихід TTS і виправив будь-які помилки вимови/числа/абревіатури?
  • [ ] Чи є чітка та конкретна письмова згода на голос, який я клоную/використовую?
  • [ ] Чи переконався я, що я не вийшов за рамки згоди (місце, тривалість, мета)?
  • [ ] Чи перевіряв я вихід дубляжу для перекладу/тону/синхронізації з кимось, хто знає цільову мову?