Печалби:
- Способност за разбиране на различни работни потоци с изкуствен интелект на музика, звукови ефекти и слоеве за дублиране и опит за тестване на прототип с производство на контейнери
- Възможност за проектиране на техники като набор от вариации в звукови ефекти и адаптивна карта на състоянието на музиката с поддръжка на изкуствен интелект
- Способност за разпознаване на граници като етика на аудио клониране, изисквания за разрешение/договор и музикални авторски права и признаване, че крайното качество често принадлежи на човека-художник
Казват, че визуалното контролира окото, а звукът контролира емоцията. Звуковият дизайн на една игра се състои от три слоя: музика (композиции, които определят атмосферата и темпото), звукови ефекти (SFX - звукови ефекти) (звуци от събития като стъпки, пистолети, врати, щраквания на интерфейс) и глас зад кадър (VO - voice over) (реплики на герои, разказвач). Аудио генериращият AI (модели, които генерират музика, ефекти и реч от текст или препратка) може да бъде ускорител на всички тези слоеве: прототипна музика, ефекти на заместители, концептуални скици, дори гласови скици. Но звукът, подобно на визуализацията, носи авторско право, последователност и - особено в гласа зад кадър - етични измерения.
В този модул ще научите как да използвате AI в производството на звук; Ще научите различните работни процеси на музика, ефекти и глас зад кадър, адаптивна музика, авторски права и етика на клониране на звук.
Три слоя, три работни процеса
Музика. AI може да създаде музикални скици, които улавят настроението на дадена сцена: тема на менюто, бойна музика, атмосфера на изследване. Той е безценен на етапа на прототипа и заместителя — сцената не е „празна“, докато не пристигне композиторът. Но крайната музика често е дело на човешкия композитор; защото темата на марката, емоционалната кулминация и адаптивната музика (слоеста музика, която се променя в зависимост от ситуацията на играта) изискват фин контрол.
Звукови ефекти. AI и процедурните аудио инструменти са практични за създаване на ефекти с голям брой вариации (10 различни стъпки, 5 различни врати); Разчупва монотонността. Ефектите на контейнерите вдъхват живот на прототипа.
Дублаж. Най-чувствителната зона. AI може да създаде бърза чернова/placeholder VO с текст към реч (TTS); Използва се за тестване на опита на играча по време на фазата на редактиране. Но клонирането на истински човешки глас (гласово клониране) изисква разрешение, договори и етика; Последният глас зад кадър е човешкият артист в повечето проекти.
Поток стъпка по стъпка:
- Опишете функцията на звука (какво трябва да се усеща, при какво събитие трябва да възпроизвежда).
- Дайте справка/настроение (темпо, жанр, атмосфера, семпли — рецепта, защитена от авторски права).
- Генериране на контейнер (запълване на прототип, тестване).
- Преминете към човешки художник (за окончателно качество и марка).
- Проверка на авторско право/лиценз/разрешение (особено за музика и аудио).
Съвет: Създайте набор от вариации на звукови ефекти, а не единични проби. Възпроизвеждането на единична проба от една и съща стъпка отново и отново се чувства фалшиво; Става естествено, когато играете 6-8 вариации на случаен принцип.
Адаптивна музика и интеграция
В съвременните игри музиката не е статична, а адаптивна: спокойна, когато играчът изследва, интензивна, когато е въвлечен в битка. AI може да помогне при проектирането на дизайна на тази слоеста структура (кой слой в кое състояние, правила за преход); Неговото производство е работа, интегрирана със звуковия двигател (напр. междинен софтуер). Накарайте AI да картографира състоянието на музиката, след което проверете техническата интеграция.
Внимание: Етика на клонирането на глас. Клонирането на гласа на озвучаващ актьор с AI без неговото или нейното изрично разрешение и съгласие е както етично нарушение, така и правен риск. Имитирането на гласове на починали или добре познати хора също повдига проблеми с правата на личността. Използвайте общ TTS за Placeholder; съгласете се с изпълнителя за крайния звук.
Технически факти на звуковия дизайн
Аудиото на играта е много повече от просто възпроизвеждане на музикален файл; Той е интерактивен. Звукът трябва да реагира незабавно (с ниска латентност) на действието на играча, да резонира различно в зависимост от местоположението (звук отеква в пещера, изсъхва в открито пространство) и не трябва да създава какофония, когато се смеси с други звуци. AI не създава този интерактивен дизайн сам; произвежда суров материал (ефекти, музикални слоеве, линии). Това, което свързва този материал с играта, е звуковият двигател/средният софтуер (средният софтуер, който задейства и смесва звуци според ситуацията в играта) и звуковият дизайнер, който го управлява. Така че не считайте всеки произведен от AI звуков актив за „добре“, без да го тествате в контекст на реална игра – в движение, с други звуци, на различни места.
Друг важен момент са нивата на звука и баланса на микса: музиката не трябва да заглушава диалога, винаги трябва да се чуват критични звуци от играта (като звук на приближаващ враг). AI може да ви предложи план за микс стратегия (кой звук трябва да се откроява в коя ситуация), но окончателното решение за микс е въпрос на слух и опит. Звукът, за разлика от визуалните, се забелязва "на заден план"; Лошото аудио оставя усещане за лошо качество, което играчът не може съзнателно да разбере защо го притесняват. Така че правилото е същото при производството на звук: AI ускорява, ухото и опитът потвърждават.
три мини калъфа
Случай 1 — Заместител запази опита. Един екип трябваше да представи прототип тихо, след като договорът им за композитор беше отложен. Те създадоха запазена музика за 4 сцени с AI и направиха плейтеста със звук; Отзивите на играчите бяха много по-точни, защото атмосферата можеше да бъде тествана. След това окончателната музика е създадена с композитора.
Случай 2 — Ефект вариация добавена естественост. В екшън игра един звук от меч се възпроизвеждаше отново и отново и се чувстваше фалшив. Когато създадохме 8 вариации с AI и ги пуснахме на случаен принцип, резултатът на играчите „битката е по-оживена“ се увеличи значително; производството отне няколко часа.
Случай 3 — Отдръпване от етиката на гласовото клониране. Един екип смяташе да клонира гласа на известен гласов актьор без разрешение за бюджета. Законът предупреждава: неразрешеното клониране на глас е нарушение на договор и лични права. Екипът използва общ TTS за заместител и художник по договор за финала; Това беше както етично, така и безопасно решение.
Четири копируеми шаблона
1) Брифинг за музикално настроение:
Вашата роля: режисьор на саундтрак. Сцена: [напр. нощ, изследване на изоставен град]. Желано чувство: [неспокойно, но любопитно]. Темпо: бавно. Задача: напишете описание на музикалната посока за тази сцена (инструмент, темпо, атмосфера, динамика). НЕ използвайте защитени с авторски права имена на песни/изпълнители; просто ги опишете с квалификации. Посочете, че това е контейнер.
2) План за промяна на ефекта:
Планирайте комплект звукови ефекти за следното събитие: [напр. стъпки по каменния под]. Предложете 8 варианта; всяка леко различна (тегло, скорост, повърхностна влажност). Цел: прекъснете усещането за повторение. Предложете именуване да се играе на случаен принцип в двигателя.
3) Адаптивна карта на състоянието на музиката:
Създава адаптивна карта на състоянието на музиката за следната игра: състояния [изследване, напрежение, битка, победа], музикалния слой на всяко състояние, правила за преход между състояния и време за преход. Имайте предвид, че това е скица на дизайн, която изисква интеграция с аудио двигателя.
4) Аудио авторско право/етичен контрол:
Планирам да създам следния гласов актив: [описание]. Напомнете ми за (1) съображения за авторско право/лицензиране, (2) необходими разрешения и споразумения, ако включва имитиране/клониране на човешки глас, (3) разграничение между заместител и крайна продукция.
Слаба подкана / Силна подкана
Слаба подкана:
Направи ми военна музика.
Без усещане, без темпо, без инструменти, без контекст; общ резултат.
Мощна подкана:
Сцена: финална битка с бос; Играчът почти загуби, но има надежда. Усещане: епично, напрегнато, извисяващо се. Темпо: бързо, ударни доминиращи, кулминация с припев. Продължителност: 90 секунди с възможност за повторение, с динамичен спад в средата. Това е заместител; окончателната версия ще бъде направена с композитора. Не препращайте към произведения, защитени с авторски права.
Функцията, емоционалната дъга, темпото и търсенето на цикъл управляват резултата.
Диаграма за сравнение на аудио слоеве
слой
Пригодност за AI
крайно производство
Авторски/етичен риск
музика
Заместител/концепция
Като цяло композитор
Среден (имитация на работа)
звуков ефект
Генериране на вариации
Може да е частично AI
ниско-средно
озвучаване
TTS заместител
Като цяло художник
Силно (гласово клониране)
Адаптивен дизайн
карта на ситуацията
Интеграция на двигателя
ниско
Често срещани грешки
- Използване на проба с един ефект. Отново се чувства фалшиво; вариацията е необходима.
- Погрешно приемане на Placeholder за ultimate. AI аудиото е схематично в повечето проекти.
- Гласово клониране без разрешение. Това е етично и правно нарушение.
- Цитиране на произведение, защитено с авторски права. Риск от нарушаване на подканите „като такава и такава песен“.
- Създаване на адаптивна музикална статика. Необходими са слоеве в зависимост от ситуацията на играта.
В обобщение
Звукът носи емоцията на играта. AI; Той ускорява производствената линия, като произвежда концепции и заместители в музиката, вариации в ефектите и чернови във вокализацията. Но крайното качество, темата на марката и адаптивният контрол често са работа на човека-художник; Гласовото клониране изисква разрешение и етика. Естественост с вариации, бързина с заместител, върховно качество с художник.
Задача за приложение
Изберете сцена от вашата игра. Дефинирайте музикална посока на заместител с шаблона „Кратко за музикално настроение“ и планирайте набор от ефекти от 8 вариации за събитие с шаблона „План за вариация на ефект“. Накрая проверете плана си с шаблона „Аудио авторски права/етична проверка“.
контролен списък
- [ ] Ясно съм дефинирал звуковата функция и желаното усещане.
- [ ] Създадох набор от вариации в ефектите.
- [ ] Позиционирах AI гласа като контейнер.
- [ ] Спазих изискването за разрешение/договор за гласово клониране.
- [ ] Не споменах нито едно защитено с авторски права произведение/изпълнител.