Jednotka 6 / 11

Produkce zvuku, hudby a efektů: The Heard World of the Game

zisky:

  • Schopnost porozumět různým pracovním tokům umělé inteligence hudby, zvukových efektů a dabingových vrstev a testovat zkušenosti s prototypy pomocí zástupné produkce
  • Schopnost navrhovat techniky, jako jsou variace zvukových efektů a adaptivní mapa stavu hudby s podporou umělé inteligence
  • Schopnost rozpoznat hranice, jako je etika klonování zvuku, požadavky na povolení/smlouvu a autorská práva k hudbě, a uznat, že konečná kvalita často patří lidskému umělci

Říká se, že zrak ovládá oko a zvuk emoce. Zvukový design hry se skládá ze tří vrstev: hudba (skladby, které určují atmosféru a tempo), zvukové efekty (SFX - zvukové efekty) (zvuky událostí, jako jsou kroky, zbraně, dveře, kliknutí rozhraní) a voiceover (VO - voice over) (linky postav, vypravěč). Audio generativní umělá inteligence (modely, které generují hudbu, efekty a řeč z textu nebo odkazu) může být akcelerátorem ve všech těchto vrstvách: prototypová hudba, zástupné efekty, koncepční náčrty, dokonce i náčrtky komentáře. Ale zvuk, stejně jako obraz, v sobě nese autorská práva, konzistenci a – zvláště v voice-overu – etické rozměry.

V této jednotce se naučíte používat AI při produkci zvuku; Naučíte se různé pracovní postupy hudby, efektů a voice-overu, adaptivní hudby, autorských práv a etiky klonování zvuku.

Tři vrstvy, tři pracovní postupy

Hudba. Umělá inteligence dokáže vytvářet hudební náčrty, které zachycují náladu scény: téma nabídky, bitevní hudba, atmosféra průzkumu. Je neocenitelný ve fázi prototypu a zástupného symbolu — scéna není „prázdná“, dokud nedorazí skladatel. Ale výsledná hudba je často dílem lidského skladatele; protože téma značky, emocionální vyvrcholení a adaptivní hudba (vrstvená hudba, která se mění v závislosti na herní situaci) vyžadují jemné ovládání.

Zvukové efekty. AI a procedurální audio nástroje jsou praktické při vytváření efektů s velkým počtem variací (10 různých kroků, 5 různých dveří); Rozbíjí to monotónnost. Zástupné efekty oživí prototyp.

Dabing. Nejcitlivější oblast. Umělá inteligence dokáže vytvořit rychlý koncept/zástupný VO s textem na řeč (TTS); Slouží k testování hráčského zážitku ve fázi úprav. Ale klonování skutečného lidského hlasu (klonování hlasu) vyžaduje povolení, smlouvy a etiku; Konečným hlasem je ve většině projektů lidský umělec.

Postup krok za krokem:

  1. Popište funkci zvuku (jaký má být pocit, při jaké akci má hrát).
  2. Uveďte odkaz/náladu (tempo, žánr, atmosféra, ukázky — autorsky bezpečný recept).
  3. Vygenerujte zástupný symbol (vyplňte prototyp, testujte zkušenosti).
  4. Přejděte k lidskému umělci (pro konečnou kvalitu a značku).
  5. Kontrola autorských práv/licence/oprávnění (zejména u hudby a zvuku).
Tip: Vytvořte sadu variací zvukových efektů, nikoli jednotlivé vzorky. Přehrávání jediného samplu stejného kroku znovu a znovu působí falešně; Stane se přirozeným, když hrajete 6-8 variací náhodně.

Adaptivní hudba a integrace

V moderních hrách není hudba statická, ale přizpůsobivá: klidná, když hráč zkoumá, intenzivní, když se zapojí do boje. AI může pomoci navrhnout návrh této vrstvené struktury (která vrstva v jakém stavu, pravidla přechodu); Jeho výroba je práce integrovaná se zvukovým enginem (např. middleware). Nechte AI zmapovat stav hudby a poté ověřte technickou integraci.

Upozornění: Etika klonování hlasu. Klonování hlasu hlasového herce pomocí AI bez jeho výslovného povolení a souhlasu je jak etickým porušením, tak právním rizikem. Napodobování hlasů zesnulých nebo známých lidí také vyvolává otázky osobnostních práv. Použijte obecný TTS pro zástupný symbol; dohodněte se s umělcem na konečném zvuku.

Technická fakta zvukového designu

Zvuk hry je mnohem víc než pouhé přehrávání hudebního souboru; Je interaktivní. Zvuk by měl okamžitě reagovat (s nízkou latencí) na akci hráče, rezonovat odlišně v závislosti na místě (zvuk se ozývá v jeskyni, vysychá v otevřeném prostoru) a neměl by vytvářet kakofonii, když je smíchán s jinými zvuky. Umělá inteligence sama o sobě tento interaktivní design nevytváří; vyrábí surovinu (efekty, hudební vrstvy, linky). To, co tento materiál spojuje s hrou, je zvukový engine/middleware (middleware, který spouští a míchá zvuky podle herní situace) a zvukový designér, který jej spravuje. Nepovažujte tedy každý zvukový prostředek vytvořený umělou inteligencí za „ok“, aniž byste jej otestovali ve skutečném herním kontextu – v pohybu, s jinými zvuky, na různých místech.

Dalším důležitým bodem jsou úrovně hlasitosti a vyvážení mixu: hudba by neměla přehlušit dialogy, kritické herní zvuky (jako je zvuk blížícího se nepřítele) by měly být vždy slyšet. Umělá inteligence vám může navrhnout nástin strategie mixu (který zvuk by měl v které situaci vyniknout), ale konečné rozhodnutí o mixu je věcí sluchu a zkušeností. Zvuk je na rozdíl od vizuálu patrný „na pozadí“; Špatný zvuk zanechává pocit špatné kvality, že hráč nemůže vědomě pochopit, proč mu to vadí. V produkci zvuku tedy platí stejné pravidlo: AI zrychluje, ucho i zkušenosti potvrzují.

tři mini pouzdra

Případ 1 – Zástupný symbol uložil zážitek. Jeden tým musel předložit prototyp v tichosti poté, co se jeho skladatelská smlouva opozdila. Vytvořili zástupnou hudbu pro 4 scény s umělou inteligencí a provedli test přehrávání se zvukem; Zpětná vazba hráčů byla mnohem přesnější, protože se dala vyzkoušet atmosféra. Finální hudba byla poté produkována se skladatelem.

Případ 2 – Variace efektů přidala přirozenost. V akční hře se zvuk jediného meče přehrával znovu a znovu a bylo to falešné. Když jsme vytvořili 8 variant s umělou inteligencí a hráli je náhodně, skóre hráčů „boj je živější“ výrazně vzrostlo; výroba trvala několik hodin.

Případ 3 – Odklon od etiky hlasového klonování. Jeden tým zvažoval klonování hlasu slavného hlasového herce bez povolení k rozpočtu. Zákon varoval: neoprávněné klonování hlasu bylo porušením smlouvy a osobních práv. Tým použil obecný TTS pro zástupný symbol a smluvního umělce pro finále; Bylo to etické i bezpečné řešení.

Čtyři kopírovatelné šablony

1) Instruktáž hudební nálady:

Vaše role: režisér soundtracku.Scéna: [např. noc, průzkum opuštěného města]. Požadovaný pocit: [neklidný, ale zvědavý]. Tempo: pomalé. Úkol: napište popis hudebního směru pro tuto scénu (nástroj, tempo, atmosféra, dynamika). NEPOUŽÍVEJTE jména skladeb/umělců chráněná autorským právem; stačí je popsat kvalifikací. Určete, že se jedná o zástupný symbol.

2) Plán variace efektu:

Naplánujte sadu zvukových efektů pro následující událost: [např. kroky na kamenné podlaze]. Navrhněte 8 variant; každý trochu jiný (hmotnost, rychlost, povrchová vlhkost). Účel: prolomit pocit opakování. Navrhněte náhodné přehrávání pojmenování v enginu.

3) Adaptivní mapa stavu hudby:

Vytvoří adaptivní mapu stavu hudby pro následující hru: stavy [průzkum, napětí, bitva, vítězství], hudební vrstva každého stavu, pravidla přechodu mezi státy a doba přechodu. Všimněte si, že toto je návrhová skica, která vyžaduje integraci s audio enginem.

4) Kontrola autorských práv/etická kontrola zvuku:

Plánuji vytvořit následující hlasový prostředek: [popis]. Připomeňte mi (1) úvahy o autorských právech/licenci, (2) potřebná povolení a dohody, pokud to zahrnuje předstírání/klonování lidského hlasu, (3) rozdíl mezi zástupným symbolem a konečnou produkcí.

Slabá výzva / Silná výzva

Slabá výzva:

Udělej mi válečnou hudbu.

Žádný pocit, žádné tempo, žádné nástroje, žádný kontext; obecný výsledek.

Výkonná výzva:

Scéna: závěrečný souboj s bossem; Hráč málem prohrál, ale naděje tu je. Pocit: epický, napjatý, vzletný. Tempo: rychlé, perkuse dominantní, vyvrcholení refrénem. Délka: smyčka 90 sekund, s dynamickým poklesem uprostřed. Toto je zástupný symbol; konečná verze bude vytvořena se skladatelem. Neodkazujte na dílo chráněné autorským právem.

Funkce, emoční oblouk, tempo a požadavky na smyčku řídí výstup.

Srovnávací tabulka zvukových vrstev

vrstva

Vhodnost AI

finální výroba

Autorská/etické riziko

hudba

Zástupný symbol/koncept

Obecně skladatel

Střední (imitace práce)

zvukový efekt

Generování variací

Může to být částečně AI

nízká-střední

hlasový projev

Zástupný symbol TTS

Obecně umělec

Hlasité (klonování hlasu)

Přizpůsobivý design

situační mapa

Integrace motoru

nízká

Časté chyby

  • Použití jednoho vzorku efektu. Je to opět falešné; je nutná variace.
  • Záměna zástupného symbolu za konečný. AI zvuk je ve většině projektů útržkovitý.
  • Hlasové klonování bez povolení. Je to etické a právní porušení.
  • Citování díla chráněného autorským právem. Riziko porušení ve výzvách „jako ta a ta písnička“.
  • Nastavení adaptivní statické hudby. Vrstvy jsou vyžadovány v závislosti na herní situaci.

V souhrnu

Zvuk nese emoce hry. AI; Urychluje výrobní linku tím, že produkuje koncepty a zástupné symboly v hudbě, variace efektů a návrhy ve vokalizaci. Ale konečná kvalita, téma značky a adaptivní ovládání jsou často úkolem lidského umělce; Klonování hlasu vyžaduje povolení a etiku. Přirozenost s variacemi, rychlost se zástupným symbolem, maximální kvalita s umělcem.

Aplikační úkol

Vyberte scénu ze své hry. Definujte zástupný hudební směr pomocí šablony „Music mood brief“ a naplánujte 8-variační sadu efektů pro událost pomocí šablony „Effect variation plan“. Nakonec zkontrolujte svůj plán pomocí šablony „Kontrola autorských práv/etiky ke zvuku“.

kontrolní seznam

  • [ ] Jasně jsem definoval funkci zvuku a požadovaný pocit.
  • [ ] Vytvořil jsem variaci nastavenou v efektech.
  • [ ] Hlas AI jsem umístil jako zástupný symbol.
  • [ ] Dodržel jsem požadavek na povolení/smlouvu pro klonování hlasu.
  • [ ] Neuvedl jsem žádné autorské dílo/umělce.