Nyereség:
- Képes megérteni a zene, a hangeffektusok és a szinkronrétegek különböző mesterséges intelligencia munkafolyamatait, és tesztelni a prototípus tapasztalatait a helyőrző előállításával
- Képes olyan technikák tervezésére, mint a hangeffektusok variációja és az adaptív zenei állapottérkép mesterséges intelligencia támogatással
- Képes felismerni a határokat, például a hangklónozási etikát, az engedélyezési/szerződéses követelményeket és a zenei szerzői jogokat, és felismerni, hogy a végső minőség gyakran az emberi előadóé.
Azt mondják, hogy a látvány irányítja a szemet, a hang pedig az érzelmeket. A játék hangtervezése három rétegből áll: zene (az atmoszférát és tempót meghatározó kompozíciók), hangeffektusok (SFX – hangeffektusok) (eseményhangok, például lépések, fegyverek, ajtók, interfész kattanásai) és voiceover (VO – voice over) (karaktersorok, narrátor). Az audiogeneratív mesterséges intelligencia (olyan modellek, amelyek zenét, effektusokat és beszédet generálnak szövegből vagy referenciából) gyorsítót jelenthetnek ezeken a rétegeken: a zene prototípusa, a helyőrző effektusok, a koncepcióvázlatok, sőt a hanghordozási vázlatok is. De a hang, akárcsak a látvány, a szerzői jogot, a következetességet és – különösen a hangosításban – etikai dimenziókat hordoz magában.
Ebben az egységben megtudhatja, hogyan használhatja az AI-t a hangképzésben; Megtanulod a zene, az effektusok és a beszédhangosítás, az adaptív zene, a szerzői jogok és a hangklónozás etikájának különböző munkafolyamatait.
Három réteg, három munkafolyamat
Zene. Az AI képes zenei vázlatokat készíteni, amelyek megragadják egy jelenet hangulatát: menütéma, csatazene, felfedező hangulat. Felbecsülhetetlen értékű a prototípus és a helyőrző szakaszban – a színpad nem „üres”, amíg a zeneszerző meg nem érkezik. De a végső zene gyakran az emberi zeneszerző műve; mert a márkatéma, az érzelmi csúcspont és az adaptív zene (játékhelyzettől függően változó rétegzene) finom irányítást igényel.
Hangeffektusok. A mesterséges intelligencia és a procedurális audioeszközök praktikusak számos variációval rendelkező effektusok előállításában (10 különböző lépés, 5 különböző ajtó); Megtöri az egyhangúságot. A helyőrző effektusok életre keltik a prototípust.
Szinkronizálás. A legérzékenyebb terület. A mesterséges intelligencia gyors piszkozat/helyőrző VO-t képes előállítani szövegfelolvasó (TTS) segítségével; A játékélmény tesztelésére szolgál a szerkesztési szakaszban. De a valódi emberi hang klónozása (hangklónozás) engedélyt, szerződéseket és etikát igényel; A legtöbb projektben az utolsó hangjáték az emberi művész.
Lépésről lépésre folyamat:
- Ismertesse a hang funkcióját (milyen érzést kelt, milyen eseményen szólaljon meg).
- Adjon hivatkozást/hangulatot (tempó, műfaj, hangulat, minták – szerzői jogok által védett recept).
- Helyőrző létrehozása (prototípus kitöltése, tesztelési tapasztalat).
- Váltson emberi művészhez (a végső minőség és márka érdekében).
- Szerzői jog/licenc/engedélyek ellenőrzése (különösen a zenére és a hangra).
Tipp: Készítsen hangeffektusok variációit, ne egyedi mintákat. Ugyanabból a lépésből egyetlen mintát újra és újra lejátszani, hamisnak tűnik; Ez akkor válik természetessé, ha 6-8 variációt játszol le véletlenszerűen.
Adaptive music and integration
A modern játékokban a zene nem statikus, hanem alkalmazkodó: nyugodt, amikor a játékos felfedez, intenzív, ha harcban vesz részt. A mesterséges intelligencia segíthet ennek a réteges szerkezetnek a kialakításában (melyik réteg milyen állapotban, átmeneti szabályok); Gyártása a hangmotorral integrált munka (pl. köztes szoftver). Az AI térképezze fel a zenei állapotot, majd ellenőrizze a műszaki integrációt.
Caution: Ethics of voice cloning. Egy szinkronszínész hangjának mesterséges intelligencia segítségével történő klónozása az ő kifejezett engedélye és beleegyezése nélkül egyaránt etikai megsértés és jogi kockázat. Az elhunyt vagy ismert személyek hangjának utánzása személyiségjogi kérdéseket is felvet. Use generic TTS for Placeholder; agree with the artist for the final sound.
Technical facts of sound design
A játék hangja sokkal több, mint egy zenei fájl lejátszása; Ez interaktív. A hangnak azonnal (alacsony késleltetéssel) kell reagálnia a játékos cselekvésére, helytől függően eltérően kell rezonálnia (a hang visszhangzik a barlangban, kiszárad a nyílt térben), és nem kelthet kakofóniát, ha más hangokkal keveredik. Az AI nem maga hozza létre ezt az interaktív tervet; nyersanyagot (effekteket, zenei rétegeket, sorokat) állít elő. Ami ezt az anyagot a játékhoz köti, az a hangmotor/middleware (a játékhelyzetnek megfelelően hangokat kiváltó és keverő köztes szoftver) és az azt irányító hangtervező. Tehát ne tekintsen minden mesterséges intelligencia által előállított hangelemet „rendnek” anélkül, hogy valódi játékkörnyezetben tesztelné – mozgásban, más hangokkal, különböző helyeken.
Egy másik fontos szempont a hangerő szintje és a keverési egyensúly: a zenének nem szabad túlnyomnia a párbeszédet, a kritikus játékmeneti hangokat (például egy ellenség közeledését) mindig hallani kell. Az AI javasolhat egy mixstratégia vázlatát (melyik hangzás melyik szituációban álljon ki), de a mix végső döntése hallás és tapasztalat kérdése. A hang, a látványtól eltérően, „a háttérben” észrevehető; A rossz hang olyan rossz minőségű érzést hagy maga után, hogy a lejátszó nem tudja tudatosan megérteni, miért zavarja őket. A szabály tehát ugyanaz a hangképzésben: az AI felgyorsul, a fül és a tapasztalat megerősít.
három mini tok
1. eset – Helyőrző mentette az élményt. Az egyik csapatnak csendben be kellett nyújtania egy prototípust, miután a zeneszerzői szerződése késett. Helyőrző zenét készítettek 4 jelenethez mesterséges intelligencia segítségével, és elvégezték a játéktesztet hanggal; A játékosok visszajelzései sokkal pontosabbak voltak, mert ki lehetett próbálni a hangulatot. A zeneszerzővel közösen elkészítették a végső zenét.
2. eset – A hatásváltoztatás természetességet adott. Egy akciójátékban egyetlen kardhang hallatszott újra és újra, és hamisnak tűnt. Amikor 8 variációt készítettünk mesterséges intelligencia segítségével, és véletlenszerűen játszottuk le őket, a játékosok „harc élénkebb” pontszáma jelentősen megnőtt; a gyártás több órát vett igénybe.
3. eset – Elfordulás a hangklónozás etikájától. Az egyik csapat fontolóra vette egy híres szinkronszínész hangjának klónozását a költségvetés engedélye nélkül. A törvény figyelmeztetett: az illetéktelen hangklónozás szerződéses és személyiségi jogok megsértését jelenti. A csapat általános TTS-t használt a helyőrzőként és egy szerződéses előadót a fináléhoz; Ez egy etikus és biztonságos megoldás volt.
Négy másolható sablon
1) Zenei hangulattájékoztató:
Az Ön szerepe: filmzene rendezője.Jelenet: [pl. éjszaka, elhagyott város felfedezése].Kívánt érzés: [nyugtalan, de kíváncsi]. Tempó: lassú. Feladat: írja le ennek a jelenetnek a zenei irányát (hangszer, tempó, atmoszféra, dinamika). NE használjon szerzői joggal védett számok/előadók nevét; csak írja le őket képesítéssel. Adja meg, hogy ez egy helyőrző.
2) Hatás variációs terv:
Tervezzen hangeffektus-készletet a következő eseményhez: [pl. lépések a kőpadlón]. Javasolj 8 variációt; mindegyik kissé eltérő (tömeg, sebesség, felületi nedvesség). Cél: megtörni az ismétlés érzését. Javasoljuk, hogy a névadást véletlenszerűen játssza le a motor.
3) Adaptív zenei állapottérkép:
Adaptív zenei állapottérképet hoz létre a következő játékhoz: állapotok [felfedezés, feszültség, csata, győzelem], az egyes állapotok zenei rétege, az állapotok közötti átmenet szabályai és az átmeneti idő. Vegye figyelembe, hogy ez egy tervezési vázlat, amelyet integrálni kell az audiomotorral.
4) Hang szerzői jogi/etikai ellenőrzése:
A következő hangeszköz gyártását tervezem: [leírás]. Emlékeztessen (1) szerzői jogi/licenc-megfontolásokra, (2) szükséges engedélyekre és megállapodásokra, ha emberi hang megszemélyesítésével/klónozásával jár, (3) különbségtétel a helyőrző és a végső produkció között.
Gyenge felszólítás / Erős felszólítás
Gyenge felszólítás:
Csinálj nekem háborús zenét.
Nincs érzés, nincs tempó, nincsenek hangszerek, nincs kontextus; általános eredmény.
Erőteljes felszólítás:
Jelenet: végső boss harc; A játékos majdnem veszített, de van remény. Érzés: epikus, feszült, szárnyaló. Tempó: gyors, ütős domináns, csúcspont kórussal. Hossz: hurkolható 90 másodperc, középen dinamikus eséssel. Ez egy helyőrző; a végleges változat a zeneszerzővel együtt készül el. Ne hivatkozzon szerzői joggal védett munkára.
A funkció, az érzelmi ív, a tempó és a hurokigény hajtja a kimenetet.
Audio réteg összehasonlító táblázat
réteg
AI alkalmasság
végső gyártás
Szerzői jog/etikai kockázat
zene
Helyőrző/fogalom
Általában zeneszerző
Közepes (munka utánzás)
hanghatás
Variációgenerálás
Lehet, hogy részben AI
alacsony-közepes
hangfelvétel
TTS helyőrző
Általában művész
Hangos (hang klónozás)
Alkalmazható kialakítás
helyzettérkép
Motor integráció
alacsony
Gyakori hibák
- Egyetlen hatásminta használata. Megint hamisnak tűnik; variáció szükséges.
- Tévedés helyőrző a végső. Az AI-hang a legtöbb projektben vázlatos.
- Hang klónozás engedély nélkül. Ez etikai és jogi szabálysértés.
- A szerzői jog által védett munkára hivatkozva. A jogsértés kockázata a „olyan-olyan dal” üzenetekben.
- Az adaptív zenei statika kialakítása. A játékhelyzettől függően rétegekre van szükség.
Összefoglalva
A hang hordozza a játék érzelmeit. AI; Felgyorsítja a gyártósort azáltal, hogy koncepciókat és helyőrzőket hoz létre a zenében, variációkat az effektekben és piszkozatokat a hangosításban. De a végső minőség, a márkatéma és az adaptív vezérlés gyakran az emberi művész feladata; A hangklónozáshoz engedély és etika szükséges. Természetesség variációval, gyorsaság helykitöltővel, végletes minőség művésznél.
Pályázati feladat
Válassz egy jelenetet a játékodból. Határozzon meg egy helyőrző zenei irányt a „Zenei hangulat rövid” sablonnal, és tervezzen meg egy 8 variációból álló effektkészletet egy eseményhez az „Effect variation plan” sablonnal. Végül ellenőrizze tervét a „Hang szerzői jogi/etikai ellenőrzése” sablon segítségével.
ellenőrző lista
- [ ] Világosan meghatároztam a hangfunkciót és a kívánt érzést.
- [ ] Készítettem egy variációs halmazt az effektekben.
- [ ] Helyőrzőként helyeztem el az AI-hangot.
- [ ] Figyelembe vettem a hangklónozás engedélyezési/szerződési követelményét.
- [ ] Nem hivatkoztam szerzői joggal védett műre/művészre.