وحدة 6 / 11

إنتاج الصوت والموسيقى والمؤثرات: عالم اللعبة المسموع

المكاسب:

  • القدرة على فهم مسارات عمل الذكاء الاصطناعي المختلفة للموسيقى والمؤثرات الصوتية وطبقات الدبلجة واختبار تجربة النموذج الأولي مع إنتاج العناصر النائبة
  • القدرة على تصميم تقنيات مثل مجموعة التباين في المؤثرات الصوتية وخريطة حالة الموسيقى التكيفية مع دعم الذكاء الاصطناعي
  • القدرة على التعرف على الحدود مثل أخلاقيات استنساخ الصوت، ومتطلبات الإذن/العقد، وحقوق الطبع والنشر للموسيقى، وإدراك أن الجودة النهائية غالبًا ما تنتمي إلى الفنان البشري

يقال أن البصر يتحكم في العين والصوت يتحكم في العاطفة. يتكون التصميم الصوتي للعبة من ثلاث طبقات: الموسيقى (التراكيب التي تحدد الجو والإيقاع)، والمؤثرات الصوتية (مؤثرات صوتية - مؤثرات صوتية) (أصوات الأحداث مثل خطى الأقدام، والبنادق، والأبواب، ونقرات الواجهة) والتعليق الصوتي (VO - التعليق الصوتي) (سطور الشخصيات، والراوي). يمكن أن يكون الذكاء الاصطناعي المولد للصوت (النماذج التي تولد الموسيقى والتأثيرات والكلام من النص أو المرجع) بمثابة مُسرِّع لكل هذه الطبقات: الموسيقى النموذجية، وتأثيرات العناصر النائبة، والرسومات المفاهيمية، وحتى رسومات التعليق الصوتي. لكن الصوت، مثل العناصر المرئية، يحمل حقوق التأليف والنشر والاتساق، وخاصة في التعليق الصوتي، أبعادًا أخلاقية.

ستتعلم في هذه الوحدة كيفية استخدام الذكاء الاصطناعي في إنتاج الصوت؛ سوف تتعلم مسارات العمل المختلفة للموسيقى والمؤثرات والتعليق الصوتي والموسيقى التكيفية وحقوق النشر وأخلاقيات استنساخ الصوت.

ثلاث طبقات، وثلاثة مسارات عمل

موسيقى. يستطيع الذكاء الاصطناعي إنتاج اسكتشات موسيقية تعكس الحالة المزاجية للمشهد: موضوع القائمة، موسيقى المعركة، جو الاستكشاف. إنه لا يقدر بثمن في مرحلة النموذج الأولي والعنصر النائب - فالمسرح ليس "فارغًا" حتى وصول الملحن. لكن الموسيقى النهائية غالبًا ما تكون من عمل الملحن البشري؛ لأن موضوع العلامة التجارية والذروة العاطفية والموسيقى التكيفية (الموسيقى ذات الطبقات التي تتغير وفقًا لحالة اللعبة) تتطلب تحكمًا دقيقًا.

المؤثرات الصوتية. يعد الذكاء الاصطناعي والأدوات الصوتية الإجرائية عملية في إنتاج تأثيرات بعدد كبير من الاختلافات (10 خطوات مختلفة، 5 أبواب مختلفة)؛ إنه يكسر الرتابة. تعمل تأثيرات العنصر النائب على إحياء النموذج الأولي.

الدبلجة. المنطقة الأكثر حساسية. يستطيع الذكاء الاصطناعي إنتاج مسودة سريعة/عنصر نائب VO مع تحويل النص إلى كلام (TTS)؛ يتم استخدامه لاختبار تجربة اللاعب أثناء مرحلة التحرير. لكن استنساخ صوت بشري حقيقي (استنساخ الصوت) يتطلب الإذن والعقود والأخلاق؛ التعليق الصوتي النهائي هو الفنان البشري في معظم المشاريع.

التدفق خطوة بخطوة:

  1. صف وظيفة الصوت (ما ينبغي أن يبدو عليه، وفي أي حدث ينبغي تشغيله).
  2. قم بإعطاء المرجع/الحالة المزاجية (الإيقاع، النوع، الجو، العينات - وصفة محمية بحقوق الطبع والنشر).
  3. إنشاء عنصر نائب (ملء النموذج الأولي، تجربة الاختبار).
  4. انتقل إلى الفنان البشري (للحصول على الجودة النهائية والعلامة التجارية).
  5. التحقق من حقوق الطبع والنشر/الترخيص/الإذن (خاصة بالنسبة للموسيقى والصوت).
نصيحة: قم بإنتاج مجموعة من الاختلافات في المؤثرات الصوتية، وليس عينات فردية. إن تشغيل عينة واحدة من نفس الخطى مرارًا وتكرارًا يبدو مزيفًا؛ يصبح الأمر طبيعيًا عندما تلعب 6-8 أشكال بشكل عشوائي.

الموسيقى التكيفية والتكامل

في الألعاب الحديثة، الموسيقى ليست ثابتة ولكنها قابلة للتكيف: هادئة عندما يستكشف اللاعب، ومكثفة عندما يشارك في القتال. يمكن أن يساعد الذكاء الاصطناعي في صياغة تصميم هذا الهيكل متعدد الطبقات (أي طبقة وفي أي حالة، وقواعد الانتقال)؛ إنتاجه هو عمل متكامل مع محرك الصوت (مثل البرامج الوسيطة). اجعل الذكاء الاصطناعي يرسم خريطة لحالة الموسيقى، ثم تحقق من التكامل الفني.

تحذير: أخلاقيات استنساخ الصوت. يعد استنساخ صوت الممثل الصوتي باستخدام الذكاء الاصطناعي دون الحصول على إذن وموافقة صريحة منه انتهاكًا أخلاقيًا ومخاطرة قانونية. كما أن تقليد أصوات المتوفين أو المشاهير يثير قضايا حقوق الشخصية. استخدم تحويل النص إلى كلام (TTS) العام للعنصر النائب؛ اتفق مع الفنان على الصوت النهائي.

الحقائق التقنية لتصميم الصوت

صوت اللعبة هو أكثر بكثير من مجرد تشغيل ملف موسيقى؛ إنها تفاعلية. يجب أن يستجيب الصوت فورًا (مع زمن انتقال منخفض) لحركة اللاعب، وأن يتردد صداه بشكل مختلف اعتمادًا على الموقع (يتردد صدى الصوت في كهف، ويجف في مساحة مفتوحة)، ويجب ألا يخلق تنافرًا عند مزجه مع أصوات أخرى. الذكاء الاصطناعي لا ينتج هذا التصميم التفاعلي بنفسه؛ ينتج مادة خام (مؤثرات، طبقات موسيقية، خطوط). ما يربط هذه المادة باللعبة هو محرك الصوت/البرنامج الوسيط (البرنامج الوسيط الذي يقوم بتشغيل الأصوات ومزجها وفقًا لحالة اللعبة) ومصمم الصوت الذي يديرها. لذا، لا تعتبر كل الأصول الصوتية التي ينتجها الذكاء الاصطناعي "جيدًا" دون اختبارها في سياق لعبة حقيقية - أثناء الحركة، مع أصوات أخرى، في مواقع مختلفة.

نقطة أخرى مهمة هي مستويات الصوت وتوازن المزيج: يجب ألا تطغى الموسيقى على الحوار، ويجب دائمًا سماع أصوات اللعب المهمة (مثل صوت اقتراب العدو). يمكن أن يقترح عليك الذكاء الاصطناعي مخططًا تفصيليًا لاستراتيجية المزج (أي الصوت يجب أن يبرز في أي موقف)، لكن قرار المزج النهائي هو مسألة السمع والخبرة. الصوت، على عكس الصور المرئية، ملحوظ "في الخلفية"؛ يترك الصوت السيئ شعورًا بضعف الجودة بحيث لا يتمكن اللاعب من فهم سبب انزعاجه. لذا فإن القاعدة هي نفسها في إنتاج الصوت: الذكاء الاصطناعي يتسارع، وهذا ما تؤكده الأذن والخبرة.

ثلاث حالات صغيرة

الحالة 1 - العنصر النائب يحفظ التجربة. كان على أحد الفرق تقديم نموذج أولي بصمت بعد تأجيل عقد الملحن الخاص بهم. لقد أنتجوا موسيقى نائبة لأربعة مشاهد باستخدام الذكاء الاصطناعي وأجروا اختبار التشغيل بالصوت؛ كانت تعليقات اللاعبين أكثر دقة لأنه كان من الممكن اختبار الجو. ثم تم إنتاج الموسيقى النهائية مع الملحن.

الحالة 2 - تباين التأثير أضاف الطبيعة. في ألعاب الحركة، يتم تشغيل صوت سيف واحد مرارًا وتكرارًا ويبدو أنه مزيف. عندما أنشأنا 8 أشكال مختلفة باستخدام الذكاء الاصطناعي وقمنا بتشغيلها بشكل عشوائي، زادت نتيجة "القتال أكثر حيوية" للاعبين بشكل ملحوظ؛ استغرق الإنتاج عدة ساعات.

الحالة الثالثة - الابتعاد عن أخلاقيات استنساخ الصوت. فكر أحد الفرق في استنساخ صوت ممثل صوتي مشهور دون الحصول على إذن من الميزانية. وحذر القانون من أن الاستنساخ الصوتي غير المصرح به يعد انتهاكًا للعقد والحقوق الشخصية. استخدم الفريق تحويل النص إلى كلام (TTS) العام للعنصر النائب وفنان العقد للنهاية؛ لقد كان حلاً أخلاقيًا وآمنًا.

أربعة قوالب قابلة للنسخ

1) إحاطة مزاج الموسيقى:

دورك: مدير الموسيقى التصويرية. المشهد: [على سبيل المثال. ليلاً، استكشاف المدينة المهجورة]. الشعور المرغوب: [عدم الارتياح ولكن فضولي]. الإيقاع: بطيء. المهمة: اكتب وصفًا للاتجاه الموسيقي لهذا المشهد (الآلة، الإيقاع، الجو، الديناميكيات). لا تستخدم أسماء المسارات/الفنانين المحمية بحقوق الطبع والنشر؛ فقط قم بوصفهم بالمؤهلات. حدد أن هذا عنصر نائب.

2) خطة تغيير التأثير:

قم بتخطيط مجموعة مؤثر صوتي للحدث التالي: [على سبيل المثال. خطى على الأرض الحجرية]. أقترح 8 أشكال مختلفة؛ يختلف كل منها قليلاً (الوزن، السرعة، رطوبة السطح). الغرض: كسر الشعور بالتكرار. أقترح أن يتم تشغيل التسمية بشكل عشوائي في المحرك.

3) خريطة حالة الموسيقى التكيفية:

ينشئ خريطة حالة موسيقية قابلة للتكيف للعبة التالية: الحالات [الاستكشاف، والتوتر، والمعركة، والنصر]، وطبقة الموسيقى لكل ولاية، وقواعد الانتقال بين الحالات، ووقت الانتقال. لاحظ أن هذا رسم تخطيطي يتطلب التكامل مع محرك الصوت.

4) التحكم في حقوق الطبع والنشر الصوتي/الأخلاقيات:

أخطط لإنتاج الأصل الصوتي التالي: [الوصف]. ذكّرني بـ (1) اعتبارات حقوق الطبع والنشر/الترخيص، (2) الأذونات والاتفاقيات المطلوبة إذا كان الأمر يتضمن انتحال/استنساخ صوت بشري، (3) التمييز بين العنصر النائب والإنتاج النهائي.

موجه ضعيف / موجه قوي

حث ضعيف:

إصنع لي موسيقى حربية.

لا إحساس، لا إيقاع، لا آلات، لا سياق؛ نتيجة عامة.

مطالبة قوية:

المشهد: معركة الزعيم النهائية؛ اللاعب كاد أن يخسر، لكن هناك أمل. يشعر: ملحمة، متوترة، مرتفعة. الإيقاع: سريع، ومهيمن على الإيقاع، وذروته مع الجوقة. المدة: قابلة للتكرار 90 ثانية، مع انخفاض ديناميكي في المنتصف. هذا عنصر نائب؛ سيتم عمل النسخة النهائية مع الملحن. لا تشير إلى العمل المحمي بحقوق الطبع والنشر.

تعمل الوظيفة والقوس العاطفي والإيقاع والطلب على الحلقة على دفع المخرجات.

مخطط مقارنة طبقة الصوت

طبقة

ملاءمة الذكاء الاصطناعي

الإنتاج النهائي

حقوق النشر/المخاطر الأخلاقية

موسيقى

العنصر النائب/المفهوم

عموما الملحن

وسط (تقليد العمل)

تأثير الصوت

جيل التباين

يمكن أن يكون الذكاء الاصطناعي جزئيًا

منخفض متوسط

تعليق صوتي

تحويل النص إلى كلام العنصر النائب

فنان عموما

بصوت عال (استنساخ الصوت)

تصميم قابل للتكيف

خريطة الوضع

تكامل المحرك

منخفض

الأخطاء الشائعة

  • باستخدام عينة تأثير واحد. يبدو الأمر مزيفًا مرة أخرى؛ الاختلاف ضروري.
  • خطأ في العنصر النائب في نهاية المطاف. صوت الذكاء الاصطناعي غير واضح في معظم المشاريع.
  • استنساخ الصوت دون إذن. وهو انتهاك أخلاقي وقانوني.
  • نقلا عن العمل المحمي بحقوق الطبع والنشر. خطر الانتهاك في المطالبات "مثل أغنية فلان وفلان".
  • إنشاء الموسيقى التكيفية الساكنة. الطبقات مطلوبة حسب حالة اللعبة.

باختصار

الصوت يحمل عاطفة اللعبة. منظمة العفو الدولية. فهو يعمل على تسريع خط الإنتاج من خلال إنتاج المفاهيم والعناصر النائبة في الموسيقى، والتنوع في التأثيرات، والمسودات في النطق. لكن الجودة النهائية وموضوع العلامة التجارية والتحكم التكيفي غالبًا ما تكون مهمة الفنان البشري؛ يتطلب استنساخ الصوت إذنًا وأخلاقًا. الطبيعة مع التنوع، والسرعة مع العنصر النائب، والجودة المطلقة مع الفنان.

مهمة التطبيق

اختر مشهدًا من لعبتك. حدد اتجاهًا نائبًا للموسيقى باستخدام قالب "ملخص مزاج الموسيقى" وخطط لمجموعة تأثيرات مكونة من 8 تنوعات لحدث باستخدام قالب "خطة تباين التأثير". وأخيرًا، تحقق من خطتك باستخدام قالب "التحقق من حقوق النشر/الأخلاقيات الصوتية".

قائمة مرجعية

  • [ ] لقد حددت بوضوح وظيفة الصوت والشعور المطلوب.
  • [ ] لقد أنتجت مجموعة متنوعة من التأثيرات.
  • [ ] لقد قمت بوضع صوت الذكاء الاصطناعي كعنصر نائب.
  • [ ] لقد لاحظت متطلبات الإذن/العقد لاستنساخ الصوت.
  • [ ] لم أشر إلى أي عمل/فنان محمي بحقوق الطبع والنشر.