Uru:
- Ikike dabara mgbe ị na-echekwa ihe ọ pụtara site na itinye iwu teknụzụ nke ndepụta okwu (akara, agwa, CPS)
- Ikike iji nyochaa aha kwesịrị ekwesị na nọmba nọmba site na olu ka ị na-eme ngwa ngwa ederede na ntinye oge na ASR.
- Ikike ijikwa oke ọgụgụ isi site n'ịtụle ọnọdụ anya, ọdịiche ụda na mmekọrịta egbugbere ọnụ na dubbing.
Ịtụgharị ihe nkiri, usoro ihe nkiri TV, vidiyo ụlọ ọrụ ma ọ bụ usoro ịntanetị dị nnọọ iche na ịsụgharị ederede doro anya: oge, ọsọ ọgụgụ, onyonyo onyonyo, olu na mmegharị egbugbere ọnụ nke ihe odide ahụ bụkwa ihe mgbochi. N'ime nkeji a, ị ga-amụta ntụgharị asụsụ odiyovisual (ederede, ntinye akwụkwọ, ntinye olu), iwu teknụzụ nke ntinye aha, ndegharị AI na-akwado na ntinye oge, yana ọnyà dị mma nke ubi a. Ebumnobi a bụ ịrụ ọrụ dị ka ọkachamara ntụgharị asụsụ audiovisual nke "dabara anya na ntị ndị na-ege ntị" kama "ịsụgharị ederede".
Echiche ndị bụ isi
Ntụgharị asụsụ ọdịyo visual (AVT) bụ ntụgharị ọdịnaya nwere ọdịyo na vidiyo; Ụdị ndị bụ isi bụ ndepụta okwu, ntinye akwụkwọ na nkọwa ọdịyo. Ndepụta okwu bụ ngosipụta nke okwu n'ụdị ederede na ihuenyo. Ntugharị bụ mweghachi nke olu izizi n'asụsụ ebumnuche. Olu-over bụ mgbe ụda izizi kụchiri ma gụọ ntụgharị n'isi ya (nke a na-ahụkarị na akwụkwọ akụkọ).
Usoro nka nka abuo di oke egwu nke ntinye aha: CPS (Amara nke abuo nke abuo) na-amachi oso subtitling ka onye nlere wee nwee ike igu ya nke oma; Oke elu a na-anabatakarị bụ ihe dị ka mkpụrụedemede 17 kwa nkeji (nke dị ala maka ọdịnaya ụmụaka). Timecode bụ oge mmalite mmalite nke na-egosi mgbe ndepụta okwu ga-apụta ma pụọ na ihuenyo (dị ka 00:01:23,400).
Gịnị mere o ji esi ike? N'ihi na ọ pụtara dabara ntụgharị asụsụ ka ọ bụrụ ndepụta okwu. Ahịrị abụọ, ~ mkpụrụedemede 42 n'otu ahịrị, opekempe ~ 1 sekọnd na karịa ~ 6 sekọnd oge ihuenyo, yana oke CPS - ịkwesịrị ịgbaso ihe ndị a niile ka ị na-edobe ihe pụtara na ụda. Ya mere ntụgharị asụsụ ndepụta okwu na-abụkarị okwu mkpakọ na ịtụgharị, ọ bụghị ntụgharị okwu-maka okwu.
Ndụmọdụ: Zenarị ntugharị nke "ịsụgharị okwu ọ bụla" na ndepụta okwu. Onye na-ekiri ma na-ekiri ma na-agụ ihe oyiyi; Enweghị ike ịgụ ndepụta okwu ogologo ogologo. Ịchọta okwu ebumpụta ụwa kacha nso nke na-echekwa ihe ọ pụtara bụ ezigbo ikike nke ihe odide ederede.
Ọrụ AI na ntụgharị asụsụ ọdịyo visual
AI na-eme ngwa ngwa ọtụtụ usoro na mpaghara a:
- Ndegharị: Site na ASR (Nkwenye Okwu akpaaka), a na-edegharị olu na-akpaghị aka. Nke a na-ewepụta isi mmalite nke ndepụta okwu na nkeji.
- Ndozi oge akpaaka: Ngwa kewaa mkparịta ụka n'ime akụkụ wee mepụta koodu oge.
- Usoro ntụgharị asụsụ: A tụgharịrị asụsụ ederede ederede.
- CPS / njikwa ogologo: AI nwere ike akara nke ndepụta okwu karịrị ọsọ ọgụgụ ma na-atụ aro ka mbelata.
Ma kpachara anya: ASR na-emehie na mkpọtụ, ụda olu, okwu na-agafe agafe, aha kwesịrị ekwesị, na usoro nka; enweghị ike ịnye "nkọwa ọdịyo"; Onye na-ekwu nwere ike gbagwojuru anya. Ntụgharị AI anaghị ahụ foto a - ọ nweghị ike ịma mgbe a na-akpọ ihe egosipụtara na ihuenyo "nke ahụ." Ya mere, mmadụ na-enyocha ọnọdụ anya na ịkọwapụta izi ezi.
Kpachara anya: Mmejọ a na-emekarị bụ iche na mmepụta ASR bụ "decoded". ASR na-emehie ugboro ugboro, karịsịa na aha kwesịrị ekwesị, nọmba, aha ika na usoro teknụzụ; ederede na-ezighi ezi na-ebuga na ntụgharị asụsụ na ntinye ederede. Jide n'aka na ị nyochaa mpaghara ndị dị egwu site na ige ntị na ọdịyo ahụ.
Iwu usoro ndepụta okwu
Iwu nkịtị (dị iche site na ikpo okwu):
- ~ 37-42 mkpụrụedemede kwa ahịrị, 2 ahịrị kacha.
- Ogologo oge: ~ 1-6 sekọnd; Zenarị ndepụta okwu "flash" dị mkpụmkpụ.
- CPS agaghị agafe ~17 (ọdịnaya ndị okenye).
- Gbajie ahịrịokwu ahụ ebe o nwere ezi uche (ahapụla "na" ma ọ bụ "ma" na njedebe nke ahịrị).
- Ọ bụrụ na ọ ga-ekwe omume, awụla ebe a na-egbutu (mgbanwe agba).
- Soro iwu ikpo okwu maka ihe ndị dị ka iyi egwu, egwu, ide ihuenyo.
Obere ikpe atọ
Ikpe 1 - ASR + biputere edezi ji 60%. Otu otu buru ụzọ degharịa akwụkwọ na ASR nwere koodu nkeji iri anọ na ise, wee tụgharịa asụsụ ya wee dezie ya. Oge belatara site na 60% ma e jiri ya tụnyere ntinye ederede + oge site na ọkọ. Mana aha na ọnụọgụ niile kwesịrị ekwesị ka agbaziri site na ntụnyere ụda.
Ikpe 2 - CPS lelee echekwabara ọgụgụ. Ntụgharị asụsụ izizi nke vidiyo nkuzi nwere ndepụta okwu ziri ezi, mana CPS ruru 24 - ndị na-ege ntị enweghị ike ịga n'ihu. Agba nke AI kwadoro mkpirisi ndepụta okwu dị mkpụmkpụ site na 30%, na-ebelata CPS gaa na 16; echekwabara ihe ọ pụtara, ịgụ ihe bịara.
Ikpe 3 - Njehie ọnọdụ ihe onyonyo. Na ntụgharị asụsụ dabere na ASR, otu agwa tụrụ aka na akara na ihuenyo wee sị "gụọ ya"; AI tụgharịrị ya dị ka "gụọ ya", mana atụgharịghị ederede dị na akara ahụ, yabụ onye na-ekiri enweghị ike ịhụ ihe ọ ga-agụ. Ihe odide ahụ gbakwunyere isiokwu dị iche iche maka ihuenyo ihuenyo; Onye hụrụ ihe oyiyi ahụ mere ihe dị iche.
Ndebiri anọ enwere ike iṅomi
1) Ndepụta nkwenye ederede (ASR):
N'okpuru bụ ndegharị vidiyo akpaka. Kaa akara mperi enwere ike na ndegharị: aha kwesịrị ekwesị, aha ika, nọmba, okwu teknụzụ, ahịrịokwu na-enweghị isi/ezughị ezu. Depụta ihe ndị a dị ka "jiri olu nyochaa." Atụgharịla asụsụ. Detuo: [...]
2) Ntụgharị asụsụ ndepụta okwu (CPS/ogologo nwere oke):
Tụgharịa asụsụ ndegharị ndị a ka ọ bụrụ ndepụta okwu [asụsụ ebumnuche]. Mgbochi: ndepụta okwu ọ bụla ga-abụrịrị ahịrị 2 kachasị, ahịrị ~ mkpụrụedemede 42, CPS agaghị agafe ~17. MKPEKPE na naturalize mgbe ị na-echekwa ihe ọ pụtara; atụgharịla okwu n'okwu. Chekwaa koodu oge. Koodu oge ederede +: [...]
3) Nyocha CPS / ịgụ akwụkwọ:
Gbakọọ CPS ihe dị ka dabere na oge na ọnụọgụ agwa maka ndepụta okwu ọ bụla. Kaa akara nke ọ bụla gafere 17 wee tụọ aro ọzọ dị mkpụmkpụ nke na-echekwa ihe ọ pụtara. Ndepụta Okwu (ederede | nkeji oge): [...]
4) Nyochaa ederede ihuenyo / ihe ọhụhụ:
Na mkparịta ụka na-esonụ, kaa akara ebe ndị nwere ike na-ezo aka na onyonyo a (ederede ihuenyo, ihe a kapịrị ọnụ, akara). Kwuo ma achọrọ ndepụta okwu / nkọwa ọzọ maka ndị a, na-eche na onye na-ekiri enweghị ike ịhụ onyonyo a. Mkparịta ụka: [...]
Ngwa ngwa adịghị ike / Ike siri ike
Adịghị ike: "Tụgharịa asụsụ ndepụta okwu ndị a." (Ọ dịghị ogologo, CPS, iwu ahịrị; mmepụta agaghị adaba na ihuenyo, enweghị ike ịgụ.)
Güçlü: "Tụgharịa ederede mkparịta ụka a n'ime ndepụta okwu Turkish. Ndepụta okwu ọ bụla ga-abụrịrị nke kachasị nke ahịrị 2, mkpụrụedemede 42 kwa ahịrị; belata ya mgbe ị na-echekwa ihe ọ pụtara mgbe ọ dị mkpa maka ịgụ ọsọ ọsọ.
Ọdịiche: ngwa ngwa siri ike na-enye mgbochi teknụzụ nke ndepụta okwu (akara, agwa, CPS, ụda); mmepụta na-abịaru nso n'ezie ndepụta okwu.
chaatị ntụnyere usoro AVT
usoro
Kedu ihe na-eme
Ntinye aka AI
ihe dị egwu mmadụ
ndepụta okwu
Na-edegharị okwu
ASR, ntụgharị asụsụ, CPS
Kwesịrị ekwesị, ọnọdụ a na-ahụ anya
dubbing
Voiceover n'asụsụ ebumnuche
Ederede ntụgharị asụsụ
mmekọrịta egbugbere ọnụ, ime ihe
olu-n'elu
Gụọ ntụgharị asụsụ n'elu
Ntụgharị asụsụ, oge
Eke eruba, ụda
Nkọwa ọdịyo
Jiri ụda na-akọwa ihe onyonyo a
ederede ederede
Ntụgharị asụsụ (mmadụ)
Mmejọ ndị nkịtị
- Ịtụgharị asụsụ ndegharị ASR na-egosighi ya. A na-ebufe njehie aha/nọmba kwesịrị ekwesị na ndepụta okwu.
- Ịsụgharị okwu site na okwu na ịgagharị gburugburu CPS. Ndị na-ege ntị enweghị ike ịgụ ihe; kwesịrị ekwesị ga-eme.
- Na-eleghara ọnọdụ anya anya. Ederede ihuenyo na ihe atụnyere aka ka agbanwebeghị ntụgharị asụsụ.
- Ime ka ahịrị kewaa enweghị isi. Ọ na-emebi ịgụ ihe.
- Na-emezi ụda/ndebanye aha. Asụsụ agwa ndị a na-apụ n'anya.
Ntughari na imekọrịta egbugbere ọnụ
Ọ bụ ezie na mgbochi nke subtitling bụ ịgụ ọsọ ọsọ, mmachi nke dubbing bụ oge na egbugbere ọnụ. Enwere ụdị mmekọrịta atọ dị iche iche na ntụgharị olu-n'elu: egbugbere ọnụ - ebe ntụgharị dabara na mmegharị ọnụ nke agwa, ọkachasị ụdaume mepere emepe na nso nso; isochrony — ahịrị ntụgharị ahụ bụ otu ogologo dị ka ahịrị mbụ, ọ bụghị oke mkpụmkpụ ma ọ bụ ogologo; gesture synchrony — dabara ihe ekwuru na mmegharị aka na ogwe aka agwa. Ya mere onye ntụgharị okwu na-edekarị ahịrị “na-adọrọ adọrọ” nke na-echekwa ihe ọ pụtara ma nwee okwu dị iche iche; Ikwesị ntụkwasị obi okwu dị obere karịa ndepụta okwu ebe a.
AI nwere ike ịnye usoro ntụgharị asụsụ raw na ịdọ aka ná ntị oge maka dubbing ("ahịrị a dị 40% ogologo karịa nke mbụ, belata ya"). Teknụzụ ọhụrụ nwere ike mechie ụda ma mepụta dubbing akpaka; mana ime ihe, mmetụta uche, imezigharị iku ume agwa na imekọ ọnụ ka bụ ọrụ nke onye ntụgharị asụsụ na onye na-eme olu. Ntugharị akpaaka na-enye nkọwapụta; Mkpebi nka na ihe jikọrọ ọnụ bụ nke mmadụ. N'ịgbakwụnye, nkwenye nke onye ụda olu ya bụ ihe dị mkpa gbasara ụkpụrụ na iwu.
Na nchịkọta
Ntụgharị asụsụ ọdịyo visual bụ nka nke dabara ederede n'ime mmachi anya na ntị onye na-ekiri ya: ahịrị/agwa/oke CPS na ndepụta okwu, imekọrịta egbugbere ọnụ na ntụgharị, ihe onyonyo bụ ihe na-ekpebi ha niile. AI na-eme ka ndebanye aha ngwa ngwa, nhazi oge, nhazi ntụgharị asụsụ, yana ịlele CPS na ASR; Ma ASR na-ehie ụzọ na aha kwesịrị ekwesị na mkpọtụ, ọ nweghị ike ịhụ ihe oyiyi ahụ na mkpebi ndị dabara adaba nke mmadụ mere. Nkọwa okwu nna ukwu anaghị atụgharị okwu maka okwu; na-achọta okwu kachasị nke dị nkenke, nke kachasị mma nke na-echekwa ihe ọ pụtara.
Ọrụ ngwa
Họrọ obere vidiyo (nkeji 2-3). Jiri ngwa ASR dee ma jiri ihe ọdịyo wee dezie ma dozie mpaghara ndị dị ize ndụ site na iji ndebiri “nkwenye ederede”. Wee were ndebiri "nsụgharị ndepụta okwu" tụgharịa asụsụ CPS ~ 17 wee belata ndepụta okwu ndị gafere oke site na iji "njikwa CPS". Ọ bụrụ na enwere ederede ihuenyo ma ọ bụ akara, tinye "nyocha ọnọdụ ihe ngosi".
ndetu
- [ ] Ekwenyere m na nbipu ASR site n'olu maka aha/nọmba akọwapụtara.
- [ ] Emere m ndepụta okwu ndị ahụ dabara n'ahịrị / agwa / iwu CPS.
- [ ] M dị nkenke ma mee ka ọ dị ka ọdịdị ya, ọ bụghị okwu maka okwu, na-echekwa ihe ọ pụtara.
- [ ] Ewetara m ihe a na-ahụ anya (ederede na ihuenyo, akara) n'ime akaụntụ.
- [ ] Atụgharịrị m ya iji chekwaa ndịiche dị na ụda na agwa.