Keuntungan:
- Keupayaan untuk menyesuaikan sambil mengekalkan makna dengan menggunakan peraturan teknikal sari kata (baris, watak, CPS)
- Keupayaan untuk mengesahkan ralat nama dan nombor yang betul dengan suara sambil mempercepatkan transkripsi dan pengekodan masa automatik dengan ASR
- Keupayaan untuk mengurus had kecerdasan buatan dengan mengambil kira konteks visual, perbezaan tonal dan segerak bibir dalam alih suara
Menterjemah filem, siri TV, video korporat atau kursus dalam talian amat berbeza daripada menterjemah teks biasa: masa, kelajuan membaca, imej pada skrin, suara dan pergerakan bibir watak-watak juga merupakan kekangan. Dalam unit ini, anda akan mempelajari terjemahan audiovisual (nyari kata, alih suara, alih suara), peraturan teknikal sari kata, transkripsi dan pengekodan masa yang disokong AI, dan masalah kualiti medan ini. Matlamatnya adalah untuk bekerja seperti pakar terjemahan audiovisual yang "sesuai dengan mata dan telinga penonton" dan bukannya "menterjemah teks".
Konsep asas
Terjemahan audiovisual (AVT) ialah terjemahan kandungan yang mengandungi audio dan video; Bentuk utama ialah sari kata, alih suara dan penerangan audio. Sari kata ialah pantulan ucapan dalam bentuk bertulis pada skrin. Alih suara ialah alih suara semula suara asal dalam bahasa sasaran. Voice over ialah apabila bunyi asal diredamkan dan terjemahan dibaca di atasnya (biasa dalam dokumentari).
Dua istilah teknikal sari kata yang kritikal: CPS (Watak Sesaat) mengehadkan kelajuan sari kata supaya penonton boleh membacanya dengan selesa; Had atas yang diterima umum ialah sekitar 17 aksara sesaat (lebih rendah untuk kandungan kanak-kanak). Kod masa ialah masa mula-akhir yang menunjukkan bila sari kata akan muncul dan hilang pada skrin (seperti 00:01:23,400).
Kenapa susah? Kerana ini bermakna terjemahan yang sesuai ke dalam sari kata. Dua baris, ~42 aksara setiap baris, minimum ~1 saat dan maksimum ~6 saat masa skrin, dan had CPS — anda perlu mematuhi semua ini sambil mengekalkan makna dan nada. Itulah sebabnya terjemahan sari kata selalunya berkaitan dengan pemampatan dan frasa semula, bukan terjemahan perkataan demi perkataan.
Petua: Elakkan refleks "menterjemah setiap perkataan" dalam sari kata. Penonton menonton dan membaca imej; Sari kata yang terlalu panjang tidak boleh dibaca. Mencari ungkapan semula jadi terpendek yang mengekalkan makna adalah penguasaan sebenar kapsyen.
Peranan AI dalam terjemahan audiovisual
AI mempercepatkan beberapa langkah dengan ketara dalam bidang ini:
- Transkripsi: Dengan ASR (Pengecaman Pertuturan Automatik), suara ditranskripsi secara automatik. Ini mengekstrak sumber mentah sari kata dalam beberapa minit.
- Pengekodan masa automatik: Alat membahagikan perbualan kepada segmen dan menghasilkan kod masa draf.
- Draf terjemahan: Teks transkrip diterjemahkan.
- CPS/kawalan panjang: AI boleh menandakan sari kata yang melebihi kelajuan membaca dan mencadangkan pemendekan.
Tetapi berhati-hati: ASR tersilap pada bunyi bising, loghat, pertuturan yang bertindih, nama yang betul dan istilah teknikal; tidak boleh memberikan "perihalan audio"; Siapa yang bercakap mungkin keliru. Terjemahan AI tidak melihat imej — ia tidak dapat mengetahui bila objek yang ditunjukkan pada skrin dipanggil "itu." Oleh itu, manusia mengesahkan konteks visual dan ketepatan pentafsiran.
Awas: Kesilapan yang paling biasa ialah memikirkan bahawa output ASR "dinyahkod". ASR kerap membuat kesilapan, terutamanya dalam nama yang betul, nombor, nama jenama dan istilah teknikal; transkripsi yang salah membawa kepada terjemahan dan sari kata. Pastikan anda mengesahkan kawasan kritikal dengan mendengar audio.
Peraturan format sari kata
Peraturan biasa (berbeza mengikut platform):
- ~37-42 aksara setiap baris, maksimum 2 baris.
- Tempoh: ~1-6 saat; Elakkan sari kata "flash" yang sangat pendek.
- CPS tidak melebihi ~17 (kandungan dewasa).
- Pecahkan ayat di mana ia masuk akal (jangan tinggalkan "dan" atau "tetapi" di hujung baris).
- Jika boleh, jangan langkau potongan adegan (perubahan syot).
- Ikut peraturan platform untuk item seperti sumpah, lagu, penulisan skrin.
tiga kes mini
Kes 1 — ASR + pasca edit dipercepatkan sebanyak 60%. Satu pasukan mula-mula menyalin dan mengekod masa dokumentari 45 minit dengan ASR, kemudian menterjemah dan menyuntingnya selepas itu. Masa dikurangkan sebanyak 60% berbanding dengan menyalin + pengekodan masa dari awal. Tetapi semua nama dan nombor yang betul telah diperbetulkan dengan perbandingan bunyi.
Kes 2 — CPS menyemak kebolehbacaan disimpan. Terjemahan pertama video pengajaran dengan sari kata adalah tepat, tetapi CPS purata 24 — penonton tidak dapat mengikutinya. Pusingan pemendekan dikuasakan AI memendekkan sari kata sebanyak 30%, mengurangkan CPS kepada 16; makna telah dipelihara, kebolehbacaan datang.
Kes 3 — Ralat konteks visual. Dalam terjemahan berasaskan ASR, watak menunjuk pada tanda pada skrin dan berkata "baca itu"; AI menterjemahkannya sebagai "membacanya", tetapi teks pada tanda itu tidak diterjemahkan, jadi penonton tidak dapat melihat apa yang hendak dibaca. Kapsyen menambah kapsyen berasingan untuk kapsyen skrin; Orang yang melihat imej itu membuat perbezaan.
Empat templat yang boleh disalin
1) Senarai pengesahan Transkripsi (ASR):
Di bawah ialah transkripsi automatik video. Tandakan kemungkinan ralat dalam transkripsi: nama yang betul, nama jenama, nombor, istilah teknikal, ayat samar/tidak lengkap. Senaraikan ini sebagai "sahkan melalui suara." Jangan terjemah. Transkripsi: [...]
2) Terjemahan sari kata (CPS/panjang terhad):
Terjemahkan transkripsi berikut ke dalam sari kata [bahasa sasaran]. KEKANGAN: setiap sari kata mestilah maksimum 2 baris, baris ~42 aksara, CPS tidak melebihi ~17. PENDEKKAN dan naturalisasi sambil mengekalkan makna; jangan terjemah perkataan demi perkataan. Kekalkan kod masa. Transkripsi + kod masa: [...]
3) Pemeriksaan CPS/kebolehbacaan:
Kira anggaran CPS berdasarkan tempoh dan kiraan aksara bagi setiap sari kata berikut. Tandakan mana-mana yang melebihi 17 dan cadangkan alternatif yang lebih pendek yang mengekalkan makna. Sarikata (teks | tempoh saat): [...]
4) Teks skrin / semakan konteks visual:
Dalam dialog berikut, tandai tempat yang mungkin merujuk kepada imej (teks skrin, objek runcing, tanda). Katakan sama ada sarikata tambahan / penjelasan diperlukan untuk ini, dengan anggapan bahawa penonton tidak dapat melihat imej. Dialog: [...]
Gesaan lemah / Gesaan kuat
Lemah: "Terjemahkan sari kata ini." (Tiada panjang, CPS, peraturan baris; output tidak akan muat pada skrin, tidak boleh dibaca.)
Güçlü: "Terjemahkan transkrip dialog ini ke dalam sari kata Turki. Setiap sari kata mestilah maksimum 2 baris, 42 aksara setiap baris; pendekkannya sambil mengekalkan makna apabila perlu untuk kelajuan membaca. Berikan bahasa pertuturan dalam bahasa Turki asli, lembutkan slanga. Jangan sentuh kod masa."
Perbezaan: gesaan kuat memberikan kekangan teknikal sarikata (baris, watak, CPS, nada); output sebenarnya menghampiri sari kata yang boleh digunakan.
Carta perbandingan format AVT
format
Apa yang boleh
Sumbangan AI
titik kritikal manusia
sari kata
Menyalin ucapan
ASR, terjemahan, CPS
Sesuai, konteks visual
mengalih suara
Suara dalam bahasa sasaran
Draf terjemahan
lip sync, lakonan
alih suara
Baca terjemahan di atas
Terjemahan, masa
Aliran semula jadi, nada
Perihalan audio
Menerangkan imej dengan bunyi
draf teks
Tafsiran visual (manusia)
Kesilapan biasa
- Menterjemah transkrip ASR tanpa mengesahkannya. Ralat nama/nombor yang betul dibawa ke sari kata.
- Menterjemah perkataan demi perkataan dan mengelilingi CPS. Penonton tidak boleh membaca; kesesuaian mesti dibuat.
- Mengabaikan konteks visual. Teks skrin dan objek runcing kekal tidak diterjemahkan.
- Menjadikan pemisahan garisan sia-sia. Ia merosakkan kebolehbacaan.
- Meratakan nada/daftar. Dialek dan slanga watak-watak itu hilang.
Alih suara dan penyegerakan bibir
Walaupun kekangan sari kata ialah kelajuan membaca, kekangan mengalih suara ialah masa dan bibir. Terdapat tiga jenis penyegerakan yang berbeza dalam terjemahan alih suara: penyegerakan bibir — di mana terjemahan itu sepadan dengan pergerakan mulut watak, terutamanya vokal terbuka dalam jarak dekat; isokroni — baris terjemahan adalah sama panjang dengan baris asal, tidak terlalu pendek atau terlalu panjang; penyegerakan isyarat — memadankan apa yang diperkatakan dengan pergerakan tangan dan lengan watak itu. Itulah sebabnya penterjemah alih suara sering menulis baris "menarik" yang mengekalkan makna tetapi dengan perkataan yang sama sekali berbeza; Kesetiaan perkataan adalah lebih rendah daripada sari kata di sini.
AI boleh menyediakan draf terjemahan mentah dan amaran masa untuk alih suara ("baris ini 40% lebih panjang daripada yang asal, pendekkan"). Teknologi baharu malah boleh mengklon bunyi dan menghasilkan alih suara automatik; tetapi lakonan, emosi, penalaan halus pernafasan watak dan lip-sync masih menjadi tugas penterjemah manusia dan pelakon suara. Alih suara automatik menyediakan garis besar; Keputusan artistik dan segerak adalah hak manusia. Selain itu, persetujuan orang yang suaranya diklon adalah isu etika dan undang-undang yang penting.
Secara ringkasnya
Terjemahan audiovisual ialah seni menyesuaikan teks dalam kekangan mata dan telinga penonton: sempadan garis/watak/CPS dalam sari kata, penyegerakan bibir dalam alih suara, konteks visual adalah faktor penentu dalam kesemuanya. AI mempercepatkan transkripsi, pengekodan masa, penggubalan terjemahan dan semakan CPS dengan ASR; Tetapi ASR tersilap dalam nama dan bunyi yang betul, ia tidak dapat melihat imej dan keputusan nada yang sesuai dibuat oleh manusia. Sari kata induk tidak menterjemah perkataan demi perkataan; mencari ungkapan terpendek, paling semula jadi yang mengekalkan makna.
Tugasan permohonan
Pilih klip video pendek (2-3 minit). Transkripsikan dengan alat ASR dan bandingkan serta betulkan kawasan berisiko dengan audio dengan templat "pengesahan transkripsi". Kemudian terjemah dengan kekangan CPS ~17 dengan templat "terjemahan sari kata" dan pendekkan sari kata yang melebihi had dengan "kawalan CPS". Jika terdapat teks atau tanda skrin, gunakan "semakan konteks visual".
senarai semak
- [ ] Saya mengesahkan penyahsulitan ASR melalui suara untuk nama/nombor tertentu.
- [ ] Saya membuat sari kata sesuai dengan peraturan baris/watak/CPS.
- [ ] Saya memendekkan dan menaturalisasikannya, bukan perkataan demi perkataan, memelihara maknanya.
- [ ] Saya mengambil kira konteks visual (teks pada skrin, log masuk).
- [ ] Saya menterjemahnya untuk mengekalkan perbezaan nada dan watak.