Jedinica 2 / 11

Osnove mašinskog prevođenja: NMT, LLM, izbor motora i prethodna evaluacija

Dobici:

  • Sposobnost razlikovanja prednosti i mana prevoda zasnovanog na NMT i LLM i odabir pravog pokretača prema vrsti poslovanja
  • Sposobnost da se unapred klasifikuje podobnost teksta za mašinu i da se unapred proceni za realno vreme i cenu
  • Sposobnost brzog mjerenja kvaliteta sirove mašinske proizvodnje u pet dimenzija i označavanja rizika bez brkanja glatkoće i preciznosti

Najmoćniji akcelerator koji imate kao prevodilac je mašinsko prevođenje (MT) — ali upotreba alata svesno znači da ga primenite na pravi posao, u pravom jezičkom paru i sa pravim očekivanjima. U ovoj jedinici ćete upoznati dvije glavne porodice MT-a (prevođenje zasnovano na NMT i LLM), naučiti koja je bolja za koji posao, kako brzo izmjeriti sirovi kvalitet prijevoda prije isporuke i kako odabrati motor prema poslu. Cilj je odmaknuti se od ideje "svejedno, zalijepi-prevesti" i postati stručnjak koji može predvidjeti koji je tekst pogodan za mašinu, a koji zahtijeva ljudski intenzivan rad.

Dvije porodice: NMT i LLM prevođenje

NMT (Neural Machine Translation) su sistemi koji su naučili iz miliona dvojezičnih rečenica i prevode rečenicu u cjelini; Google Translate, DeepL, Microsoft Translator su primjeri ovih. Prednosti: vrlo brz, dosljedan, tečno u kratkim rečenicama. Slabost: često ne vidi kontekst izvan granica rečenice (značenje iz cijelog teksta); Možda će biti teško odlučiti da li riječ "banka" znači obalu ili obalu rijeke gledajući pasus i ne uklapa se u spisak navedenih termina.

Prevođenje zasnovano na LLM-u (model velikog jezika) je upotreba modela vođenih uputama kao što su ChatGPT, Claude, Gemini za prevođenje. Snaga: prima uputstva — razume uputstva kao što su „koristite formalni ton“, „pratite ovu listu pojmova“, „ciljana publika su deca“; vidi širi kontekst; bolje hvata idiom i ton. Slabost: ponekad može biti "previše kreativan" i dodati izvoru (rizik od halucinacija), gubi koherentnost u dugim tekstovima, a troškovi/brzina variraju ovisno o poslu.

Pravilo: u direktnim, ponavljajućim, tehničkim tekstovima NMT je obično brz i adekvatan; LLM je fleksibilniji s tekstovima koji zahtijevaju disciplinu u tonu, kontekstu, rječniku i instrukciji. Većina profesionalaca danas koristi oboje zajedno: brzi nacrt iz NMT-a, korekcija tona/termina od LLM.

Savjet: Kvalitet stroja jezičkog para (npr. turski→engleski) može se razlikovati od suprotnog smjera (engleski→turski). Jezici sa aglutinativnom, fleksibilnom sintaksom, kao što je turski, općenito su izazovniji za MT. Procijenite sami koji je motor bolji u vašem paru uz nekoliko primjera tekstova.

Mašinska kompatibilnost teksta: prvo pitajte ovo

Nije svaki tekst jednako prikladan za mašinu. Prije početka prijevoda, prođite tekst kroz filter "prikladnosti":

  • Dobro prilagođen mašini: tehnički priručnik, opis proizvoda, ponavljajući tekst interfejsa, standardna korespondencija, tabela/lista. Jezik je jednostavan, terminologija je fiksna, kreativnost je oskudna.
  • Srednje prikladno: vijesti, korporativni sadržaji, edukativni materijal. Mašina daje dobre obrise, ali zahtijeva ozbiljno naknadno uređivanje za ton i protok.
  • Nije prikladno za mašinu (visok rizik): pravni ugovor, medicinski tekst, reklama/slogan, književni tekst, humor, poezija. Ovdje mašina samo daje ideje; Posao uglavnom pripada ljudima.

Ako napravite ovu razliku od početka, i daćete kupcu pravo vrijeme/cijenu i zaštitite se od slijepog povjerenja u sirovi rezultat.

Brzo izmjerite sirovi kvalitet izlaza

Kada vidite MT izlaz pitate se "da li je to dobro ili loše?" Odgovorite na pitanje brzom kontrolnom listom, a ne intuicijom. Pogledajte ovih pet dimenzija: tačnost (da li je značenje vjerno izvoru?), potpunost (da li je rečenica izostavljena ili dodana?), terminologija (da li je ispravna i dosljedna?), tečnost (da li je prirodno u ciljnom jeziku?), format (jesu li oznake, brojevi, formati sačuvani?). Ove dimenzije ćemo produbiti u sljedećoj jedinici kvaliteta; Za sada, neka to bude vaš refleks prije porođaja.

Oprez: Najopasnije greške MT izlaza su one "tečno, ali netačne". Rečenica je možda na savršenom turskom, ali "15% popusta" u izvoru je možda promijenjeno u "50% popusta". Nemojte da vas odbije tečnost; Uvijek gledajte odvojeno broj, negativnu i vlastitu imenicu.

tri mini kofera

Slučaj 1 — Pravi motor je prepolovio vrijeme. Jedan prevodilac je odlučio da prevede softverski interfejs od 12.000 reči sa NMT-om i marketinšku brošuru istog obima sa LLM. NMT-ova konzistentnost na interfejsu učinila je rad bržim; LLM-ova tonska fleksibilnost u brošuri smanjila je opterećenje ponovnog pisanja za 40%. Davanje oba posla istom motoru gubilo bi vrijeme.

Slučaj 2 — Prethodna procjena je spasila cijenu. Jedna kancelarija se spremala da ponudi zakonski tekst jer "može da se napravi mašinama, biće jeftino". U prethodnoj evaluaciji preveden je uzorak od 500 riječi; Mašina je vratila dva pravna termina sa pogrešnim ekvivalentom sistema. Ured je cijenio rad kao "teško naknadno uređivanje" i dao realan rok; Izbjegao je gubitak novca zbog pogrešne ponude.

Slučaj 3 — Razlika u jezičkim parovima. Tim je smatrao da je motor koji odlično radi na engleskom → njemačkom istog kvaliteta na turskom → arapskom. Test od 300 riječi pokazao je da arapski izlaz zahtijeva mnogo više korekcija. Tim je dodijelio različite mehanizme i različite budžete za naknadno uređivanje ovisno o jezičnom paru.

Četiri šablona za kopiranje

1) Procjena prikladnosti teksta:

Vaša uloga: viši stručnjak za MTPE. Ocijenite sljedeći tekst za prikladnost za mašinsko prevođenje: doslovan/tehnički ili kreativan/kontekstualni? Klasificirajte ga kao (1) vrlo pogodan za mašine, (2) srednji, (3) visok rizik i napišite svoje opravdanje. Procijenite očekivano opterećenje nakon uređivanja kao lagano/srednje/teško. Primjer teksta: [zalijepi 200-300 riječi]

2) Instrukcijski prijevod LLM (sa terminologijom i kontrolom tona):

Prevedi ovaj tekst [izvor]→[cilj]. Publika: [ko]. Ton: [npr. službeno]. Polje: [npr. finansije].Lista pojmova (obavezno koristiti): [A→a, B→b].Pravila: ne dodavati ono što nije u izvoru, zadržati brojeve/datume/imena, zamijeniti svaku rečenicu rečenicom. Označite gdje niste sigurni sa [?]. Tekst: [...]

3) Poređenje dva motora:

Ispod su dva različita prijevoda iste izvorne rečenice (A i B). Uporedite svaki u smislu ispravnosti, terminologije i prirodnosti i recite mi koji će zahtevati manje ispravki, sa obrazloženjem. Izvor: [...] | Prijevod A: [...] | Prijevod B: [...]

4) Brza inspekcija sirovog izlaza:

Ispod je izvor i strojni prijevod. Samo označite sljedeće: (1) izostavljene/dodate informacije, (2) netačan broj/datum/ime, (3) greška negacije, (4) nedosljedan termin. Nemojte pisati nikakve ispravke, samo navedite rizična područja. Izvor: [...] | Prijevod: [...]

Slaba prompt / Jaka prompt

Slabo: "Prevedi ovaj tekst i biće dobro." (Za motor, "dobro" je nedefinisano; nema tona, nema termina, nema mase.)

Güçlü: "Prevedi opis ovog proizvoda sa engleskog na turski. Područje: e-trgovina. Publika: mladi potrošač. Ton: prijateljski, ali umirujući. 'checkout' → 'checkout step', 'wishlist' → 'wish list'. Promijenite brojeve i naziv brenda. Tečni turski bez ikakvog mirisa prijevoda."

Razlika: snažan brzi odziv daje motoru mjerljiv cilj; izlaz je direktno približan postuređenom nacrtu.

Grafikon poređenja NMT i LLM

Veličina

NMT (Google, DeepL)

LLM (ChatGPT, Claude)

brzina

vrlo brzo

srednje

Primite instrukcije/ton

slab

jaka

Pridržavajte se liste termina

ograničeno

Dobro (sa brzinom)

Široki kontekst

slab

dobro

Rizik od halucinacija

nisko

Srednji (potrebna je kontrola)

najpogodniji posao

Pravo/tehničko/repetitivno

Ton/kontekst/kreativno

Uobičajene greške

  • Korištenje istog motora za svaki posao. Neodabir motora prema vrsti posla uzrokuje gubitak vremena i kvalitete.
  • Davanje cijene/vrijeme bez prethodne procjene. Test od 200-300 riječi otkriva iznenađenja od početka.
  • Greška tečnost za tačnost. Lijepa rečenica ne znači ispravnu rečenicu.
  • Zanemarivanje jezičkog para i razlike u smjeru. Dobar motor u jednom paru može biti slab u drugom.
  • Ne primjećujući dodatke LLM-a. LLM ponekad dodaje rečenice koje nisu u izvoru "da bi pomogle"; pogledajte ovo.

Prozor konteksta i konzistentnost

Prilikom prevođenja dugog teksta pomoću LLM-a, potrebno je znati jedno tehničko ograničenje: kontekstni prozor — količinu teksta koju model može "vidjeti" i zadržati na umu odjednom. Ako je tekst veći od ovog prozora, moraćete da ga podelite na delove, a model bi u sledećem delu mogao da "zaboravi" odluku o terminu ili ton koji ste doneli u prethodnim delovima. Dakle, umjesto prevođenja dugačke knjige ili dokumenta u jednom komadu, podsjećanje svakog dijela na bazu termina i sažetak stila održava konzistentnost. Ovaj problem se ne javlja u kratkim tekstovima; Međutim, u dugim radovima kao što su romani i priručnici, potrebno je dodatno provjeriti konzistentnost u odlomcima. Praktično rješenje: pripremiti "projektnu memoriju" (izrazi + znakovi + odluke o tonu) i dodati je na početak svakog djela i skenirati konzistentnost između dijelova na kraju prijevoda. U NMT-u se ovaj problem doživljava na drugačiji način: pošto NMT prevodi rečenicu po rečenicu, konzistentnost dužine pasusa je već slaba, pa terminska baza preuzima termin disciplina.

Ukratko

Postoje dvije porodice mašinskog prevođenja: NMT, koji je brz i dosljedan, i LLM, koji uzima instrukcije i bolje vidi kontekst i ton. Glavni prevodilac unapred ocenjuje prikladnost teksta za mašinu, bira motor prema poslu, brzo meri kvalitet sirovog izlaza pre isporuke i nikada ne brka tečnost sa preciznošću. Ovaj refleks prethodne evaluacije omogućava vam da date realno vrijeme/cijenu i zaštitite se od slijepog povjerenja.

Zadatak aplikacije

Prevedite isti tekst od 200 riječi sa NMT alatom i LLM. Uporedite dva rezultata u pet dimenzija (tačnost, potpunost, terminologija, tečnost, format) i napišite razloge zbog kojih je potrebno manje naknadnog uređivanja za ovaj tekst. Zatim označite rizike problema/nepredviđenih/terminalnih rizika na oba sa šablonom „brza provjera sirovog izlaza“.

kontrolna lista

  • [ ] Klasificirao sam prikladnost teksta za mašinu (nizak/srednji/visok rizik).
  • [ ] Ovisno o vrsti posla, odlučio sam da li ću koristiti NMT ili LLM.
  • [ ] Napravio sam preliminarnu procjenu s malim uzorkom i u skladu s tim odredio trajanje/cijenu.
  • [ ] Brzo sam pregledao sirovi rezultat u pet dimenzija.
  • [ ] Provjerio sam broj, datum, ime i negative odvojeno, a da me tečnost nije zavarala.