Vinster:
- Möjlighet att ställa in HTR- och translittereringsarbetsflödet och förklara varför råutkastet kräver expertkontroll rad för rad
- Möjlighet att skydda oläsbara områden genom att be om alternativ istället för att införa en exakt läsning vid vokal-/bokstavsambiguitet på ottomansk turkiska
- Förmåga att separera den ursprungliga translitterationen från ett separat lager av förenkling, hålla det slutliga vetenskapliga ansvaret hos paleografen
Den kanske mest krävande delen av historisk forskning är att transkribera manuskript och gamla skrivna dokument till läsbar text. Ett brev, en anteckningsbok, en rättegångsprotokoll eller ett osmanskt dokument blir sökbart först efter att det har transkriberats. Transkription är handlingen att överföra innehållet i ett dokument (oftast handskrivet eller gammalt manus) till en skriven, läsbar text. När det gäller ottomanska, åtföljs detta ofta av translitteration: överföring av texten med arabiska bokstäver till det latinska alfabetet med dess motsvarigheter bokstav för bokstav.
Vi använde OCR för tryckta texter; Handskrift kräver en annan teknik: HTR (Handwritten Text Recognition). HTR är en teknik som liknar OCR men mycket mer utmanande som omvandlar handskrivna dokument till maskintext. I den här enheten kommer vi att se hur man använder HTR och AI i osmansk och manuskripttranskription, felmarginalerna och varför verifiering är ännu mer kritisk här.
Varför är handstil så svårt?
Handstil är mycket mer varierande än tryckt text: varje författare har en unik hand, bokstäver är sammanlänkade, förkortningar och speciella tecken används, bläck blöder, papper slits. På ottomansk turkiska är svårigheten mångdubblad:
- Kontextuella bokstavsformer: Samma bokstav skrivs olika i början, mitten och slutet av ordet.
- Att inte skriva vokaler: Korta vokaler skrivs ofta inte; läsaren kompletterar från sammanhanget. Detta skapar oklarheter som "acceptans eller avslag?"
- Olika skrivstilar: Det finns olika handstilar som rik'a, divani, ta'lik; Var och en kräver olika läskunnande.
- Osmanskt ordförråd: Ord från arabiska och persiska som inte finns på dagens turkiska.
Därför arbetar HTR och AI med en mycket högre felmarginal på ottomansk turkiska än tryckt OCR. En expert paleografs öga (paleografi - vetenskapen om att läsa gamla skrifter) är inte ett verktyg här, utan en nödvändighet.
Arbetsflöde: steg för steg
1. Förbered dokumentkvaliteten. Precis som med OCR är hög upplösning och bra kontrast viktigt. Detta är ännu mer kritiskt i handstil.
2. Välj HTR-modell. Osmanska, arabiska handstils- eller HTR-modeller som är speciellt utbildade för en viss period är mycket mer framgångsrika än allmänna modeller. Testa vilken modell som fungerar bra för en period och skrivstil.
3. Generera rå transkription. HTR-modellen ger en kontur. På ottomansk turkiska är detta utkast en början full av fel som ett erfaret öga måste kontrollera noggrant.
4. Kontextuell förbättring med AI. Du kan ha AI-flaggans inkonsekvenser, möjliga läsalternativ och misstänkta platser i råutdata. Men AI-"korrigeringen" är särskilt riskabel här: den kan föreslå en konstruerad läsning.
5. Translitteration och förenkling (skiktad). Translitterationen av texten med arabiska bokstäver till latinska bokstäver, följt av dess förenklade läsning till dagens turkiska, produceras som separata lager. Originalet går aldrig sönder.
6. Expertverifiering. Den slutliga transkriptionen godkänns av en expert med paleografi och periodkunskap genom att jämföra den med dokumentet.
Observera: På ottomansk turkiska, när man "gissar" ett ord med en oskriven vokal från sammanhanget, kan AI producera en helt felaktig läsning och presentera det på ett säkert språk. En skillnad i bokstäver, som "kabul" istället för "kabil" eller "alem" istället för "alim", ändrar helt innebörden. Varje osäker läsning bör presenteras med alternativ, och ingen enda definitiv läsning bör påtvingas.
Lager och ansvar med bord
lager
Innehåll
AI:s roll
Expertens roll
Bild
originaldokument
—
Källa
HTR utkast
Råmaskinsavläsning
producerar
Kontroll från början till slut
translitteration
Latinsk bokstavsöversättning
utkast föreslår
Rättar, korrigerar
Anteckningar om osäkerhet
[?] och alternativ
tecken
bestämmer
Förenkling
Dagens turkiska
utkast föreslår
Godkännanden
vetenskaplig publikation
Slutlig text + anteckningar
—
Endast expert
tre minifodral
Fall 1 — HTR snabbade upp det första utkastet med 5x. En doktorand skulle transkribera en 200-sidig osmansk anteckningsbok. Full manuell transkription uppskattades till 60 arbetsdagar. Med en HTR-modell utbildad för perioden kom råutkastet ut på några timmar; Eleven korrigerade detta utkast och minskade arbetet till 12 arbetsdagar. Men han var tvungen att jämföra varje sida med dokumentet, rad för rad; Cirka 30 % av utkastet var felaktigt.
Fall 2 — En bokstav, en betydelse. En forskare litade på ett ord som AI läste som "guvernör". Under expertkontroll förstod man att ordet faktiskt var "förmyndare" (ansvarig för ett barn/person), och eftersom vokalen inte var markerad, gissade AI det fel. Den juridiska innebörden av dokumentet förändrades totalt. Lektion: På ottomansk turkiska gör en enskild bokstav/vokal skillnad att dokumentet tolkas från början; expert krävs.
Fall 3 — Konstruerat slutförande. I en rad vars bläck hade tagit slut och ett ord var oläsligt, fyllde AI luckan med ett "logiskt" ord. Experten insåg att den luckan faktiskt var ett ortnamn och att AI:n hade tagit igen det. Utrymme kvar som [oläsligt]. Lektion: oläsbart utrymme är inte ifyllt, det är markerat.
Fyra kopierbara mallar
1) Translitteration som bevarar tvetydighet:
Nedan är HTR rå utdata/translitteration av ett osmanskt dokument. Din uppgift är att granska texten och flagga eventuella läsfel. Regler: (1) Erbjud 2-3 möjliga läsalternativ för varje ord du inte är säker på, ålägg inte ett. (2) Lämna [oläsligt] i de oläsliga områdena, fyll dem inte. (3) LÄGG TILL ord som inte finns i texten. (4) Visa alternativ i ord med tvetydiga vokaler. Text: [här]
2) Layered läsning (original + förenkling):
Generera TVÅ kolumner för följande verifierade osmanska translitteration: (1) Originaltranslitteration (touch), (2) Förenklad läsning till dagens turkiska. ATT LÄGA till mening, lägga till tolkning i förenkling; bara uppdatera språket. Markera platser med tvetydig betydelse[otydlig]. Translitteration: [här]
3) Term- och personextraktion:
De personnamn, ortnamn, titlar och periodiska termer som nämns i transkriptionen nedan finns i separata listor. Ta bara de som TYDLIGT nämns i texten; Lägg inte till genom att gissa. Markera med [?] om du inte är säker på uttalet. Text: [här]
4) Misstänkt läskontroll:
En erfaren paleografikontrollant i rollen. Markera i transkriptionen nedan de ord som är inkonsekventa i betydelsen, som inte passar perioden eller inte passar in i sammanhanget och skriv varför de är misstänkta. Att införa definitiv korrigering; Skapa en lista med misstankar som den mänskliga experten kommer att jämföra med dokumentet. Text: [här]
Svag prompt / Stark prompt
Svag:
Läs denna osmanska text och ge mig dess översättning.
Detta driver AI att producera en enda, definitiv läsning, dölja oklarheter och passa in luckor. På ottomansk turkiska är detta nästan ett garanterat misstag.
Stark:
Kolla in den osmanska translitterationen nedan. En definitiv läsning: IMPOSITION. Ge möjliga alternativ för varje tvetydigt ord, utelämna [oläsliga] delar, lägg inte till något som inte finns i texten. Ge den förenklade läsningen till dagens turkiska i en separat kolumn, men behåll originalet. Markera något du inte är säker på med [?] så att experten kan jämföra det med dokumentet. Text: [här]
Skillnaden: strikt läsförbud, begära alternativ, bevara blanksteg och lagerutdata möjliggör expertverifiering.
Vanliga misstag
- Misstar HTR-utkastet som korrekt. På ottomansk turkiska kan mycket av det råa utkastet vara felaktigt; Linje för rad kontroll är ett måste.
- Den enda definitiva läsningen är att påtvinga. Om alternativ döljs i ord vars vokaler inte är skrivna, kommer fel betydelse att registreras.
- Fyller i det oläsbara området. Den ska skyddas av blanksteg [oläslig], inte påhittad.
- Att blanda originalet med förenkling. Förenkling bör vara ett separat lager; Den ursprungliga translitterationen bör inte förvrängas.
- Inaktiverar experten. Utan kunskap om paleografi och period är AI:s läsning en gissning utan vetenskapligt värde.
Sammanfattningsvis
Osmansk transkription och manuskripttranskription kan påskyndas avsevärt i råutkaststadiet med HTR och AI; Du får en första utgång som reducerar arbetsdagar till timmar. Men det är just på detta område som en enda bokstav, en enda vokalskillnad ändrar betydelsen; AI tenderar att dölja osäkerhet och fylla i luckorna. Den korrekta metoden är skiktad: rå kontur, alternativa anteckningar om tvetydighet, ett separat lager av förenkling och framför allt, rad för rad verifiering av dokumentet av en expert som är bekant med paleografi. AI påskyndar initial avläsning; Det vetenskapliga ansvaret ligger hos experten.
Applikationsuppgift
Skaffa en translitteration av ett osmanskt dokument eller ett manuskript (din egen produktion eller en publicerad kopia). Be AI om en alternativ läsning med mallen "tvetydighetsbevarande translitteration". Generera sedan förenklingslagret separat med "layered reading". Jämför varje vagt markerat ord med en expertkälla eller ordbok; Notera hur många fel AI skulle producera om den införde en enda avläsning.
checklista
- [ ] Jag använde en HTR/modell lämplig för perioden och skrivstilen.
- [ ] Jag frågade AI om alternativ till den exakta läsningen.
- [ ] Jag skyddade de oläsbara delarna med [oläsbar].
- [ ] Jag höll den ursprungliga translitterationen åtskild från förenklingen.
- [ ] Jag fick den slutliga texten verifierad av en expert/dokumentär som kan paleografi.