Aonad 3 / 11

Teangeolaíocht agus Anailís Chorpais: Léamh Stór Focal le hUimhreacha

Gnóthachain:

  • Cumas tomhais corpais a dhréachtú mar mhinicíocht focal, comhlonnú, saibhreas foclóra agus eochairfhocail le hintleachta saorga
  • Bheith ar an eolas go bhfuil hintleachta saorga neamhiontaofa maidir le comhaireamh beacht agus a bheith in ann gach comhaireamh a fhíorú le huirlis ar leith
  • Cumas a thuiscint nach ndeir uimhir rud ar bith ina haonar agus go mbaineann an léirmhíniú teangeolaíoch a bhunaíonn an bhrí le daoine.

Ní “tráchtaireacht” amháin atá sa litríocht agus sa staidéar teanga; Tá gné intomhaiste agus inchurtha aige freisin. Cé mhéad focal éagsúil a úsáideann údar, cad iad na focail a thaitníonn leis a úsáid lena n-úsáidtear focail, cad iad na focail a thagann chun bheith coitianta i dtréimhse - déantar iad seo a imscrúdú tríd an teangeolaíocht (an eolaíocht a dhéanann staidéar ar fhuaim, struchtúr, brí agus úsáid teanga) agus go háirithe teangeolaíocht chorpais. Is éard is corpas ann ná bailiúchán téacsanna, ar nós saothair iomlána údair, cartlann bhliantúil nuachtáin, nó dánta tréimhse. Lorgaíonn anailís chorpais patrúin uimhriúla sa smután seo.

San aonad seo, beidh muid ag foghlaim conas AI a úsáid mar chúntóir anailíse corpais: méadracht mar mhinicíocht focal a bhaint go tapa (an líon uaireanta a tharlaíonn focal sa téacs), comhshuíomh (péirí focal a tharlaíonn go minic le chéile, m.sh. "dubh" + "mo fhortún"), saibhreas stór focal, agus éagsúlacht séasúrach. Ach rabhadh ón tús: is féidir le AI botúin a dhéanamh agus iad ag comhaireamh ina n-aonar; Tá gá le huirlisí speisialta le haghaidh comhaireamh mór beacht, agus is tusa an teangeolaí a shocraíonn brí gach uimhreach.

Cá bhfuil AI láidir agus cá bhfuil sé lag san anailís chorpais?

Is iad na láidreachtaí atá aige ná: Patrúin i dtéacsanna beaga agus meánacha a aithint, hipitéisí a ghiniúint faoi stór focal téacs, iarrthóirí a mholadh le haghaidh comhlonnaithe, toradh a léirmhíniú, cur síos ar mhodheolaíocht. Fiafraíonn AI “cad iad na frásaí a sheasann amach san údar seo?” Tugann sé tús tapa don cheist.

Laige: Comhaireamh cruinn. Múnla teanga is ea AI, ní áireamhán; in ann freagra gar agus uaireanta mícheart a thabhairt ar an gceist “cé mhéad uair a tharla sé” i dtéacs fada. Ar mhaithe le minicíocht bheacht, staitisticí cruinn comhlonnaithe, nó scanadh mór corpais de na mílte focal, úsáidtear bogearraí speisialaithe (m.sh. uirlisí corpais mar AntConc nó scarbhileog). Tá AI luachmhar chun aschur na n-uirlisí seo a léirmhíniú; Ach ná lig dó an t-amh a chomhaireamh go dall.

Leid: Má theastaíonn uimhir bheacht uait, bain úsáid as dhá bhealach: bíodh uirlis agat déan an comhaireamh i dtéacs beag agus iarr ar an AI é a léirmhíniú; Nó bíodh an AI ag comhaireamh agus é a fhíorú ar bhealach eile. Ná húsáid an abairt "Dúirt AI go dtarlaíonn sé 47 uair" gan deimhniú.

Staidéar corpais céim ar chéim

  1. Cuir ceist. “Conas a scaiptear focail dhaite san fhile seo?” Tá an comhaireamh gan brí gan ceist shoiléir mar:
  2. Sainmhínigh an corpas. Cé na téacsanna? Cén eagrán? Cén tréimhse? Caithfidh an teorainn a bheith soiléir.
  3. Roghnaigh an tomhas. Minicíocht, collocation, saibhreas foclóra?
  4. Tomhais agus fíoraigh. Déan an comhaireamh, ansin deimhnigh an dara bealach.
  5. Trácht. Ní deir an uimhir amháin tada; Is é do thrácht a thugann brí don fhionnachtain go bhfuil "focail dhaite faoi dhó sa dara tréimhse" le brí.

Tomhas ar shaibhreas stór focal a úsáidtear go minic is ea an cóimheas idir líon na bhfocal éagsúil le líon iomlán na bhfocal (cóimheas cineáil/chomharthaí). Má tá an cóimheas seo ard, is cineál focal é an téacs, agus má tá sé íseal, ciallaíonn sé go bhfuil sé athchleachtach. Ach tá tionchar ag fad an téacs ar an gcóimheas seo; Bí cúramach agus tú ag déanamh comparáide díreach idir téacsanna gearra agus fada.

trí chás mion

Cás 1 - Léirigh comhshuíomh stíl. Scrúdaigh taighdeoir péirí aidiachtacha-ainmfhocail i 3 úrscéal d'úrscéalaí. Mhol AI go dtagann an focal “pale” le 5 ainmfhocal dhifriúla; D'fhíoraigh an taighdeoir 4 cinn de na téacsanna agus chuir sé deireadh le 1 mar théacs déanta. Tháinig an patrún deimhnithe chun bheith ina ráiteas tráchtais faoi stíl thuairisciúil an údair.

Cás 2 — Earráid chomhairimh gafa. Chuir mac léinn ceist ar AI cé mhéad uair a bhí an focal “oíche” i dtéacs 2,000 focal; Dúirt an AI "23". Nuair a chaith an mac léinn an téacs isteach ar scarbhileog agus é a áireamh, ba é 17 an uimhir iarbhír. Is léir nach bhfuil cuntas amh AI iontaofa.

Cás 3 - Spreag athrú tréimhsiúil conspóid. Rinne grúpa amháin comparáid idir comhréir na bhfocal teibí i ndánta luatha agus déanacha file. Mhol an chéad dréacht de AI treocht; Nuair a chuaigh an grúpa ar ais go dtí an téacs agus a fhíoraigh an comhaireamh, d'éirigh an treocht amach a bheith fíor, ach bhí na "cúiseanna" a mhol an AI tuairimíocht do-fhíoraithe agus cuireadh deireadh leis.

Ceithre theimpléad inchóipeála

1) Imlíne minicíochta focal (le fíorú):

Liostaigh na 15 fhocal ábhair is minice a thagann chun solais (fág focail fheidhme ar nós comhcheangail agus réamhfhocail) sa téacs thíos, agus a neasmhinicíochtaí. RABHADH: Tabhair faoi deara NÍ FÉIDIR comhaireamh a bheith cruinn agus tabhair faoi deara "le bheith cruinn, ní mór iad a fhíorú le huirlis chomhairimh ar leith." Téacs: [greamaigh téacs anseo]

2) Iarrthóirí comhshuíomh:

Mol péirí focal (comhláithreacha) a tharlaíonn go minic le chéile sa téacs thíos. Tabhair ar a laghad sliocht amháin as an téacs do gach péire. Monarú dúbailte nach bhfuil a chomhionann sa téacs; Mura bhfuil tú cinnte, marcáil é mar "fíorú riachtanas".Text: [greamaigh téacs]

3) Comparáid stór focal:

Tabharfaidh mé dhá théacs duit. I gcás gach ceann díobh: thart ar fhocail iomlána, breathnuithe ar chineálacha éagsúla focal, agus fearainn shuntasacha focal (m.sh. dath, nádúr, mothúchán). Luaigh gur neas-uimhreacha iad. Fág léiriú na comparáide le mo fhíorú. Téacs A: [...] Téacs B: [...]

4) Léiriú torthaí:

Fuair mé na torthaí seo a leanas ó uirlis chomhairimh: [torthaí a ghreamú].Gin 2-3 hipitéis faoi cad a d'fhéadfadh a bheith i gceist leis na huimhreacha seo go teanga. Marcáil gach hipitéis mar "éilíonn fianaise" agus inis dom conas is féidir liom é a thástáil. Seachain tuairimí iomarcacha.

Leid lag / Pras láidir

Lag: "Cén focal is mó a tharlaíonn sa téacs seo?"

Strong: "Liostaigh na focail ábhair is minice sa téacs seo agus a ngarmhinicíocht; fág focail fheidhme as an áireamh. Bíodh sé soiléir nach bhfuil na huimhreacha cruinn agus gur gá iad a fhíorú le huirlis ar leith. Tabhair abairt shamplach do gach focal."

Leis an leid cumhachtach glacann an AI leis an teorainn chomhairimh agus insíonn sé duit roimh ré go bhfuil fíorú ag teastáil. Sa leid lag, tugann an AI uimhir amháin agus níl a fhios agat go bhféadfadh sé a bheith mícheart.

Tábla tomhais agus iontaofachta

tomhas

Cad a léiríonn

AI amháin

bealach ceart

minicíocht focal

focail go minic

Faoi, risky

Tráchtaireacht Counter + AI

comhshuíomh

iad siúd a rith le chéile

Táirgeann iarrthóirí

Deimhniú ón téacs

Cóimheas cineáil/chomharthaí

Éagsúlacht bhriathartha

Is féidir a bheith míthreorach

Cuntas leis an uirlis

athrú séasúrach

Treocht le himeacht ama

gineann hipitéisí

Tomhais agus fíoraigh

Trácht deiridh

Brí

Cumhachtach ach áibhéil

breithiúnas daonna

Coincheapa eochairfhocail agus n-gram

Déanann dhá choincheap do chuid oibre níos éasca san anailís chorpais. Is é an chéad cheann an eochairfhocal (eochairfhocal i mBéarla - an focal a tharlaíonn i dtéacs nó údar i bhfad níos minice ná mar a bhíothas ag súil leis i gcomparáid leis an teanga ghinearálta, a thugann an téacs sin a "charachtar"). Léiríonn eochairfhocail údair a spéiseanna agus a stíl; Mar shampla, má tharlaíonn "farraige" agus "scaradh" níos minice ná mar a bhíothas ag súil leis i bhfile, is é an toradh staitistiúil seo an pointe tosaigh do léirmhíniú. Chun eochairfhocail a shainaithint, is gá minicíochtaí téacs a chur i gcomparáid le minicíochtaí corpas tagartha (cabhail mór ginearálta téacs a úsáidtear chun comparáid a dhéanamh); Is obair uirlis chinntitheach í an chomparáid seo, is ríomh í nach féidir le AI a dhéanamh go hiontaofa as a stuaim féin.

Is é n-gram an dara ceann (seicheamh n focal as a chéile i dtéacs; tugtar "bigram" ar sheicheamh dhá fhocal, tugtar "trigram" ar sheicheamh trí fhocal). Nochtann anailís N-gram nathanna foirmiúla agus frásaí a úsáidtear go minic ag údair. Mar shampla, má úsáideann scríbhneoir frásaí ar nós “cineál” nó “áfach” go han-mhinic, léiríonn sé seo an nós atá aige abairtí a dhéanamh. Is féidir leis an AI na frásaí seo a mholadh mar iarrthóirí; ach ar mhaithe le fíor-mhinicíocht agus tábhacht staitistiúil is gá filleadh ar an uirlis chomhairimh.

Leid: Abair leis an AI, "Liostaigh na frásaí suntasacha (dhá nó trí fhocal) sa téacs seo mar iarrthóirí, agus tabhair sampla ón téacs do gach ceann acu." Glac an liosta iarrthóirí agus tomhais an mhinicíocht iarbhír le huirlis ar leith. Suí an AI mar an “fhógraí,” an gníomhaire mar an “cuntar,” agus tú féin mar an “ateangaire.”

Botúin choitianta

  • Ag brath ar áireamh amh an AI. Ní áireamhán é AI; Fíoraigh an uimhir chruinn le huirlis ar leith.
  • An uimhir a chur i láthair gan trácht. Ní deir "Ráite 47 uair" faic; Cruthaíonn tú an bhrí.
  • Neamhaird a thabhairt ar fhad an téacs. Tá rátaí éagsúlachta lyric íogair ó thaobh fad de.
  • Tráchtas a dhéanamh gan an comhshuíomh a fhíorú. Féadfaidh lánúineacha neamh-AI a mholadh; Deimhnigh ón téacs.
  • Trácht thar barr. Ná glac leis na “cúiseanna” a mhol an AI gan fhianaise.

Go hachomair

Osclaíonn anailís chorpais gné ináirithe na litríochta: minicíocht, comhlonnú, stór focal, athrú tréimhsiúil. Tá AI cumhachtach sa réimse seo ó thaobh patrúin a aithint agus torthaí a léirmhíniú; ach tá sé neamhiontaofa sa chomhaireamh iomlán. Fíoraigh an uimhir leis an uirlis ar leith, deimhnigh comhshuíomhanna ón téacs, agus socróigh tú féin an bhrí atá le gach uimhir. Ní fianaise í uimhir, is é an doras chun fianaise.

Tasc feidhmchláir

Roghnaigh téacs gearr (500-1000 focal). Sainaithin focal ábhar (m.sh. "oíche" nó "bóthar"). Ar dtús, déan tú féin a chomhaireamh sa téacs. Ansin iarr ar an AI é a chomhaireamh. Déan comparáid idir an dá thoradh; Má tá difríocht ann, fiosraigh an chúis. Ansin scríobh trácht aon-mhír ar fheidhm an fhocail sin sa téacs — brí a bhaint as an uimhir.

seicliosta

  • [ ] Chuir mé ceist shoiléir teangeolaíoch.
  • [ ] Shainmhínigh mé teorainneacha an chorpais (téacs, eagrán, tréimhse).
  • [ ] D’fhíoraigh mé comhaireamh an AI ar an dara bealach.
  • [ ] Dheimhnigh mé na comhshuímh ón téacs.
  • [ ] Níor fhág mé an uimhir gan trácht; Chruthaigh mé féin an bhrí.