Awọn anfani:
- Agbara lati yọkuro awọn ilana lati awọn akojọpọ nla ti ọrọ nipa lilo awọn imuposi bii NER, isediwon ibatan, aago ati itupalẹ nẹtiwọọki
- Ni anfani lati wo apẹẹrẹ bi arosọ dipo ẹri, sisopọ awọn nkan si orisun ati ṣiṣe deede wọn pẹlu ifọwọsi eniyan
- Agbara lati ni oye bi awọn nọmba ṣe le jẹ ṣinilọna nitori data ti o padanu ati ojuṣaaju iṣapẹẹrẹ, ati lati yago fun awọn ibatan ti o ni ironu ati awọn akooleji.
Iwadi itan kii ṣe nipa kika awọn iwe aṣẹ kọọkan; nigbagbogbo n wa awọn ilana ni awọn iwe aṣẹ nla. Ninu awọn ipo wo ni orukọ kan pato han ni awọn ọdun? Awọn eniyan wo ni o ni nkan ṣe pẹlu ipinnu? Bawo ni koko-ọrọ kan ṣe yipada lori akoko? Tani o ni ibamu pẹlu tani? Iru awọn ibeere bẹẹ nilo wiwo kii ṣe iwe-ipamọ kan, ṣugbọn awọn ọgọọgọrun awọn iwe aṣẹ ni apapọ. Eyi ni igbagbogbo ti a pe ni awọn ẹda eniyan oni-nọmba — ohun elo ti awọn ọna iširo si awọn aaye bii itan-akọọlẹ ati litireso.
AI lagbara ni yiyo alaye ti eleto lati awọn akojọpọ nla ti ọrọ. Ninu ẹyọ yii, iwọ yoo kọ ẹkọ NER (idanimọ nkan ti a npè ni), ilana ati isediwon ibatan, iṣaro awoṣe awoṣe ati ẹda akoko; ṣugbọn a yoo tun jiroro lori ọfin ti o lewu julọ ti awọn imuposi wọnyi — AI ti n ṣafihan ararẹ bi nini “ri” apẹẹrẹ ti ko si.
Awọn ilana ipilẹ
- NER (Ti a npè ni idanimọ Ẹda): Iyọkuro aifọwọyi ti awọn nkan bii eniyan, aaye, igbekalẹ, ọjọ lati ọrọ naa. O ṣe agbejade atokọ bii “Gbogbo awọn orukọ ibi ti a mẹnuba ninu awọn iwe aṣẹ 500 wọnyi” ni awọn iṣẹju.
- Ibasepo ibatan: Siṣamisi awọn asopọ laarin awọn ile-iṣẹ (“Eniyan X ni aaye Y”, “A ni ibamu pẹlu B”).
- Awoṣe koko: Wiwa iṣiro wiwa awọn iṣupọ ti awọn koko-ọrọ loorekoore ni akojọpọ ọrọ nla kan. O fihan iru awọn akori ti o ni idojukọ ninu akoko wo.
- Itọkasi akoko: Ṣiṣeto awọn iṣẹlẹ ti ọjọ-ọjọ ni awọn iwe aṣẹ sinu ilana akoko-ọjọ.
- Onínọmbà Nẹtiwọọki: Wiwo awọn ibatan laarin eniyan / ile-iṣẹ bi nẹtiwọọki kan (ẹniti o jẹ aarin, tani aaye asopọ).
Ibi-afẹde ti o wọpọ ti gbogbo iwọnyi ni lati ṣafihan awọn ẹya ti ko han ninu iwe kan ṣugbọn han jakejado gbigba. Awọn imuposi wọnyi ṣe awọn ilana ti o han ti kii yoo han nipasẹ kika nikan. Ṣugbọn ọkọọkan wọn jẹ "ami", kii ṣe "ẹri"; O ṣe pataki lati rii daju ohun ti o rii ninu iwe atilẹba.
Agbekale ti a lo nigbagbogbo ni aaye yii ni iyatọ laarin kika to sunmọ (kika ọrọ kan ni ijinle, laini nipasẹ laini) ati kika ti o jinna (wiwo awọn ọgọọgọrun/ẹgbẹẹgbẹrun awọn ọrọ lapapọ, iṣiro). AI jẹ ki o ṣee ṣe lati ka latọna jijin: o rii awọn ilana ni koposi kan ti o tobi to lati ṣiṣe ni igbesi aye eniyan ẹyọkan. Ṣugbọn nigbati kika ti o jinna tọka si apẹrẹ kan, o jẹ dandan lati pada si kika sunmọ, iyẹn ni, si iwe atilẹba, lati ni oye rẹ. Awọn ọna meji ko ṣe paarọ; Ọkan fihan apẹrẹ, ekeji n funni ni itumọ rẹ. Iwadi ti o lagbara julọ lo mejeeji papọ.
Imọran: Lo itupalẹ apẹẹrẹ bi olupilẹṣẹ arosọ: “AI ti rii apẹrẹ kan nibi, ṣe gidi?” Lẹhinna ṣayẹwo ilana yẹn ninu awọn iwe aṣẹ ni ọkọọkan. Apẹẹrẹ jẹ aaye ibẹrẹ ti iwadii rẹ, kii ṣe abajade.
Ṣiṣẹ iṣẹ: ni igbese nipa igbese
1. Ṣe alaye ibeere naa. "Eniyan wo ni o farahan ni igbagbogbo ni akojọpọ yii?" Ibeere apẹrẹ ti o han bi.
2. Mura ati aami data. Ṣeto ọrọ pẹlu awọn itọkasi orisun ki eyikeyi dukia ti a rii le ni asopọ pada si iwe-ipamọ naa.
3. Awọn nkankan / Àpẹẹrẹ han. Ṣe ipilẹṣẹ NER, ibatan tabi ilana ilana aago pẹlu AI.
4. Deede. Darapọ awọn ọna kika oriṣiriṣi ti eniyan kanna / aaye (“Istanbul / Istanbul / Kostantiniyye” aaye kanna?). Igbese yii jẹ pataki; Ti o ba ti yọkuro, ilana naa yoo ṣubu.
5. Daju ni iwe. Ṣayẹwo awọn iwe aṣẹ gangan fun eyikeyi awọn ilana pataki ti o jẹ ifihan. Rii daju pe AI ko ṣafikun ọna asopọ ti a ṣe.
6. Ọrọìwòye. Ohun ti apẹẹrẹ tumọ si ni idajọ ti itan-akọọlẹ; AI kan samisi ilana naa.
Nọmba ati pakute statistiki
Itupalẹ apẹrẹ nigbagbogbo n ṣe awọn nọmba: “orukọ X waye ni igba 47”, “akori yii wa ni 30% ti awọn iwe aṣẹ”. Awọn nọmba wọnyi dabi ohun to fẹ ṣugbọn o le jẹ ṣinilọna:
- Awọn data ti o padanu: Ti ikojọpọ naa ba ti pe tẹlẹ (awọn iwe aṣẹ ti sọnu, ẹgbẹ kan ko tii gbasilẹ tẹlẹ), nọmba naa ṣe afihan awọn iwe aṣẹ ti o ye, kii ṣe otitọ.
- Aṣiṣe deede: Ti eniyan kanna ba ni sipeli otooto ati kika lọtọ, nọmba naa yoo jẹ aṣiṣe.
- Isonu ti ọrọ-ọrọ: "waye ni awọn akoko 47" ko sọ ohunkohun; Bii o ti kọja (rere / odi, koko-ọrọ / ohun) jẹ pataki.
o wu ilana
kedere itumo
ewu gidi
"X waye ni igba 47"
eniyan pataki
Akojọpọ ti ko pe, iyatọ akọtọ
Akori 30%
ako koko
abosi iṣapẹẹrẹ
"A-B nigbagbogbo papọ"
timotimo ibasepo
Iṣiro-ọrọ, ọrọ sisọnu
"Ago"
gangan akoole
Awọn iwe aṣẹ ti ko ni ọjọ, aṣẹ ti a ṣẹda
mẹta mini igba
Ọran 1 - Onínọmbà Nẹtiwọọki ṣe afihan agbedemeji ti o farapamọ. Oluwadi kan ṣe ayẹwo akojọpọ awọn lẹta 800 kan. Pẹlu AI, ẹniti o kọwe si ẹniti o pinnu ati pe a ṣẹda nẹtiwọki kan. Nẹtiwọọki naa fihan pe eniyan ti o dabi ẹnipe ko ṣe pataki ni iwo akọkọ jẹ aaye pataki ti olubasọrọ laarin awọn ẹgbẹ mejeeji. Oluwadi naa dojukọ awọn lẹta eniyan yii o si de wiwa tuntun kan. Ṣugbọn akọkọ rii daju gbogbo awọn ọna asopọ ninu awọn iwe aṣẹ.
Ọran 2 - Aṣiṣe deede ba nọmba naa jẹ. Ọmọ ile-iwe kan ni ki wọn ka iye awọn akoko ti aaye kan han ninu awọn iwe aṣẹ naa. Niwọn igba ti AI ti ka awọn akọtọ oriṣiriṣi mẹta ti aaye kanna ni lọtọ, nọmba naa jade lati jẹ idamẹta ti nọmba gidi naa. Nigbati awọn Akọtọ ni idapo, aaye wa ni ipo kẹta ti o nwaye nigbagbogbo. Ẹkọ: laisi isọdọtun nọmba naa ko le gbẹkẹle.
Ọran 3 - Ṣe-soke Ago. Oluwadi kan ṣẹda aago kan lati awọn iwe aṣẹ ti a ko da. AI ṣeto awọn iṣẹlẹ ti a ko mọ ni aṣẹ “mọgbọnwa” ati ṣafihan akoole deede kan. Sibẹsibẹ, ọkọọkan yii ko si ninu awọn iwe aṣẹ, AI ti ṣe. Ẹkọ: Ago ti wa ni itumọ nikan lati awọn iṣẹlẹ ti o ni ọjọ kan ninu iwe-ipamọ; awọn iyokù si maa wa "undated".
Mẹrin daakọ awọn awoṣe
1) NER (itọkasi nkan):
Awọn eniyan, awọn aaye, awọn ile-iṣẹ ati awọn ọjọ ti a mẹnuba ninu awọn iwe aṣẹ ni isalẹ han bi awọn atokọ lọtọ. Tọkasi ninu iru iwe (itọkasi) nkan kọọkan ti mẹnuba. Mu kiki ohun ti a ti sọ kedere ninu ọrọ; fi nipa amoro. Samisi [?] ti o ko ba ni idaniloju ti pronunciation. Awọn iwe aṣẹ: [nibi]
2) Iṣe deedee nkan:
Ninu atokọ nkan ti o wa ni isalẹ, ṣe akojọpọ awọn akọtọ oriṣiriṣi ti o le jẹ eniyan/ibi kan naa (fun apẹẹrẹ “Istanbul / Kostantiniyye”). Daba ọna kika ti o wọpọ ti o ṣeeṣe fun ẹgbẹ kọọkan SUGBON maṣe fa apapo gangan; Ṣafikun akọsilẹ "boya kanna, jẹ ki eniyan rii daju". Fi silẹ nikan ti o ko ba ni idaniloju. Akojọ: [nibi]
3) Ibasepo/ilana nẹtiwọki:
Jade awọn ọna asopọ "ẹni ti o ni ibatan si tani" lati inu eto ifọrọranṣẹ/awọn iwe-ipamọ atẹle. Fun ọna asopọ kọọkan, tọka iwe-ipamọ (itọkasi) ti o da lori. Ṣe ajọṣepọ kan ti ko ṣe kedere ninu iwe-ipamọ naa. Samisi ambiguous ìjápọ [indistinct]. Iwe: [nibi]
4) Ago ọjọ:
Ṣe atokọ ni ilana akoko-ọjọ nikan awọn iṣẹlẹ ti a sọ ni kedere ninu awọn iwe aṣẹ atẹle; Ṣe asopọ gbogbo iṣẹlẹ si orisun rẹ. Ṣe atokọ awọn iṣẹlẹ pẹlu awọn ọjọ ti ko ni idaniloju lọtọ labẹ akọle “ọjọ ti a ko ti sọ tẹlẹ”, MAA ṢE fi wọn si lẹsẹsẹ. MAA ṢE ṣe ipinnu ọjọ. Iwe: [nibi]
Ailagbara kiakia / Alagbara kiakia
Alailagbara:
Ṣe itupalẹ awọn iwe aṣẹ wọnyi ki o jade awọn ilana pataki, awọn ibatan, ati awọn akoko akoko.
“Jade awọn ilana pataki” titari AI lati ṣẹda awọn asopọ ti ko si ati awọn ilana-iṣe deede, ti n ṣafihan awọn nọmba laisi isọdi deede.
Lagbara:
Ṣe jade eniyan / aaye / awọn ile-iṣẹ lati awọn iwe aṣẹ atẹle nipa sisopọ ọkọọkan si itọkasi iwe. Samisi orisirisi awọn sipeli ti o le jẹ kanna bi "le ti wa ni dapọ", sugbon ko dapọ. Awọn ibatan ti a ko sọ ni kedere ninu iwe-ipamọ ati awọn iṣẹlẹ pẹlu awọn ọjọ ti ko ni idaniloju MAA ṢE FAKE; pa awon lai ọjọ lọtọ. Iwe: [nibi]
Iyatọ naa: iyasọtọ si orisun, fifisilẹ deede si awọn eniyan, wiwọle lori awọn ibatan / itan-akọọlẹ, ati iyapa ti awọn iṣẹlẹ ti ko ni ọjọ jẹ ki apẹrẹ naa jẹ aabo.
Awọn aṣiṣe ti o wọpọ
- Aṣiṣe awoṣe fun ẹri. Ilana naa jẹ arosọ; ti ni idaniloju ninu iwe-ipamọ naa.
- Sisẹ deede. Awọn Akọtọ oriṣiriṣi ti nkan kanna n da nọmba ati nẹtiwọọki jẹ.
- Igbẹkẹle afọju ni awọn nọmba. Ikojọpọ ti ko pe ati ojuṣayẹwo iṣapẹẹrẹ jẹ ki nọmba naa ṣinilọna.
- Ago ti a ṣe. Awọn iṣẹlẹ ti ko ni ọjọ ko si ninu akoole.
- Fojusi ọrọ-ọrọ. Kii ṣe “igba melo ni o ti kọja”, ṣugbọn “bii o ti kọja” ṣe pataki.
Ni soki
Itupalẹ akoonu ati iṣawari apẹẹrẹ jẹ aaye ti o lagbara nibiti AI ṣe awọn ẹya ti o han ti kii yoo han nipasẹ kika nikan: isediwon nkan, awọn nẹtiwọọki ibatan, awọn iṣupọ koko, awọn akoko akoko. Ṣugbọn gbogbo apẹẹrẹ jẹ arosọ, kii ṣe ẹri. Ṣe asopọ awọn ohun-ini si orisun, ṣe deede ni iṣọra ati pẹlu afọwọsi eniyan, awọn nọmba ibeere fun data ti o padanu ati ojuṣaaju, yago fun awọn ibatan idawọle ati awọn akoko-akọọlẹ. AI ṣe aami apẹrẹ; Ohun ti o tumọ si ati boya o jẹ otitọ ni idajọ ti itan-akọọlẹ.
Ohun elo iṣẹ-ṣiṣe
Gba o kere ju awọn ege 15 ti iwe (pẹlu awọn itọkasi). Jade eniyan jade ki o si gbe awọn nkan kan pẹlu awoṣe “NER”. Lẹhinna ṣe akojọpọ awọn akọtọ oriṣiriṣi pẹlu “itọkasi nkan” ki o rii daju awọn ẹgbẹ funrararẹ. Nikẹhin, ṣiṣe awoṣe “akoko ti o dati” ki o wo iye awọn iṣẹlẹ ti o wa “ọjọ aisun.” Ṣe afiwe iye awọn ọna asopọ concocted tabi awọn akoole akoko ti AI yoo gbejade pẹlu itasi ti ko dara.
akojọ ayẹwo
- [] Mo ti ṣalaye ni kedere ibeere apẹrẹ mi.
- [] Mo ni nkan kọọkan ti o sopọ mọ itọkasi iwe.
- [] Mo ṣe deede titẹ nkan kan ati ni idapo pẹlu ifọwọsi eniyan.
- [] Mo beere awọn nọmba fun sonu data ati abosi.
- [] Emi ko fi awọn iṣẹlẹ aipẹ sinu akoole ọjọ, Mo tọju wọn lọtọ.