Awọn anfani:
- Agbara lati ṣe iyatọ ṣiṣan iṣẹ ipele mẹfa ti imọ-jinlẹ data (itumọ iṣoro, ikojọpọ, mimọ, wiwa, awoṣe, ibaraẹnisọrọ) ati aṣẹ labẹ eyiti oye itetisi atọwọda ṣiṣẹ ni ipele kọọkan, ni ibamu si ipele eewu iṣẹ-ṣiṣe
- Agbara lati lo ibawi kan ti o jẹrisi iṣelọpọ itetisi atọwọda kọọkan nipa sisopọ si orisun, ṣiṣiṣẹ ati ifiwera rẹ, ati gbigbe nipasẹ sisẹ iwé.
- Agbara lati yi iyipada ati awọn ipilẹ asiri (kikọ sinu koodu, ailorukọ) sinu awọn iṣesi itupalẹ lati ọjọ kini
Aise, idoti, ati nigbagbogbo “eke” data gbe sori tabili onimọ-jinlẹ data ni gbogbo ọjọ. Ninu tabili tita, iwe-ọjọ ti kọ ni awọn ọna kika oriṣiriṣi mẹta; awọn nọmba onibara wa ni ofo ni diẹ ninu awọn ila; Orukọ ọwọn kan jẹ "owo oya", ṣugbọn o ni awọn iye TL ati USD mejeeji ninu. Iṣẹ ti imọ-jinlẹ data ni lati ṣe ipinnu igbẹkẹle lati inu rudurudu yii: gba data naa, sọ di mimọ, ṣawari rẹ, kọ awoṣe kan, fọwọsi abajade, ki o tan-an sinu itan kan. Imọran atọwọda (AI, tabi AI fun kukuru-awọn ọna ṣiṣe kọnputa ti o le ṣe agbejade ọrọ ati koodu, ṣe idanimọ awọn ilana, akopọ, ati ṣe awọn asọtẹlẹ) le fi ọwọ kan gbogbo ọna asopọ ninu pq yii: kikọ koodu afọmọ ni iṣẹju, ṣeduro awọn aworan fun itupalẹ aṣawakiri, itumọ metric awoṣe, atunṣe ibeere SQL kan. Ṣugbọn AI kanna tun le fun ọ ni idawọle ti o ni igboya gẹgẹbi “ibaramu 0.72” fun data ti ko tii ri.
Ẹyọ akọkọ yii kii ṣe iṣafihan ile-ikawe. Idi rẹ ni lati ṣalaye ibiti o le fi AI sinu iṣan-iṣẹ imọ-jinlẹ data ati ibiti ko le fi sii. Jẹ ki a ṣe agbekalẹ ipilẹ ipilẹ lati ibẹrẹ: AI jẹ oluranlọwọ, kii ṣe onimọ-jinlẹ data. Ipinnu kini data lati gba, metiriki wo ni lati pinnu lori, boya lati fi awoṣe sinu iṣelọpọ, ati ibiti o ti le fa awọn aala ihuwasi wa pẹlu alamọja to peye. Iṣẹjade AI ti ko ni idaniloju jẹ eewu, bii ijabọ itupalẹ ti ko forukọsilẹ.
Ṣiṣan iṣẹ imọ-jinlẹ data: maapu ipari-si-opin
Lati loye iṣẹ akanṣe data kan, o ṣe iranlọwọ lati ya lulẹ si awọn ipele mẹfa. Gbogbo module yii tẹle maapu yii.
1. Itumọ iṣoro: Kini a ṣe iwọn, kilode, lati ṣe atilẹyin ipinnu wo? Ipele yii ko ni aṣoju si AI; O jẹ eniyan ti o ṣalaye iṣẹ naa.
2. Gbigba data: Idamo awọn orisun, yiyo data, iṣapẹẹrẹ. (Ẹyọ 2)
3. Data ninu ati preprocessing: Sonu iye, outlier, iru iyipada. (Ẹyọ 3)
4. Itupalẹ data ti o ṣawari (EDA - Ayẹwo Data Exploratory, ipele ti riri pinpin ati awọn ibatan ti data "nipasẹ oju"): (Unit 4)
5. Imọ-ẹrọ ẹya-ara ati awoṣe: Iyipada iyipada, aṣayan algorithm, ikẹkọ, igbelewọn. ( Ẹyọ 5, 6, 7 )
6. Ibaraẹnisọrọ ati iṣelọpọ: Iwoye, itan-akọọlẹ, MLOps (ibawi ti gbigbe awoṣe laaye ati abojuto rẹ). ( Ẹ̀ka 8, 11 )
AI nṣiṣẹ pẹlu aṣẹ ti o yatọ ni ọkọọkan awọn ipele mẹfa wọnyi. Awọn tabili ni isalẹ akopọ yi pinpin aṣẹ; Eleyi jẹ awọn nikan julọ pataki tabili ti awọn module.
Ipele
Ipa ti AI
Ipele ewu
Tani o fọwọsi
Itumọ iṣoro
opolo alabaṣepọ
kekere
Onimọ-jinlẹ data + onipindoje
Kọ koodu afọmọ kan
monomono Sketch koodu
alabọde
Onimọ-jinlẹ data (koodu kika)
EDA ọrọìwòye
aba apẹẹrẹ
alabọde
onimọ ijinle sayensi data
iran ẹya
Ero ati koodu monomono
alabọde-giga
Iṣakoso jo jẹ dandan
Aṣayan awoṣe / metric
olùkànsí
ga
onimọ ijinle sayensi data
Ipinnu lati fi sinu iṣelọpọ
igbewọle iranlọwọ
ga pupọ
Egbe + oniṣòwo
Ethics / ìpamọ alakosile
stimulant
ga pupọ
eniyan, nigbagbogbo
Jeki ni lokan awọn gbolohun ọrọ kan lati yi chart: bi awọn okowo dide, awọn AI ká ipa isunki ati eda eniyan ìtẹwọgbà dagba.
Kini idi ti ijẹrisi jẹ ọkan ti iṣowo yii
Awọn awoṣe ede AI rii daju, ṣugbọn wọn le ma ni idaniloju. Ni ede imọ-ẹrọ, eyi ni a pe ni hallucination: o jẹ igbejade awoṣe ti alaye ti ko si ni gbolohun ọrọ ti o ni irọrun bi ẹnipe o jẹ otitọ. Ninu imọ-jinlẹ data, eyi wa ni awọn fọọmu mẹta. Ni igba akọkọ ti nọmba iro: ti o ba beere awoṣe "kini iye iwọn ibere" laisi fifun eyikeyi data, yoo sọ fun ọ ni igboya nọmba kan, bi o tilẹ jẹ pe ko ti ri data rẹ rara. Awọn keji jẹ iṣẹ kan ti ko si: awoṣe le daba iṣẹ kan ti ko si ni gbogbo, gẹgẹ bi awọn pandas.read_excel_fast (). Kẹta, itumọ iṣiro ti ko tọ: awoṣe naa le tun ṣe laisiyonu tun aṣiṣe iṣiro Ayebaye kan gẹgẹbi “p-iye jẹ 0.04, nitorinaa idawọle jẹ 96% ti o tọ”.
Ilana ijẹrisi naa ni awọn igbesẹ mẹta:
- Ọna asopọ si orisun: Gbogbo nọmba, oṣuwọn, ati aṣa yẹ ki o wa lati data rẹ, kii ṣe iranti AI. Lo AI fun koodu ti n ṣiṣẹ lori data, kii ṣe fun lati ranti data.
- Ṣiṣe ki o ṣe afiwe: Ṣiṣe koodu kọọkan ti a fun nipasẹ AI funrararẹ; Ṣe afiwe metiriki kọọkan ti o gbejade si ipilẹ ti ominira.
- Ajọ iwé: Ṣe idanwo fun ararẹ boya iṣẹjade tako awọn iṣiro ati imọ agbegbe.
Išọra: Gbigbe itupalẹ kan ti AI kọ sinu igbejade laisi ṣiṣiṣẹ ati kika rẹ dabi iṣafihan ijabọ ti ko fowo si. O kan nitori koodu ṣiṣẹ ko tumọ si pe o tọ; Koodu kan ti o ṣe akopọ iwe ti ko tọ tun ṣiṣẹ laisi awọn aṣiṣe.
Reproducibility: ni anfani lati gbe awọn esi kanna lemeji
Ipilẹ ipalọlọ ṣugbọn pataki ti imọ-jinlẹ data jẹ atunṣe: nigbati o ba ṣiṣẹ itupalẹ lẹẹkansi oṣu mẹfa lẹhinna tabi lori kọnputa miiran, o gba abajade kanna. Ewu yii pọ si nigbati o n ṣiṣẹ pẹlu AI, nitori nigbati o ba sọ fun AI lati “ṣe ayaworan yii” ki o mu ṣiṣẹ pẹlu ọwọ, awọn igbesẹ yoo parẹ. Ofin: gbogbo igbese gbọdọ wa ni iforukọsilẹ ni koodu ati iṣakoso ẹya (bii Git); Ni awọn igbesẹ ti o kan laileto, irugbin laileto (iye ibẹrẹ ti olupilẹṣẹ nọmba ID; ti o ba wa titi, abajade yoo jẹ atunwi) yẹ ki o wa titi. A yoo jinlẹ koko yii ni Unit 10; Fun bayi, wọle si aṣa yii: "Maṣe tẹ pẹlu ọwọ, kọ ni koodu."
mẹta mini igba
Ọran 1 - Ailewu isare. Oluyanju iṣowo e-commerce kan yoo lo deede ni idaji ọjọ kan ni imukuro tabili aṣẹ ti awọn ori ila 240 ẹgbẹrun. O fun awọn orukọ ọwọn ati awọn ori ila 5 akọkọ (laisi data ti ara ẹni) si AI ati beere fun koodu mimọ pandas. AI ṣe agbejade apẹrẹ ni awọn aaya 8; Oluyanju naa ka laini koodu nipasẹ laini, ṣe atunṣe aṣiṣe kan ni sisọ ọjọ, o si ṣiṣẹ. Iye akoko: Awọn iṣẹju 35 dipo wakati mẹrin. AI pese koodu, ijerisi wa pẹlu eniyan.
Irú 2 - The ṣe-soke metric pakute. Akọṣẹ kan beere lọwọ AI, "Bawo ni igbo ti o daju ṣe deede lori data yii?" lai ikẹkọ awoṣe ni gbogbo. “Nipa 89%,” AI sọ. Akọṣẹ fi eyi sinu igbejade; Nigbati awoṣe gidi ti ikẹkọ, deede jẹ 71%. Aṣiṣe: Nduro fun awọn metiriki laisi fifun data ati awọn awoṣe si AI.
Ọran 3 - ipalọlọ jo. Ẹgbẹ kan ṣe imuse imọran AI-dabaa ti “ṣafikun itumọ ti oniyipada ibi-afẹde bi ẹya kan” laisi bibeere rẹ. Awoṣe naa ṣe 98% lori eto idanwo ṣugbọn kọlu ni iṣelọpọ nitori ẹya naa n jo alaye ọjọ iwaju (jo data, Unit 10). Aṣiṣe: Kii ṣe sisẹ iṣiro iṣiro ti iṣeduro AI.
Ailagbara kiakia / Alagbara kiakia
Ibere ailagbara:
Ṣe itupalẹ data tita yii ki o sọ fun mi ni owo-wiwọle apapọ.
Ibeere yii jẹ abawọn: AI ko fun data, nitorinaa “owo oya apapọ” le ṣee ṣe nikan. Bẹni awọn ọwọn, tabi akoko, tabi owo ko han.
Ibere ti o lagbara:
Ipa rẹ: oluranlọwọ iranlọwọ onimọ-jinlẹ data kan. Mo ni pandas DataFrame: df. Awọn ọwọn: - order_date (ọrọ, ni kika "2024-03-01") - amount_tl (decimal, NaN ni diẹ ninu awọn ori ila) onibara_id (odidi) Iṣẹ-ṣiṣe: (1) kọ pandas koodu ti o siro awọn apapọ iye, (2) se alaye bi o ti n kapa NaN iye, (3) akojö awọn awqn koodu ṣe. Maṣe ṣe awọn akoonu data; o kan ṣe koodu ati pe Emi yoo ṣiṣẹ ati rii daju abajade naa.
Ninu ibeere yii, ero naa, ireti ati “idinamọ ti iṣelọpọ” jẹ kedere. O tun ṣiṣẹ ati rii daju abajade funrarẹ.
Awọn ibere ti ethics ati asiri
Imọ-ẹrọ data nigbagbogbo n ṣiṣẹ pẹlu data ti ara ẹni: alabara, alaisan, awọn igbasilẹ oṣiṣẹ. KVKK (Ofin Idaabobo Data Ti ara ẹni) ni Türkiye ati GDPR ni Yuroopu ṣe aabo data yii. Lilọ orukọ gidi rẹ, ID, imeeli tabi adirẹsi sinu ohun elo AI ti gbogbo eniyan jẹ irufin. Ilana: ṣe ailorukọ data ṣaaju pinpin, pese apẹrẹ nikan (awọn orukọ ọwọn, awọn oriṣi) ati laini apẹẹrẹ idin ti o ba jẹ dandan. A yoo jinlẹ ni koko-ọrọ ti ethics ni Unit 11; Jẹ ki a fi ilana naa lati ibẹrẹ: Lati loye data naa, pinpin eto rẹ, kii ṣe akoonu rẹ, nigbagbogbo to.
Awọn aṣiṣe ti o wọpọ
- Nduro fun awọn nọmba / metiriki laisi fifun data si AI. Awọn awoṣe ko le wọle si awọn data; Nọmba ti o funni jẹ iro. Nigbagbogbo jẹ iṣiro esi ati ṣiṣe.
- Lerongba pe awọn ṣiṣẹ koodu ti wa ni ti o tọ. Awọn koodu ti o ifọwọyi awọn ti ko tọ si iwe tun nṣiṣẹ lai aṣiṣe; Maṣe gbekele laisi kika ọgbọn naa.
- Lilọ data ti ara ẹni gidi sinu irinṣẹ ṣiṣi. Orukọ, ID nọmba, e-mail ti wa ni ko pín; Àwòrán náà ti tó.
- Ṣiṣe awọn igbesẹ pẹlu ọwọ ati ki o ko kọ wọn sinu koodu. Onínọmbà ti kii ṣe atunṣe jẹ alaigbagbọ.
- Gbigba itumọ AI ti awọn iṣiro laisi ibeere. AI le tun awọn aṣiṣe Ayebaye ṣe ni awọn imọran bii p-iye ati ibamu.
Imọran: Fi “laini ofin” kukuru kan sinu awọn akoko AI kọọkan: “Maṣe ṣe akoonu data naa; kan ṣe koodu / itupalẹ ati pe Emi yoo ṣiṣẹ ati rii daju abajade; tọkasi 'ko daju' nibiti o ko ni idaniloju.” Yi nikan gbolohun significantly din ewu hallucinations.
Ni soki
AI jẹ oluranlọwọ ti o lagbara ni imọ-jinlẹ data: o yara koodu mimọ, itumọ EDA, iṣeduro awoṣe ati wiwo. Ṣugbọn asọye iṣoro, yiyan metiriki, ipinnu iṣelọpọ ati awọn aala ihuwasi jẹ ti eniyan. Ṣiṣan iṣẹ naa ni awọn ipele mẹfa, ati pe ipa AI di kere bi eewu ti n pọ si. Awọn isesi mẹta jẹ ipilẹ ohun gbogbo: ọna asopọ orisun (afọwọsi), atunjade (iforukọsilẹ), ati ailorukọ (aṣiri). Ni kete ti o ba ṣafikun awọn mẹta wọnyi, gbogbo ohun elo ninu iyokù module naa di ohun imuyara ailewu fun ọ.
Ohun elo iṣẹ-ṣiṣe
Kan ṣe apẹrẹ kan ti tabili kekere ti o ni (tabi ọkan arosọ): awọn orukọ ọwọn, awọn oriṣi, ati awọn ori ila apẹẹrẹ 2-3 (laisi data ti ara ẹni gidi). Beere AI fun koodu awọn iṣiro akojọpọ nipa lilo awoṣe “Itọsọna Alagbara” loke. Ṣiṣe koodu naa, ṣe afiwe abajade si iye afọwọṣe, ṣayẹwo fun eyikeyi awọn arosinu ti o ni ẹru, ki o ṣe akiyesi awọn awari rẹ ni awọn aaye ọta ibọn 5.
akojọ ayẹwo
- [] Njẹ Mo kan fun AI ni ero kan ati apẹẹrẹ iro dipo data ti ara ẹni gidi?
- [] Njẹ Mo ka ati ṣiṣẹ koodu ti o ṣe laini nipasẹ laini?
- [] Njẹ Mo ti jẹrisi ni ominira nọmba kọọkan ninu iṣelọpọ bi?
- [] Njẹ Mo ti kọ gbogbo igbesẹ ti itupalẹ sinu koodu naa ki o jẹ ki o tun ṣe?
- [] Njẹ Mo ti pinnu ipele eewu ti iṣẹ apinfunni naa ati yan ipinnu ikẹhin si eniyan?