Awọn anfani:
- Agbara lati ṣe itupalẹ awọn tita, idiyele ati awọn tabili iṣiṣẹ pẹlu oye atọwọda ati ṣawari awọn aṣa, awọn fifọ ati awọn ita
- Agbara lati rii daju lodi si awọn aṣiṣe iṣiro ati awọn hallucinations nipasẹ ṣiṣe atunṣe tabi ṣayẹwo pẹlu ọwọ iṣiro kọọkan
- Agbara lati ṣe iyatọ iyatọ lati idi ati didara data ibeere ati awọn opin ayẹwo ṣaaju itumọ
Ọkan ninu awọn gbolohun ọrọ ti a tun sọ ni imọran iṣakoso ni: "Kini awọn nọmba sọ?" Awọn data tita alabara, tabili idiyele, awọn abala alabara tabi awọn metiriki iṣẹ; gbogbo wọn sọ itan kan. Iṣẹ alamọran ni lati wa itan yẹn, fi idi rẹ mulẹ, ati ṣafihan ni kedere si oluṣe ipinnu. Oye itetisi atọwọdọwọ tumọ chart kan ni iṣẹju-aaya, tọka awọn aṣa, ṣe awọn iṣiro, ati paapaa ṣe ipilẹṣẹ koodu (Python, agbekalẹ Excel) fun itupalẹ. Ṣugbọn eewu kan wa nibi: AI le ṣe awọn aṣiṣe ni ipalọlọ ni iṣiro ati ṣafihan nọmba ti ko tọ pẹlu igbẹkẹle to pe. Nitorinaa, ofin goolu ni itupalẹ data ni lati tun ṣe tabi pẹlu ọwọ ṣayẹwo iṣiro kọọkan.
Awọn ọna meji lati ṣiṣẹ pẹlu data
Awọn ọna akọkọ meji wa ti itupalẹ data pẹlu AI, ati mimọ iyatọ jẹ pataki fun deede.
- Itumọ ọrọ ti awoṣe: O lẹẹmọ data taara sinu iwiregbe ki o sọ “ọrọ asọye”. Awoṣe naa ka awọn ilana ṣugbọn ṣe awọn iṣiro “ti opolo”; Eyi ni ọna pẹlu ewu ti o ga julọ ti aṣiṣe. Dara fun awọn tabili kekere ati itumọ ti agbara, kii ṣe fun iṣiro deede.
- Koodu / iran irinṣẹ: O tẹ koodu itupalẹ (Python / pandas) tabi agbekalẹ Tayo si awoṣe; Awọn koodu ṣe iṣiro, kii ṣe awoṣe. Ọna yii jẹ igbẹkẹle diẹ sii nitori iṣiro n ṣiṣẹ ni ohun elo ipinnu. Ṣe ayanfẹ rẹ fun data nla ati nọmba deede.
Imọran: Ti o ba nilo nọmba gangan (apapọ iyipada, apapọ, oṣuwọn idagbasoke) beere awoṣe lati "kọ agbekalẹ Excel / koodu Python ti o ṣe iṣiro eyi", ṣiṣe abajade funrararẹ. Maṣe ṣe akiyesi nọmba ti a fun nipasẹ awoṣe bi ipari.
Bii o ṣe le ṣeto itupale itupale
Itọkasi onínọmbà to dara pẹlu data naa, ibeere ti o beere, ati ofin afọwọsi.
Rẹ ipa: data Oluyanju. Ni isalẹ jẹ apẹrẹ tita oṣu 24 (oṣu, agbegbe, ọja, opoiye, iyipada). Iṣẹ-ṣiṣe: 1) Ṣe akopọ lapapọ ati aṣa iyipada oṣooṣu. 2) Wa 3 ti ndagba ti o yara ju ati idinku ọja-ọja agbegbe ni iyara. 3) Samisi ti o ba ti wa ni eyikeyi outliers (airotẹlẹ fo / isubu). Awọn ofin: - Kọ agbekalẹ Excel ti o ṣe iṣiro kọọkan lẹgbẹẹ rẹ; Emi yoo rii daju.- Yatọ si itumọ lati data: akọkọ "data sọ", lẹhinna "itumọ ti o ṣeeṣe" - Maṣe beere idi; afihan apẹrẹ nikan.
Ibeere yii ni awọn eroja pataki mẹta: ti o nilo agbekalẹ (ifọwọsi), yiya sọtọ data lati itumọ (iduroṣinṣin), ati idinamọ ẹtọ ti okunfa (koko-ọrọ ti apakan atẹle).
Ibaṣepọ kii ṣe idi
Aṣiṣe ọgbọn ti o wọpọ julọ ati iye owo ni itupalẹ ni a ro pe ọkan ninu awọn nkan meji ti n ṣiṣẹ papọ fa ekeji. Nitoripe awọn oniyipada meji pọ pọ (ibaramu) ko jẹri pe ọkan nfa ekeji (idi); O le jẹ ifosiwewe kẹta tabi lasan. Apeere Alailẹgbẹ: bi awọn tita yinyin ipara ṣe n pọ si, bẹẹ ni awọn rì; Idi kii ṣe yinyin ipara, oju ojo gbona n gbe awọn mejeeji soke.
AI le ni irọrun kọ ibaramu kan bi “X n pọ si Y.” Nigbati oludamọran ba rii gbolohun yii, o yẹ ki o da duro ki o beere: “Ṣe eyi ni idi gaan, tabi nkan ti o farapamọ wa?” Ipe ti idi; lafiwe iṣakoso nbeere imọ ti ilana akoko ati agbegbe.
Ipa rẹ: Oluyanju data pataki. Ayẹwo atẹle naa ni “X n pọ si Y” nipe. Iṣẹ-ṣiṣe: - Ṣe ayẹwo boya ibatan yii jẹ ibamu tabi idi ti o tọ. Kọ “o ṣeeṣe” ati “yẹ ki o ṣe idanwo.”
Bibeere didara data ṣaaju itumọ
Itupalẹ ti o dara ko wa lati data buburu. Beere lọwọ chart kọọkan awọn ibeere wọnyi ṣaaju asọye:
iṣakoso
Kini idi ti o ṣe pataki?
Bawo ni lati bikita
sonu data
Awọn sẹẹli ti o ṣofo ni o da iwọntunwọnsi
Ka òfo/opin ipin
outliers
A nikan outlier da aṣa
Wo min-max ati pinpin
Aitasera Definition
Ṣe "iyipada" kanna ni gbogbo oṣu?
Jẹrisi itumọ ọwọn
akoko ibiti o
Ṣe akoko asiko ṣina bi?
Afiwe odun-lori-odun
apẹẹrẹ
Njẹ data naa ṣe aṣoju gbogbo agbaye bi?
Beere fun oṣuwọn agbegbe
Ṣaaju ki o to tumọ tabili yii, ṣe ayẹwo didara data kan: - Kini ipin sẹẹli ti nsọnu/odo? - Ninu awọn ori ila wo ni awọn iye iwọn (jade)? - Ṣe awọn asọye ọwọn ni ibamu, ṣe awọn ifura eyikeyi wa bi? Kan fun ijabọ iṣayẹwo; Maa ko ọrọìwòye sibẹsibẹ.
mẹta mini igba
Ọran 1 - Aṣiṣe iṣiro ipalọlọ. A olùkànsí ni awọn awoṣe gba 12 osu 'yipada; awoṣe sọ "142.6 milionu." Onimọran sọwedowo ni Excel: gangan lapapọ 128.4 million; Awọn awoṣe fi kun osu meji ti ko tọ. Ti o ba ti beere agbekalẹ kan dipo iṣiro ọpọlọ, ko si aṣiṣe. Ti nọmba aṣiṣe ba ti tẹ sinu igbejade, igbẹkẹle alabara yoo ti mì.
Ọran 2 - Spurious fa. Ni alagbata kan, awoṣe naa sọ pe, "Iyipada naa pọ si ni awọn osu nigbati a ti funni ni ẹdinwo, nitorina ẹdinwo naa nmu iyipada naa pọ si." Oludamoran naa duro: awọn ẹdinwo ti wa tẹlẹ lakoko awọn isinmi; Iwakọ akọkọ jẹ ibeere isinmi. Lati wiwọn ipa ẹdinwo, lafiwe pẹlu isinmi laisi ẹdinwo ni a nilo. Itọkasi eke ṣe idilọwọ imọran ala-ilẹ bi “jẹ ki a dinku ni gbogbo oṣu.”
Case 3 - Outlier pakute. Iwọn ibere apapọ agbegbe kan han ga aijẹ deede. Awoṣe tumọ eyi bi “agbegbe Ere”. Oludamoran naa ṣii laini: aṣẹ ile-iṣẹ kan ṣoṣo ti 4.2 million inflated ni apapọ; Nigbati a ba yọ laini yẹn kuro, agbegbe naa jẹ arinrin. Lilo agbedemeji yoo yago fun pakute yii ni aye akọkọ.
Ailagbara kiakia / Alagbara kiakia
Ibere ailagbara:
Ṣe itupalẹ chart tita yii ki o sọ awọn awari bọtini.
Awoṣe naa ṣe iṣiro ori-lori, sọ idii, o si funni ni awọn awari ti ko le rii daju.
Ibere ti o lagbara:
Ipa rẹ: Oluyanju data pataki. Ni akọkọ ṣe iṣayẹwo didara data kan (sonu, itọsi, aitasera asọye). Lẹhinna: aṣa oṣooṣu, oke 3 breakdowns, outliers.- Kọ agbekalẹ Excel fun akọọlẹ kọọkan; Emi yoo rii daju.- Tun fun agbedemeji dipo itumọ (lati wo ipa ti o jade) .- Lọtọ “data sọ” lati “itumọ ti o ṣeeṣe”; MAA ṢE beere idi. - Samisi "koyewa" ibi ti o wa ni ko daju.
Pipin: otitọ ni apapọ pamọ
Ọkan ninu awọn gbigbe ti o lagbara julọ ni itupalẹ ijumọsọrọ jẹ ipin: fifọ nọmba lapapọ sinu awọn ẹgbẹ-ẹgbẹ ti o nilari. Awọn "apapọ onibara" ni igba kan ti kii-existent ikole; Otitọ ti wa ni pamọ ninu awọn ẹgbẹ-ẹgbẹ. Fun apẹẹrẹ, nigba ti apapọ èrè ala han lati wa ni 8%, 20% ti awọn onibara le mu 25% ala ati 30% ṣe a pipadanu; apapọ patapata hides yi o daju. Oye itetisi atọwọda ṣe iranlọwọ fun ọ ni iyara lati fọ iwe aworan kan kọja awọn aake oriṣiriṣi (iru alabara, agbegbe, ọja, ikanni) ati rii iru pipinka ti o fihan iyatọ iyalẹnu julọ.
Rẹ ipa: data Oluyanju. Tabili wa ni isalẹ. Iṣẹ-ṣiṣe: Pa data yii lori ipo ti o tẹle: [iru onibara / agbegbe / ọja]. Fun ẹgbẹ kọọkan: lapapọ, pin (%), tumọ ATI agbedemeji, iwọn ẹgbẹ (n) . Awọn ofin: - Ti ẹgbẹ n<30, samisi "apẹẹrẹ kekere - akiyesi" .- Kọ agbekalẹ fun akọọlẹ kọọkan; Emi yoo rii daju.- Fihan ẹgbẹ ti o ga julọ ati ti o kere julọ; Ṣe ayẹwo boya iyatọ jẹ gidi tabi nitori itusilẹ ẹyọkan. Ni akọkọ jẹ ki n sọ fun ọ iru iyapa wo ni Mo nireti: [iroye].
Awọn aṣiṣe ti o wọpọ
- Gbẹkẹle iṣiro ori awoṣe. Jade isiro si ohun elo ipinnu (Excel/Python); Ṣayẹwo abajade ni ominira.
- Ibaṣepọ aṣiṣe fun idi. Maṣe kọ gbolohun naa "X pọ Y" laisi ẹri; Beere nipa awọn farasin ifosiwewe.
- Afọju nwa ni apapọ. Awọn nikan outlier inflates awọn tumosi; Wo tun agbedemeji ati pinpin.
- Bypassing data didara. Awọn itumọ ti o waye lati aipe, pidánpidán tabi data aisedede jẹ ṣinilọna; ṣayẹwo akọkọ.
- Ngbagbe apẹẹrẹ. Ipilẹṣẹ gbogbogbo lati apẹẹrẹ kekere tabi abosi si gbogbo olugbe yoo gbe awọn abajade aṣiṣe jade.
- Awọn data idarudapọ pẹlu itumọ. Ṣe afihan lọtọ kini wiwọn ati kini itọkasi.
Ifarabalẹ: Ti abajade ti itupalẹ ti owo, ilera tabi data ailewu iṣẹ yoo jẹ ipilẹ fun ipinnu, awọn iṣiro ati itumọ gbọdọ jẹrisi nipasẹ alamọja ti o yẹ (oludamọran owo, oṣere, alamọja aaye). Oríkĕ itetisi ṣe agbejade itupalẹ alakoko; Igbelewọn ikẹhin ati ojuse jẹ ti eniyan.
Ni soki
Oye itetisi atọwọdọwọ jẹ iranlọwọ ti o lagbara ni itumọ data tabular, wiwa awọn aṣa ati awọn fifọ, ati ipilẹṣẹ koodu itupalẹ. Ṣugbọn niwọn igba ti o le ṣe awọn aṣiṣe ni ipalọlọ ni iṣiro, o jẹ dandan lati tun ṣe iṣiro kọọkan pẹlu ohun elo ipinnu ati ṣayẹwo pẹlu ọwọ. Iyapa ibamu lati idinamọ, wiwo agbedemeji lẹgbẹẹ itumọ, ṣayẹwo didara data ṣaaju itumọ, ati akiyesi awọn opin apẹẹrẹ jẹ awọn ilana ipilẹ ti ijumọsọrọ. Awoṣe fihan apẹrẹ; Eniyan ṣẹda itumo ati ojuse.
Ohun elo iṣẹ-ṣiṣe
Yan ohun gangan tabi aṣoju tita / alaye idiyele. Ni akọkọ ṣiṣe ayẹwo ayẹwo didara data ki o wa o kere ju ọrọ kan (sonu, jade, aiṣedeede asọye). Lẹhinna jade awọn aṣa ati awọn breakouts pẹlu itusilẹ itupalẹ ti o lagbara; Paapaa pẹlu ọwọ jẹrisi agbekalẹ fun akọọlẹ kọọkan. Ṣe afiwe itumọ si agbedemeji ki o rii ipa ti o jade. Nikẹhin, wa ẹtọ idi ti awoṣe naa kọ ki o tun ṣe atunlo rẹ gẹgẹbi “ibaramu.”
akojọ ayẹwo
- [] Mo tun ṣe iṣiro gangan kọọkan pẹlu ohun elo ipinnu (Excel/Python).
- [] Mo ṣe ayẹwo didara data ṣaaju asọye.
- [] Yato si itumọ, Mo wo agbedemeji ati pinpin.
- [] Mo ti fipamọ iyatọ-ibaraẹnisọrọ.
- [] Mo beere ayẹwo ati awọn opin akoko akoko.
- [] Mo yapa "data sọ" ati "itumọ ti o ṣeeṣe".
- [] Mo gbero alakosile iwé ni ipinnu-lominu ni onínọmbà.