Naúrar 6 / 12

Binciken Bayanai da Fassara: Hankali na Artificial tare da Bayanan Tabular

Riba:

  • Ability don nazarin tallace-tallace, farashi da tebur na aiki tare da basirar wucin gadi da gano abubuwan da ke faruwa, karya da fita
  • Ikon tabbatarwa akan kurakuran lissafi da ruɗi ta hanyar sake yi ko duba kowane lissafi da hannu.
  • Ikon bambance alaƙa daga sanadi da ingancin bayanan tambaya da iyakokin samfurin kafin fassarar

Ɗaya daga cikin mafi yawan jimlolin da aka maimaita a cikin shawarwarin gudanarwa shine: "Menene lambobin ke faɗi?" Bayanan tallace-tallace na abokin ciniki, tebur farashi, sassan abokin ciniki ko ma'aunin aiki; duk suna ba da labari. Aikin mai ba da shawara shine gano wannan labarin, tabbatar da shi, da nuna shi a fili ga mai yanke shawara. Hankali na wucin gadi yana fassara ginshiƙi a cikin daƙiƙa, yana nuna abubuwan da ke faruwa, yin lissafi, har ma yana haifar da lamba (Python, dabarar Excel) don bincike. Amma akwai wani haɗari na musamman a nan: AI na iya yin kuskure cikin ƙididdiga cikin shiru kuma ya gabatar da lambar da ba daidai ba tare da amincewa daidai. Don haka, ƙa'idar zinariya a cikin nazarin bayanai ita ce sake yin ko duba kowane lissafi da hannu.

Hanyoyi biyu don aiki tare da bayanai

Akwai hanyoyi biyu na farko na nazarin bayanai tare da AI, kuma sanin bambancin yana da mahimmanci don daidaito.

  1. Fassarar rubutu na samfurin: Kuna liƙa bayanan kai tsaye a cikin taɗi kuma ku ce "sha'a". Samfurin yana karanta alamu amma yana yin lissafin "tunanin"; Wannan ita ce hanya mafi girman haɗarin kuskure. Ya dace da ƙananan teburi da fassarar inganci, ba don ainihin lissafin kuɗi ba.
  2. Ƙarfin lambar / kayan aiki: Kuna buga lambar bincike (Python / pandas) ko dabarar Excel zuwa samfurin; Lambar tana yin lissafin, ba samfurin ba. Wannan hanyar ta fi dogaro sosai saboda lissafin yana aiki a cikin kayan aiki mai ƙididdigewa. Fi son shi don babban bayanai da madaidaicin lamba.
Tukwici: Idan kuna buƙatar ainihin lamba (jimlar juzu'i, matsakaita, ƙimar girma) tambayi ƙirar don "rubuta dabarar Excel / lambar Python wanda ke ƙididdige wannan", gudanar da sakamakon da kanku. Kar a taɓa ɗaukar lambar da samfurin ya bayar a matsayin ƙarshe.

Yadda ake saita saurin bincike

Kyakkyawan saurin bincike ya haɗa da bayanai, tambayar da aka yi, da ƙa'idar tabbatarwa.

Matsayinku: mai nazarin bayanai. A ƙasa akwai jadawalin tallace-tallace na watanni 24 (watanni, yanki, samfur, yawa, juyawa). Aiki: 1) Takaita jumlar da canjin canji na wata-wata. 2) Nemo 3 mafi saurin girma da saurin raguwa-raguwar samfurin yanki. 3) Yi alama idan akwai wasu masu fita (tsalle / faɗuwar da ba zato ba tsammani). Dokoki: - Rubuta tsarin Excel wanda ke yin kowane lissafi kusa da shi; Zan tabbatar.- Ware fassarar daga bayanan: na farko "bayani ya ce", sannan "ma'ana mai yiwuwa" - Kada ku da'awar dalili; nuna tsari kawai.

Wannan buƙatar tana da abubuwa masu mahimmanci guda uku: buƙatar dabara (tabbatacce), raba bayanai daga fassarar (mutunci), da kuma hana da'awar dalili (batun sashe na gaba).

Daidaitawa ba dalili ba ne

Kuskuren da ya fi kowa yawa kuma mai tsada a cikin bincike shine ɗauka cewa ɗaya daga cikin abubuwa biyu aiki tare yana haifar da ɗayan. Don kawai ma’anoni biyu suna ƙaruwa tare (daidaitawar) bai tabbatar da cewa ɗayan yana haifar da ɗayan ba (dalili); Akwai iya zama abu na uku ko daidaituwa. Misali na gargajiya: yayin da tallace-tallacen ice cream ke karuwa, haka ma nutsewa; Dalilin ba ice cream ba ne, yanayin zafi yana haɓaka duka biyu.

AI na iya rubuta alaƙa cikin sauƙi kamar yadda "X yana ƙaruwa Y." Lokacin da mai ba da shawara ya ga wannan jumla, sai ya tsaya ya tambayi: "Shin da gaske wannan dalili ne, ko kuwa akwai wani abin ɓoye?" Da'awar dalilin; kwatancen sarrafawa yana buƙatar sanin jerin lokaci da yanki.

Matsayinku: mai nazarin bayanai mai mahimmanci. Binciken da ke biyo baya ya ƙunshi da'awar "X yana ƙaruwa Y".Aiki: - Yi la'akari da ko wannan dangantakar tana da alaƙa ko kuma dalili na gaskiya. Rubuta "mai yiwuwa" da "ya kamata a gwada."

Tambaya ingancin bayanai kafin fassarar

Kyakkyawan bincike ba ya zuwa daga mummunan bayanai. Yi wa kowane ginshiƙi waɗannan tambayoyin kafin yin sharhi:

sarrafawa

Me yasa yake da mahimmanci?

Yadda ake kulawa

data bata

Kwayoyin fanko suna karkatar da ma'ana

Ƙidaya maras komai/sifili

masu ficewa

Guda guda ɗaya yana karkatar da yanayin

Dubi min-max da rarrabawa

Ma'anar daidaito

Shin "juyawa" iri ɗaya ne kowane wata?

Tabbatar da ma'anar shafi

lokaci iyaka

Shin yanayin yanayi yana yaudara?

Kwatanta shekara-shekara

samfurin

Shin bayanan suna wakiltar dukan sararin samaniya?

Nemi ƙimar ɗaukar hoto

Kafin FASSARAR wannan tebur, yi duba ingancin bayanai: - Menene rabon tantanin halitta da ya ɓace? - A cikin waɗanne layuka ne matsananciyar dabi'u? - Shin ma'anar ginshiƙi sun daidaita, shin akwai masu tuhuma? Kawai bayar da rahoton duba; Kar a yi sharhi tukuna.

uku mini lokuta

Case 1 - Kuskuren lissafin shiru. Mai ba da shawara yana da samfurin ya tattara kuɗin watanni 12; samfurin ya ce "142.6 miliyan." Mai ba da shawara yana dubawa a cikin Excel: ainihin jimlar 128.4 miliyan; Samfurin ya ƙara watanni biyu ba daidai ba. Idan da an nemi dabara maimakon lissafin tunani, da ba a yi kuskure ba. Idan da an shigar da lambar da ba daidai ba a cikin gabatarwar, da an girgiza amincewar abokin ciniki.

Case 2 - Matsala mai lalacewa. A cikin dillali, samfurin ya ce, "Ciwon ya karu a cikin watannin da aka ba da rangwame, don haka rangwamen yana ƙaruwa." Mai ba da shawara yana tsayawa: an riga an yi rangwame a lokacin bukukuwa; Babban direba shine bukatar biki. Don auna tasirin rangwame, ana buƙatar kwatanta tare da hutu ba tare da ragi ba. Ƙarya ƙiyayya tana hana shawara mai ƙona gefe kamar "bari mu rangwame kowane wata."

Case 3 - Matsakaicin tarko. Matsakaicin ƙimar oda yankin yana bayyana babba. Samfurin yana fassara wannan a matsayin "yankin ƙima". Mai ba da shawara ya buɗe layin: tsari ɗaya na kamfani na 4.2 miliyan ya haɓaka matsakaici; Lokacin da aka cire wannan layin, yankin na yau da kullun ne. Amfani da tsaka-tsaki zai guje wa wannan tarko tun da farko.

Rauni mai ƙarfi / Ƙarfi mai ƙarfi

Rawanin faɗakarwa:

Yi nazarin wannan ginshiƙi na tallace-tallace kuma faɗi mahimman binciken.

Samfurin yana ƙididdige gaba-gaba, yana da'awar dalili, kuma yana ba da binciken da ba za a iya tantancewa ba.

Ƙarfi mai ƙarfi:

Matsayinku: ƙwararren mai nazarin bayanai. Da farko yi duba ingancin bayanai (bace, waje, daidaiton ma'anar). Sa'an nan: yanayin kowane wata, manyan ɓarna na 3, masu fice. - Rubuta tsarin Excel don kowane asusun; Zan tabbatar.- Har ila yau, ba da tsaka-tsaki maimakon ma'ana (don ganin sakamako mai ban mamaki) - Rarrabe "bayanai ya ce" daga "ma'ana mai yiwuwa"; KAR KA YI DA'awar dalilin. - Alama "mara sani" inda ba ku da tabbas.

Rabewa: gaskiya matsakaicin yana ɓoyewa

Ɗayan mafi ƙarfin motsi a cikin bincike na tuntuɓar shine rarrabuwa: karya jimlar lamba zuwa ƙungiyoyi masu ma'ana. "Matsakaicin abokin ciniki" sau da yawa ginin da ba ya wanzu; Gaskiya tana ɓoye a cikin ƙungiyoyin ƙungiyoyi. Misali, yayin da matsakaicin ribar riba ya bayyana ya zama 8%, 20% na abokan ciniki na iya kawo ragi 25% kuma 30% suna yin asara; matsakaita gaba daya boye wannan gaskiyar. Hankali na wucin gadi yana taimaka muku da sauri murkushe ginshiƙi a kan gatura daban-daban (nau'in abokin ciniki, yanki, samfuri, tashoshi) kuma gano wane ɓarna ke nuna mafi girman bambanci.

Matsayinku: mai nazarin bayanai. Tebur yana ƙasa.Task: karya wannan bayanan akan wannan axis: [nau'in abokin ciniki / yanki / samfurin]. Ga kowane rukuni: duka, raba (%), ma'ana AND matsakaici, girman rukuni (n) .Dokokin: - Idan ƙungiyar n<30, alamar "ƙananan samfurin - hankali" .- Rubuta dabara don kowane asusun; Zan tabbatar.- Nuna rukuni mafi girma da mafi ƙasƙanci; Yi la'akari da ko bambancin gaske ne ko kuma saboda wani abu guda ɗaya. Da farko bari in gaya muku wace rugujewar da nake tsammanin: [ hasashe].

Kuskuren gama gari

  • Dogaro da lissafin kan samfurin. Bayar da lissafin zuwa kayan aikin tantancewa (Excel/Python); Duba sakamakon da kansa.
  • Kuskuren daidaitawa don dalili. Kada ku rubuta jimlar "X yana ƙaruwa Y" ba tare da shaida ba; Tambayi abin da ke ɓoye.
  • A makance yana kallon matsakaicin. Maɗaukaki ɗaya ya ƙãra ma'ana; Duba kuma na tsakiya da rarrabawa.
  • Ketare ingancin bayanai. Fassarorin da suka samo asali daga bayanan da ba su cika ba, kwafi ko rashin daidaituwa suna yaudara; duba farko.
  • Manta misali. Gabaɗaya daga ƙarami ko samfurin son zuciya ga dukan jama'a zai haifar da sakamako mara kyau.
  • Bayanai masu rikitarwa tare da fassarar. Nuna dabam abin da yake auna da abin da yake inference.
Hankali: Idan sakamakon binciken bayanan kuɗi, kiwon lafiya ko bayanan aminci na aiki zai zama tushen yanke shawara, ƙididdiga da fassarar dole ne a tabbatar da ƙwararrun ƙwararrun masu dacewa (mai ba da shawara kan kuɗi, mai yin aiki, ƙwararren filin). Hankali na wucin gadi yana samar da bincike na farko; Ƙimar ƙarshe da alhakin na mutane ne.

a takaice

Hankali na wucin gadi taimako ne mai ƙarfi wajen fassara bayanan tambura, gano abubuwan da ke faruwa da ɓarna, da samar da lambar bincike. Amma tun da yake yana iya yin kuskure cikin ƙididdiga cikin shiru, wajibi ne a sake yin kowane lissafin tare da kayan aikin tantancewa kuma a bincika da hannu. Rarraba alaƙa da sanadi, kallon tsaka-tsaki kusa da ma'ana, bincika ingancin bayanai kafin fassarar, da kiyaye iyakokin samfuri sune mahimman fannonin shawarwari. Samfurin yana nuna tsari; Mutane suna haifar da ma'ana da alhakin.

Aikin aikace-aikace

Zaɓi ainihin ko wakilcin tallace-tallace / bayanin farashi. Da farko gudanar da saurin bincika ingancin bayanai kuma sami aƙalla batu guda (race, rashin daidaituwa, rashin daidaituwa). Sa'an nan cire trends da breakouts tare da m bincike sauri; Hakanan da hannu tabbatar da dabarar kowane asusu. Kwatanta ma'anar zuwa tsaka-tsaki kuma gano wani tasiri mai ma'ana. A ƙarshe, nemo da'awar dalilin da samfurin ya rubuta kuma sake kwatanta shi azaman "daidaitawa."

jerin abubuwan dubawa

  • [ ] Na sake gudanar da kowane madaidaicin lissafi tare da kayan aikin tantancewa (Excel/Python).
  • [ ] Na yi duba ingancin bayanai kafin yin tsokaci.
  • [ ] Bayan ma'ana, na kalli tsaka-tsaki da rarrabawa.
  • [ ] Na kiyaye bambance-bambancen da ke haifar da alaƙa.
  • [ ] Na tambayi samfurin da iyakokin lokacin lokaci.
  • [ ] Na raba "bayani ya ce" da "ma'ana mai yiwuwa".
  • [ ] Na shirya amincewar ƙwararru a cikin bincike mai mahimmanci.