ඒකක
1. දත්ත විද්‍යාව සහ විශ්ලේෂණ පිළිබඳ කෘතිම බුද්ධිය හැඳින්වීම: කාර්ය ප්‍රවාහය, භූමිකාවන්, සීමා මායිම්, වලංගුකරණය සහ ආචාර ධර්ම 2. දත්ත රැස් කිරීම සහ මූලාශ්‍ර අවබෝධය: යෝජනා ක්‍රමය, නියැදීම, ගුණාත්මකභාවය සහ කාන්දුවීම් පිළිබඳ දැනුවත් කිරීම 3. දත්ත පිරිසිදු කිරීම සහ පෙර සැකසුම: අස්ථානගත වූ අගය, පිටස්තර සහ වර්ගය පරිවර්තනය 4. ගවේෂණාත්මක දත්ත විශ්ලේෂණය (EDA): බෙදාහැරීම්, සබඳතා සහ මූලික තීක්ෂ්ණ බුද්ධිය 5. විශේෂාංග ඉංජිනේරු: ප්‍රභේද ජනනය කිරීම, කේතනය කිරීම, පරිමාණය කිරීම සහ කාන්දු වීම වැළැක්වීම 6. ආදර්ශ ගොඩනැගීම: ගැටළු නිර්වචනය, ඇල්ගොරිතම තේරීම සහ පුහුණුව/පරීක්ෂණ බෙදීම 7. ආදර්ශ ඇගයීම: ප්‍රමිතික, හරස් වලංගුකරණය සහ අන්ත ඉගෙනීම 8. දෘශ්‍යකරණය සහ කතන්දර කීම: නිවැරදි ග්‍රැෆික්ස්, අවංක ග්‍රැෆික්ස් 9. කේත උත්පාදනය: Python (pandas) සහ SQL සමඟ AI-සහාය විශ්ලේෂණය 10. දත්ත කාන්දු වීම සහ ප්‍රතිනිෂ්පාදනය: නිහඬ විපත් සහ විනය 11. MLOps පදනම, ආචාර ධර්ම, පෞද්ගලිකත්වය සහ වගකීම් විශ්ලේෂණ
ඒකකය 8 / 11

දෘශ්‍යකරණය සහ කතන්දර කීම: නිවැරදි ග්‍රැෆික්ස්, අවංක ග්‍රැෆික්ස්

ලාභ:

  • සෑම ප්‍රස්ථාරයක්ම පැහැදිලි ප්‍රශ්නයකට සම්බන්ධ කර සුදුසු ප්‍රස්ථාර වර්ගය තෝරා ගැනීමේ හැකියාව (කාලය සඳහා රේඛාව, සංසන්දනය සඳහා තීරුව, සම්බන්ධතාවය සඳහා බෙදා හැරීම)
  • නොමඟ යවන මූලද්‍රව්‍ය හඳුනා ගැනීමේ හැකියාව (ඉරි සහිත අක්ෂය, චෙරි අහුලා ගැනීම, ස්පැගටි ප්‍රස්ථාරය) සහ අවංක සහ සරල දර්ශන නිෂ්පාදනය කිරීමේ හැකියාව
  • ප්‍රතිඵල-නැඹුරු සිරස්තල සහ දත්ත කතන්දර සමඟින් සොයාගැනීම් තීරණ බවට පත් කිරීමේ හැකියාව

විග්‍රහයක වටිනාකම හෙළිවන්නේ අන් අයට එය තේරුම් ගෙන තීරණ ගත හැකි වූ විටයි. ලෝකයේ වඩාත්ම නිවැරදි ආකෘතිය එය දුර්වල ලෙස පැහැදිලි කළහොත් රාක්කයේ පවතී; හොඳින් පැහැදිලි කර ඇති සාමාන්‍ය සොයාගැනීමක් සමාගමේ දිශාව වෙනස් කළ හැකිය. මෙම ඒකකයේ විෂය වන්නේ දත්ත දෘශ්‍යකරණය (ග්‍රැෆික්ස් සමඟ දත්ත ප්‍රකාශ කිරීම) සහ දත්ත කතන්දර කීම (සොයාගැනීම් තීරණ කතාවකට පරිවර්තනය කිරීම): නිවැරදි ප්‍රස්ථාරය තෝරා ගැනීම, එය අවංකව ඇඳීම සහ ප්‍රේක්ෂකයන්ගේ මනසෙහි පැහැදිලි පණිවිඩයක් තැබීම. AI ප්‍රස්ථාර කේතය ලියයි, ප්‍රස්ථාර වර්ගයක් යෝජනා කරයි, සහ සොයා ගැනීමක් සඳහා මාතෘකාවක් කෙටුම්පත් කරයි; නමුත් ලබා දෙන පණිවිඩය කුමක්ද සහ ග්‍රැෆික් නොමඟ යවන සුළුද යන්න තීරණය කිරීම මිනිසාට භාරයි.

ප්‍රස්ථාරයකට කාර්යයක් ඇත: ප්‍රශ්නයකට පිළිතුරු දීම

ආරම්භකයින් කරන ලොකුම වැරැද්ද නම් "දත්ත පෙන්වීමට" ප්‍රස්ථාර ඇඳීමයි. කෙසේ වෙතත්, හොඳ ප්‍රස්ථාරයක් ප්‍රශ්නයකට පිළිතුරු සපයයි. "කාලයත් සමඟ විකුණුම් වැඩි වී තිබේද?" ප්‍රශ්නයට පිළිතුර රේඛා ප්‍රස්ථාරයයි; "කොයි නගරයද වැඩිපුර විකුණන්නේ?" තීරු සටහනකි; "මිල සහ ඉල්ලුම සම්බන්ධද?" විසිරුණු කුමන්ත්රණයකි. ප්‍රස්ථාරය ඇඳීමට පෙර අසන්න: මෙම ප්‍රස්ථාරය පිළිතුරු දෙන ප්‍රශ්නය කුමක්ද සහ නරඹන්නාට එය බැලූ බැල්මට දැකිය හැකිද?

ප්‍රස්ථාර තේරීමේ මූලික සිතියම්ගත කිරීම:

අරමුණ

නිවැරදි සටහන

වැරදි තේරීම

කාලයත් සමඟ වෙනස් වේ

රේඛා සටහන

පයි ප්‍රස්ථාරය

වර්ග සංසන්දනය

තීරු වගුව

3D කේක්

අංක දෙකක සම්බන්ධතාවය

විසිරුම් සටහන

සැරයටිය

බෙදා හැරීමේ හැඩය

හිස්ටෝග්රෑම් / පෙට්ටිය

සාමාන්ය තනි තීරුව

සමස්තයේ කොටස් (කාණ්ඩ කිහිපයක්)

සැරයටිය හෝ සරල කේක්

බහු පෙති කේක්

බහුවිධ සම්බන්ධතාවය

තාප සිතියම

අතිච්ඡාදනය වන රේඛා

ඉඟිය: හැකි නම් පයි ප්‍රස්ථාරයෙන් වළකින්න; මිනිස් ඇස කෝණ දුර්වල ලෙස සංසන්දනය කරයි. අනුක්‍රමික තීරු ප්‍රස්ථාරයක් පෙති දෙකකට වඩා තිබේ නම් සෑම විටම පාහේ කියවිය හැකිය.

අවංක ප්‍රස්ථාරය: නොමඟ යැවීමට ඇති පහසුම ක්‍රමය

ප්‍රස්ථාර නොදැනුවත්වම බොරු කිව හැකිය (සමහර විට හිතාමතාම). දත්ත වෘත්තිකයෙකුගේ සදාචාරාත්මක වගකීම වන්නේ අවංක ප්‍රස්ථාර ඇඳීමයි. රැවටීමේ වඩාත් පොදු ආකාර:

ඉරි සහිත y-අක්ෂය: ඔබ අක්ෂය 0 වෙනුවට 95 න් ආරම්භ කරන්නේ නම්, 2% ක වෙනසක් කන්දක් මෙන් පෙනේ. සංසන්දනාත්මක තීරු ප්‍රස්ථාරවලදී, අක්ෂය සාමාන්‍යයෙන් 0 න් ආරම්භ විය යුතුය.

වැරදි අක්ෂ පරිමාණය: ලඝුගණක අක්ෂය එය සඳහන් නොකර හෝ අක්ෂ විකෘති කිරීමකින් තොරව භාවිතා කිරීම.

චෙරි-පික්කිං: ඔබේ පණිවිඩයට සහය දක්වන කාල සීමාව/කොටස පමණක් පෙන්වමින් ඉතිරිය සඟවන්න.

ඕනෑවට වඩා තොරතුරු: "ස්පැගටි ප්‍රස්ථාරයක්" සෑදීමට පේළි 12ක් අතිච්ඡාදනය කිරීම; පණිවිඩ කිසිවක් කියවනු නොලැබේ.

නොමඟ යවන එකතු කිරීම: වෙනස් ලෙස හැසිරෙන ප්‍රස්ථාර එකතු කිරීම සහ සැබෑ රටාව සැඟවීම (Simpson's Paradox).

පරෙස්සම් වන්න: ඔබ AI ට "මෙම වෙනස සිත් ඇදගන්නාසුළු කරන්න" යැයි පැවසුවහොත්, එය ඉරි සහිත අක්ෂය සහිත අතිශයෝක්තියෙන් යුත් ප්‍රස්ථාරයක් යෝජනා කළ හැකිය. සදාචාරාත්මක වගකීම ඔබ වෙත පැවරී ඇත: ප්‍රස්ථාරය දත්ත ඇත්තට වඩා විශාල හෝ කුඩා නොකළ යුතුය. සිත් ඇදගන්නාසුළු වීමට පෙර අවංකකම පැමිණේ.

වර්ණය, ලේබලය සහ සරල බව

හොඳ ග්‍රැෆික්ස් සරල ග්‍රැෆික්ස් වේ. දත්ත තීන්ත අනුපාත මූලධර්මය: දත්ත රැගෙන නොයන සියල්ල ඉවතලන්න (අනවශ්‍ය ජාලකය, සෙවනැල්ල, ත්‍රිමාණ ආචරණය, අලංකාර වර්ණය). වර්ණය අර්ථය ප්‍රකාශ කළ යුතුය, විසිතුරු නොවිය යුතුය: ප්‍රවර්ගයක් උද්දීපනය කිරීමට එක් වර්ණයක්, ඉතිරිය අළු. වර්ණ අන්ධභාවය ගැන විමසිලිමත් වන්න (රතු-කොළ වෙනස්කම් කිරීම පිරිමින් 12 දෙනෙකුගෙන් 1 දෙනෙකුට පමණ අපහසුය); ආරක්ෂිත පැලට් භාවිතා කරන්න. සෑම ප්‍රස්ථාරයකටම පැහැදිලි මාතෘකාවක් තිබිය යුතුය - සහ හොඳම මාතෘකාව ප්‍රස්ථාරය විස්තර නොකරයි, එය ප්‍රතිඵලය කියයි: "මාසික විකුණුම්" වෙනුවට "Q3 හි විකුණුම් 18% පහත වැටේ".

උද්දීපනය සහ විස්තරය: පණිවිඩය වෙත ඇස යොමු කිරීම

හොඳ ග්‍රැෆික් එකක් නරඹන්නාට බැලිය යුතු ස්ථානය කියයි. පූර්ව අවධානයට ලක්වන ගුණාංග - සිහිකල්පනාවෙන් තොරව තත්පරයක කොටසකින් මොළය වටහා ගන්නා වර්ණය, පිහිටීම, ප්‍රමාණය වැනි දෘශ්‍ය ඉඟි - මේ සඳහා මෙවලම වේ: ඔබ තනි තීරුවක් උච්චාරණ වර්ණයකින් සහ ඉතිරිය අළු පැහැයෙන් තැබුවහොත්, ඇස ස්වයංක්‍රීයව එහි යයි. ප්‍රස්ථාරයට සෘජුවම එකතු කරන ලද අනුසටහන් ද ප්‍රබල වේ: "මෙම මාසයේ ව්‍යාපාරය ආරම්භ කරන ලදී" යන තනි ඊතලය විස්තරයේ ඡේදයකට වඩා ඵලදායී වේ. උපකරණ පුවරුවක් සැලසුම් කිරීමේදී එකම මූලධර්මය අදාළ වේ: වඩාත්ම වැදගත් මෙට්‍රික් එක ඉහළින් සහ විශාලතම තබා ගන්න, ද්විතියික තොරතුරු පහළින් සහ කුඩාව තබා ගන්න. මෙහි අරමුණ ප්‍රේක්ෂකයින් තොරතුරුවලින් යටපත් කිරීම නොව, එක බැල්මකින් නිවැරදි තීරණය දැකීමට ඔවුන්ට හැකිවීමයි. AI ඔබට උද්දීපනය කරන වර්ණ සහ විවරණ කේතය ජනනය කළ හැක; නමුත් අවධාරණය කළ යුත්තේ කුමක්ද, එනම් සැබෑ පණිවිඩය කුමක්ද යන්න ඔබ තීරණය කරයි.

කුඩා නඩු තුනක්

නඩුව 1 - කැඩුණු අක්ෂය සෝලිය. එක් කණ්ඩායමක් කළමනාකාරිත්වයට "වර්ධනය" පෙන්වීමට y-අක්ෂය 980 දී ආරම්භ කළ තීරු සටහනක් ඉදිරිපත් කළහ. 1,000 සිට 1,020 දක්වා විකිණීම විශාල ලෙස පෙනුණි. සැබෑ වැඩිවීම 2% කි. කළමනාකරුවෙකු හැරවීම දුටු විට, සම්පූර්ණ ඉදිරිපත් කිරීමෙහි විශ්වසනීයත්වය දෙදරා ගියේය. පාඩම: සංසන්දනාත්මක තීරුවල අක්ෂය 0 න් ආරම්භ කරන්න.

නඩුව 2 - ස්පැගටි වගුව. විශ්ලේෂකයෙකු විසින් නිෂ්පාදන 14ක මාස 24ක අලෙවිය පේළි 14ක් ලෙස තනි ප්‍රස්ථාරයක තැබීය. කිසිවෙකුට කිසිවක් කියවිය නොහැකි විය. වඩාත්ම වෙනස් වූ නිෂ්පාදන 3 පමණක් උද්දීපනය කිරීමෙන් සහ ඉතිරිය සුදුමැලි අළු බවට පත් කිරීමෙන්, පණිවිඩය පැහැදිලි විය: "නිෂ්පාදනය A බිඳ වැටෙමින් පවතී, නිෂ්පාදනය B ඉහළ යයි." පාඩම: සියල්ල පෙන්වන්න එපා, පණිවිඩය පෙන්වන්න.

නඩුව 3 - ප්රතිඵලය පවසන මාතෘකාව. එක් වාර්තාවක් "ප්‍රාදේශීය ව්‍යාප්තිය" නම් සිතියමක් මත ඔපවත් කර ඇත; කිසිවෙක් පියවර ගත්තේ නැත. "නැගෙනහිර කලාපය ඉලක්කයට වඩා 40% පහතින්" යන සිරස්තලය වෙනස් වූ විට, එම චිත්‍රකයම රැස්වීමකදී හදිසි ක්‍රියාකාරී සැලැස්මක් බිහි කළේය. පාඩම: මාතෘකාව මගින් තීරණය පැවසිය යුතුය, චිත්රක නොවේ.

පිටපත් කළ හැකි සැකිලි හතරක්

1) ප්‍රස්ථාර වර්ගය තේරීම:

ඔබේ කාර්යභාරය: දෘශ්‍යකරණ උපදේශක. පහත ප්‍රශ්නයට පිළිතුරු සපයන ප්‍රස්ථාරයක් යෝජනා කරන්න: "පසුගිය මාස 12 තුළ වේගයෙන් වර්ධනය වූයේ කුමන නාලිකාවද (වෙබ්/ජංගම)?" මා සතුව මාසික, නාලිකා බිඳුණු විකුණුම් ඇත. මට වඩාත් සුදුසු ප්‍රස්ථාර වර්ගය සහ ඇයි කියන්න; නොමඟ යවන විකල්ප (පයි, ඉරි සහිත අක්ෂය) වළක්වා ගැනීමට මට මතක් කරන්න. matplotlib සමඟ කේතය අපනයනය කරන්න.

2) අවංක ඇඳීම් පාලනය:

අවංකභාවය සඳහා මෙම තීරු ප්‍රස්ථාර කේතය පරීක්ෂා කරන්න: y-අක්ෂය 0 න් ආරම්භ වන්නේද, වර්ණය අර්ථවත්ද, මාතෘකාව ප්‍රතිඵලය කියයිද, අනවශ්‍ය 3D/සෙවනැලි තිබේද? නොමඟ යවන සුළු අයිතම නිවැරදි කර ඔබ ඒවා නිවැරදි කළේ මන්දැයි පැහැදිලි කරන්න.

3) සරල කිරීම:

මා සතුව පේළි 14ක් සහිත කාල ශ්‍රේණි ප්‍රස්ථාරයක් ඇත, එය කියවිය නොහැක. වඩාත්ම වෙනස්වන ශ්‍රේණි 3 පමණක් උද්දීපනය කරන සහ ඉතිරිය ලා අළු බවට පත් කරන පැහැදිලි ශීර්ෂයක් සහ ඉහළ දත්ත තීන්ත අනුපාතයක් සහිත අනුවාදයක් සඳහා කේතය ලියන්න.

4) ප්‍රතිඵල-අභිමුඛ මාතෘකාව සහ ආඛ්‍යානය:

මම මෙම සොයා ගැනීම ලබා දෙන්නෙමි: "නැගෙනහිර කලාපය Q3 ඉලක්කයට වඩා 40% ට වඩා පහත වැටුණි, ප්‍රධාන හේතුව සැපයුම් ප්‍රමාදයන් ය." මෙය සිදු කිරීම සඳහා, සාදන්න: (1) ඉලක්කයක් එදිරිව රියැලිටි තීරු ප්‍රස්ථාරයක්, (2) ප්‍රතිඵලය පවසන සිරස්තලයක්, (3) වාක්‍ය 3 ක විධායක සාරාංශ දළ සටහනක්. මම අංක සත්‍යාපනය කරන්නම්; සවි කිරීම.

දුර්වල ක්ෂණික / ශක්තිමත් විමසුම

දුර්වල ක්ෂණික:

මෙම විකුණුම් දත්ත වලින් ලස්සන වගුවක් සාදන්න.

"ලස්සන" ආත්මීයයි; කුමන ප්‍රශ්නය, කුමන ප්‍රේක්ෂකයා, කුමන පණිවිඩයද යන්න පැහැදිලි නැත. AI අහඹු, සමහරවිට නොමග යවන ප්‍රස්ථාරයක් නිපදවයි.

බලවත් විමසුම:

ඔබගේ කාර්යභාරය: දත්ත දෘශ්‍යකරණ සහකාර. ප්‍රේක්ෂකයින්: ජ්‍යෙෂ්ඨ කළමනාකාරීත්වය. පණිවිඩය: "ජංගම නාලිකාව මාස 12කින් වෙබය අභිබවා ගියේය." මට මාසික නාලිකා විකුණුම් ඇත. කාර්යය: (1) මෙම පණිවිඩය පැහැදිලිව පෙන්වන රේඛා ප්‍රස්ථාර කේතය (matplotlib), (2) y-අක්ෂය 0 සිට ආරම්භ වේ, ජංගම හෝවර් වර්ණය, වෙබ් අළු, (3) ප්‍රතිඵලය පවසන මාතෘකාව. නොමඟ යවන පරිමාණයන් භාවිතා කිරීම; දත්ත එලෙසම පෙන්වන්න. මම නම්බර් දෙන්නම්.

මෙහි ප්‍රේක්ෂක, පණිවිඩය, අවංක රීතිය සහ ප්‍රස්ථාර වර්ගය පැහැදිලිය.

පොදු වැරදි

  • ප්‍රස්තාරය ප්‍රශ්නයකට සම්බන්ධ නොකර ඇඳීම. අරමුණක් නැති ග්‍රැෆික්ස් නරඹන්නා වෙහෙසට පත් කරන අතර තීරණ නිපදවන්නේ නැත.
  • කැඩුණු/වංක අක්ෂයකින් නොමඟ යැවීමට. සාපේක්ෂව, අක්ෂය 0 සිට ආරම්භ විය යුතුය; සදාචාරාත්මක වගකීම ඔබ මත පවතී.
  • සියල්ල එක ප්‍රස්ථාරයකට පටලවා ගැනීම. ස්පැගටි ග්‍රැෆික් පණිවිඩය විනාශ කරයි; අවධාරණය කරන්න, ඉතිරිය නිශ්ශබ්ද කරන්න.
  • වැරදි ප්‍රස්ථාර වර්ගය (විශේෂයෙන් බහු පෙති පයි). කාලය සඳහා රේඛා සහ සංසන්දනය සඳහා තීරු භාවිතා කරන්න.
  • මාතෘකාව ප්‍රස්ථාරය විස්තර කරයි. හොඳ සිරස්තලය ප්‍රතිඵලය/තීරණය කියයි, තීරු නම නොවේ.
ඉඟිය: ඔබ එක් එක් ප්‍රස්ථාරය අවසන් කරන විට, තත්පර 5ක පරීක්ෂණයක් කරන්න: යමෙකුට තත්පර 5ක් පෙන්වා “ඔබට තේරෙන්නේ කුමක්ද?” කියා අසන්න. එයට නිවැරදි පණිවිඩය පැවසිය නොහැකි නම්, ප්‍රස්ථාරය තවමත් සූදානම් නැත; මාතෘකාව සරල කරන්න, අවධාරණය කරන්න, ප්‍රතිඵල-අභිමුඛ කරන්න.

සාරාංශයක් ලෙස

දෘශ්‍යකරණය යනු විශ්ලේෂණය තීරණයක් බවට පත් කරන පාලමයි. හොඳ ප්‍රස්ථාරයක් ප්‍රශ්නයකට පිළිතුරු සපයයි; නිවැරදි වර්ගය (කාලය සඳහා රේඛාව, සංසන්දනය සඳහා තීරුව, සම්බන්ධතාවය සඳහා බෙදා හැරීම) තෝරා ඇත; අවංකව ඇද ගන්නා ලදී (අක්ෂය 0 සිට ආරම්භ වේ, අර්ථවත් වර්ණය, චෙරි තෝරා ගැනීමක් නැත). එය සරල බව සහ ප්‍රතිඵල පිළිබඳ මාතෘකා පණිවිඩය දරයි. AI ග්‍රැෆික් කේත සහ කෙටුම්පත් මාතෘකා උත්පාදනය කිරීමට ඉක්මන් වේ, නමුත් මිනිසා විසින් කුමන පණිවිඩයක් ලබා දෙන්නේද යන්න සහ චිත්‍රකය අවංකද යන්න තීරණය කරයි; ආචාරධාර්මික වගකීම කථකයා වෙත පැවරේ.

යෙදුම් කාර්යය

එක් සොයා ගැනීමක් තෝරා එය තනි ප්‍රතිඵල-නැඹුරු ප්‍රස්ථාරයක් බවට පත් කරන්න. ප්‍රස්ථාරය සැලසුම් කිරීමෙන් පසුව, අවංකභාවය පරීක්ෂා කරන්න: අක්ෂය 0 න් ආරම්භ වන්නේද, වර්ණය අර්ථවත්ද, මාතෘකාව ප්‍රතිඵලය කියයිද? ඉන්පසු "තත්පර 5 පරීක්ෂණය" කරන්න (එය යමෙකුට පෙන්වා ඔවුන්ට තේරෙන්නේ කුමක්දැයි විමසන්න) සහ ඔබට ලැබෙන ප්‍රතිපෝෂණය මත පදනම්ව ප්‍රස්ථාරය සරල කරන්න.

පිරික්සුම් ලැයිස්තුව

  • [ ] මගේ ප්‍රස්ථාරය පැහැදිලි ප්‍රශ්නයකට පිළිතුරු දෙයිද?
  • [ ] ප්‍රස්ථාර වර්ගය අරමුණ සඳහා සුදුසුද (කාලය/සැසඳීම/සම්බන්ධතාව)?
  • [ ] අක්ෂ අවංකද (සැසඳීමේ දී 0 සිට ආරම්භ වේ)?
  • [ ] වර්ණය සහ සරල බව පණිවිඩයට සහාය වේ, ඒවා විසිතුරු බවට පත් නොවන්නේද?
  • [ ] මාතෘකාව ප්‍රස්තාරය විස්තර කරනවාට වඩා ප්‍රතිඵලය/තීරණය කියයිද?