ඒකක
1. AI සැපයුම්කරු පරිසර පද්ධතිය: සිතියම, සංකල්ප සහ 'හොඳම මාදිලිය නැත' 2. සංවෘත බර සහ විවෘත බර: පාලනය, පිරිවැය සහ පෞද්ගලිකත්වයේ ශේෂයක් 3. එක්සත් ජනපද යෝධයන් ගැඹුරින්: Anthropic, OpenAI, Google 4. අනෙකුත් ප්‍රබල ක්‍රීඩකයින්: Meta, Mistral, xAI, DeepSeek, Cohere 5. ටෝකනය, සන්දර්භය කවුළුව සහ බහුවිධතාවය: ආකෘතියේ මනස ක්‍රියා කරන ආකාරය 6. මිලකරණ තර්කය: සංකේත ආර්ථිකය සහ පිරිවැය-ගුණාත්මක ශේෂය 7. ආදර්ශ මට්ටම් සහ හැකියාවන්: තර්කනය, වේගය, සහ කුඩා/විශාල ආදර්ශ තේරීම 8. දත්ත ස්වෛරීභාවය, KVKK/EU සහ පෞද්ගලිකත්වය: ඔබ දත්ත භාර දෙන්නේ කාටද? 9. නිවැරදි ආකෘතිය තෝරා ගැනීම: තීරණ ගස සහ ආකෘති කළඹ 10. අවසානය සිට අවසානය දක්වා යෙදුම: ඇගයීම, වලංගු කිරීම, ආචාර ධර්ම සහ මායිම්
ඒකකය 5 / 10

ටෝකනය, සන්දර්භය කවුළුව සහ බහුවිධතාවය: ආකෘතියේ මනස ක්‍රියා කරන ආකාරය

ලාභ:

  • ටෝකනය, සන්දර්භය කවුළුව සහ බහුවිධතාවය යන සංකල්ප එදිනෙදා භාෂාවෙන් පැහැදිලි කිරීමේ හැකියාව
  • කාර්යයක් සඳහා පුළුල් සන්දර්භයක් හෝ බහුවිධතාවයක් අවශ්‍ය දැයි හඳුනා ගන්න
  • මෙම සංකල්ප පිරිවැය සහ ආදර්ශ තෝරාගැනීමට බලපාන ආකාරය සැලකිල්ලට ගැනීමේ හැකියාව

මෙතෙක් අපි සපයන්නන් සහ මාදිලි වර්ග සමඟ හුරුපුරුදුය. කෙසේ වෙතත්, නිවැරදි මාදිලිය තෝරා ගැනීම සඳහා, "ඇතුළත" ආකෘති ක්රියා කරන ආකාරය තේරුම් ගැනීම ද අවශ්ය වේ; මක්නිසාද යත් මිල, ධාරිතාව සහ ලබා ගැනීමේ තීරණ සියල්ලම මූලික සංකල්ප තුනක් මත රඳා පවතී: සංකේතය, සන්දර්භය කවුළුව සහ බහුවිධතාවය. මෙම සංකල්ප නොදන්නා කෙනෙකුට මිල පත්‍රිකාව කියවා "මෙම ලේඛනය ආකෘතියට ගැලපේද?" ප්‍රශ්නයට පිළිතුරු දිය නොහැකි අතර දෘශ්‍ය සැකසුම් අත්‍යවශ්‍ය වන්නේ කවදාදැයි නොපෙනේ. මෙම ඒකකය අවසන් වන විට, ඔබට එදිනෙදා භාෂාවෙන් මෙම සංකල්ප තුන පැහැදිලි කිරීමටත්, රැකියාවකට පුළුල් සන්දර්භයක් හෝ බහුමාධ්‍යයක් අවශ්‍ය දැයි හඳුනා ගැනීමටත්, පිරිවැය මත ඒවායේ බලපෑම සැලකිල්ලට ගැනීමටත් හැකි වනු ඇත.

ටෝකනය: වචනය වෙනුවට ආකෘතිය විසින් භාවිතා කරන ඒකකය

කෘත්‍රිම බුද්ධි මාදිලි පෙළ සකසන්නේ වචනයෙන් වචනය නොව ටෝකන ලෙස හඳුන්වන කුඩා කැබලි වලිනි. සංකේතයක්; එය වචනයක්, වචනයක කොටසක්, විරාම ලකුණක් හෝ අවකාශයක් විය හැකිය. දළ ගණනය කිරීමක් කිරීමට: ඉංග්‍රීසියෙන්, සාමාන්‍ය ටෝකනයක් අක්ෂර හතරක් පමණ වන අතර වචන 100 ටෝකන 130-150 පමණ වේ. තුර්කි භාෂාවෙන්, උපසර්ග සහ දිගු වචන හේතුවෙන් මෙම අනුපාතය තරමක් වැඩි විය හැක; වෙනත් වචන වලින් කිවහොත්, එකම අර්ථය සහිත තුර්කි පාඨයක් ඉංග්‍රීසි වලට වඩා තරමක් වැඩි ටෝකන පරිභෝජනය කරයි.

මෙය දැන ගැනීම වැදගත් වන්නේ ඇයි? මක්නිසාද යත් සියල්ල ආරෝපණය කර ටෝකන් වලින් මනිනු ලබන බැවිනි. ඔබ ආකෘතියට යවන පෙළ (ආදානය) සහ ආකෘතියෙන් නිපදවන ප්‍රතිචාරය (ප්‍රතිදානය) වෙනම ටෝකන ලෙස ගණන් ගනු ලැබේ. ඔබේ ඉන්වොයිසිය සහ මාදිලියේ ධාරිතාව යන දෙකම ටෝකන් වල ඇත.

ඉඟිය: පෙළකට ටෝකන කීයක් තිබේද යන්න පිළිබඳ දළ ඇස්තමේන්තුවක් ලබා ගැනීමට, අක්ෂර ගණන හතරෙන් බෙදන්න. අක්ෂර 4,000 ක විද්‍යුත් තැපෑලක් ආසන්න වශයෙන් ටෝකන 1,000 කි. තුර්කි භාෂාවෙන්, ආරක්ෂිත පැත්තේ සිටීමට ටිකක් ඉහළින් උපකල්පනය කරන්න.

සන්දර්භය කවුළුව: ආකෘතියේ "කෙටි කාලීන මතකය"

සන්දර්භය කවුළුව යනු ආකෘතියට වරකට මතක තබා ගත හැකි මුළු ටෝකන ප්‍රමාණයයි. ආදානය සහ ප්‍රතිදානය මෙම කවුළුව තුළ එකට ගැළපිය යුතුය. ඔබට එකවර මේසයක් මත විහිදුවිය හැකි කඩදාසි ප්‍රමාණය මෙන් සිතන්න: මේසයට නොගැලපෙන කඩදාසි ඒ මොහොතේ ඔබේ දෘෂ්ටි ක්ෂේත්‍රයෙන් බැහැර ය.

ආකෘතියක සන්දර්භය කවුළුව ටෝකන 200,000 ක් නම්, මෙය ආසන්න වශයෙන් වචන 150,000 කට හෝ මධ්‍යම ප්‍රමාණයේ පොත් කිහිපයකට සමාන වේ. ටෝකන මිලියන 1 කට සමස්තයක් ලෙස විශාල ලේඛන සැකසීමට හැකිය. අද සමහර බලගතු මාදිලි (උදා: Claude Opus 4.8 සහ Sonnet 5) ටෝකන් සන්දර්භ මිලියන 1 ක් ලබා දෙන අතර සැහැල්ලු මාදිලි බොහෝ විට කුඩා කවුළු සමඟ පැමිණේ (උදා: Haiku 4.5 සඳහා ටෝකන 200,000).

එය වැදගත් වන්නේ ඇයි? මක්නිසාද යත් ලේඛනයක් සන්දර්භය කවුළුවට නොගැලපේ නම්, ආකෘතියට ඒ සියල්ල එකට දැකිය නොහැක. ඔබට පිටු 500ක කොන්ත්‍රාත්තුවක් සම්පූර්ණයෙන් 200,000 ටෝකන් මාදිලියකට ලබා දිය නොහැක; ඔබ එක්කෝ ලේඛනය කොටස් වලට බෙදන්න (එමගින් කොටස් අතර සම්බන්ධතාවය නැති විය හැක) හෝ පුළුල් සන්දර්භයක් සහිත ආකෘතියක් තෝරන්න.

අවවාදයයි: සන්දර්භය කවුළුව විශාල බැවින් සෑම ලේඛනයක්ම පිරවීම නුවණට හුරු නැත. ඔබ වැඩි ටෝකන කවුළුව තුළට දමා, ඔබ වැඩිපුර ගෙවන අතර, සමහර විට ආකෘතිය ඉතා දිගු පාඨවල මැද විස්තර මග හැරිය හැක. වැඩ කරන කොටස පමණක් යැවීම බොහෝ විට ලාභදායී හා වඩා නිවැරදි වේ.

සන්දර්භය කවුළුව තීරණ ගැනීමේ නිර්ණායකයකි

ගවේෂණය

ආසන්න වශයෙන් අවශ්‍ය සන්දර්භය

සුදුසු මට්ටම

කෙටි ඊමේල් ප්‍රතිචාරය

ටෝකන් සිය ගණනක්

සැහැල්ලු

එක් පිටුවක සාරාංශයක්

ටෝකන් දහස් ගණනක්

ආලෝකය / සමතුලිත

පිටු 40 ක වාර්තා විශ්ලේෂණය

~30,000 ටෝකන

සමබර / ශක්තිමත්

පිටු 300ක කොන්ත්‍රාත් සමාලෝචනය

~250,000 ටෝකන

පුළුල් සන්දර්භය සමඟ බලවත්

ලේඛන සිය ගණනක් එකවර සකසන්න

500,000+ ටෝකන

පුළුල්ම සන්දර්භය

මෙම වගුව "කුමන ආකෘතිය" යන ප්රශ්නයට පිළිතුරු සපයයි. ප්‍රශ්නයේ කොටසකට ලේඛන ප්‍රමාණයෙන් සෘජුවම පිළිතුරු සපයන බව එය පෙන්වයි. කෙටි රැකියා සඳහා විශාල සන්දර්භයක් සහිත මිල අධික ආකෘතියක් මිලදී ගැනීම නාස්තියකි; කුඩා කවුළුවක් සහිත ආකෘතියක් විශාල ලේඛන සඳහා ප්රමාණවත් නොවේ.

බහුවිධතාවය: පෙළ ඉක්මවා යාම

Multimodality යනු පෙළ පමණක් නොව බහුවිධ දත්ත (රූපය, ශ්‍රව්‍ය, සමහර විට වීඩියෝ) හැසිරවීමට ආකෘතියකට ඇති හැකියාවයි. මෙහි "Modal" යන්නෙන් අදහස් වන්නේ "දත්ත වර්ගය" යන්නයි; multimodal යන්නෙහි තේරුම "බොහෝ වර්ග" යන්නයි.

  • පෙළ-පමණි ආකෘතිය: ලිඛිත පෙළ පමණක් කියවීම සහ ලිවීම.
  • බහුවිධ මාදිලිය: බිල්පතක ඡායාරූපයක් කියවීමට, ප්‍රස්ථාරයක ප්‍රවණතාවක් අර්ථ නිරූපණය කිරීමට, අතින් ලියන ලද සටහනක් විකේතනය කිරීමට, සමහර විට හඬ පටිගත කිරීමක් පිටපත් කිරීමට හැකිය.

එය වැදගත් වන්නේ ඇයි? ඔබේ ව්‍යාපාරයේ ස්වභාවයට බහුවිධතාවය අවශ්‍ය විය හැකි බැවිනි. ඉන්වොයිස් රූපවලින් මුදල් ලබා ගන්නා ගිණුම් කණ්ඩායමකට, නිෂ්පාදන ඡායාරූප වර්ගීකරණය කරන ඊ-වාණිජ්‍ය කණ්ඩායමකට හෝ හානි ඡායාරූප ඇගයීමට ලක් කරන රක්ෂණ කණ්ඩායමකට පෙළ පමණක් කියවන ආකෘතියකින් මෙම කාර්යය කළ නොහැක. මෙම කාර්යයන් සඳහා දෘශ්ය සැකසුම් අත්යවශ්ය වේ.

යථාර්ථවාදී අවස්ථා තුනක්

නඩුව 1 - ටෝකන් පිරිවැය පුදුමය. අන්තර්ගත කණ්ඩායමක් එක් එක් බ්ලොග් සටහනක් නිෂ්පාදනය කරන විට ආකෘතියට පිටු 20ක "සන්නාම මාර්ගෝපදේශ" ලේඛනයක් යවයි. මෙම මාර්ගෝපදේශය ටෝකන් 15,000 ක් පමණ වේ. ඔවුන් මසකට ලිපි 2,000ක් නිෂ්පාදනය කරයි; එබැවින් මාර්ගෝපදේශය නැවත නැවතත් යැවීමෙන් අදහස් වන්නේ මිලියන 30 ක ආදානයකි. මාර්ගෝපදේශය කෙටි කර අදාළ කොටස පමණක් යැවීමෙන් (ටෝකන් 2,000 ක් පමණ) ඔවුන් ආදානය හත්වෙන් එකකට අඩු කර බිල සැලකිය යුතු ලෙස අඩු කරයි.

නඩුව 2 - සන්දර්භය කවුළුව ප්රමාණවත් නොවේ. නීති සමාගමකට පිටු 280ක ඒකාබද්ධ ගිවිසුමක් සමාලෝචනය කිරීමට අවශ්‍යයි. ඔවුන් උත්සාහ කළ පළමු මාදිලියේ ටෝකන් 200,000 ක බැඳීමක් ඇති අතර ලේඛනය නොගැලපේ; ලේඛනය ඉරා දැමූ විට, පළමු කොටසේ ලිපියක් අවසාන කොටසේ ලිපියකට පටහැනි බව ආකෘතියට දැකිය නොහැක. එය මිලියන 1 ටෝකන් සන්දර්භය සහිත ආකෘතියකට මාරු වූ විට, එය සමස්තයක් ලෙස ලේඛනය කියවා ප්රතිවිරෝධතාව අල්ලා ගනී. මෙහිදී සන්දර්භය කවුළුව සෘජුවම නිරවද්‍යතාවය තීරණය කරයි.

නඩුව 3 - බහුවිධතාවය අනිවාර්ය වේ. රක්ෂණ සමාගමකට වාහන හානි ඡායාරූප වලින් මූලික තක්සේරුවක් කිරීමට අවශ්‍යයි. පෙළ පමණක් කියවන ආකෘතියක් සමඟ මෙය කළ නොහැක; ඡායාරූපය "දකින" බහුමාධ්‍ය ආකෘතියක් අවශ්‍ය වේ. ඔවුන් බහුමාධ්‍ය ආකෘතියකට මාරු වූ විට, ඔවුන් ඡායාරූපයේ ඇති හානියේ පිහිටීම සහ බරපතලකම දළ වශයෙන් වර්ගීකරණය කර ප්‍රවීණයා මෙහෙයවන පූර්ව පිරික්සුම් පද්ධතියක් ස්ථාපිත කරයි. කෙසේ වෙතත්, අවසාන තීරණය ගනු ලබන්නේ මානව විශේෂඥයෙකු බව ඔවුන් සටහන් කරයි; මක්නිසාද යත්, ආකෘතිය මූලික පිරික්සුම් මෙවලමක් මිස අවසාන වචනය නොවේ.

දුර්වල ක්ෂණික / ශක්තිමත් ක්ෂණික

දුර්වල ක්ෂණික:

මෙම ලේඛනය සාරාංශ කරන්න. [දිග ලේඛනය අලවා ඇත]

බලවත් විමසුම:

පහත පිටු 40ක වාර්තාව සාරාංශ කරන්න. පළමුව වාර්තාවේ ඇති ආසන්න ටෝකන සංඛ්‍යාව තක්සේරු කර එය සාමාන්‍ය සමතුලිත ආකෘතියක සන්දර්භය කවුළුව තුළට ගැළපේ දැයි අපට කියන්න. ඉන්පසු මෙම ආකෘතියෙන් සාරාංශය දෙන්න: අයිතම 5 ක විධායක සාරාංශය + අවදානම් සොයාගැනීම් 3 ක්. වාර්තාවේ තොරතුරු පමණක් භාවිතා කරන්න; ඔබට විශ්වාස නැති කොටස "වාර්තාවේ පැහැදිලි නැත" ලෙස සලකුණු කරන්න. [වාර්තාව]

ප්‍රබල විමසුම සංකේත/සන්දර්භය දැනුවත් යන දෙකම වන අතර ප්‍රතිදානයේ ආකෘතිය සහ සත්‍යාපනය පාලනය කරයි.

පිටපත් කළ හැකි සැකිලි

1. ටෝකන් අනාවැකිය:

පහත පෙළ සඳහා ආසන්න වශයෙන් ටෝකන ගණන ඇස්තමේන්තු කර ආදාන පිරිවැය අනුව මෙය අර්ථ නිරූපණය කරන්න: "[TEXT]". එය තුර්කි බව සැලකිල්ලට ගනිමින් එය ටිකක් වට කරන්න.

2. සන්දර්භය ලබා ගැනීමේ පරීක්ෂාව:

මගේ කාර්යය වන්නේ පහත ලේඛන සැකසීමයි: මසකට සාමාන්‍ය [QTY] ලේඛන [PAGES]. මෙම ප්‍රමාණයට අවශ්‍ය සන්දර්භය කවුළුව කුමක්ද? ආලෝකය/සමතුලිත/ශක්තිමත් මට්ටම් වලින් ප්‍රමාණවත් වන්නේ කුමක්ද? එය විසුරුවා හැරීමට අවශ්ය නම් ඇතිවන අවදානම කුමක්ද?

3. බහුවිධ රෝග විනිශ්චය:

මගේ කාර්ය ප්‍රවාහය: [DESCRIPTION]. මෙම ප්‍රවාහයේ දෘශ්‍ය, ශ්‍රව්‍ය හෝ දෘශ්‍ය සැකසුම් තිබේද? එසේ නම්, බහුමාධ්‍ය ආකෘතියක් අවශ්‍යද, නැතහොත් එය පෙළ (OCR/transcription) බවට පරිවර්තනය කර පෙළ ආකෘතියෙන් විසඳිය හැකිද? මාර්ග දෙකේ වාසි/අඩු සසඳන්න.

4. සන්දර්භය ප්‍රශස්තකරණය:

මම සෑම ඉල්ලීමක් සමඟම ආකෘතියට ලේඛනයක් යවනවා, නමුත් එය බොහෝමයක් අනවශ්ය ය. මෙම ලේඛනයෙන් [TASK] සඳහා සැබවින්ම අවශ්‍ය කොටස් උපුටා ගන්නේ කෙසේද? ආදානය අඩු කිරීමට සහ ඇස්තමේන්තුගත ටෝකන ඉතුරුම් දැක්වීමට නිශ්චිත ක්‍රම 3ක් යෝජනා කරන්න.

පොදු වැරදි

  • වචනයක් සඳහා ටෝකනය වැරදියි: ටෝකනය වචනයකට වඩා වෙනස් ය; ඉන්වොයිසිය සහ ධාරිතාව සෑම විටම ටෝකන් වල ඇත, වචන වලින් ගණනය කිරීම නොමඟ යවන සුළුය.
  • සන්දර්භය කවුළුව අසීමිත යැයි සිතීම: සෑම ආකෘතියක්ම සීමාවක් ඇත; ලේඛනය නොගැලපේ නම්, ආකෘතියට සමස්තය දැකිය නොහැක.
  • අනවශ්ය විශාල සන්දර්භය භාවිතා කිරීම: කෙටි රැකියාවක් සඳහා විශාල සන්දර්භයක් සහිත මිල අධික ආකෘතියක් මිලදී ගැනීම; නැතහොත් සෑම ඉල්ලීමක් සඳහාම විශාල ලියකියවිලි පුරවා නිෂ්ඵල ලෙස ගෙවන්න.
  • බහුවිධතාවය උපකල්පනය කිරීම: සෑම ආකෘතියක්ම දෘෂ්ය සැකසීමට නොහැකිය; දෘශ්ය වැඩ සඳහා, ආකෘතිය බහුමාධ්ය බව තහවුරු නොකර ආරම්භ කරන්න.
  • තුර්කියේ ටෝකන් භාරය අමතක කිරීම: තුර්කි පාඨ සාමාන්‍යයෙන් එකම අර්ථය සඳහා තරමක් වැඩි ටෝකන පරිභෝජනය කරයි; පිරිවැය ඇස්තමේන්තු කිරීමේදී මෙය නොසලකා හැරීම.

සාරාංශයක් ලෙස

  • ටෝකනයක් යනු ආකෘතිය පෙළ සකසන කුඩා ඒකකයයි; ආදානය සහ ප්‍රතිදානය මනිනු ලබන අතර ටෝකන ලෙස වෙන වෙනම ඉන්වොයිස් කරනු ලැබේ.
  • සන්දර්භය කවුළුව යනු ආකෘතියට වරකට මතක තබා ගත හැකි සම්පූර්ණ සංකේත වේ; ලේඛන ප්‍රමාණය ආකෘති තේරීමට සෘජුවම බලපායි.
  • බහුවිධතාවය යනු දෘශ්‍ය/ශ්‍රව්‍ය වැනි පෙළ නොවන දත්ත සැකසීමට ආකෘතියට ඇති හැකියාවයි; දෘශ්ය වැඩ සඳහා එය අත්යවශ්ය වේ.
  • මෙම සංකල්ප තුනම "කුමන ආකෘතිය" යන ප්‍රශ්නයට අදාළ වේ. එසේම "එය කොපමණ මුදලක් වැය වේද?" එය ප්‍රශ්නවල පදනම සාදයි.

යෙදුම් කාර්යය

ඔබේ ව්‍යාපාරයේ පුනරාවර්තන AI කාර්යයක් තෝරන්න. මෙම කාර්යයේ සාමාන්‍ය ආදානයක් ටෝකන කීයක් තිබේ දැයි 1 වන අච්චුව (ටෝකන අනාවැකිය) ගණනය කරන්න. ඉන්පසු සැකිල්ල 2 සමඟ ප්‍රමාණවත් මට්ටම කුමක්ද යන්න තීරණය කරන්න (සන්දර්භය ලබා ගැනීමේ පරීක්ෂාව). ඔබට දෘශ්‍ය කාර්යයක් තිබේ නම්, 3 වන අච්චුව (multimodality රෝග විනිශ්චය) සමඟ බහුමාධ්‍ය ආකෘතියක් අවශ්‍ය දැයි පැහැදිලි කරන්න. ඊළඟ ඒකකයේ පිරිවැය ගණනය කිරීමේදී අපි ප්රතිඵලය වන සංකේත ඇස්තමේන්තුව භාවිතා කරමු.

පිරික්සුම් ලැයිස්තුව

  • ටෝකනය පිළිබඳ සංකල්පය සහ පෙළකට ටෝකන කීයක් තිබේදැයි දළ වශයෙන් තක්සේරු කරන්නේ කෙසේදැයි මම දනිමි.
  • [ ] මට සන්දර්භය කවුළුව "වගුව/මතකය" සාදෘශ්‍යයකින් පැහැදිලි කළ හැක.
  • [ ] මට ලේඛනයක් ආකෘතියකට ගැලපෙනවාද යන්න ඇගයීමට හැකිය.
  • [ ] බහුවිධතාවය අත්‍යවශ්‍ය විට මට රෝග විනිශ්චය කළ හැක.
  • [ ] මම තුර්කියේ ටෝකන් පොදු කාර්ය සහ අනවශ්‍ය සන්දර්භයේ පිරිවැය සැලකිල්ලට ගනිමි.