ইউনিট
1. এআই প্রদানকারী ইকোসিস্টেম: মানচিত্র, ধারণা এবং 'কোনও সেরা মডেল নেই' 2. বন্ধ ওজন এবং খোলা ওজন: নিয়ন্ত্রণ, খরচ এবং গোপনীয়তার একটি ভারসাম্য 3. ইউএস জায়ান্টস ইন-ডেপথ: অ্যানথ্রোপিক, ওপেনএআই, গুগল 4. অন্যান্য শক্তিশালী খেলোয়াড়: মেটা, মিস্ট্রাল, xAI, ডিপসিক, কোহেরে 5. টোকেন, প্রসঙ্গ উইন্ডো এবং মাল্টিমোডালিটি: মডেলের মন কীভাবে কাজ করে 6. প্রাইসিং লজিক: টোকেন ইকোনমি এবং কস্ট-কোয়ালিটি ব্যালেন্স 7. মডেলের স্তর এবং ক্ষমতা: যুক্তি, গতি এবং ছোট/বড় মডেল নির্বাচন 8. ডেটা সার্বভৌমত্ব, KVKK/EU এবং গোপনীয়তা: আপনি কার কাছে ডেটা অর্পণ করবেন? 9. সঠিক মডেল নির্বাচন করা: ডিসিশন ট্রি এবং মডেল পোর্টফোলিও 10. এন্ড-টু-এন্ড অ্যাপ্লিকেশন: মূল্যায়ন, বৈধতা, নীতিশাস্ত্র এবং সীমানা
ইউনিট 1 / 10

এআই প্রদানকারী ইকোসিস্টেম: মানচিত্র, ধারণা এবং 'কোনও সেরা মডেল নেই'

লাভ:

  • প্রদানকারী, মডেল পরিবার এবং মডেল সংস্করণের ধারণাগুলির মধ্যে পার্থক্য করতে সক্ষম হন।
  • আটটি প্রধান প্রদানকারীকে জানুন এবং যেখানে তারা নিরপেক্ষভাবে দাঁড়িয়ে আছেন
  • মডেল নির্বাচনকে একটি মিল-টু-জব সমস্যা হিসাবে ফ্রেম করা, রোস্টার রেস নয়

এআই প্রোভাইডার ইকোসিস্টেম: মানচিত্র, ধারণা এবং "কোনও সেরা মডেল নেই"

আজ যখন একটি ব্যবসা বলে "আমরা কৃত্রিম বুদ্ধিমত্তা ব্যবহার করব", তখন এটি আসলে একটি একক পণ্যের কথা নয়, বরং একটি বিস্তৃত বাজার যা একে অপরের সাথে প্রতিদ্বন্দ্বিতা করে এবং প্রতিদ্বন্দ্বী কোম্পানিগুলি এই মডেলগুলির বিকাশ করছে। এই বাজার কয়েক বছর আগে দুই বা তিন খেলোয়াড় নিয়ে গঠিত; আজ, বিকল্পগুলি এতটাই বেড়েছে যে সঠিক মডেলটি বেছে নেওয়া নিজেই একটি যোগ্যতা হয়ে উঠেছে। এই ইউনিটের লক্ষ্য হল এই বাজারের মানচিত্র তৈরি করা এবং "প্রোভাইডার", "মডেল ফ্যামিলি", "মডেল ভার্সন" এর মতো মৌলিক ধারণাগুলোকে স্পষ্ট করা। একবার ইউনিটটি শেষ হয়ে গেলে, আপনি বিভ্রান্ত না হয়ে কে কী উত্পাদন করে সে সম্পর্কে কথা বলতে এবং কেন কোনও একক "সেরা মডেল" নেই তা ব্যাখ্যা করতে সক্ষম হবেন।

এই মডিউল জুড়ে আমাদের লক্ষ্য দর্শক একটি প্রযুক্তিগত সফ্টওয়্যার দল নয়; পেশাদারদেরই সিদ্ধান্ত নিতে হবে। অন্য কথায়, একজন ম্যানেজার যিনি তার কোম্পানিতে AI ব্যবহার করার পরিকল্পনা করেন, একজন আইনজীবী যিনি চুক্তি পড়তে চান, একজন হিসাবরক্ষক যিনি চালান প্রক্রিয়া করেন, একজন ই-কমার্স বিশেষজ্ঞ যিনি গ্রাহকের মন্তব্য বাছাই করেন, একজন গ্রাহক পরিষেবা কর্মকর্তা যিনি কল সারাংশ তৈরি করেন। এই লোকেদের একটি সাধারণ প্রশ্ন হল: "এখানে কয়েক ডজন মডেল রয়েছে; আমার ব্যবসার জন্য কোনটি বেছে নেওয়া উচিত এবং কিসের ভিত্তিতে?" উত্তরের উপায় হল প্রথমে সঠিক শব্দ শিখতে হবে।

তিনটি মৌলিক ধারণা: প্রদানকারী, মডেল পরিবার, মডেল সংস্করণ

এই তিনটি শব্দ একসাথে মিশ্রিত করার ফলে বেশিরভাগ বিভ্রান্তি তৈরি হয়। আসুন স্পষ্ট করা যাক:

  • প্রদানকারী: কোম্পানি যে মডেলটি বিকাশ করে এবং অফার করে। যেমন, Anthropic, OpenAI, Google। প্রদানকারী একটি গাড়ির ব্র্যান্ডের অনুরূপ।
  • মডেল পরিবার: এটি একই ব্র্যান্ডের অধীনে একটি প্রদানকারী দ্বারা সংগ্রহ করা মডেলগুলির একটি গ্রুপ। Anthropic এর "Claude" পরিবারের মত, OpenAI এর "GPT" পরিবার, Google এর "Jemini" পরিবার। পরিবারের গাড়িতে সিরিজের মতোই।
  • মডেল সংস্করণ: পরিবারের মধ্যে একটি নির্দিষ্ট মডেল। যেমন "Claude Opus 4.8" বা "GPT-4o"। প্রতিটি সংস্করণ গতি, খরচ এবং ক্ষমতার একটি ভিন্ন ভারসাম্য অফার করে। সংস্করণটি গাড়ির সরঞ্জাম প্যাকেজের অনুরূপ।
পরামর্শ: "আমার একটি গাড়ি আছে" বলাই যথেষ্ট নয়; ব্র্যান্ড (প্রদানকারী), সিরিজ (পরিবার) এবং হার্ডওয়্যার প্যাকেজ (সংস্করণ) গুরুত্বপূর্ণ। এমনকি যদি একটি শহরের গাড়ি এবং একটি রেসিং কার একই ব্র্যান্ডের হয়, তবে তারা খুব ভিন্ন কাজের জন্য উপযুক্ত। কৃত্রিম বুদ্ধিমত্তার মডেলগুলিতেও ঠিক একই অবস্থা।

এর একটি উদাহরণ মাধ্যমে হাঁটা যাক. ধরা যাক আপনি একটি আইন সংস্থা এবং আপনি বলছেন, "আমরা Claude Opus 4.8 চেষ্টা করতে যাচ্ছি।" এখানে Anthropic হল প্রদানকারী, Claude হল মডেল পরিবার, Opus হল পরিবারের মধ্যে শক্তিশালী স্তর, এবং 4.8 হল সংস্করণ সংখ্যা৷ একই পরিবারে আরও দ্রুত এবং সস্তা স্তর রয়েছে (যেমন হাইকু)। সুতরাং "আমরা অ্যানথ্রোপিক ব্যবহার করছি" বাক্যটি অসম্পূর্ণ যদি না এটি বলে যে আপনি কোন স্তর এবং সংস্করণটি ব্যবহার করছেন৷

ইকোসিস্টেমের আট প্রধান খেলোয়াড়

এবার বাজারকে অবজেক্টিভ চোখে জেনে নেওয়া যাক। নীচের সারণীতে আপনি প্রতিটি প্রদানকারীর কুলুঙ্গি, মডেল পরিবার এবং মূল দেশ পাবেন। আপনার এই টেবিলটি মুখস্থ করার দরকার নেই; এর উদ্দেশ্য স্থায়ীভাবে এই ধারণাটি প্রতিষ্ঠিত করা যে "AI-এর বিশ্ব একটি কোম্পানির বিষয় নয়"। আমরা নিম্নলিখিত ইউনিটগুলির প্রতিটি সম্পর্কে বিশদে যাব।

প্রদানকারী

মডেল পরিবার

যেখানে এটি দাঁড়িয়ে আছে

ওজনের ধরন

উৎপত্তি

নৃতাত্ত্বিক

ক্লদ (ওপাস/সনেট/হাইকু)

দীর্ঘ প্রসঙ্গ, কোড, নিরাপদ এন্টারপ্রাইজ ব্যবহার

বন্ধ

USA

OpenAI

GPT (GPT-4o, ও-সিরিজ)

বিস্তৃত ইকোসিস্টেম, বহুমুখিতা

বন্ধ

USA

গুগল

মিথুন (প্রো / ফ্ল্যাশ)

মাল্টিমোডালিটি, ওয়ার্কস্পেস ইন্টিগ্রেশন

বন্ধ

USA

পণ্য

লামা

ওজন খুলুন, আপনার নিজের সার্ভারে চালান

খোলা

USA

মিস্ট্রাল

মিস্ট্রাল / মিক্সট্রাল

ইউরোপীয় উত্স, ওজন বিকল্প খোলা

মিশ্রিত

ফ্রান্স

xAI

গ্রোক

রিয়েল-টাইম ডেটা, এক্স (টুইটার) ইন্টিগ্রেশন

বন্ধ

USA

ডিপসিক

ডিপসিক

কম খরচ/কর্মক্ষমতা ব্যালেন্স

খোলা

চীন

সমন্বিত

আদেশ

কর্পোরেট অনুসন্ধান এবং নথি প্রশ্ন (RAG)

মিশ্রিত

কানাডা

টেবিলে তিনটি মাত্রা আলাদা: যে ক্ষেত্রটিতে এটি দাঁড়িয়েছে (এটি কী ভাল), ওজনের ধরন (বন্ধ বা খোলা - পরবর্তী ইউনিটের বিষয়) এবং উত্স (ডেটা সার্বভৌমত্ব এবং আইনী নিয়ন্ত্রণের ক্ষেত্রে গুরুত্বপূর্ণ)। এই তিনটি মাত্রা নিম্নলিখিত বিভাগে আপনার মডেল নির্বাচন সিদ্ধান্ত গাছের মেরুদণ্ড গঠন করবে।

আসুন অবিলম্বে এখানে ব্যবহৃত কিছু পদ ব্যাখ্যা করা যাক। RAG (পুনরুদ্ধার-বর্ধিত প্রজন্ম) এমন একটি পদ্ধতি যেখানে মডেলটি উত্তর তৈরি করার আগে আপনার নথির প্রাসঙ্গিক অংশগুলি খুঁজে পায় এবং পড়ে; এটি এন্টারপ্রাইজ অনুসন্ধান সিস্টেমের ভিত্তি। মাল্টিমোডালিটি হল মডেলের ক্ষমতা শুধুমাত্র টেক্সট নয়, ইমেজ এবং অডিওও প্রক্রিয়া করা। আমরা ভবিষ্যতের ইউনিটগুলিতে আলাদাভাবে এই ধারণাগুলিতে ফিরে যাব।

কেন এত অনেক প্রদানকারী আছে?

এটি একটি কাকতালীয় ঘটনা নয় যে বাজারটি এত জমজমাট আপনার পছন্দ করার সময় আপনাকে গাইড করবে। চারটি প্রধান কারণ রয়েছে:

  1. বিভিন্ন ব্যবসার প্রয়োজন: যেখানে একটি আইন ফার্মের এমন একটি মডেল প্রয়োজন যা তাদের সম্পূর্ণরূপে 200-পৃষ্ঠার চুক্তিগুলি পড়তে পারে, একটি ই-কমার্স সাইট একটি দ্রুত এবং সস্তা মডেল চায় যা প্রতি সেকেন্ডে শত শত পণ্যের বিবরণ তৈরি করে। একই মডেল উভয় কাজের জন্য সবচেয়ে উপযুক্ত হতে পারে না।
  2. খরচের চাপ এবং প্রতিযোগিতা: প্রদানকারীদের মধ্যে প্রতিযোগিতা ক্রমাগত দাম কমিয়ে দেয়। একটি দক্ষতা যা কয়েক বছর আগে ব্যয়বহুল ছিল তা আজ মূল্যের দশমাংশের জন্য দেওয়া হয়। এটি ব্যবসার জন্য সরাসরি সুবিধা।
  3. ডেটা সার্বভৌমত্ব: একটি ইউরোপীয়-ভিত্তিক কোম্পানি অনুরোধ করতে পারে যে গ্রাহকের ডেটা EU-এর মধ্যে প্রক্রিয়া করা হবে। এই প্রয়োজনটি আপনার নিজের সার্ভারে চলমান মিস্ট্রাল বা ওপেন ওয়েট মডেলের মতো আঞ্চলিক খেলোয়াড়দের মূল্যবান করে তোলে।
  4. খোলা বা বন্ধ পদ্ধতির পছন্দ: কিছু প্রতিষ্ঠান তাদের নিজস্ব সার্ভারে সম্পূর্ণরূপে তাদের নিজস্ব নিয়ন্ত্রণে মডেলটি চালাতে চায়; কেউ কেউ রেডিমেড ক্লাউড সার্ভিস পছন্দ করেন। আপনি কোন প্রদানকারীর সাথে কাজ করেন তা এই পছন্দটি একা নির্ধারণ করতে পারে।
সতর্কতা: "সবাই যে মডেলটি ব্যবহার করে তা আমাদেরও মানায়" এই ধারণাটি প্রায়শই ভুল হয়। আপনার প্রতিযোগী যে মডেলটি ব্যবহার করে তা তাদের ওয়ার্কফ্লো, ডেটা টাইপ এবং বাজেটের উপর ভিত্তি করে বেছে নেওয়া হয়েছে। আপনার সঠিক পছন্দ আপনার ব্যবসার নির্দিষ্ট চাহিদার উপর নির্ভর করে। এই মডিউলটির উদ্দেশ্য আপনার উপর একটি প্রস্তুত উত্তর চাপিয়ে দেওয়া নয়, তবে কীভাবে সঠিক প্রশ্ন জিজ্ঞাসা করতে হয় তা শেখানো।

দুর্বল প্রম্পট / শক্তিশালী প্রম্পট: প্রদানকারীর তুলনা জিজ্ঞাসা করার সময়

আপনি যখন একটি মডেল তুলনা করতে চান, আপনি কিভাবে জিজ্ঞাসা করবেন তা নির্ধারণ করে আপনি যে উত্তর পাবেন তার গুণমান। পাশাপাশি দুটি উদাহরণ দেওয়া যাক।

দুর্বল প্রম্পট:

কোন এআই মডেল সেরা?

এই প্রশ্নটি প্রসঙ্গ-মুক্ত; মডেলটি হয় আপনাকে "এটি নির্ভর করে" উত্তর দেয় বা আপনাকে একটি সাধারণ তালিকা দেয় যা আপনার কোন কাজে আসে না।

শক্তিশালী প্রম্পট:

আপনার ভূমিকা: এন্টারপ্রাইজ এআই পরামর্শদাতা। প্রসঙ্গ: আমরা 15 জনের একটি আইন সংস্থা। আমরা প্রতি মাসে ~300টি চুক্তি, তুর্কি ভাষায় আনুমানিক 40টি পৃষ্ঠা এবং ঝুঁকিপূর্ণ আইটেম চিহ্নিত করতে চাই। ডেটাতে ব্যক্তিগত ডেটা রয়েছে এবং আমাদের কেভিকেকে মেনে চলতে হবে। কাজ: এই কাজের জন্য 3টি ভিন্ন প্রদানকারীর মডেলের তুলনা করুন। প্রতিটির জন্য নিম্নলিখিত শিরোনামগুলি পূরণ করুন: প্রসঙ্গ উইন্ডোর উপযুক্ততা, আনুমানিক মাসিক খরচ পরিসীমা, ডেটা স্টোরেজ/গোপনীয়তার অবস্থা, শক্তি এবং দুর্বলতা। বিন্যাস: 4টি কলাম সহ একটি টেবিল + শেষে 2-বাক্য সুপারিশ।

পার্থক্যটি স্পষ্ট: একটি শক্তিশালী প্রম্পট ভূমিকার প্রসঙ্গ, পরিমাপযোগ্য কাজ এবং একটি স্পষ্ট বিন্যাস রয়েছে। মডেলটি এখন একটি তুলনামূলক আউটপুট তৈরি করতে পারে যা আপনার ব্যবসার জন্য উপযুক্ত।

অনুলিপিযোগ্য টেমপ্লেট

আপনি নিচের চারটি টেমপ্লেটকে আপনার নিজের ব্যবসার সাথে খাপ খাইয়ে ব্যবহার করতে পারেন।

1. প্রদানকারী ম্যাপিং:

আমি [ইন্ডাস্ট্রি] এ কাজ করি। আমি যে প্রধান AI কাজটি করতে চাই তা হল: [TASK]। এই কাজের জন্য উপযুক্ত 5টি প্রদানকারীর তালিকা করুন; প্রতিটির জন্য "কেন এটি উপযুক্ত" এবং "সম্ভাব্য অসুবিধা" লাইনগুলি পূরণ করুন। সঠিক মূল্য দেবেন না, একটি পরিসীমা দিন।

2. ধারণার ব্যাখ্যা:

নিম্নলিখিত বাক্যে আলাদা এবং লেবেল প্রদানকারী, মডেল পরিবার এবং মডেল সংস্করণ:"[পেস্ট করা বাক্য]"

3. বিশ্লেষণ প্রয়োজন:

আমার কাজ: [বর্ণনা]। মাসিক থ্রুপুট: [NUMBER]। ডেটা টাইপ: [TEXT/IMAGE/AUDIO]।গোপনীয়তা প্রয়োজনীয়তা: [হ্যাঁ/না]। বাজেট সংবেদনশীলতা: [নিম্ন/মাঝারি/উচ্চ]। এই প্রোফাইলের উপর ভিত্তি করে আমার কি বন্ধ বা খোলা ওজনের মডেল দিয়ে শুরু করা উচিত? ন্যায্যতা।

4. নিরপেক্ষ তুলনা কঙ্কাল:

আমার টাস্কের জন্য এই 3টি মডেল [MODEL A], [MODEL B], [MODEL C] তুলনা করুন। মানদণ্ড: গুণমান, গতি, খরচ, প্রসঙ্গ, গোপনীয়তা। প্রতিটি মানদণ্ডে 1-5 পয়েন্ট দিন এবং এক বাক্যে আপনার স্কোরের কারণ লিখুন। বিজ্ঞাপনের ভাষা ব্যবহার করবেন না, যদি এটি অস্পষ্ট হয় তবে "পরীক্ষা করা আবশ্যক" লিখুন।

এই প্ল্যাটফর্মটি কোন মডেল ব্যবহার করে?

স্বচ্ছতার স্বার্থে, আসুন আমরা বলে রাখি: আপনি যে প্ল্যাটফর্মটি পড়ছেন তার AI কোচ এখন Anthropic-এর Claude পরিবার থেকে claude-opus-4-8 সংস্করণ ব্যবহার করেন। এই পছন্দটি তার দীর্ঘ প্রসঙ্গ ক্ষমতা এবং নিরাপত্তা পদ্ধতির কারণে করা হয়েছে যা কর্পোরেট ব্যবহারে আলাদা। কিন্তু এর অর্থ এই নয় যে "এটি সবার জন্য সেরা মডেল"; অন্য প্রদানকারী আপনার ব্যবসার জন্য আরও উপযুক্ত হতে পারে। এই মডিউলে আমাদের লক্ষ্য হল আপনাকে একটি সৎ এবং তুলনামূলক চেহারা দেওয়া।

সাধারণ ভুল

  • সংস্করণের সাথে বিভ্রান্তিকর প্রদানকারী: "আমরা ওপেনএআই ব্যবহার করি" বলা কোন মডেল এবং স্তরটি বলে না। সবসময় সংস্করণ নির্দিষ্ট করুন.
  • একটি একক "বিজয়ী" খুঁজছেন: বাজারকে একটি ফুটবল লিগের মতো বিবেচনা করুন এবং জিজ্ঞাসা করুন "কে প্রথমে আসে?" জিজ্ঞাসা করতে সঠিক প্রশ্ন হল "কোনটি আমার ব্যবসার জন্য?" হওয়া উচিত
  • মানের জন্য জনপ্রিয়তা ভুল করা: সবচেয়ে আলোচিত মডেলটি আপনার নির্দিষ্ট কাজের জন্য সঠিক মডেল নাও হতে পারে।
  • উৎপত্তির দেশকে উপেক্ষা করা: আপনি যদি ব্যক্তিগত ডেটা প্রসেস করছেন, যেখানে প্রদানকারী সেটি আইনি বাধ্যবাধকতার বিষয়, প্রযুক্তিগত নয়।
  • মূল্যকে একমাত্র মাপকাঠি করা: নিম্নমানের আউটপুট সহ মানুষের সংশোধনের সময় বৃদ্ধি করে সবচেয়ে সস্তা মডেলটি আসলে আরও বেশি ব্যয় করতে পারে।

সংক্ষেপে

  • AI বাজার একটি একক পণ্য নয়, বরং অনেক মডেল পরিবার এবং প্রতিযোগী প্রদানকারীদের থেকে সংস্করণ নিয়ে গঠিত; এই তিনটি ধারণা ভিন্ন।
  • আটটি প্রধান খেলোয়াড় (Anthropic, OpenAI, Google, Meta, Mistral, xAI, DeepSeek, Cohere) বিভিন্ন ক্ষেত্রে শক্তিশালী।
  • ভিড়ের বাজারের কারণ হল বিভিন্ন ব্যবসায়িক চাহিদা, খরচ প্রতিযোগিতা, ডেটা সার্বভৌমত্ব এবং অন/অফ পছন্দ।
  • কোন একক "সেরা মডেল" উত্তর নেই; সঠিক পছন্দ আপনার ব্যবসার প্রয়োজনের উপর নির্ভর করে।
  • একটি ভাল মডেল তুলনার জন্য একটি ভূমিকা, প্রসঙ্গ, পরিমাপযোগ্য কাজ এবং একটি স্পষ্ট বিন্যাস সহ একটি প্রম্পট প্রয়োজন।

আবেদন টাস্ক

আপনার নিজের ব্যবসা বা একটি কাল্পনিক ব্যবসা বিবেচনা করুন. কাগজের টুকরোতে নিম্নলিখিতগুলি লিখুন: (1) আপনার প্রধান এআই মিশন কী, (2) আপনার আনুমানিক মাসিক থ্রুপুট, (3) আপনার ডেটাতে কি ব্যক্তিগত ডেটা রয়েছে, (4) আপনার বাজেটের সংবেদনশীলতা কম নাকি বেশি? তারপরে উপরের টেমপ্লেট 3 ব্যবহার করে একটি AI মডেলকে এই প্রোফাইলটি দিন (বিশ্লেষণ প্রয়োজন) এবং জিজ্ঞাসা করুন কেন এটি আপনাকে একটি বন্ধ বা খোলা ওজনের মডেল দিয়ে শুরু করার পরামর্শ দেয়৷ আমরা পরবর্তী ইউনিটে ফলাফলের উত্তর পরীক্ষা করব।

চেকলিস্ট

  • [ ] আমি একটি উদাহরণ সহ প্রদানকারী, মডেল পরিবার এবং মডেল সংস্করণের মধ্যে পার্থক্য ব্যাখ্যা করতে পারি।
  • [ ] আমি আটটি প্রধান সরবরাহকারীর মধ্যে অন্তত পাঁচটি এবং তারা যে এলাকায় দাঁড়িয়েছিল তা মনে আছে।
  • [ ] আমি ব্যাখ্যা করতে পারি কেন "সেরা মডেল" অনুসন্ধানটি বিভ্রান্তিকর।
  • [ ] আমি একটি মডেল তুলনার জন্য একটি শক্তিশালী প্রম্পট লিখতে পারি।
  • [ ] আমি চারটি প্রশ্ন দিয়ে আমার নিজের ব্যবসার জন্য একটি চাহিদা বিশ্লেষণ তৈরি করতে পারি৷