Daromadlar:
- Token ehtimollik va bashorat tushunchalarini intuitiv ravishda tushuntira oladi
- Til modeli nima uchun matnni "bo'lak" hosil qilishini tushunadi
- Model nima uchun ba'zan qat'iy va ba'zan ijodiy harakat qilishini izohlay oladi
Til modeliga "Istanbul haqidagi eng yaxshi narsa" deb yozsangiz, u bir necha soniya ichida ravon paragraf hosil qiladi. Bu qanday sodir bo'ladi? Model haqiqatan ham "o'ylaydi" yoki uning orqasida ancha sodda, ammo kuchli mexanizm bormi? Ushbu bo'limda biz generativ AI qanday ishlashini texnik tenglamalarga kirmasdan, balki to'g'ri sezgi o'rnatish orqali tushuntiramiz. Bu sezgi keyingi barcha narsalar uchun asos bo'ladi, ayniqsa gallyutsinatsiyalar, tekshirish va yaxshi tezkor yozish mavzulari. Generativ AI, ya'ni "generativ sun'iy intellekt" mavjud javobni topish va olish o'rniga matnni noldan yaratuvchi vositalarning umumiy nomidir.
Asosiy g'oya: keyingi qismni bashorat qilish
Ajablanarlisi shundaki, til modeli o'rganadigan yagona asosiy vazifa bu "matnning qaysi qismi ko'proq ergashishi mumkin?" savoliga javob berishdir. Model to'liq jumla tayyorlamaydi va uni sizning oldingizda taqdim etadi. Buning o'rniga, chapdan o'ngga bo'lak-bo'lak gapni hosil qiladi.
Bu bosqichma-bosqich qanday ishlaydi:
- U siz yozgan matnni (so'rovni) o'qiydi.
- Ushbu matndan keyin kelishi mumkin bo'lgan qismni bashorat qiladi.
- Bu qismni qo'shadi.
- U yangi tuzilgan matnga yana qaraydi va keyingi eng ehtimol bo'lgan qismni taxmin qiladi.
- Javob tugaguncha takrorlanadi.
Misol: Agar siz modelga "Ertalab uyg'onganingizda issiq stakan iching ..." matnini bergan bo'lsangiz, eng ehtimol davomi "choy" yoki "qahva" bo'ladi; "Asfalt" emas. Model bunday ehtimolliklarni millionlab matnlardan bilib oldi. Keyin u "choy" qo'shadi, keyin yangi jumlaga qaraydi va keyingi eng ehtimol qismini taxmin qiladi va hokazo.
Boshqacha qilib aytganda, har bir qadamda model o'zi yozgan narsaga qarab keyingi qadamni qo'yadi. Shuning uchun uni ba'zan "avtoto'ldirishning juda rivojlangan versiyasi" deb ham atashadi. Ammo bu o'xshatish iste'dodni kamsitmasligi kerak; To'g'ri miqyosda bu bashorat fikrlash kabi ko'rinadigan natijalarni berishi mumkin.
Token: So'zning kichik qismlari
Model aslida to'liq "so'zlar" bilan emas, balki tokenlar deb ataladigan kichikroq qismlar bilan ishlaydi. Token; Gohida butun so‘z, gohida so‘zning bo‘lagi, gohida tinish belgisi bo‘ladi.
- "kitob" bitta belgi bo'lishi mumkin.
- “Kitoblarimizdan”ni “kitob”, “s”, “bizning”, “dan” kabi bir qancha leksemalarga ajratish mumkin.
- Bo'shliqlar va tinish belgilari ham token sifatida hisoblanadi.
Diqqat: Token shunchaki texnik tafsilot emas. Aksariyat AI vositalari tokenlar soni bo'yicha zaryadlanadi va matn uzunligi (kontekst oynasi) modellari bir vaqtning o'zida ishlov berishi mumkin bo'lgan tokenlar ham cheklangan. Shunday qilib, "qancha vaqt yozasiz" - bu to'g'ridan-to'g'ri xarajat va chegara.
Ehtimollik va "iliqlik": qat'iyatmi yoki ijodkorlikmi?
Har bir bosqichda model bitta aniq javobni emas, balki mumkin bo'lgan davomlarning ehtimollik ro'yxatini ishlab chiqaradi. Masalan, "issiq" so'zidan keyin: choy 55%, qahva 35%, sut 7%, boshqa 3%. Xo'sh, u qaysi birini tanlaydi?
Bu erda harorat deb ataladigan sozlama o'ynaydi. Harorat - bu model qanchalik "xavf" qilishini aniqlaydigan ijodkorlik tugmasi.
Sozlama
xulq-atvor
Xulosa
Qaerda foydali?
past harorat
Har doim eng ehtimoliy variantni oladi
Barqaror, takrorlanadigan
Huquqiy xulosa, texnik tavsif, ma'lumotlarni olish
o'rtacha harorat
Balansli tanlov
Tabiiy, ammo izchil
Umumiy elektron pochta, hisobot loyihasi
yuqori harorat
Kamroq variantlarni sinab ko'radi
Ijodiy, xilma-xil, oldindan aytib bo'lmaydigan
Aqliy hujum, shior, nom ishlab chiqarish
Bu ham tez-tez beriladigan savolni tushuntiradi: "Nega men bir savolni ikki marta berganimda turli xil javoblarni olaman?" Chunki tanlov jarayonida qandaydir tasodifiylik mavjud; Model ma'lumotlar bazasidan qat'iy javob bermaydi, uni har safar takrorlaydi.
Zaif taklif / Kuchli taklif
Modelning "ehtimollik" bilan ishlashini bilish, unga qanday ko'rsatma berishni ham o'zgartiradi. Qanchalik ko'p kontekst bersangiz, to'g'ri davom etish ehtimoli shunchalik yuqori bo'ladi.
Zaif taklif: Kirish matnini yozing.
Natija: Model eng "o'rtacha" va umumiy matnni ishlab chiqaradi, chunki u qaysi mahsulot, qaysi auditoriya, qaysi ohangni bilmaydi.
Kuchli taklif: Kichkina kafening yangi filtrli qahvasi uchun Instagram reklama matnini yozing. Tomoshabinlar: 25-35 yosh, qahva ishqibozi. Ohang: do'stona, qisqa. Maksimal 3 ta jumla, oxirida 2 ta hashtag.
Natija: Foydalanish mumkin bo'lgan matn, chunki kontekst imkoniyatlarni toraytiradi.
Uchta mini korpus
1-holati - Marketing, yuqori xilma-xillik. Jamoa yangi mahsulot uchun 30 ta shior talab qildi. Yuqori harorat sozlamalari bilan model turli xil, ijodiy variantlarni ishlab chiqardi; Jamoa 30 tadan 4 tasini tanladi va ishlab chiqdi. Umumiy vaqt: 10 daqiqa. Agar qo'lda qilingan bo'lsa, yarim kun davom etadi.
2-holati - Qonun, yuksak qat'iyat. Xuddi shu kompaniyaning yuridik guruhi shartnoma bandini soddalashtirayotgan edi. Ular ijodkorlikni emas, izchillikni xohlashdi; Past harorat bilan model har safar deyarli bir xil, konservativ xulosani berdi. Shunday qilib, turli sinovlar o'rtasida hech qanday nomuvofiqlik yo'q edi.
3-holat - "Nega u o'zgardi?" savol. Xodim bir xil elektron pochta loyihasini ikki marta so'radi va ikki xil natija oldi; U buni "xato" deb o'yladi. Aslida, bu modelning tasodifiyligining tabiiy natijasidir. Xodim o'ziga yoqqan versiyani saqlashni o'rgangach va kerak bo'lsa "avvalgisiga o'xshab qo'ying" deyishni o'rgansa, hech qanday muammo yo'q edi.
Model "tushdi"mi?
Bu eng qiziq savol. Model so'zlar orasidagi statistik munosabatlarni shunchalik chuqur o'rgandiki, u ko'p vazifalarni tushungandek ko'rinadi. Ammo uning ongli tushunchasi, niyati yoki haqiqatni boshqarish mexanizmi yo'q. U "eng ehtimoliy davomiy" ni yaratadi; Bu "eng aniq ma'lumot" ishlab chiqarishni kafolatlamaydi. Bu farq gallyutsinatsiya mavzusining asosi bo'lib, biz keyingi bo'limlarda muhokama qilamiz.
Umumiy xatolar
Umumiy xatolar
- Qidiruv tizimi uchun modelni xato qilish. Model internetni qidirmaydi va resurslarni olmaydi (agar maxsus qidiruv funksiyasi mavjud bo'lmasa); Xotiradan mumkin bo'lgan matnni yaratadi. Shunday qilib, u manba/raqamni yaratishi mumkin.
- Ravonlikni aniqlik bilan adashtirish. Matn chiroyli va ishonchli bo'lishi uning mazmuni to'g'ri ekanligini anglatmaydi.
- Har safar bir xil javobni kutish. Tasodifiylik tabiiydir; O'zingiz yoqtirgan natijani muhim vazifalar uchun saqlang.
- Juda uzun, keraksiz matnni joylashtirish va token chegarasini bosish. Uzunlik har ikkala narxni oshiradi va modelning diqqatini chalg'itishi mumkin; faqat kerakli kontekstni bering.
Diqqat: Modelning ravon va ishonchli gapirishi uning to‘g‘ri gapirayotganini anglatmaydi. Ravonlik ehtimolini baholashning tabiiy natijasidir; Aniqlik alohida va mustaqil ravishda tekshirilishi kerak bo'lgan narsadir.
Xulosa
- Generativ AI keyingi ehtimoliy fragmentni (token) bashorat qilish orqali matnni bosqichma-bosqich yaratadi; bo‘lak-bo‘lak gapni tuzadi.
- Tokenlar so'zlarning kichikroq qismlari bo'lib, narx va uzunlik chegaralarini o'rnatadi.
- Har bir qadamda model imkoniyatlar ro'yxatini ishlab chiqaradi; Harorat sozlamasi chiqishning qanchalik barqaror yoki ijodiy bo'lishini belgilaydi.
- Xuddi shu savolga turli xil javoblarning sababi bu jarayonga xos tasodifiylik bilan bog'liq.
- Model ravon gapiradi, lekin bu uning haqiqatni gapirayotganiga kafolat bermaydi; Ravonlik va aniqlik boshqa narsalardir.
Ilova vazifasi
AI vositangizga ketma-ket ikki marta bir xil ijodiy topshiriqni bering (masalan, “tezkor minnatdorchilik xati yozing”) va natijalar qanday farq qilishini kuzating. Keyin xuddi shu vazifani "Kuchli taklif" shablonida takrorlang, kontekstni qo'shing va ikkala natija o'rtasidagi sifat farqiga e'tibor bering.
Tekshirish roʻyxati
- [ ] Model matnni "keyingi mumkin bo'lgan bo'lakni bashorat qilish" orqali ishlab chiqarishini tushuntirishim mumkin.
- Men [ ] Token nima ekanligini va nima uchun u xarajat/cheklovni bildirishini bilaman.
- [ ] Men qat'iyat talab qiladigan va ijodkorlikni talab qiladigan ishlarni ajrata olaman.
- [ ] Men bir savolga turlicha javob olish normal holat ekanligini bilaman.
- [ ] Men tushundimki, ravonlik aniqlik kafolati emas.