Bölüm 6 / 10

Bahalaryň logikasy: Token ykdysadyýeti we çykdajylaryň hili deňagramlylygy

Girdeji:

  • Giriş / çykyş belliginiň bahalaryny we faktura elementlerini okamak ukyby
  • Gödek formula bilen iş prosesiniň aýlyk bahasyna baha bermek ukyby
  • Keşlemek, partiýany gaýtadan işlemek we model goýmak ýaly çykdajylary azaltmak usullaryny durmuşa geçirmek

Modeliň näçeräk çykdajy etjekdigini çaklamak, karar berijiniň iň amaly başarnyklaryndan biridir. "Aýda näme töleýärin?" Soraga jogap berip bilmeýän bolsaňyz, ne býudjet meýilleşdirip bilersiňiz, ne-de dogry derejäni saýlap bilersiňiz. Gowy habar, nyrhlaryň eşidilişinden has ýönekeýdigi we bu işden soň özüňiz takmynan baha berip bilersiňiz. Bu bölümde giriş / çykyş token bahalaryny nädip okamalydygyny, ýönekeý formula bilen iş prosesiniň aýlyk bahasyna baha bermegi we hakykatda çykdajylary azaldýan usullary öwrenersiňiz.

Barmagyň düzgüni: Giriş we çykyş aýratyn bahalandyrylýar

Closedapyk agramly modellerde baha gaýtadan işlenen belgileriň mukdaryna görä hasaplanýar we iki aýry zat bar:

  • Giriş nyşany (giriş): Modele iberýän tekstiňiz. Siziň haýyşyňyz, resminamalaryňyz, nusgalaryňyz.
  • Çykyş nyşany: Modeliň size berýän jogaby.

Möhüm nokat: Çykyş nyşany köplenç giriş belliginden birnäçe esse gymmat. Munuň sebäbi, önüm öndürmek üçin model üçin hasaplaýyş taýdan has gymmat. Mysal üçin, bir modelde giriş her million token üçin 3 dollar, çykyş 15 dollar bolup biler; Şonuň üçin çykyş bäş esse gymmat. Diýmek, uzyn we gereksiz jogaplar býudjetden çalt iýip biler.

Maslahat: Çykdajylary azaltmagyň iň aňsat usullaryndan biri, modelden gereksiz uzyn jogap soramazlykdyr. "Maksimum 5 makala", "ýekeje abzas", "diňe tablisany eksport etmek" ýaly çäklendirmeler hilini ýokarlandyrýar we çykyş belligini tygşytlaýar.

Häzirki bahanyň mysallary

Aşakda birnäçe modelleriň takmynan bahalary (bir million belgi üçin, ABŞ-nyň dollary). Bu gymmatlyklar, bu modulyň taýýarlanan we ýygy-ýygydan üýtgeýän döwrüne degişlidir; Takyk karar üçin üpjün edijiniň häzirki baha sahypasyny barlaň.

modeli

Tapgyr

Giriş $ / 1M

Çykyş $ / 1M

Klod Opus 4.8

güýçli

~ 5

~ 25

Klod Sonnet 5

deňagramly

~ 3

~ 15

Klod Haýku 4.5

ýeňil

~ 1

~ 5

Tablisada görkezilişi ýaly, güýçli dereje bilen ýagtylyk derejesiniň arasynda bäş esse baha tapawudy bolup biler. Şol sebäpli "ähli işewürlik üçin iň amatly model" çemeleşmesi köplenç pul ýitirmekdir. Arzan model bilen ýerine ýetirilen ýönekeý işe we güýçli modeliň kyn işine eýe bolmak, hilini ýitirmän uly tygşytlylygy üpjün edýär. Bu pikiri 7-nji we 9-njy bölümlerde çuňlaşdyrarys.

Aýlyk çykdajylary çaklamak: pleönekeý formula

Takmynan aýlyk çykdajy çaklamasy üçin şu formulany ulanyp bilersiňiz:

Aýlyk bahasy ≈ (Aýda islegleriň sany × Ortaça giriş belligi × Giriş bahasy / 1 000 000) + (Aýda islegleriň sany × Ortaça çykyş belligi × Çykyş bahasy / 1,000,000)

Geliň, bir mysal getireliň. Elektron söwda topary aýda 50 000 önüm beýany öndürýär diýeliň. Her haýyş ortaça 500 token giriş (önüm maglumatlary) iberýär we 300 token çykyş (düşündiriş) alýar. Deňagramly modelde (giriş ~ 3, çykyş ~ 15):

  • Giriş bahasy: 50,000 × 500 × 3 / 1,000,000 = 75 $
  • Çykyş bahasy: 50,000 × 300 × 15 / 1,000,000 = 225 $
  • Jemi 300 $ / aý

Aeňil modelde şol bir işi eden bolsalar (giriş ~ 1, çykyş ~ 5):

  • Giriş: 50,000 × 500 × 1 / 1,000,000 = 25 $
  • Çykyş: 50,000 × 300 × 5 / 1,000,000 = 75 $
  • Jemi 100 100 $ / aý

Şonuň üçin diňe basgançak saýlamak şol bir işi 300 dollardan 100 dollara çenli azaldyp biler. Önümiň beýany ýaly birneme ýönekeý iş üçin ýeňil model köplenç ýeterlik däl.

Üns beriň: Bu formula takmynan baha; hakyky töleg keş keşini ulanmak, gaýtadan synanyşmak we pikirleniş tertibi ýaly faktorlara görä üýtgeýär. Şeýle-de bolsa, býudjet tassyklamasyny almak ýa-da iki modeli deňeşdirmek üçin gaty gowy başlangyç. Hakyky belgini karar bermezden ozal kiçijik pilot bilen ölçemek iň gowusydyr.

Çykdajylary azaltmagyň bäş usuly

  1. Dogry derejäni saýlaň. Pleönekeý, ýeňil model. Bu tygşytlamagyň iň uly çeşmesi.
  2. Girişi has kiçi ediň. Her haýyş üçin ullakan resminamalary doldurmagyň ýerine diňe degişli bölümi iberiň (5-nji bölümdäki kontekst optimizasiýasy).
  3. Çykmagy çäklendiriň. Jogabyň uzynlygyny we görnüşini aýdyňlaşdyryň; Gereksiz uzyn jogap = gereksiz çykdajy.
  4. Keş ulanyň. Many providers allow you to cache and re-read repeated fixed inputs (e.g. the same system instruction) much cheaper. Şol bir uly görkezmäni müňlerçe gezek iberýän bolsaňyz, bu ep-esli tygşytlylygy üpjün edýär.
  5. Topary gaýtadan işlemegi ýerine ýetiriň. Gyssagly däl bolsaňyz, köp haýyşlary köp iberýän we arzanladyş bilen işleýän "partiýa" opsiýalary çykdajylary ep-esli azaldar.

Üç sany hakyky waka

1-nji waka - ädim üýtgemegi bilen tygşytlamak. Müşderi hyzmat topary, gelýän hatlaryň hemmesini iň güýçli model bilen jemleýärdi we aýlyk hasaby 900 funt sterlingdi. Jemlemek ýönekeý işdi; Balansirlenen derejä geçenlerinde, önümiň hili öňküligine galdy, ýöne kanun taslamasy 250 funt sterlinge düşdi. Tygşytlamak, dogry derejäni saýlamak bilen ýylda 7,800 dollar.

2-nji waka - Keş bilen tygşytlamak. Programma üpjünçiligi topary, her kod gözden geçirmek haýyşy bilen şol bir 8000 belgili “kodlaşdyrma standartlary” resminamasyny iberýärdi. Günde 400 haýyş × 8,000 token = uly gaýtalanýan giriş. Keş aýratynlygyny açanlarynda, bu kesgitlenen bölüm has arzan okaldy we giriş çykdajylarynyň ep-esli bölegi ýitdi.

3-nji hadysa - Çykmagy çäklendirip tygşytlamak. Marketing topary önümiň beýanyny soranlarynda, model bir wagtyň özünde uzyn, gülli abzaslar çykardy. "Iň köp 60 söz, ýekeje abzas" çäklendirmesini goşanlarynda düşündirişler has peýdaly boldy we çykyş nyşany iki esse azaldy. Hil ýokarlananda, çykdajy azaldy; win-win.

Gowşak gyssagly / güýçli teklip

Gowşak haýyş:

Bu önüm üçin maňa gowy düşündiriş ýazyň. [önüm maglumatlary]

Model islän wagty ýazyp biler; Çykyş nyşany gözegçiliksiz.

Güýçli haýyş:

Siziň roluňyz: elektron telekeçiligiň nusgawy ýazyjysy. Haryt: [MAGLUMAT]. Wezipe: Önümiň beýanyny ýazyň. Çäklendirmeler: Iň köp 60 söz, bir abzas, tehniki däl müşderilere ýüzlenýär, 2 sany peýdasy + 1 ulanylyşy bar. Gowy sypatlardan gaça duruň.

Güýçli çaltlyk hem hil, hem çykyş uzynlygyny dolandyrýar (we şonuň üçin çykdajy).

Göçürip boljak galyplar

1. Aýlyk çykdajylaryň bahasy:

Her aý [QUANTITY] haýyş edýärin. Ortaça giriş ~ [NUM] bellikleri, çykyş ~ [NUM] belgileri. Aşakdaky modelleriň ([MODEL A], [MODEL B]) aýlyk bahasyny formula bilen hasaplaň we tablisada deňeşdiriň. Giriş / çykyş bahalaryny kabul ediň [PRICES].

2-nji derejeli deňeşdirme:

Meniň borjum [TASK]. Bu iş hakykatdanam güýçli model talap edýärmi ýa-da ýeňil / deňagramly model ýeterlikmi? Hil we baha nukdaýnazaryndan baha beriň we synag synagyny geçirmegim üçin 2 derejäni teklip ediň.

3. Çykdajylary azaltmak barlagy:

Aşakdaky iş prosesinde çykdajylary azaltmagyň ýollaryny kesgitläň: [IŞLER]

4. Çykyş çäklendirmesi:

Hilini peseltmän çykyş belligini azaltmak üçin aşakdaky haýyşy täzeden ýazyň: "[PROMPT]". Uzynlygy, formaty we gereksiz gaýtalanmagy üçin optimizirläň.

Adaty ýalňyşlyklar

  • Giriş / çykyş tapawudyndan geçmek: Çykyşyň has gymmatdygyny bilmän uzyn jogaplara rugsat bermek.
  • Her iş üçin iň güýçli model: Gymmat model bilen ýönekeý iş etmek we gereksiz köp esse tölemek.
  • Çykyş uzynlygyny çykarmak: Hiç hili format ýa-da uzynlyk çäklendirmesiz modele çäksiz ýazuw rugsady bermek.
  • Keş we partiýany äsgermezlik: Gaýtalanýan girişler we gyssagly däl meseleler üçin çynlakaý tygşytlylyk mümkinçiliklerini ýitirmek.
  • Bahalaryň döwrebapdygyny pikir etmek: Köne baha tablisasyna bil baglamak we býudjeti nädogry meýilleşdirmek; bahalar ýygy-ýygydan üýtgeýär.

Gysgaça

  • Bahasy belliklere görä hasaplanýar; giriş we çykyş aýratyn bahalandyrylýar we çykyş köplenç birnäçe esse gymmat bolýar.
  • Aýlyk çykdajylary, islegleriň formula sany × ortaça belgi × bahasy bilen takmynan çaklap bilersiňiz.
  • Diňe dogry ädim saýlamak çykdajylary birnäçe esse azaldyp biler.
  • Giriş minimasiýasy, önümi çäklendirmek, keş we partiýa gaýtadan işlemek hasaby ep-esli azaldýan amaly usullardyr.

Programma meselesi

Öňki bölümde baha beren bellik bahalaryňyzy alyň. Işiňiziň aýlyk bahasyny bu bölümdäki 1-nji şablon bilen iki dürli dereje üçin hasaplaň (aýlyk çykdajylaryň bahasy). Soň bolsa, 3-nji şablon (çykdajylary azaltmak skaneri) bilen, her usulyň iş prosesine näçe tygşytlylyk getirip biljekdigini kesgitläň. Iň geljegi uly iki usuly saýlamagy we indiki aýyň býudjetine ulanmagy meýilleşdiriň.

gözegçilik sanawy

  • [] Giriş we çykyş belliginiň aýratyn bahalandyrylýandygyny we çykyşyň has gymmatdygyny bilýärin.
  • [] Simpleönekeý formula bilen iş prosesiniň aýlyk bahasyna takmynan baha berip bilerin.
  • [] Mysal bilen dogry derejäni saýlamagyň çykdajy täsirini görkezip bilerin.
  • [] Çykdajylary azaltmagyň bäş usulyny tanap bilerin we laýyk birini saýlap bilerin.
  • [] Çykyş belligini azaltmak üçin haýyşnamany täzeden ýazyp bilerin.