Üksus 6 / 10

Hinnakujundusloogika: sümboolne ökonoomsus ja kulu-kvaliteedi tasakaal

Kasu:

  • Võimalus lugeda sisend-/väljundmärke hinnakujundust ja arveartikleid
  • Võimalus hinnata umbkaudse valemiga töövoo igakuist maksumust
  • Kulude vähendamise meetodite, nagu vahemällu salvestamine, partii töötlemine ja mudeli lavastamine, rakendamine

Võimalus hinnata, kui palju mudel maksab, on otsustaja üks praktilisemaid oskusi. "Mida ma igakuiselt maksan?" Kui te ei saa küsimusele vastata, ei saa te eelarvet planeerida ega õiget taset valida. Hea uudis on see, et hinnakujundus on lihtsam, kui see kõlab, ja kui olete sellest aru saanud, saate ise ligikaudse hinnangu teha. Selles üksuses saate teada, kuidas lugeda sisend-/väljundtunnuste hindu, hinnata lihtsa valemi abil töövoo igakuist maksumust ja meetodeid, mis tegelikult kulusid vähendavad.

Rusikareegel: sisend ja väljund on hinnas eraldi

Kinnise kaaluga mudelites arvutatakse hind töödeldud žetoonide hulga põhjal ja seal on kaks eraldi elementi:

  • Sisendmärk (sisend): tekst, mille saadate mudelile. Teie viip, teie dokumendid, teie näidised.
  • Väljundmärk: vastus, mille mudel teile annab.

Kriitiline punkt: väljundmärk on sageli mitu korda kallim kui sisendmärk. Seda seetõttu, et väljundi tootmine on mudelile arvutuslikult kulukam. Näiteks ühes mudelis võib sisend olla 3 dollarit miljoni märgi kohta, samas kui väljund võib olla 15 dollarit; Seega on toodang viis korda kallim. See tähendab, et pikad ja mittevajalikud vastused võivad eelarve kiiresti ära süüa.

Näpunäide. Üks lihtsamaid viise kulude vähendamiseks on mitte küsida mudelilt tarbetult pikki vastuseid. Sellised piirangud nagu "maksimaalselt 5 artiklit", "üks lõik", "ekspordi ainult tabel" tõstavad kvaliteeti ja salvestavad väljundmärgi.

Praeguse hinna näited

Allpool on toodud mitme mudeli ligikaudsed hinnad (miljoni märgi kohta, USA dollarit). Need väärtused kuuluvad selle mooduli ettevalmistamise perioodi ja muutuvad sageli; Täpse otsuse saamiseks vaadake teenusepakkuja praegust hinnalehte.

mudel

Lava

Sisend $/1M

Väljund $/1M

Claude Opus 4.8

tugev

~5

~25

Claude'i sonett 5

tasakaalustatud

~3

~15

Claude Haiku 4.5

kergekaaluline

~1

~5

Nagu tabelist näha, võib tugeva astme ja kerge hinnavahe olla kuni viis korda. Seetõttu on "kõigile ettevõtetele sobivaim mudel" sageli raha raiskamine. Kui lihtsa töö teeb ära odav mudel ja raske töö võimsa mudeliga, säästate palju ilma kvaliteeti kaotamata. Süvendame seda ideed 7. ja 9. üksuses.

Igakuise kulu prognoosimine: lihtne valem

Ligikaudse igakuise kuluhinnangu saamiseks võite kasutada järgmist valemit:

Kuu kulu ≈ (päringute arv kuus × keskmine sisendtunnus × sisendhind / 1 000 000)+ (päringute arv kuus × keskmine väljundmärk × väljundhind / 1 000 000)

Toome näite. Oletame, et e-kaubanduse meeskond toodab 50 000 tootekirjeldust kuus. Iga päring saadab keskmiselt 500 sisendimärki (tooteteave) ja saab 300 väljundmärki (kirjeldus). Tasakaalustatud mudelis (sisend ~3, väljund ~15):

  • Sisendkulu: 50 000 × 500 × 3 / 1 000 000 = 75 dollarit
  • Väljundmaksumus: 50 000 × 300 × 15 / 1 000 000 = 225 dollarit
  • Kokku ≈ 300 dollarit kuus

Kui nad tegid sama tööd kerge mudeliga (sisend ~1, väljund ~5):

  • Sisend: 50 000 × 500 × 1 / 1 000 000 = 25 dollarit
  • Väljund: 50 000 × 300 × 5 / 1 000 000 = 75 dollarit
  • Kokku ≈ 100 dollarit kuus

Nii et lihtsalt lava valimine võib vähendada sama tööd 300 dollarilt 100 dollarile. Suhteliselt lihtsa ülesande, näiteks tootekirjelduse jaoks on kerge mudel sageli enam kui piisav.

Ettevaatust! See valem on ligikaudne hinnang; tegelik arveldus sõltub sellistest teguritest nagu vahemälu kasutamine, korduskatsed ja arutlusrežiim. Siiski on see väga hea algus eelarve kinnituse saamiseks või kahe mudeli võrdlemiseks. Enne otsuse tegemist on kõige parem mõõta tegelikku arvu väikese piloodiga.

Viis meetodit kulude vähendamiseks

  1. Valige õige tase. Lihtne, kerge mudel. See on ainus suurim säästuallikas.
  2. Muutke sisend väiksemaks. Selle asemel, et täita iga päringu jaoks tohutuid dokumente, saatke ainult vastav jaotis (konteksti optimeerimine üksuses 5).
  3. Piirata väljundit. Täpsustage vastuse pikkus ja vorming; Tarbetult pikk vastus = tarbetu kulu.
  4. Kasutage vahemällu salvestamist. Many providers allow you to cache and re-read repeated fixed inputs (e.g. the same system instruction) much cheaper. See annab märkimisväärse kokkuhoiu, kui saadate sama mahuka juhise tuhandeid kordi.
  5. Tehke partii töötlemine. Kui te ei kiirusta, vähendavad "partii" valikud, mis saadavad palju taotlusi hulgi ja töötlevad neid allahindlusega, kulusid oluliselt.

Kolm realistlikku juhtumit

Juhtum 1 – kokkuhoid astmelise muutusega. Klienditeenindusmeeskond tegi kõigist sissetulevatest meilidest kokkuvõtte kõige tugevama mudeliga ja nende igakuine arve oli ~900 dollarit. Kokkuvõtete tegemine oli lihtne ülesanne; Kui nad liikusid tasakaalustatud tasemele, jäi väljundkvaliteet peaaegu samaks, kuid arve langes ~ 250 dollarini. Säästke ~7800 dollarit aastas, valides lihtsalt õige astme.

Juhtum 2 – salvestamine vahemäluga. Tarkvarameeskond saatis iga koodiülevaatuse taotlusega sama 8000 märgiga "kodeerimisstandardi" dokumendi. 400 päringut päevas × 8000 märki = suur korduv sisestus. Kui nad vahemälu funktsiooni sisse lülitasid, hakati seda fikseeritud partitsiooni palju odavamalt lugema ja märkimisväärne osa sisendkuludest kadus.

Juhtum 3 – kokkuhoid toodangu piiramisega. Kui turundusmeeskond küsis tootekirjeldust, tootis mudel korraga pikki lillelisi lõike. Kui nad lisasid piirangu "maksimaalselt 60 sõna, üks lõik", muutusid selgitused kasulikumaks ja väljundmärki vähendati poole võrra. Kuigi kvaliteet tõusis, vähenesid kulud; win-win.

Nõrk viip / Tugev viip

Nõrk viip:

Kirjutage mulle selle toote kohta ilus kirjeldus. [tooteteave]

Modell võib kirjutada nii kaua, kui ta tahab; Väljundmärk on kontrollimatu.

Võimas viip:

Sinu roll: e-kaubanduse copywriter. Toode: [TEAVE]. Ülesanne: Kirjutage tootekirjeldus. Piirangud: maksimaalselt 60 sõna, üks lõik, mittetehnilistele klientidele suunatud, sisaldab 2 eelist + 1 kasutusjuhtum. Vältige väljamõeldud omadussõnu.

Võimas viip kontrollib nii kvaliteeti kui ka väljundi pikkust (ja seega ka kulusid).

Kopeeritavad mallid

1. Igakuine kuluprognoos:

Teen [QUANTITY] taotlust kuus. Keskmine sisend ~[NUM] märki, väljund ~[NUM] märki. Arvutage järgmiste mudelite ([MUDEL A], [MUDEL B]) igakuine kulu valemiga ja võrrelge tabelis. Aktsepteerige sisend-/väljundhinnad [PRICES].

2. taseme võrdlus:

Minu kohustus [ÜLESANNE]. Kas selleks tööks on tõesti vaja võimsat mudelit või piisab kergest/tasakaalustatud mudelist? Hinnake kvaliteeti ja kulusid ning soovitage mulle piloottestimiseks 2 taset.

3. Kulude vähendamise sõeluuring:

Tehke kindlaks võimalused kulude vähendamiseks järgmises töövoos: [WORKFLOW]. Kirjutage iga kaskaadi, sisendi vähendamise, väljundi seotuse, vahemälu ja partiitöötluse päiste teostatavus ja hinnanguline kokkuhoid.

4. Väljundi piirang:

Kirjutage järgmine viip ümber, et vähendada väljundmärki ilma kvaliteeti vähendamata: "[VIIRA]". Optimeerige pikkuse, vormingu ja tarbetute korduste jaoks.

Levinud vead

  • Sisend/väljundi erinevuse vahelejätmine: pikkade vastuste lubamine teadmata, et väljund on palju kallim.
  • Kõige võimsam mudel igaks tööks: Lihtne töö tegemine kalli mudeliga ja kordades asjatult rohkem tasumine.
  • Väljundi pikkuse vabastamine: mudelile piiramatu kirjutamisloa andmine ilma vormingu- või pikkusepiiranguid kehtestamata.
  • Vahemälu ja partii ignoreerimine: puuduvad tõsised säästuvõimalused korduvate sisendite ja mittekiireloomuliste toimingute jaoks.
  • Mõeldes, et hinnad on ajakohased: Vanale hinnatabelile tuginemine ja eelarve valesti planeerimine; hinnad muutuvad sageli.

Kokkuvõttes

  • Hind arvutatakse žetoonide alusel; sisend ja väljund hinnatakse eraldi ning toodang on sageli kordades kallim.
  • Saate ligikaudselt hinnata igakuist maksumust valemiga taotluste arv × keskmine tunnus × hind.
  • Ainuüksi õige sammu valik võib kulusid mitu korda vähendada.
  • Sisestuse minimeerimine, väljundi piiramine, vahemällu salvestamine ja partii töötlemine on praktilised meetodid, mis vähendavad oluliselt arvet.

Rakenduse ülesanne

Hankige eelmises ühikus hinnatud märgi väärtused. Laske oma ettevõtte igakuine kulu arvutada kahe erineva taseme jaoks selle üksuse malliga 1 (kuine kuluprognoos). Seejärel tehke 3. malli (kulude vähendamise skannimine) abil järeldus, kui palju kokkuhoid iga meetod teie töövoogu võib tuua. Plaanige valida kaks kõige paljutõotavamat meetodit ja rakendada need oma järgmise kuu eelarves.

kontrollnimekiri

  • [ ] Tean, et sisend- ja väljundmärk on eraldi hinnas ja väljund on kallim.
  • [ ] Saan umbkaudselt hinnata töövoo igakuist maksumust lihtsa valemiga.
  • [ ] Saan näite abil näidata õige taseme valimise mõju kuludele.
  • [ ] Tunnen ära viis kulude vähendamise meetodit ja valin sobiva.
  • [ ] Saan väljundmärgi vähendamiseks viipa ümber kirjutada.