Aonad 7 / 11

Ualaí Oibre Baisc agus Asincrónacha

Gnóthachain:

  • Cinneann sé na hualaí oibre a bhfuil baiscphróiseáil oiriúnach dóibh
  • Tuigeann sé an comhbhabhtáil costais/folais idir próiseáil shioncrónach, asincrónach agus baisc-phróiseáil
  • Dearann sreabhadh oibre baisc láidir a mheaitseálann custom_id le torthaí

Díríonn an chuid is mó de chomhtháthú LLM ar chásanna “beo” ina bhfuil úsáideoir ag fanacht le freagra os comhair scáileáin. Ach níl formhór na n-ualaí oibre gairmiúla beo i ndáiríre: na mílte doiciméad a chlibeáil thar oíche, tacar sonraí iomlán a achoimriú, taifeadtaí glaonna iomlána a rangú sa chartlann. Sna cúrsaí seo, níl aon duine ag súil le freagra láithreach; Is é an rud is tábhachtaí ná an post a chríochnú go saor agus go hiontaofa. Baineann Baisc go díreach leis na hualaí oibre seo. San aonad seo, foghlaimeoidh tú an difríocht idir próiseáil shioncrónach, asincrónach agus baisc, nuair is é baisce an rogha ceart, agus sreabhadh láidir a mheaitseálann go muiníneach custom_id agus torthaí.

Trí Mhodh Oibre

mód

Conas a oibríonn sé

moill

Costas tipiciúil

post oiriúnach

sioncronach

Déanann tú iarratas agus fanann tú leis an bhfreagra

soicind

Caighdeán

Comhrá beo, cúntóir meandarach

asincrónach

Cuireann tú an post i scuaine agus cuirfear ar an eolas tú nuair a bheidh sé críochnaithe.

Soicind – nóiméid

Caighdeán

Tascanna cúlra, céimeanna uathoibrithe

Baisc

Seoltar na mílte iarratas i bpacáiste amháin, faigheann sé na torthaí ansin

Nóiméad - uaireanta

De ghnáth lascainithe

Poist ard-toirte, moille-fhulangacha

Is éard atá i gceist le baiscphróiseáil: seolann tú na céadta/míle iarratas mar “phost” amháin chuig an soláthraí; Próiseálann an soláthraí iad ar a luas féin agus cuireann sé na torthaí ar fad ar ais ar an mórchóir nuair a bhíonn siad críochnaithe. Mar chúiteamh faigheann tú dhá rud: (1) costas aonaid níos ísle go ginearálta, (2) an cumas chun líon ard a bhogadh gan a bheith ag déileáil le teorainneacha luais. Is é an praghas ná nach dtagann na torthaí láithreach, ach tar éis roinnt ama.

Cathain a Baisc, Nuair Nach?

Tagann an cinneadh síos go dtí ceist amháin: An bhfuil an t-úsáideoir ag fanacht leis an toradh anois?

  • Ní féidir, is féidir liom a shealbhú → iarrthóir baisc. Clibeáil oíche, achoimriú baisc, aicmiú cartlainne, saibhriú sonraí, cur i gcrích meastóireachta (eval).
  • Sea, ag fanacht ar an scáileán → sioncrónú. Comhrá beo, comhairle láithreach, cabhair agus foirmeacha á líonadh.
Leid: Is féidir le dhá mhodh a bheith ann sa táirge céanna. Oibríonn an t-úsáideoir go sioncronach i gcomhrá beo; San oíche, tugann tú comhráite uile an lae sin don bhaisc le haghaidh anailíse cáilíochta. Is é an chéad chinneadh de chuid na hailtireachta "riachtanas maireachtála" a scaradh ó "riachtanas comhchoiteann".

Anatamaíocht Shreabhadh Baisc Láidir

Is é an riail theicniúil is tábhachtaí maidir le próiseáil bhaisc ná meaitseáil torthaí.

  1. Tabhair `id shaincheaptha' do gach iarratas. Seo d’aitheantas ginte a shainaithníonn an t-iarratas (m.sh. sonrasc-2026-07-18-000431).
  2. Cuir isteach an post. Téann gach iarratas in aon phacáiste amháin; gach ceann lena custom_id féin.
  3. Poll an scéal. Iarrann tú stádas ag eatraimh go dtí go bhfuil an post "déanta."
  4. Meaitseáil na torthaí le `custom_id`. Féadfar na torthaí a chur ar ais in ord eile seachas an t-ordú tíolactha; mar sin ní mheaitseálann sé de réir suímh ach de réir an custom_id a iompraíonn gach toradh.
  5. Seiceáil cineál gach toraidh. D’fhéadfadh go n-éireodh le hiarratas amháin, d’fhéadfadh go dteipfeadh ar cheann amháin, d’fhéadfadh go rachadh ceann in éag. Próiseas bunaithe ar rath/teip.

{ "iarratais": [ { "custom_id": "sonrasc-000431", "params": { "múnla": "claude-haiku-4-5", "max_tokens": 128, "system": "Aicmigh sonrasc. Seol ar ais JSON amháin.", "messages": [{ "ról": "úsáideoir": "{} úsáideoir", "{}: " úsáideoir": "{} úsáideoir", "{}} ! } ]}

Aire: Is é an botún is mó sa bhaisceáil torthaí a mheaitseáil bunaithe ar ord aighneachta. Níl an scuaine caomhnaithe. Gan custom_id ní féidir a fhios go muiníneach cén toradh a bhaineann leis an doiciméad - bíonn sonraí mícheart mar thoradh ar mheaitseáil mhícheart.

Teimpléid Inchóipeála

# riail giniúna custom_id (uathúil agus inrianaithe)Formáid: <isture>-<date>- <seicheamh>. Sampla: iarratas-20260718-000431Rule: riamh arís san obair; Leabaigh an t-aitheantas taifid acmhainne ann.

# Cárta poist baisc (teimpléad sceidealaithe)Ainm an phoist: .............Líon taifead: .............Samhail: ............. (post simplí → múnla tapa)Max_tokens in aghaidh an iarratais: ............. Caoinfhulaingt ama seachadta a bhfuiltear ag súil leis: ......... uair an chloig Eochair meaitseála an toraidh: saincheaptha_idI gcás earráide: bain triail eile as / scuaine / tuairisc

# Leid iarratas amháin i mbaisc (gearr agus scéimreach)Rangaigh an doiciméad seo. Níl le déanamh ach an JSON seo a thabhairt ar ais, ag trácht ar:{ "category":"...","práinne":"íseal|mheán|ard"}Cáipéis:" ""{{document}}""""

# Result processing pseudo-code do gach toradh: if result.status == "rath": taifead = find(custom_id) save(record, result.output) a mhalairt: add_to_fail(custom_id, result.error) # then try again

Leid lag / Leid láidir (dearadh poist bhaisc)

# WEAK (dearadh leochaileach)Seol 10,000 doiciméad in ord leis an múnla láidir, ach amháin na torthaí ar ais san ord a thagann siad.

# STRONG (dearadh durable) Seol 10,000 doiciméad i mbaisc amháin le múnla tapa. Tabhair custom_id uathúil do gach doiciméad ina bhfuil an t-aitheantas foinse-taifid. Meaitseáil na torthaí leis an custom_id; scuaine na cinn ar theip orthu agus bain triail eile as.Rith i bhfuinneog na hoíche; Caoinfhulaingt seachadta 6 uair an chloig.

Leagan cumhachtach; Réamhshainíonn sé roghnú múnla, eochair mheaitseála, láimhseáil earráidí agus uainiú. Is é seo an difríocht i bpróiseáil daingean na mílte taifead.

Trí Chás Mini

Cás 1 - Clibeáil oíche. Dhéanfadh foireann ríomhthráchtála 200,000 léirmheas táirge a shórtáil ina gclibeanna meon. Bhí sruthú beo sioncrónach faoi réir teorainneacha luais agus bhí sé costasach. Rinne siad an obair isteach san oíche mar bhaisc le múnla tapa; Thit an costas aonaid, bhí an sraith iomlán réidh ar maidin, agus ní raibh aon fhadhbanna teorann luais.

Cás 2 — Mearbhall ordú. Rinne foireann taighde 5,000 alt achomair, ach scríobh siad na torthaí i gcomhaid san ord ar tháinig siad. Toisc gur cuireadh na torthaí ar ais in ord difriúil, bhí thart ar 900 den 5,000 coimriú nasctha leis an alt mícheart. Rinne siad é a athmhapáil go custom_id; fadhb réitithe agus rinneadh riail bhuan don eispéireas seo: "Custom_id i mbaisc i gcónaí."

Cás 3 - Fuireachas beo sa mhód mícheart. Rinne foireann tacaíochta iarracht na freagraí beo a raibh an t-úsáideoir ag súil leo ar an scáileán a thabhairt; Tréigthe na húsáideoirí toisc gur tháinig na torthaí nóiméad níos déanaí. Bhog siad an post beo ar ais go dtí sioncrónaithe, rud a fhágann nach raibh ach an anailís cháilíochta oíche sa bhaisc. Ceacht: ní le haghaidh fuireachas beo an bhaisc.

Botúin choitianta

  • Torthaí a mheaitseáil de réir suímh: Ní choinnítear an t-ordú; Úsáid custom_id.
  • Post beo a aistriú chuig baisc: Ní féidir leis an úsáideoir fanacht ar feadh nóiméid; is le haghaidh post moille-fhulangach atá an bhaisc.
  • Gan láimhseáil a dhéanamh ar chásanna earráide: D’fhéadfadh roinnt iarratas a theip ar ais / a bheith imithe in éag; Cuir i scuaine ar leith é agus bain triail eile as.
  • Úsáid múnla láidir Reflex i mbaisc: Is é múnla tapa + bhaisc an meascán is saoire i bpoist shimplí.
  • Gan a dhéanamh custom_id inrianaithe: Mura bhfuil aon taifead foinse leabaithe san ID, bíonn sé deacair an toradh a nascadh ar ais.
  • Dearmad ar an scéal a scrúdú: Ag súil le torthaí sula mbeidh an jab críochnaithe; Seiceáil an stádas críochnaithe.

Níos doimhne: Baisc Monatóireachta agus Teip Pháirteach a Bhainistiú

Is í an ghné is aibí de phróiseáil bhaisc ná go n-éilíonn sé meon difriúil ná glaonna aonair: is "próiseas", ní "imeacht" é jab baisc. Is leochaileach é glacadh leis go n-éireoidh leis na mílte iarratas; Glacann dearadh réalaíoch teip pháirteach ón tús. Féadfaidh stádas gach toraidh a bheith difriúil: rathúil, teipthe (m.sh. ionchur neamhbhailí), curtha ar ceal nó imithe in éag. Próiseálann sreabhadh láidir stádas gach toraidh ar leithligh de réir mar a théann sé tríd, cuireann sé na teipeanna i "scuaine atriail" ar leith agus ritheann an scuaine sin ar leithligh.

Is é an dara cleachtas ná dearadh a dhéanamh le haghaidh neamhláithreachta (nach ndéanann rith an jab céanna faoi dhó aon dochar). Má chuirtear isteach ar bhaisc agus má atosaíonn tú é, níor cheart duit na taifid atá próiseáilte cheana féin a athphróiseáil agus a scríobh faoi dhó. Oibríonn ceangal an custom_id le do thaifead foinse anseo freisin: "an bhfuil an taifead seo próiseáilte cheana?" roimh an toradh a shábháil. Coisceann seiceáil clóscríobh dúbailte.

Is é an tríú pointe ná sruthanna beo a thuisleadh le baisc. Tá toisí beo agus baisc ag roinnt post: nuair a lódálann an t-úsáideoir doiciméad, tugann tú réamhachoimre tapa dóibh (sioncrónach), agus déanann tú an doiciméad céanna a athphróiseáil le haghaidh anailíse níos doimhne ar an oíche (baisc). Má scartar an dá mhodh go comhfhiosach, uasmhéadaítear taithí agus costas an úsáideora.

Ar deireadh, is bealach é baisceáil freisin chun déileáil le teorainneacha luais (aonad 8). Nuair a sheoltar líon ard i sreabhadh beo sioncrónach táirgeann tairiseach 429, agus cuireann sé an méid céanna chuig aistrithe baisc teorainn brú chuig sceidealú an tsoláthraí féin agus déanann sé an post níos intuartha.

Go hachomair

Go ginearálta, is modh níos saoire agus níos láidre í an phróiseáil bhaisc le haghaidh ualaí oibre folaigh-fhulangacha agus ardtoirte. Ba é a chinneadh "an bhfuil an t-úsáideoir ag fanacht leis an toradh anois?" chinneann an cheist. Is é an riail theicniúil is tábhachtaí ná custom_id uathúil a thabhairt do gach iarratas, torthaí a mheaitseáil le haitheantas seachas le hionad, agus rath / teip gach toraidh a chóireáil ar leithligh.

Tasc feidhmchláir

Roghnaigh post ardmhéid (m.sh. rangú cartlainne). (1) Déan cinneadh cé acu an saothar beo nó comhchoiteann atá i gceist agus tabhair údar leis. (2) Dear formáid custom_id (cuir an taifead acmhainne san áireamh). (3) Líon amach an cárta poist bhaisc (múnla, max_tokens, caoinfhulaingt, beartas earráide). (4) Scríobh an toradh pseudocode próiseála chun iarratais ar theip orthu a chur san áireamh.

seicliosta

  • [ ] Is féidir liom modhanna sioncronacha, asincrónacha agus baisceanna a idirdhealú ar an ais costais/moill.
  • [ ] Is féidir liom cinneadh a dhéanamh an bhfuil post oiriúnach do bhaisc nó nach bhfuil tríd an cheist cheart a chur.
  • [ ] Tugaim custom_id uathúil do gach iarratas agus meaitseálann mé na torthaí de réir aitheantais.
  • [ ] Is féidir liom torthaí teipthe/éagtha a láimhseáil ar leithligh.
  • [ ] Tá a fhios agam na buntáistí a bhaineann le múnla tapa a roghnú i bpoist shimplí.