Aonad 6 / 10

Sonraí Anailís Céadfach

Gnóthachain:

  • Cumas cineálacha painéil céadfacha, tástáil héadónach/tuairisciúil agus iontaofacht painéil a léirmhíniú
  • Cumas achoimre ar shonraí céadfacha, eastóscadh téama agus léirmhíniú staidrimh a dhréachtú le AI
  • Cumas léirmhíniú staidrimh ar AI a bhailíochtú le sonraí painéil amh agus dearadh trialach

Tá tú sa tsaotharlann T&F le haghaidh iógart torthaí íseal-siúcra atá nuafhorbartha. Fiafraíonn an fhoireann mhargaíochta “an dtaitníonn sé le tomhaltóirí?” iarrann sé, agus iarrann an táirgeadh, "An féidir idirdhealú a dhéanamh idir é agus an táirge tagartha?" iontaigh sé. Tá foirmeacha héadónacha 9 bpointe aige líonta ag 60 painéalóir tomhaltóra, scóir QDA ó phainéal tuairisciúil 8-duine oilte, agus torthaí tástála idirdhealaithe triantáin. Na céadta sraitheanna de scóir amh in Excel, chomh maith le bosca tuairimí oscailte do gach painéalaí. Dealraíonn sé go bhfuil sé templáilte iarraidh ar chúntóir AI “achoimriú a dhéanamh ar na sonraí seo, an maith le tomhaltóirí iad?” San aonad seo, déanfaimid staidéar ar conas sonraí céadfacha a léamh i gceart, AI a úsáid le haghaidh eastóscadh achoimre agus téama, agus is tábhachtaí, léirmhíniú staidrimh AI a bhailíochtú le sonraí painéil amh agus dearadh trialach.

Cineálacha tástála céadfach: cuir an cheist cheart agus an tástáil cheart

Is é an botún is coitianta in anailís céadfach ná an cineál ceiste a chur amú leis an gcineál tástála. Tá trí mhórtheaghlach ann agus freagraíonn gach ceann acu ceist eile.

  • Tástálacha héadónacha (tionchar): "Cé mhéad a thaitin leis?" freagraíonn an cheist. Is í an uirlis chlasaiceach an scála héadónach 9 bpointe (1 = níor thaitin go mór liom, 5 = níor thaitin nó nár thaitin leis, 9 = níor thaitin sé go mór leis). Is tomhaltóirí gan oideachas iad na painéil; Is é an sprioc glacadh/rogha a thomhas. Go ginearálta, tá gá le painéal de 50-100 duine.
  • Tástálacha tuairisciúla (QDA): "Cé na gnéithe atá ag an táirge agus cén déine?" freagraíonn an cheist. Scórálann painéal oilte de 8-12 duine na tréithe a ndéanann siad cur síos orthu (m.sh. “comhsheasmhacht uachtair,” “sourness,” “blas torthaí”) ar scála déine 0-15. Ní thomhaiseann sé 'is maith', cruthaíonn sé próifílí.
  • Tástálacha idirdhealaithe: “An bhfuil an dá tháirge difriúil ó thaobh dearcadh de?” freagraíonn an cheist. Sa tástáil triantáin, tugtar trí shampla don phainéal; tá dhá cheann mar an gcéanna, tá ceann amháin difriúil, agus roghnaíonn an painéalóir an "ceann difriúil." Ideal le haghaidh tástála cibé an bhfuil athrú ar fhoirmiú faoi deara.
Leid: Sula roghnaíonn tú an triail, críochnaigh do abairt: "Ba mhaith liom a fháil amach an bhfuil ___." Má tá an bhearna "Thaitin", bain úsáid as tástáil héadónach, más "difriúil", bain úsáid as tástáil idirdhealaithe, agus má tá "láidir ina ghné", bain úsáid as tástáil thuairisciúil. Mura sonraíonn tú an cuspóir seo agus na sonraí á dtabhairt do AI, déanfar an achoimre a chumadh ar an mbealach mícheart.

Iontaofacht painéil agus dearadh trialach

Sula bhféadfaidh tú muinín a bheith agat as na scóir amh, caithfidh tú muinín a bheith agat as an bpainéal féin. Cúpla bunphrionsabal:

  • Tástáil dall: Níor cheart go mbeadh a fhios ag an bpainéalóir cén sampla é an "táirge nua" agus cé acu an "tagairt". Cuirtear samplaí i láthair le cóid randamacha 3-dhigit (m.sh. 417, 682).
  • Cúiteamh ordú cur i láthair: Tá buntáiste ginearálta ag an gcéad sampla a bhlaiseadh (claonadh an chéad sampla). Ba cheart ord an chur i láthair a chothromú/randamach i measc na bpainéalaithe.
  • Athrá: Má scórálann an painéalaí céanna an sampla céanna arís le cóid éagsúla, is féidir leat comhsheasmhacht (athráthacht) a thomhas. Sa phainéal tuairisciúil, déantar an painéalaí neamh-chomhsheasmhach a athoiliúint nó a eisiamh.
  • Seiceáil tagartha: Má chuirtear dhá shampla chomhionanna i láthair go dall agus má thugann an painéalaí scóir an-difriúil dóibh, tá amhras ann faoi shonraí an phainéileora sin.

Sampla achoimre sonraí héadónacha

Seo thíos tábla achoimre ar an tástáil héadónach do 60 painéalóir. An fhoirmle nua (cód 417) a chur i gcomparáid leis an tagairt (cód 682).

gné

Foirmle nua (417) meánlíon.

Tagairt (682) avg.

Std. diall (417)

n

Léirthuiscint ghinearálta

7.1

7.4

1.3

60

Blas/aroma

6.8

7.3

1.5

60

comhsheasmhacht

7.3

7.2

1.1

60

Dealramh

7.6

7.5

0.9

60

Rún ceannaigh (%)

58%

65%

60

Tá sé éasca breathnú ar an gcairt seo agus a rá "tá an tagairt beagán níos fearr, ach tá an difríocht beag." Ach an bhfuil meándifríocht 0.3 suntasach go staitistiúil nó torann? Seo an áit a tháirgeann AI an chuid is mó siabhránachtaí.

Achoimre, eastóscadh téama agus dréachtú léirmhínithe staidrimh le AI

Is féidir leat AI a úsáid mar luasaire ar thrí thasc: achoimrí uimhriúla a dhréachtú, téamaí a bhaint as tuairimí neamhiata, agus léirmhínithe staitistiúla a dhréachtú. Ach i ngach ceann de na trí, is dréacht é an t-aschur, ní cinneadh.

Leid chumhachtach chun téamaí a bhaint as tuairimí neamhiata:

Ról: Is anailísí céadfach tú. Anseo thíos tá tráchtanna neamhiata ó 60 tomhaltóir maidir le iógart torthaí íseal-siúcra (cód 417). Do thasc:1) Grúpáil tuairimí i 5-7 dtéama (m.sh. binneas, searbhas, uigeacht, blas na dtorthaí).2) COUNT cé mhéad trácht atá dearfach/diúltach/neodrach do gach téama agus scríobh an uimhir.3) Cuir sleachta díreacha leis, déan achoimre. NÁ déan téama nach bhfuil luaite sna tuairimí.4) NÁ TABHAIR FAOI DEARA tátail staitistiúla; Is achoimre cháilíochtúil é seo. Aschur mar thábla: | Téama | Dearfach | Diúltach | Neodrach | Ráiteas samplach | Tráchtanna:[60 trácht curtha anseo]

Anois féachaimis an difríocht idir leid lag agus láidir sa léirmhíniú staitistiúil:

PROMPT WEAK: "Déan anailís ar na sonraí céadfacha seo, inis dom an bhfuil an táirge nua níos fearr ná an tagairt." (FÉADFAIDH AI déanamh suas "tá, tá sé níos fearr" nó "tá difríocht shuntasach" gan a fhios agam an méid sampla, cineál tástála, p-luach.) PRÍOMH LÁIDIR: "Thíos tá na scóir thaitin foriomlán amh na tástála héadónach 9-pointe le 60 painéalóir (colúin 417 agus 682). Chun péireáilte t-tástáil, beidh an toradh a fhíorú an t-tástáil agus SPR. WR. Cén tástáil is cuí agus cén fáth (péireáilte nó neamhspleách) - Conas a shocraím an léiriú ar bhealach difriúil má thagann p<0.05 amach P-luach uimhriúil;

Déanann pras cumhachtach comhairleoir modh AI; Ríomhann tú an uimhir.

Tábhacht staidrimh agus bailíochtú samplach

Ligean le rá gur scríobh an achoimre AI "rátáil an táirge nua i bhfad níos ísle ná an tagairt." Ní mór duit é seo a fhíorú le sonraí amh. Feicfimid an loighic péireáilte t-tástála le ríomh simplí:

import numpy as npfrom scipy import stats# overall liking scores of 60 panelists (9-point hedonic)new = np.array([7,8,6,7,7,6,8,7, ...]) # code 417, n=60reference = np.array([7,8,7,8,7,7,8,7, ...]) # code 682, n=60# Scóráil an painéalóir céanna an dá tháirge -> péireáilte t-testit_stat, p_value = stats.ttest_rel(nua, tagairt)difference = new.mean() - reference.mean()print(f"Meandifríocht: {difríocht:.2f} scór") print(f" t = {t_stat:.2f}, p. 0.05, ciallaíonn sé "níl aon difríocht shuntasach staitistiúil."

An pointe criticiúil anseo: féadfaidh an meándifríocht 0.30 pointe a bheith neamhshuntasach le p = 0.18. Léirmhíniú é ráiteas AI go bhfuil "tagairt níos fearr" nach bhfuil tacaíocht staitistiúil aige. Agus do chinneadh á dhéanamh agat, ba cheart duit féachaint ar an p-luach, ar mhéid an tsampla, agus ar thoimhdí na tástála, ní ar an meán amháin.

Aire: Is féidir le LLManna ráitis chinntitheacha a tháirgeadh mar "p<0.05, tá an difríocht suntasach" fiú nuair nach dtugtar sonraí uimhriúla amh dóibh. Is siabhránacht é seo. Ná scríobh aon p-luachanna, tráchtanna suntasacha, nó breithiúnais “a thaitin le tomhaltóirí” isteach sa tuarascáil bunaithe ar théacs an AI; athríomh i do bhogearraí staidrimh féin (R, SPSS, JASP, Python).

cás mion

Ag cuideachta dí, tá an fhoireann céadfach ag déanamh meastóireachta ar fhoirmle nua a laghdaíonn an siúcra i sú oráiste faoi 15%. Reáchtálann an fhoireann tástáil héadónach 9-pointe le 90 tomhaltóir agus cothaíonn sé an pictiúr amh don AI chun achoimre a dhéanamh ar na torthaí. Deir tuarascáil AI "gur thaitin an fhoirmle nua i bhfad níos lú (p<0.05)" agus socraíonn an fhoireann an fhoirmle a scrapeadh. Athsheolaíonn innealtóir sinsearach na sonraí amh in R: fíordifríocht 7.0 vs 6.8, p = 0.31 — mar sin níl aon difríocht shuntasach ann. Thairis sin, tugtar faoi deara nach bhfuil an t-ord cur i láthair cothrom, déantar an fhoirmle nua a bhlaiseadh i gcónaí sa dara háit agus bíonn tionchar ag tuirse blas (oiriúnú). Rinne an AI araon an p-luach agus níor thug siad faoi deara an locht ar dhearadh na trialach. Déanann an fhoireann an tástáil arís leis an dearadh cothrom, agus glactar leis an bhfoirmle íseal-siúcra. Shábháil táirge maith ó bheith á chaitheamh amach ag iompú ar shonraí amh.

Botúin choitianta

  • Tástáil héadónach mearbhall (likeing) agus tástáil thuairisciúil (próifíl); Ní chiallaíonn sé "scór ard sourness" a rá nach dtaitnítear leis.
  • An ráiteas luach-p nó “difríocht shuntasach” AI-concocted a chur isteach sa tuarascáil gan an ríomh amh a dhéanamh.
  • Neamhaird a thabhairt ar mhéid an tsampla; Ag ginearálú "Thaitin sé le tomhaltóirí" ó thástáil héadónach 12-duine.
  • Gan an t-ord cur i láthair a chothromú agus breathnú ar an gclaonadh tuirse den chéad sampla/blas.
  • Ag ligean do phainéileoirí fios a bheith acu cén sampla é an "táirge nua" gan tástáil dall.
  • Teip a chinntiú go ndéanann AI achoimre ar thuairimí neamhiata i gcoinne sleachta/téamaí comhdhéanta a ghiniúint.
  • Gach scóir a ualú go cothrom gan iontaofacht an phainéil a sheiceáil (comhsheasmhacht dhúblach dall).

Go hachomair

  • Sa tástáil céadfach, déan an cheist a chinneadh ar dtús: bain úsáid as tástáil héadónach le haghaidh blas, triail triantáin le haghaidh difríochta, tástáil thuairisciúil (QDA) don phróifíl.
  • Cuir muinín sa phainéal sula n-iontaíonn tú na scóir amh: seiceáil an iontaofacht le tástáil dall, cothromaíocht ordú cur i láthair, athsheinm agus dúbailt dall.
  • Úsáid AI le haghaidh achoimre uimhriúil, eastóscadh téama ó thuairimí neamhiata, agus comhairliúchán ar mhodhanna staidrimh; ach is dréacht é an t-aschur.
  • Ní hionann meándifríocht agus tábhacht staitistiúil; D’fhéadfadh difríochtaí beaga meánacha a bheith neamhshuntasach le p-luach.
  • Is féidir le AI léiriú luach-p, suntas, agus siabhránacht an bhreithiúnais “ordóga suas” a tháirgeadh; Déan gach toradh staidrimh a athríomh le sonraí amh i do bhogearraí féin.
  • Cinneadh deiridh táirge/foirmle; Déantar staitisticí bailíochtaithe, dearadh trialach láidir, agus iontaofacht painéil a mheas le chéile, nach bhfuil bunaithe ar théacs AI.

Tasc feidhmchláir

Dear tástáil héadónach 9 bpointe agus tástáil triantáin do 40-60 painéalóir ar tháirge féinstaidéarach nó hipitéiseach (m.sh., anraith salainn laghdaithe, císte saor ó ghlútan). Scríobh amach do dhearadh turgnaimh: cé mhéad painéalóir, códú dall, plean comhardaithe ordú cur i láthair, agus cé acu an mbainfidh tú úsáid as dúblaigh dalla. Cruthaigh tábla sonraí amh réalaíoch (20 ró ar a laghad) agus tabhair dhá leid dhifriúla don AI: (1) eastóscadh téama ó thuairimí neamhiata, (2) comhairle maidir le modh staidrimh (iarr go sainráite gan an p-luach a dhéanamh suas). Ansin rith an t-tástáil péireáilte féin i Python/R/JASP agus cuir i gcomparáid é le léirmhíniú AI. I nóta aon leathanach: Mínigh cé acu de ráitis AI a dheimhnigh tú, ar dhiúltaigh tú iad le sonraí amh, agus ar ar bhunaigh tú do chinneadh táirge deiridh. I do mheamram, déan cur síos ar bhaol claonta amháin ar a laghad i do dhearadh trialach agus ar an gcaoi ar laghdaigh tú é.