Eining 6 / 10

Umhverfisgögn og vöktunargreining

Hagnaður:

  • Geta til að beita tímaröðum, þröskuldum yfir og skynjara gæðaeftirlit (QA/QC) hugtök
  • Geta til að búa til fráviksskönnun, þróunarsamantekt og stefnu um vantar gögn með gervigreind
  • Geta til að sannreyna umfram og frávik sem gervigreind bendir á með hráum gögnum og kvörðun

Þú ert vaktaverkfræðingur hjá skólphreinsistöð skipulagðs iðnaðarsvæðis. Stöðug eftirlitsstöð staðsett við úttakið skráir uppleyst súrefni (DO), pH, leiðni og efnafræðileg súrefnisþörf (COD) á 15 mínútna fresti. Klukkan 03:40 á morgnana hoppar COD gildið á SCADA skjánum í 1.240 mg/L og kerfið kallar upp viðvörun. Útskriftarmörk 250 mg/L. Spurningin sem þú þarft að spyrja áður en þú lætir er: Er þetta raunverulegt mengunaratvik eða er þetta skynjaraupptaka? Í þessari einingu munt þú læra hvernig á að nota tungumálalíkan (LLM) sem „fyrsta lestraraðstoðarmann“ til að skanna tímaraðargögn, merkja frávik og búa til þróunarsamantektir; En við erum að ræða hvers vegna hann mun aldrei eftirláta henni lokaákvörðunina.

Líffærafræði stöðugra eftirlitsgagna

Umhverfisvöktunargögn eru tímaröð sem safnað er með reglulegu millibili. Hver mælipunktur ber tímastimpil, gildi og helst gæðafána. Til að skilja hrá gögn verður þú að greina þrjú hugtök:

  • Stefna: Langtímaþróun (t.d. árstíðabundin aukning á leiðni).
  • Árstíðabundin/hringrás: Mynstur sem endurtaka sig yfir daginn eða árið (t.d. hækkun á DO með ljóstillífun á daginn).
  • Frávik: Eintölu eða skammtímagildi sem víkja tölfræðilega frá væntanlegu mynstri.

Parameter

Dæmigert vöktunarsvið

Sýnamörk (losun)

Algengt skynjaravandamál

pH

1-5 mín

6-9 (einingalaust)

Tilvísun rafskautaskipti

Uppleyst súrefni (DO)

5-15 mín

≥ 5 mg/L (móttökuefni)

Himnufóstur (biofouling)

leiðni

5-15 mín

Flokksháð, µS/cm

Kvörðunarsvif

COD (samfelldur greiningartæki)

15-60 mín

250mg/L

Hvarfefnisleysið, stífla

PM10 (loft)

1 klst

50 µg/m³ (24 klst.)

Raki/þéttingaráhrif

Af hverju eru QA/QC fánar mikilvægar?

QA/QC (gæðatrygging / gæðaeftirlit) snýst um að festa traustmerki við hverja mælingu. Jafnvel þótt gildi virðist tölfræðilega vera „ofskot“, er það ógilt ef það var tekið fyrir utan kvörðunargluggann eða ef skynjarinn er í viðhaldi. Algengar fánakóðar:

Merking fána----- ------------------------------------G Gott — gildar, viðurkenndar mælingar. Grunur — vafasamur, sannprófun krafist

Ábending: Opnaðu alltaf kvörðunar- og viðhaldsskrárnar áður en farið er í greiningu á yfirbreiðslu. Ef COD stökk klukkan 03:40 fellur saman við sjálfvirka kvörðun yfir nótt eða breytingu á hvarfefni, er þetta „C“ fánagögn; Það er ekki viðfangsefni fyrir viðvörun, heldur fyrir hreinsun gagna.

Fráviksskönnun og þróunarsamantekt með gervigreind

Þú getur notað LLM til að fara fljótt yfir gögn í töfluformi, flaggamynstur sem mannsaugað gæti misst af og flokkað upphafstilgátur. Mikilvægi punkturinn: Að gefa líkaninu hrá gögnin, einingar og takmörk saman og biðja um sannanlegar athuganir út frá því.

VEIK boð: "Er vandamál með þessi vatnsgæðagögn?" STERK KVÆÐING: "Hér fyrir neðan eru 15 mínútur af vöktunargögnum frá frárennslisstað frárennslis (dálkar: tími, COD [mg/L], leiðni [µS/cm], pH, QA fána). Losunar COD mörk eru 250 mg/L, pH bil 6-9. Verkefni þitt: 1) Listaðu upp tímastimpla með mörkum með 'goodg' aðskildum línum með 'Goodg' línum. C/M/S fánar í sérstakan 'staðfestingarkröfu' lista 3) Tilgreindu fyrir hverja yfirskot hvort það er eintölu stökk (ein lína) eða samfelld hækkun (>= 3 línur í röð staðfest með hráum gögnum' í staðinn."

Kraftmikil hvatning bindur líkanið við áþreifanlega aðferð, greinir fánana og inniheldur skýra „ef þú ert ekki viss, ekki segja“ leiðbeiningar til að takmarka ofskynjanir (tilbúna túlkun).

Varúð: LLM getur gert villur í samanburði á tölulegum þröskuldum; Getur rangmerkt 248 mg/L sem „yfir“ eða 252 mg/L sem „innan marka“. Staðfestu aftur ALLT umfram líkönin, annað hvort sjónrænt úr hrátöflunni eða með formúlu (t.d. gildi > 250). Líkanið skannar; Þú ræður takmörkunum.

Vantar gagnastefnu (framreiknun)

Skynjarar stíflast, rafmagn fer af, samskipti rofna. Hvernig þú fyllir inn gögn sem vantar hefur bein áhrif á þróun þína og greiningu á yfirburðum. Fölsk útreikningur getur "búið til" yfirskot sem er ekki til eða falið raunverulegt yfirskot.

flytja inn panda sem pdimport numpy sem np# 15 mínútna COD röð; -999 tækiskóði "engin gögn" "flag": ["G", "G", "M", "M", "G", "S", "G", "G"],})# 1) Umbreyta tækiskóða í raunverulegt vantar valuedf.loc[df["koi"] == -999, "koi"] = np.nan# 2) SHORT skref bilun (<); fána imputationgap = df["koi"].isna()df["koi_full"] = df["koi"].interpolate(limit=2)df.loc[gap & df["koi_full"].notna(), "flag"] = "E" # Áætlað# 3) Limitsignations df[(df["koi_full"] > 250) & (df["flag"] == "G")]print(asyms[["ts", "koi_full", "flag"]])

Í þessari nálgun eru stutt eyður fyllt, en fylltu gildin eru merkt með E og ákvörðun um yfirskot er aðeins tekin út frá raunverulegri mælingu (G). Þar sem gildið 1240 mg/L er merkt sem S (grunsamlegt) er það ekki innifalið í sjálfvirka yfirframskránni; er staðfest fyrst.

Sannprófun með reki skynjara og kvörðun

Gullstaðalinn til að ákvarða hvort yfirskot sé raunverulegt eða skynjarafrek er niðurstaða rannsóknarstofu samhliða gripsýni. Til dæmis, ef samfellda greiningartækið sýndi 1240 mg/L klukkan 03:40, og mældu gildi sýnisins sem tekið var á þeim tíma er 205 mg/L, er vandamálið í skynjaranum; ekki útskrift. Þetta er þríhyrning á gervigreindarúttakinu eða SCADA viðvöruninni við sviðið og rannsóknarstofuna.

lítill hulstur

Gruggskynjari í drykkjarvatnsskáli var að sýna smám saman vaxandi þróun í þrjá daga. Vaktateymið gaf vikuleg gögn til LLM; „Raunveruleg aukning á gruggi vegna afrennslis eftir úrkomu er möguleg,“ sagði líkanið. Hins vegar, þegar vélstjórinn skoðaði veðurfarsskrárnar, sá hann að engin rigning var á svæðinu þá vikuna. Við vettvangsskoðunina kom í ljós að lífgróin hafði myndast á sjónglugga skynjarans; Eftir hreinsun og kvörðun fóru gildin aftur í eðlilegt horf. Túlkun LLM á „mögulegum raunverulegum atburði“ var hrakinn með ytri gögnum (úrkomuskrá) og vettvangsstýringu. Lexía: Líkanið getur gefið af sér trúverðuga en ranga sögu; sannprófunarkeðjan grípur það.

Algeng mistök

  • Að villa gögnin í kvörðunar-/viðhaldsglugganum (fáni C) fyrir raunverulegt yfirstig.
  • Að fylla út gögn sem vantar hljóðlaust og tilkynna um reiknuð gildi sem raunverulegar mælingar.
  • Að misskilja einstakt hopp (ein lína, hugsanlega rafhljóð) fyrir samfelldan atburð.
  • Að treysta í blindni samanburðarpunkta LLM (248 á móti 250).
  • Að taka ákvarðanir byggðar á einni færibreytu án þess að víxla samtímis breytur (pH + leiðni + COD).
  • Lýsa viðvörunina „raunverulega“ án þess að útiloka reka skynjara með gripsýni/rannsóknarstofu staðfestingu.
  • Hunsa staðbundnar tíma/UTC og sumartímavaktir og kenna atburði á röngum tíma.

Í stuttu máli

  • Gögn umhverfisvöktunar eru tímaröð; Það er ekki hægt að túlka það án þess að greina á milli þróunar, árstíðabundins og frávika.
  • QA/QC fánar eru traustmerki gagna; ákvarðanir eru aðeins teknar út frá gildum (G) gögnum.
  • LLM er fljótlegur aðstoðarmaður við fyrstu lestur fyrir fráviksskönnun, skráningu yfirframmagns og þróunarsamantekt, ekki ákvörðunaraðili.
  • Stefnan sem vantar gögn (framreiknun) ætti að vera gagnsæ; Fylltu gildin eru merkt og eru ekki tekin sem grundvöllur ákvörðunar um farið.
  • Svif skynjara, líffótrun og kvörðunarrek framkalla „óviðráðanlega yfirskot“; aðgreinir gripsýni og staðfestingu á rannsóknarstofu.
  • AI framleiðsla er tilgáta; Óunnin gögn fara ekki inn í opinberu skýrsluna án staðfestingar með kvörðunarskrá og vettvangsstýringu.

Umsóknarverkefni

Taktu 24 klukkustunda, 15 mínútna vöktunargagnasett sem þú hefur (eða myndar tilbúið) (að minnsta kosti eina færibreytu: COD, pH eða PM10) og búðu til keyrslu sem bætir við QA/QC fánum og listar yfir hámarksfjölda. Fyrst skaltu skrifa sterka vísbendingu og biðja LLM um fráviks- og yfirstigsskönnun; Staðfestu síðan sjálfstætt sömu yfirstigið með gildi > takmörkunarsíu í Python. Gerðu að minnsta kosti eitt útreikningsdæmi og merktu útfylltu gildin með E. Fyrir hverja „yfirskot“ finnurðu „hvernig staðfesti ég þetta með gripsýni/kvörðunarskránni?“ Svaraðu spurningunni í einni setningu. Að lokum skaltu setja í töflu hversu mörg af frávikunum sem LLM hefur flaggað eru raunverulegir atburðir og hversu mörg eru skynjara/gagnavandamál, með rökstuðningi.