Enota 9 / 10

Regulativne raziskave in preverjanje

Dobički:

  • Sposobnost prepoznavanja hierarhije okoljske zakonodaje (zakon, predpis, sporočilo) in mejnih vrednosti virov
  • Sposobnost uporabe AI za skeniranje zakonodaje in ustvarjanje vprašanj ter usmerjanje v uradno besedilo
  • Sposobnost preverjanja števila snovi in mejnih vrednosti, ki jih navaja AI iz Uradnega lista/uradnega vira

V okoljsko svetovalnem podjetju pripravljate dovoljenje za odvajanje odpadne vode za novo barvarno. Stranka sprašuje "kakšne so mejne vrednosti za barvo in KPK, na kateri snovi temelji?" vpraša in čas je omejen. Vaš prvi impulz je, da vprašate jezikovni model: "Kakšne so mejne vrednosti izpustov tekstilne industrije v skladu s predpisi o nadzoru onesnaževanja vode?" LLM zagotavlja tabelarične omejitve, številke postavk in datume v sekundah; Vse skupaj izgleda zelo formalno in prepričljivo. Toda tu je past: jezikovni model proizvede besedilo statistično; Popolnoma resno si lahko izmisli neobstoječo številko artikla, razveljavljen predpis ali napačno mejno vrednost. V tej enoti pokrivamo poznavanje zakonodaje v njenih pravilnih plasteh, varno uporabo AI pri raziskovanju zakonodaje in disciplino potrjevanja vsake izdaje iz Uradnega lista.

Zakonodajna hierarhija

Okoljsko pravo deluje znotraj hierarhije; Spodnja stopnica ne more biti v nasprotju z zgornjo. Če veste, od kod izvira mejna vrednost, jo lahko poiščete v pravem viru.

korak

Kdo ga sname?

vezava

okoljski primer

pravo

zakonodaja (parlament)

vrh, okvir

Okoljsko pravo

Uredba

ministrstvo/svet ministrov

Uporablja in podrobno določa zakon

Uredba o nadzoru onesnaževanja voda

obvestilo

ministrstvo

Tehnične podrobnosti, mejne tabele

Sporočila o merjenju in analizi

Okrožnica/Navodilo

administracija

Notranja preusmeritev aplikacije

Prijavne okrožnice

Mejne vrednosti (mejne vrednosti izpustov, mejne vrednosti emisij) se pogosto nahajajo v prilogah predpisov (tabelah) ali sporočilih. Torej "kateri dokument naj pogledam?" Vprašanje je "kakšna je številka?" je pred vprašanjem.

Tveganje razveljavitve in uveljavitve

Zakonodaja živi: predpisi se spreminjajo, členi se razveljavljajo (razveljavljajo), nova datirana besedila razveljavljajo stara.

Zgodovinske situacije, ki jih je treba preveriti: - Datum veljavnosti: Kdaj je besedilo začelo veljati? - Datum spremembe: Ali je bil ustrezni člen naknadno spremenjen? - Status razveljavitve: Ali je bil člen/predpis razveljavljen? - Prehodne določbe: Ali obstajajo izjeme/odlogi za obstoječe objekte?

Pozor: podatki o usposabljanju LLM so do določenega datuma in ne poznajo zakonodaje, ki se je spremenila po tem datumu. Poleg tega lahko podatki o usposabljanju vsebujejo staro uredbo, ki je zastarela; model lahko to predstavi, kot da je posodobljen. Pred uporabo mejne vrednosti morate v Uradnem listu / portalu uradne zakonodaje potrditi, da je besedilo, na katerem temelji, veljavno danes.

Tveganje, da umetna inteligenca ustvari lažne številke artiklov

Najbolj nevarno vedenje jezikovnega modela je, da ustvarja reference, ki so formalno pravilne, vsebinsko pa ne obstajajo. Besedne zveze, kot so "v skladu s členom 26" ali "v Prilogi Tabela 19", so lahko povsem halucinacijske.

WEAK PROMPT: "Navedite omejitve izpusta tekstilne odpadne vode s številkami postavk."-> Model ustvari številke postavk in številke, ki se zdijo natančne, vendar niso preverjene. MOČEN POZIV: "Pojasnite, katero zakonodajo in katero vrsto priloge/tabele bi moral preučiti za dovoljenje za izpust odpadne vode tekstilne/barvarne. Vaša naloga: 1) Ugotovite MOŽNE VRSTE predpisov in sporočil na to temo in v katerem razdelku (priloga/tabela). "Povejte mi, da je mogoče najti sektorske omejitve. 2) NE sestavljajte konkretne številke artikla ali številčne omejitve; namesto tega postavite ogrado »Preveriti v Uradnem listu«. 3) Navedite, katere ključne pojme (ime sektorja, parameter) naj uporabim pri iskanju v uradnem besedilu. 4) Opomni me na zgodovinska tveganja (razveljavitev, sprememba, prehodna določba), ki bi jih moral preveriti."

Zmogljiv model poziva ga uporablja kot orodje za iskanje in navigacijo — »kateri dokument naj pogledam, s katerim izrazom?« — ne kot vir števila.

Namig: Najvarnejši način za uporabo LLM v regulativnih raziskavah je, da ga postavite kot "raziskovalni kompas" in ne kot "avtomatski odzivnik". Naj model ustvari vprašanja: "Katera dovoljenja, kakšni parametri, kateri možni predpisi veljajo za ta objekt?" Potem poiščite odgovore na ta vprašanja v uradnem besedilu. Model usmerja; Uradni list odloča.

Potek preverjanja: Potrditev iz Uradnega lista

Veriga, ki ji je treba slediti za vsako izdajo in številko postavke:

1) Pridobite temo/vrsto dokumenta/ključni izraz od LLM (ne zanašajte se na številko člena).2) Odprite AKTUALNO besedilo uredbe na portalu uradne zakonodaje.3) Preverite, da besedilo ni razveljavljeno in datum njegove uveljavitve.4) V besedilu POIŠČITE ustrezni člen/dodatek; Oglejte si številko artikla in omejitev na lastne oči. 5) Preverite prehodne določbe in zadnje spremembe. 6) V poročilo napišite vir s popolnim citatom: [Ime predpisa], [Številka člena/priloge], [Datum in številka Uradnega lista].

Primer: Testiranje izhoda LLM

# Prevajanje referenc LLM v kontrolni seznam, ki ga je treba preveritillm_iddialari = [ {"source": "SKKY", "item": "Annex Tabela 10.7", "parameter": "COD", "limit_mgL": 300, "status": "NOT VERIFIED"}, {"source": "SKKY", "item": "Article 26", "parameter": "pH", "limit": "6-9", "status": "NOT VERIFIED"},]for k in llm_claims: # Nihče ne more vnesti poročila brez 'VERIFIED' iz Uradnega lista assert k["status"] == "NOT VERIFIED" print(f"ZAHTEVAJ POTRDITEV: {k['source']} / {k['article']} / {k['parameter']}")# Vsako vrstico je treba ročno najti v besedilu Uradnega lista in status posodobiti.

Ta pristop obravnava rezultat modela kot seznam trditev, ki jih je treba potrditi, in ne kot "resnico", ki jo je treba neposredno sprejeti.

mini etui

Okoljevarstvenik je v poročilo o emisijah v zrak zapisal mejno vrednost dimnih plinov s sklicevanjem na "ustrezno uredbo, člen 18", ki jo je prejel od LLM. Ko je bilo poročilo predstavljeno upravi, je revizor odprl članek; 18. člen je obravnaval povsem drugo vprašanje (obveznost spremljanja) in številčne omejitve, ki jo daje model, v sedanjem besedilu sploh ni bilo – vrednost je pripadala pred dvema letoma razveljavljeni prijavi. Poročilo je bilo vrnjeno, postopek se je zavlekel več tednov in podjetje je izgubilo zaupanje. Po nadaljnji preiskavi je bila meja v prilogi sedanje okrožnice ugotovljena z drugo številko. En sam nadzor Uradnega lista bi lahko preprečil vso to izgubo. Nauk: Model zna "izmisliti" referenco, in ko to počne, je izjemno prepričljiv.

Pogoste napake

  • Uporaba številke snovi in mejne vrednosti, ki jo je navedel LLM, brez potrditve v Uradnem listu.
  • Zamenjati razveljavljeno uredbo za veljavno.
  • Ne upošteva, da model ne pozna zakonodaje, ki se je spremenila po datumu usposabljanja.
  • Iskanje mejne vrednosti v napačni plasti (zakon); medtem ko je vrednost v prilogi/obvestilu uredbe.
  • Zaobiti prehodne določbe in obstoječe izjeme objektov.
  • Brez dokumentiranja vira s popolnim citatom (ime predpisa, člen/priloga, datum in številka RG).
  • Modela ne uporabljajte kot "odzivnik" ampak ga uporabite kot raziskovalni kompas.

Če povzamem

  • Okoljska zakonodaja deluje v krožni hierarhiji zakon-predpis-obvestilo; Mejne vrednosti so praviloma v prilogi uredbe ali v obvestilu.
  • Zakonodaja je živa; Razveljavitev, sprememba in datum veljavnosti vplivajo na veljavnost vsake izdaje.
  • LLM lahko povzroči verjetne, vendar neobstoječe številke predmetov, razveljavljeno besedilo in lažne omejitve (halucinacije).
  • Varen način za uporabo modela je, da ga ne uporabljate kot vir odgovorov, temveč kot "kateri dokument naj pogledam, s katerimi izrazi?" je narediti kompas.
  • Vsak članek in številka morata biti vizualno potrjena iz veljavnega besedila Uradnega lista / zakonodajnega portala, vir pa mora biti napisan s polnim odtisom.
  • Rezultat AI je predhodni raziskovalni osnutek; Nobenega zakonodajnega sklica ni mogoče uporabiti kot osnovo za poročilo ali odločitev brez potrditve z uradnim besedilom.

Aplikacijska naloga

Izberite konkreten scenarij (npr. študija mejne vrednosti za izpust odpadne vode ali emisije dimnih plinov naprave). Najprej napišite močan poziv in LLM uporabite samo kot smernice: navedite, katero vrsto uredbe/obvestila, katero prilogo/tabelo in katere ključne izraze morate pogledati; Zapišite vse številke postavk in številke, ki jih je dal model, na seznam zahtevkov z oznako "NI PREVERJENO". Nato poiščite ustrezno aktualno besedilo iz pravega uradnega vira (Uradni list / portal uradne zakonodaje); preveriti, ali velja in ni razveljavljen; Vizualno potrdite ustrezno snov/dodatek in mejno vrednost. Napišite celotno navedbo (ime predpisa, številka člena/priloge, datum in številka UL) za vsako preverjeno postavko. Nazadnje, "Katera referenca LLM se je izkazala za napačno/nepopolno/izmišljeno?" Vprašanje ovrednoti z odstavkom.