Üksus 9 / 10

Regulatiivne uurimine ja kontrollimine

Kasu:

  • Oskus ära tunda keskkonnaalaste õigusaktide (seadus, määrus, kommünikee) ja piirväärtuste allikate hierarhiat
  • Võimalus kasutada tehisintellekti õigusaktide skannimiseks ja küsimuste genereerimiseks ning ametlikule tekstile suunamiseks
  • Võimalus kontrollida AI antud aine numbrit ja piirnorme ametlikust väljaandest/ametlikust allikast

Keskkonnakonsultatsioonifirmas koostate reovee ärajuhtimise luba uuele värvimishoonele. Klient küsib: "Millised on värvi ja KHT piirväärtused, mis ainel see põhineb?" küsib ta ja aeg on piiratud. Teie esimene impulss on küsida keelemudelilt: "Millised on tekstiilitööstuse heitkoguste piirmäärad vastavalt veereostuse kontrolli eeskirjadele?" LLM pakub tabelipiiranguid, üksuste numbreid ja kuupäevi sekundites; See kõik näeb välja väga ametlik ja veenev. Kuid siin on lõks: keelemudel toodab teksti statistiliselt; Ta võib täie tõsidusega välja mõelda olematu artiklinumbri, kehtetuks tunnistatud määruse või vale piirväärtuse. Selles üksuses käsitleme õigusaktide tundmist selle õigetes kihtides, tehisintellekti ohutut kasutamist seadusandluse uurimisel ja iga probleemi ametlikust väljaandest kinnitamise distsipliini.

Seadusandlik hierarhia

Keskkonnaõigus toimib hierarhias; Alumine aste ei saa olla vastuolus ülemise astmega. Teades, kust piirväärtus pärineb, saate seda otsida õigest allikast.

samm

Kes selle ära võtab?

siduv

keskkonna näide

seadus

Seadusandlik (parlament)

ülemine, raam

Keskkonnaseadus

määrus

ministeerium/ministrite nõukogu

Kohaldab ja täpsustab seadust

Veereostuse kontrolli määrus

teatis

ministeerium

Tehnilised üksikasjad, mõõtmiste/piirväärtuste tabelid

Mõõtmis- ja analüüsikommünikeed

Ringkiri/juhend

administreerimine

Rakenduse sisemine ümbersuunamine

Rakenduse ringkirjad

Piirväärtused (heidete piirnormid, heite piirnormid) on sageli leitavad määruse lisadest (tabelitest) või kommünikeedest. Nii et "millist dokumenti ma peaksin vaatama?" Küsimus on "mis on number?" tuleb enne küsimust.

Kehtetuks tunnistamise ja jõustamise oht

Seadusandlus elab: määrused muutuvad, artiklid tunnistatakse kehtetuks (kehtetuks), uued dateeritud tekstid tühistavad vanad.

Ajaloolised olukorrad, mida kontrollida: - Jõustumise kuupäev: Millal tekst jõustus? - Muuda kuupäev: kas asjakohast artiklit on hiljem muudetud? - Kehtetuks tunnistamise olek: kas artikkel/määrus on kehtetuks tunnistatud? - Üleminekusätted: kas olemasolevate rajatiste puhul on erandeid/lükkamisi?

Tähelepanu: LLM-i koolitusandmed on teatud kuupäevani ja ei tea seadusandlust, mis on pärast seda kuupäeva muutunud. Lisaks võivad treeninguandmed sisaldada vana regulatsiooni, mis on aegunud; mudel suudab seda esitada nii, nagu oleks see ajakohane. Enne piirväärtuse kasutamist peate kinnitama ametlikust väljaandest / ametlikust seadusandluse portaalist, et selle aluseks olev tekst on täna kehtiv.

AI oht võltsitud kaubanumbreid teha

Keelemudeli kõige ohtlikum käitumine on see, et see toodab viiteid, mis on vormiliselt õiged, kuid sisuliselt puuduvad. Fraasid nagu "vastavalt artiklile 26" või "lisa tabelis 19" võivad olla puhtalt hallutsinatsioonilised.

NÕRK VIIPA: "Andke tekstiiltoodete reovee väljalaskepiirangud kaubanumbritega."-> Mudel loob kaubanumbrid ja numbrid, mis tunduvad täpsed, kuid mida ei kontrollita. TUGEV VIIP: "Selgitage, milliseid õigusakte ja mis tüüpi lisa/tabelit peaksin uurima tekstiili-/värvimisettevõtte reoveeheitmisloa saamiseks. Teie ülesanne:1) Tehke kindlaks selleteemaliste määruste ja kommünikeede VÕIMALIKUD LIIGID ning millises jaotises (lisas/tabelis). "Öelge, et valdkondlikud piirangud on leitavad. 2) ÄRGE koostage konkreetset artiklinumbrit ega numbrilist piirangut; pange selle asemele kohatäide "Ametlikes väljaannetes kontrollitakse". 3) Loetlege, milliseid võtmetermineid (sektori nimetus, parameeter) peaksin ametlikus tekstis otsides kasutama. 4) Tuletage mulle meelde ajaloolisi riske (kehtetuks tunnistamine, muutmine, üleminekusäte), mida peaksin kontrollima."

Võimas viipamudel kasutab seda otsingu- ja navigeerimistööriistana – "millist dokumenti peaksin vaatama, millise terminiga?" — mitte numbri allikana.

Näpunäide: LLM-i kasutamiseks regulatiivsetes uuringutes on kõige ohutum positsioneerida see "uurimiskompassiks", mitte "automaatvastajaks". Laske mudelil tekitada küsimusi: "Millised load, millised parameetrid, millised võimalikud määrused selle rajatise jaoks kehtivad?" Seejärel leidke ametlikust tekstist vastused neile küsimustele. Modell suunab; Ametlik väljaanne otsustab.

Kontrollimise töövoog: kinnitus ametlikust väljaandest

Iga väljaande ja kaubanumbri puhul järgitav kett:

1) Hankige teema/dokumendi tüüp/võtmetermin LLM-ist (ärge lootke artikli numbrile).2) Avage ametlikus seadusandluse portaalis määruse KEHTIV tekst.3) Veenduge, et tekst pole kehtetuks tunnistatud ja selle jõustumise kuupäev.4) OTSI tekstist vastavat artiklit/täiendust; Vaata artiklinumbrit ja limiiti oma silmaga. 5) Kontrollige üleminekusätteid ja viimaseid muudatusi. 6) Märkige aruandesse allikas koos täieliku viitega: [Määruse nimi], [Artikli/lisa number], [Ametliku Teataja kuupäev ja number].

Näide: LLM-i väljundi testimine

# LLM-i viidete tõlkimine kontrollitavasse checklistllm_iddialari = [ {"allikas": "SKKY", "item": "lisa tabel 10.7", "parameeter": "COD", "limit_mgL": 300, "status": "NOT VERIFIED"}, {"parameeter": tem, SKKY", "source": tem "pH", "limit": "6-9", "status": "NOT VERIFIED"},]for k in llm_claims: # Ükski ei saa aruannet sisestada ilma ametliku väljaande kinnituseta "VERIFIED" k["status"] == "EI KINNITATUD" print(f"NÕUAB KINNITUST: {ar'ticle'[] {k['parameeter']}")# Iga rida tuleb ametliku väljaande tekstist käsitsi leida ja olekut tuleb värskendada.

See lähenemine käsitleb mudeli väljundit kinnitatavate väidete loendina, mitte otse aktsepteeritava tõena.

mini korpus

Keskkonnaametnik kirjutas suitsugaaside piirväärtuse õhuheitmete aruandesse viitega "asjakohasele määruse artiklile 18", mille ta sai LLM-ilt. Kui aruanne esitati administratsioonile, avas audiitor artikli; Paragrahv 18 käsitles hoopis teist teemat (jälgimiskohustus) ja mudeliga antud arvulist piirmäära ei olnud praeguses tekstis üldse olemas — väärtus kuulus kaks aastat tagasi kehtetuks tunnistatud teatisele. Aruanne tagastati, protsess viibis nädalaid ja ettevõte kaotas usalduse. Edasisel uurimisel leiti kehtiva ringkirja lisast piirmäär teise numbriga. Üks ametlik ametlik kontroll oleks võinud kogu selle kaotuse ära hoida. Õppetund: Mudel võib "moodustada" viiteid ja kui ta seda teeb, on see äärmiselt veenev.

Levinud vead

  • Kasutades LLM-i antud aine numbrit ja piirväärtust ilma seda Ametlikes Teadaannetes kinnitamata.
  • Kehtetuks tunnistatud määruse eksimine kehtivaks.
  • Ignoreerides, et mudel ei tea pärast koolituskuupäeva muutunud seadusandlust.
  • Piirväärtuse otsimine valest kihist (seadus); kusjuures väärtus on määruse lisas/teatises.
  • Üleminekusätetest ja olemasolevatest eranditest mööda hiilides.
  • Allikat ei dokumenteerita koos täieliku viitega (määruse nimi, artikkel/lisa, RG kuupäev ja number).
  • Ärge kasutage mudelit "automaatvastajana" ja kasutage seda uurimiskompassina.

Kokkuvõttes

  • Keskkonnaõigusaktid toimivad seadus-määrus-teavitamine-ringihierarhias; Piirväärtused on üldjuhul toodud määruse lisas või teatises.
  • Seadusandlus on elus; Kehtetuks tunnistamine, muutmine ja jõustumiskuupäev mõjutavad iga emissiooni kehtivust.
  • LLM võib tekitada usutavaid, kuid olematuid kaubanumbreid, kehtetuks tunnistatud teksti ja valepiire (hallutsinatsioone).
  • Mudeli kasutamise ohutum on kasutada seda mitte vastuste allikana, vaid pigem kui "millist dokumenti, milliste terminitega peaksin vaatama?" on kompassi tegemine.
  • Iga artikkel ja number tuleb visuaalselt kinnitada kehtiva Ametlike Teadaannete / õigusaktide portaali tekstist ja selle allikas tuleb kirjutada täistrükk.
  • AI väljund on esialgne uurimistöö mustand; Ühtegi seadusandlikku viidet ei saa kasutada aruande või otsuse aluseks ilma ametliku tekstiga kontrollimiseta.

Rakenduse ülesanne

Valige konkreetne stsenaarium (nt rajatise heitvee või suitsugaaside heitkoguste piirväärtuste uuring). Esiteks kirjutage tugev viip ja kasutage LLM-i ainult juhiseks: koostage, millist tüüpi määrust/teatist, millist lisa/tabelit ja milliste võtmeterminitega peate vaatama; Kirjutage kõik kaubanumbrid ja mudeli antud numbrid nõuete loendisse, mis on märgistatud "EI KONTROLLITA". Seejärel leidke tegelikust ametlikust allikast (ametlik väljaanne / ametlik seadusandluse portaal) vastav kehtiv tekst; kontrollida, kas see on jõus ja seda ei ole kehtetuks tunnistatud; Kinnitage visuaalselt asjakohane aine/lisand ja piirväärtus. Kirjutage iga kinnitatud üksuse täielik tsitaat (määruse nimi, artikli/lisa number, OG kuupäev ja number). Lõpuks "Milline LLM-i antud viide osutus valeks/puudulikuks/väljamõeldud?" Hinnake küsimust lõiguga.