ইউনিট 9 / 10

নিয়ন্ত্রক গবেষণা এবং যাচাইকরণ

লাভ:

  • পরিবেশগত আইন (আইন, প্রবিধান, কমিউনিক) এবং সীমিত মূল্য উত্সের অনুক্রমকে স্বীকৃতি দেওয়ার ক্ষমতা
  • আইন স্ক্যানিং এবং প্রশ্ন তৈরি এবং অফিসিয়াল টেক্সট নির্দেশ করার জন্য AI ব্যবহার করার ক্ষমতা
  • অফিসিয়াল গেজেট/অফিসিয়াল সোর্স থেকে AI দ্বারা প্রদত্ত পদার্থ নম্বর এবং সীমা যাচাই করার ক্ষমতা

একটি পরিবেশগত পরামর্শক প্রতিষ্ঠানে, আপনি একটি নতুন ডাইহাউস সুবিধার জন্য বর্জ্য জল নিষ্কাশনের অনুমতি প্রস্তুত করছেন৷ গ্রাহক জিজ্ঞাসা করেন "রঙ এবং সিওডির সীমা মান কী, এটি কোন পদার্থের উপর ভিত্তি করে?" তিনি জিজ্ঞাসা করেন এবং সময় সীমিত। আপনার প্রথম প্ররোচনা হল একটি ভাষা মডেলকে জিজ্ঞাসা করা: "জল দূষণ নিয়ন্ত্রণ প্রবিধান অনুযায়ী টেক্সটাইল শিল্পের নিষ্কাশন সীমা কী?" এলএলএম সেকেন্ডে সারণী সীমা, আইটেম নম্বর এবং তারিখ প্রদান করে; এটা সব খুব আনুষ্ঠানিক এবং বিশ্বাসী দেখায়. কিন্তু এখানে ফাঁদ: ভাষার মডেল পরিসংখ্যানগতভাবে পাঠ্য তৈরি করে; তিনি নিখুঁত গুরুত্ব সহকারে একটি অস্তিত্বহীন নিবন্ধ সংখ্যা, একটি বাতিল প্রবিধান বা একটি ভুল সীমা মান তৈরি করতে পারেন। এই ইউনিটে, আমরা আইনকে তার সঠিক স্তরে জেনে রাখা, আইন গবেষণায় নিরাপদে AI ব্যবহার করা এবং অফিসিয়াল গেজেট থেকে প্রতিটি সমস্যা নিশ্চিত করার শৃঙ্খলা কভার করি।

আইনী অনুক্রম

পরিবেশ আইন একটি অনুক্রমের মধ্যে কাজ করে; নীচের ধাপ উপরের ধাপের বিরোধী হতে পারে না। একটি সীমা মান কোথা থেকে আসে তা জানা আপনাকে সঠিক উত্সে এটি সন্ধান করতে দেয়৷

পদক্ষেপ

কে এটা বন্ধ করে?

বাঁধাই

পরিবেশগত উদাহরণ

আইন

আইনসভা (সংসদ)

শীর্ষ, ফ্রেম

পরিবেশ আইন

প্রবিধান

মন্ত্রণালয়/মন্ত্রী পরিষদ

আইন প্রযোজ্য এবং বিস্তারিত

জল দূষণ নিয়ন্ত্রণ প্রবিধান

বিজ্ঞপ্তি

মন্ত্রণালয়

প্রযুক্তিগত বিশদ, পরিমাপ/সীমা টেবিল

পরিমাপ এবং বিশ্লেষণের বিবৃতি

সার্কুলার/নির্দেশ

প্রশাসন

অভ্যন্তরীণ অ্যাপ্লিকেশন পুনর্নির্দেশ

আবেদন বিজ্ঞপ্তি

সীমা মান (স্রাব সীমা, নির্গমন সীমা) প্রায়ই রেগুলেশন অ্যানেক্সে (টেবিল) বা কমিউনিকে পাওয়া যায়। সুতরাং "কোন নথিতে আমার দেখা উচিত?" প্রশ্ন হল "সংখ্যা কি?" প্রশ্নের আগে আসে।

রহিতকরণ এবং প্রয়োগের ঝুঁকি

আইন জীবন্ত: প্রবিধানগুলি পরিবর্তিত হয়, নিবন্ধগুলি বাতিল করা হয় (রহিত করা হয়), নতুন তারিখের পাঠ্যগুলি পুরানোগুলিকে বাতিল করে।

ঐতিহাসিক পরিস্থিতি চেক করার জন্য: - কার্যকরী তারিখ: লেখাটি কখন কার্যকর হয়েছে? - তারিখ পরিবর্তন করুন: প্রাসঙ্গিক নিবন্ধটি কি পরবর্তীতে পরিবর্তন করা হয়েছে? - প্রত্যাহার স্থিতি: নিবন্ধ/নিয়ম কি বাতিল করা হয়েছে? - ট্রানজিশনাল প্রভিশন: বিদ্যমান সুবিধার জন্য কি ব্যতিক্রম/বিলম্বন আছে?

মনোযোগ: LLM-এর প্রশিক্ষণের ডেটা একটি নির্দিষ্ট তারিখ পর্যন্ত এবং সেই তারিখের পরে পরিবর্তিত আইনটি জানেন না। অতিরিক্তভাবে, প্রশিক্ষণের ডেটাতে একটি পুরানো নিয়ম থাকতে পারে যা অপ্রচলিত হয়ে গেছে; মডেলটি এমনভাবে উপস্থাপন করতে পারে যেন এটি আপ টু ডেট ছিল। একটি সীমা মান ব্যবহার করার আগে, আপনাকে অবশ্যই অফিসিয়াল গেজেট / অফিসিয়াল আইন পোর্টাল থেকে নিশ্চিত করতে হবে যে পাঠ্যটি যার উপর ভিত্তি করে তা আজ বলবৎ আছে।

AI জাল আইটেম নম্বর তৈরির ঝুঁকি

ভাষা মডেলের সবচেয়ে বিপজ্জনক আচরণ হল এটি এমন রেফারেন্স তৈরি করে যা আনুষ্ঠানিকভাবে সঠিক কিন্তু বিষয়বস্তুতে বিদ্যমান নেই। "অনুচ্ছেদ 26 অনুসারে" বা "সংযোজন সারণী 19-এ" এর মতো বাক্যাংশগুলি সম্পূর্ণরূপে হ্যালুসিনেটরি হতে পারে।

দুর্বল প্রম্পট: "আইটেম নম্বর সহ টেক্সটাইল বর্জ্য জল নিষ্কাশন সীমা দিন।"-> মডেলটি আইটেম নম্বর এবং সংখ্যা তৈরি করে যা সুনির্দিষ্ট বলে মনে হয় কিন্তু যাচাই করা হয় না। স্ট্রং প্রম্পট: "কোন টেক্সটাইল/ডাইহাউস সুবিধার বর্জ্য জল নিষ্কাশনের অনুমতির জন্য আমার কোন আইন এবং কোন ধরণের অ্যানেক্স/টেবিল পরীক্ষা করা উচিত তা ব্যাখ্যা করুন। আপনার টাস্ক: 1) সম্ভাব্য প্রকারের প্রবিধান এবং যোগাযোগের বিষয়গুলি সনাক্ত করুন এবং কোন বিভাগে এবং কোন বিভাগে পাওয়া যেতে পারে। 2) একটি নির্দিষ্ট নিবন্ধ সংখ্যা বা সংখ্যাগত সীমা তৈরি করবেন না; পরিবর্তে 'সরকারি গেজেটে যাচাই করার জন্য' একটি স্থানধারক রাখুন। 3) অফিসিয়াল টেক্সটে অনুসন্ধান করার সময় কোন মূল পদগুলি (সেক্টরের নাম, প্যারামিটার) ব্যবহার করা উচিত তা তালিকাভুক্ত করুন। 4) আমাকে ঐতিহাসিক ঝুঁকির কথা মনে করিয়ে দিন (রহিতকরণ, সংশোধনী, অন্তর্বর্তীকালীন বিধান) যা আমার পরীক্ষা করা উচিত।"

শক্তিশালী প্রম্পট মডেল এটি একটি অনুসন্ধান এবং নেভিগেশন টুল হিসাবে ব্যবহার করে — "কোন নথিতে আমার দেখা উচিত, কোন পদের সাথে?" - সংখ্যার উত্স হিসাবে নয়।

টিপ: নিয়ন্ত্রক গবেষণায় LLM ব্যবহার করার সবচেয়ে নিরাপদ উপায় হল এটি একটি "উত্তর মেশিন" এর পরিবর্তে একটি "গবেষণা কম্পাস" হিসাবে অবস্থান করা। মডেলটি প্রশ্ন তৈরি করতে বলুন: "কি অনুমতি দেয়, কি পরামিতি, এই সুবিধার জন্য কোন সম্ভাব্য প্রবিধান কার্যকর হয়?" তারপর অফিসিয়াল টেক্সট থেকে এই প্রশ্নের উত্তর খুঁজুন. মডেল নির্দেশ; অফিসিয়াল গেজেট সিদ্ধান্ত নেয়।

যাচাইকরণ কর্মপ্রবাহ: অফিসিয়াল গেজেট থেকে নিশ্চিতকরণ

প্রতিটি সংখ্যা এবং আইটেম নম্বরের জন্য অনুসরণ করা চেইন:

1) LLM থেকে টপিক/ডকুমেন্ট টাইপ/কী টার্ম পান (নিবন্ধ নম্বরের উপর নির্ভর করবেন না। 2) সরকারী আইন পোর্টালে প্রবিধানের বর্তমান পাঠ্যটি খুলুন। 3) পাঠ্যটি বাতিল করা হয়নি এবং এর কার্যকর তারিখ যাচাই করুন। 4) প্রাসঙ্গিক নিবন্ধ/সংযোজনের জন্য পাঠ্যটিতে অনুসন্ধান করুন; আপনার নিজের চোখে নিবন্ধ সংখ্যা এবং সীমা দেখুন। 5) ক্রান্তিকালীন বিধান এবং সর্বশেষ সংশোধনী পরীক্ষা করুন. 6) সম্পূর্ণ উদ্ধৃতি সহ প্রতিবেদনে উত্সটি লিখুন: [নিয়ন্ত্রণের নাম], [আর্টিকেল/সংযোজন নম্বর], [সরকারি গেজেটের তারিখ এবং নম্বর]।

উদাহরণ: এলএলএম আউটপুট পরীক্ষা করা

# LLM-এর রেফারেন্সগুলিকে "যাচাই করা হবে" এ অনুবাদ করা হচ্ছে checklistllm_iddialari = [ {"উত্স": "SKKY", "item": "Anex Table 10.7", "parameter": "COD", "limit_mgL": 300, "status": "NOT {"Source:" "SKY:"}" যাচাই করা হয়নি", "অনুচ্ছেদ 26", "প্যারামিটার": "pH", "সীমা": "6-9", "স্থিতি": "যাচাই করা হয়নি"},] llm_claims-এ k-এর জন্য: # অফিসিয়াল গেজেট থেকে 'যাচাই করা' ছাড়া কেউ রিপোর্টে প্রবেশ করতে পারবে না {k['source']} / {k['article']} / {k['parameter']}")# প্রতিটি লাইন অবশ্যই অফিসিয়াল গেজেট পাঠ্যে ম্যানুয়ালি পাওয়া যাবে এবং স্ট্যাটাস আপডেট করতে হবে।

এই পদ্ধতিটি মডেল আউটপুটকে নিশ্চিত করার দাবির তালিকা হিসাবে বিবেচনা করে, একটি "সত্য" সরাসরি গ্রহণ করার পরিবর্তে।

মিনি কেস

একজন পরিবেশ কর্মকর্তা "প্রাসঙ্গিক প্রবিধান ধারা 18" এর রেফারেন্স সহ বায়ু নির্গমন প্রতিবেদনে ফ্লু গ্যাসের সীমার মান লিখেছেন, যা তিনি LLM থেকে পেয়েছেন। প্রতিবেদনটি প্রশাসনের কাছে উপস্থাপন করা হলে নিরীক্ষক নিবন্ধটি খুললেন; অনুচ্ছেদ 18 একটি সম্পূর্ণ ভিন্ন সমস্যা (নিরীক্ষণের বাধ্যবাধকতা) নিয়ে কাজ করেছে এবং মডেল দ্বারা প্রদত্ত সংখ্যাগত সীমাটি বর্তমান পাঠ্যে একেবারেই বিদ্যমান ছিল না — মানটি একটি বিজ্ঞপ্তির অন্তর্গত ছিল যা দুই বছর আগে বাতিল করা হয়েছিল। প্রতিবেদনটি ফেরত দেওয়া হয়েছিল, প্রক্রিয়াটি কয়েক সপ্তাহের জন্য বিলম্বিত হয়েছিল এবং সংস্থাটি আস্থা হারিয়েছিল। আরও তদন্তের পর, বর্তমান সার্কুলারের সংযোজনে একটি ভিন্ন নম্বর সহ সীমা পাওয়া গেছে। একটি একক সরকারী গেজেট নিয়ন্ত্রণ এই সমস্ত ক্ষতি রোধ করতে পারে। পাঠ: মডেল রেফারেন্স "মেক আপ" করতে পারে, এবং যখন এটি করে, এটি অত্যন্ত বিশ্বাসযোগ্য।

সাধারণ ভুল

  • অফিসিয়াল গেজেটে নিশ্চিত না করেই এলএলএম দ্বারা প্রদত্ত পদার্থ নম্বর এবং সীমা মান ব্যবহার করা।
  • বর্তমান হিসাবে একটি বাতিল প্রবিধান ভুল.
  • উপেক্ষা করে যে মডেলটি প্রশিক্ষণের তারিখের পরে পরিবর্তিত আইনটি জানে না।
  • ভুল স্তরে সীমা মান অনুসন্ধান করা হচ্ছে (আইন); যেখানে মানটি প্রবিধানের পরিশিষ্ট/বিজ্ঞপ্তিতে রয়েছে।
  • ট্রানজিশনাল বিধান এবং বিদ্যমান সুবিধার ব্যতিক্রমগুলিকে বাইপাস করা।
  • সম্পূর্ণ উদ্ধৃতি সহ উত্সটি নথিভুক্ত না করা (নিয়ন্ত্রণের নাম, নিবন্ধ/সংযোজন, আরজি তারিখ এবং নম্বর)।
  • মডেলটিকে "উত্তর মেশিন" হিসাবে ব্যবহার করবেন না এবং এটি একটি গবেষণা কম্পাস হিসাবে ব্যবহার করুন।

সংক্ষেপে

  • পরিবেশগত আইন আইন-নিয়ন্ত্রণ-বিজ্ঞপ্তি-বৃত্তাকার শ্রেণিবিন্যাসে কাজ করে; সীমা মানগুলি সাধারণত প্রবিধানের সংযোজনে বা বিজ্ঞপ্তিতে থাকে।
  • আইন জীবন্ত; বাতিল, সংশোধন এবং কার্যকর তারিখ প্রতিটি সমস্যার বৈধতা প্রভাবিত করে।
  • LLM বিশ্বাসযোগ্য কিন্তু অস্তিত্বহীন আইটেম নম্বর, বাতিল পাঠ্য এবং মিথ্যা সীমা (হ্যালুসিনেশন) তৈরি করতে পারে।
  • মডেলটি ব্যবহার করার নিরাপদ উপায় হল এটিকে উত্তরের উৎস হিসেবে ব্যবহার করা নয় বরং "কোন নথিতে আমার দেখা উচিত, কোন শর্তাবলীর সাথে?" একটি কম্পাস করা হয়.
  • প্রতিটি নিবন্ধ এবং সমস্যা বর্তমান সরকারী গেজেট / আইন পোর্টাল পাঠ্য থেকে দৃশ্যত নিশ্চিত করা আবশ্যক এবং এর উত্স সম্পূর্ণ ছাপ সহ লিখতে হবে।
  • এআই আউটপুট একটি প্রাথমিক গবেষণা খসড়া; অফিসিয়াল টেক্সট দ্বারা যাচাই ছাড়াই একটি প্রতিবেদন বা সিদ্ধান্তের ভিত্তি হিসাবে কোনও আইনী রেফারেন্স ব্যবহার করা যাবে না।

আবেদন টাস্ক

একটি কংক্রিট দৃশ্যকল্প চয়ন করুন (যেমন বর্জ্য জল নিষ্কাশন বা একটি সুবিধার ফ্লু গ্যাস নির্গমনের জন্য সীমা মূল্য অধ্যয়ন)। প্রথমত, একটি শক্তিশালী প্রম্পট লিখুন এবং শুধুমাত্র নির্দেশনার জন্য এলএলএম ব্যবহার করুন: কোন ধরনের প্রবিধান/বিজ্ঞপ্তি, কোন অ্যানেক্স/টেবিল এবং কোন মূল পদগুলি আপনাকে দেখতে হবে তা তৈরি করুন; "যাচাই করা হয়নি" লেবেলযুক্ত একটি দাবি তালিকায় মডেল দ্বারা প্রদত্ত সমস্ত আইটেম নম্বর এবং নম্বরগুলি লিখুন৷ তারপর প্রকৃত সরকারী উত্স থেকে প্রাসঙ্গিক বর্তমান পাঠ্য খুঁজুন (অফিসিয়াল গেজেট / অফিসিয়াল আইন পোর্টাল); যাচাই করুন যে এটি বলবৎ আছে এবং বাতিল করা হয়নি; প্রাসঙ্গিক পদার্থ/পরিপূরক এবং সীমা মান দৃশ্যত নিশ্চিত করুন। প্রতিটি যাচাইকৃত আইটেমের জন্য সম্পূর্ণ উদ্ধৃতি (নিয়ন্ত্রণের নাম, নিবন্ধ/সংযোজন নম্বর, ওজি তারিখ এবং নম্বর) লিখুন। অবশেষে, "এলএলএম দ্বারা প্রদত্ত কোন রেফারেন্সটি ভুল/অসম্পূর্ণ/বানোয়াট বলে প্রমাণিত হয়েছে?" একটি অনুচ্ছেদ দিয়ে প্রশ্নটি মূল্যায়ন করুন।