Јединица 11 / 11

Безбедносно-критични послови, етика, приватност и одговорност

Добици:

  • Способност процене ограничења и захтева за верификацију АИ у безбедносно критичном инжењерском раду
  • Способност управљања ризицима приватности, политике података и интелектуалне својине у поверљивом дизајну/дељењу података
  • Способност да се практично тврди да АИ излаз не може да замени одобрење инжењера и одговорност за потпис

У машинству, неки од резултата нису естетски избор, већ питање безбедности људског живота и имовине: кочница лифта, посуда под притиском, део опреме за подизање, део аутомобилског вешања. У овим пословима који су критични за безбедност, грешке могу довести до повреда или смрти. Вештачка интелигенција (АИ) је акцелератор и у овим областима; али се овде најоштрије појављују њене границе. Ова јединица је етичка и одговорна окосница модула и усредсређена је на један принцип: АИ излаз није замена за верификацију, одобрење и потпис компетентног инжењера у било ком пословању критичном за безбедност. АИ може бити нацрт, улаз, друго око; али не може да преузме одговорност, јер правна и етичка одговорност припада инжењеру који је потписао. Поред овога, морају се управљати још два главна ризика: поверљивост (дизајн компаније, подаци о купцима, непатентиране идеје) и тачност (халуцинације). У овој јединици ћете научити о границама вештачке интелигенције у безбедносно критичном раду, ризицима приватности и интелектуалне својине и зашто се одговорност не може пренети.

Безбедносно критично Овде је место и граница вештачке интелигенције

Да ли је посао „критичан за безбедност“ или не зависи од тежине исхода у случају грешке. На овој скали, улога вештачке интелигенције се сужава: генерисање идеја, израда нацрта, прављење контролних листа, да; али одобравање завршног рачуна, доношење одлуке о „безбедном“ или одобравање производње је не-не. Следећа разлика чини ово конкретним:

пословни тип

Одговарајућа улога АИ

Неотуђива улога инжењера

Рутина, мали ризик

Нацрт, аутоматизација, први налог

преглед

средњи ризик

Алтернатива, контролна листа, прелиминарна анализа

Верификација и одлука

Безбедносно критично

Само пропух/друго око

Анализа, тестирање, одобрење, потпис, одговорност

Критички принцип: Без обзира колико је убедљив резултат АИ, то је хипотеза и нацрт. Безбедносно критични прорачун се независно репродукује, проверава у складу са стандардом, тестира ако је потребно и потписује надлежни инжењер. Потпис значи „Потврдио сам ово и преузимам одговорност за то“; језички модел не може дати ову изјаву.

Савет: Поставите себи ово питање са сваким излазом вештачке интелигенције: „Ако је ово погрешно, ко ће бити повређен и ко је одговоран?“ Ако је одговор „људи су повређени, ја сам одговоран“, тај резултат не иде никуда без проласка највишег стандарда верификације.

Халуцинације и замка превеликог самопоуздања

Најопаснија карактеристика АИ је да представља лажне информације са истом поузданошћу као и тачне информације. Може да састави стандардну ставку, да да нетачну материјалну вредност, да неправилно примени формулу и да све то напише течним, стручним језиком. Када се томе дода пристрасност превеликог самопоуздања (пристрасност аутоматизације; људска склоност да превише верује излазу аутоматског система), опасност расте: инжењер може прихватити излаз који изгледа добро на екрану, а да га не провери. Одбрамбени став је културолошка навика: гледање на излаз АИ као „сумњиво док се не докаже супротно“, а не „вероватно истинито“.

Опрез: „АИ је деловао самоуверено“ није одбрана. „То је оно што је АИ рекла“ није изговор у истрази несреће, ревизији или тужби; Одговорност остаје на инжењеру који даје одобрење. Замислите АИ као стажиста који никада не дели одговорност, али понекад погреши: прихватите његово мишљење, никада не потписујете његов рад, а да га не проверите.

Политика приватности, интелектуалне својине и података

Други највећи ризик је приватност. Отпремање непатентираног дизајна компаније, података о клијенту или конкурентно осетљивог решења у јавни АИ алат чија је политика података непозната; може резултирати губитком интелектуалне својине, кршењем поверљивости и кршењем уговора. Неки алати могу користити улазе за обуку модела; Тајна геометрија коју отпремите може бити изложена неком другом. Прави приступ: усклађеност са политиком података компаније, анонимизација осетљивих података (уклањање идентификационих информација и њихово стављање у јавни формат) или коришћење пословног/изолованог алата где подаци не излазе.

Корак по корак: Коришћење безбедне и етичке вештачке интелигенције

  1. Класификујте ризик. Да ли је овај посао критичан за безбедност, које су последице у случају грешке?
  2. Размотрите приватност. Могу ли се ови подаци извући; Шта каже политика?
  3. Анонимизирајте или користите изоловане алате. Уклоните осетљиве информације.
  4. Користите АИ као нацрт/друго око. То није одобрење, то је унос.
  5. Независно проверите. Репродукција, стандард, тестирање.
  6. Надлежни инжењер одобрава и потписује. Одговорност се не може делегирати; Води се евиденција о следљивости.

Брза процена ризика и приватности

Улога: консултант за инжењерску етику и управљање ризицима.Задатак: Оценити следећи посао у смислу безбедносно-критичности и поверљивости.Посао: [опис посла; могући исход у случају грешке; врста података за дељење].Излаз:- Класа ризика (рутинска / средња / безбедносно-критична) и оправдање- ШТА могу да натерам АИ да уради у овом послу, ШТА не могу да радим- Да ли постоји ризик за приватност; да ли су подаци анонимизовани; Да ли је потребно изоловано возило? Правило: Нагласите да коначно одобрење и одговорност остаје на надлежном инжењеру.

Промпт за анонимизацију

Питаћу АИ проблем дизајна, али не желим да делим информације о компанији. АНОНИМИЗУЈТЕ следећи контекст: изоставите назив компаније, назив производа, купца и описне метрике; Препишите проблем општим инжењерским терминима тако да осетљиве информације не би процуриле, али да је техничко језгро сачувано. Контекст: [текст]

Дисциплински промпт за верификацију

Проверите овај безбедносно критичан налог као независни рецензент, НИКАДА ми се не придружите. Формула питања, јединица, претпоставка и усклађеност са стандардом. Репродуцирајте резултат независном методом и покажите разлику. За сваки налаз напишите „како да то докажем/тестирам?“ Правило: НЕ МОЖЕТЕ потврдити; уклоните само тачке које треба проверити.[налог]

Упит за регистрацију одговорности

Напишите нацрт записа о следљивости/одлуци за ову одлуку о дизајну. Поља: одлука, основа (израчун/стандард/тест), допринос АИ (нацрт?), метод независне верификације, инжењер за одобрење, датум, поље за потпис. Правило: јасно означите допринос АИ као „нацрт/помоћ“; Оставите поље за потврду празним.

Слаба порука / јака промпт

Слабо обавештење:

Да ли је овај дизајн кочнице лифта сигуран, потврдите.

АИ не може и не треба да обезбеди безбедносну дозволу; Ако каже „безбедно“ то је варљиво и опасно јер не може да сноси одговорност.

Снажан упит:

Прегледајте овај прорачун кочница као независни рецензент; Учешће, слабости и претпоставке које треба проверити. Репродуцирајте резултат независно и покажите разлику. Знај да имам одобрење и одговорност; само набројите контролне тачке.

Други упит позиционира АИ као оруђе критичке контроле, а не ауторитет за одобравање; преузима одговорност на инжењеру.

Три мини кућишта (по бројевима)

Случај 1 - Одговорност потписника. Инжењер ће користити прорачун куке за подизање који је АИ припремио за 2 сата. Кука ће подићи 2 тоне; руптура би била фатална. Инжењер самостално понавља прорачун, коригује фактор сигурности на ≥ 4 захтеван стандардом уместо 1,8 који даје АИ, и повећава геометрију. Број АИ је „изгледао разуман“, али није достигао критични праг безбедности. Потписује тек након верификације. Поука: одобрење и одлука о фактору сигурности нису преносиви.

Случај 2 - Процурео дизајн. Приправник учитава нови, непатентирани механизам из компаније у јавно доступан АИ алат и каже „оптимизуј“. Политика података алатке чува улазне податке и може се користити у обуци. Када компанија то схвати, убацује се правни тим; Патентна стратегија трпи због ризика интелектуалне својине. Прави начин је био анонимизација механизма или употреба корпоративне изолације. Поука: тајна политика дизајна не улази у непознато возило.

Случај 3 – Анонимизација чува. Инжењер жели да разговара о специфичном проблему редуктора за купца са АИ, али купац и производ су поверљиви. Анонимизује контекст: уклања назив компаније/производа, описне димензије и поново пише проблем као „општи редуктор за дати однос преноса и обртни момент“. Користи вештачку интелигенцију без цурења осетљивих информација, чувајући техничку суштину. Поука: анонимизација је сигуран пут између приватности и ефикасности.

Уобичајене грешке

  • Давање овлашћења за одобрење АИ: Рећи „Да ли је безбедно, одобри“ и покушај делегирања одговорности.
  • Претерано самопоуздање (пристрасност аутоматизације): прихватање убедљивог резултата без провере.
  • Отпремање поверљивих података у јавни алат: Дељење података о дизајну/корисницима без познавања смерница.
  • Заобилажење анонимизације: Постављање осетљивог проблема без уклањања идентификационих информација.
  • Не води евиденцију о следљивости: Не документује допринос и валидацију АИ.
  • Потцењивање фактора безбедности: Прелазак критичног прага безбедности са ниском вредношћу коју даје АИ.

Укратко

  • У безбедносно критичном раду, АИ може бити нацрт и друго око; Одобрење, потпис и одговорност припадају надлежном инжењеру.
  • АИ представља погрешно као убедљиво колико и исправно; Став „осумњиченог док се не докаже супротно“ је од суштинског значаја против пристрасности претераног самопоуздања.
  • „АИ је изгледао самоуверено“ није правна или етичка одбрана; Одговорност остаје на одобраваоцу.
  • Поверљиви дизајн, подаци о купцима и непатентиране идеје се не постављају у непозната возила; анонимизирати или користити изоловане алате.
  • Безбедносно критични налог се репродукује независно, проверава се у складу са стандардом, а одговорност се преузима потписивањем.

Задатак апликације

Изаберите посао који би могао бити критичан за безбедност (елемент за подизање, компонента притиска, кочница или носећа конструкција). Прво класификујте рад у смислу ризика и приватности: шта је последица у случају грешке, који подаци су осетљиви? Нека АИ процени овај посао и направи листу „шта могу, а шта не могу?“ Анонимизирајте контекст који ћете делити (уклоните информације о компанији/производу/купцу). Затим извршите ревизију налога, користећи АИ само као критично средство за проверу, али сами репродукујте резултат независном методом и упоредите фактор сигурности са релевантним стандардом. Коначно, израдите записник о следљивости/одлуци; Означите допринос АИ као „нацрт/помоћник“ и препустите поље одобрења квалификованом инжењеру.

контролна листа

  • [ ] Посао је оцењен према класи ризика (рутинско/средње/критично за безбедност).
  • [ ] Процењена поверљивост; Осетљиви подаци су анонимизовани или се користи изолован алат.
  • [ ] АИ је коришћен као нацрт/друго око, а не орган за одобравање.
  • [ ] Безбедносно критични прорачун независно репродукован и ревидиран у односу на стандард.
  • [ ] Коефицијент сигурности је упоређен са прагом релевантног стандарда.
  • [ ] Чува се евиденција о следљивости/одлуци; Одобрење, потпис и одговорност препуштени су надлежном инжењеру.

Модул Екам

1. Која је од следећег најреалнија и најбезбеднија улога вештачке интелигенције у ЦАД-у и процесу дизајна?

  • А) Помоћне улоге као што су предлагање алтернатива дизајну и израда параметарских скрипти/макроа ✔
  • Б) Аутоматско статичко одобрење и одобрење чврстоће
  • Ц) Слање дизајна директно у производњу без одобрења инжењера
  • Д) Преузимање овлашћења за потпис и одобрење од инжењера

Опис: АИ је јак у помоћним задацима као што су предлагање алтернатива дизајну, генерисање параметарских скрипти/макроа, материјали за израду нацрта и метаподаци (дивергентно размишљање). Коначна геометрија, толеранција, одобрење чврстоће и одлука о слању у производњу (конвергентна одлука) остају на инжењеру.

2. АИ је дао вредност 'границе течења 250 МПа' за материјал. Шта треба да урадите пре него што употребите ову вредност као основу за дизајн?

  • А) Стављање вредности директно на рачун јер је АИ ажуриран
  • Б) Проверите вредност из спецификације произвођача или стандарда материјала ✔
  • Ц) Заокруживање вредности навише и претпоставка да је на сигурној страни
  • Д) Додајте случајни фактор сигурности и прођите

Опис: АИ може апроксимирати, приближити или потпуно лажирати (халуцинирати) својства материјала; Његова вредност варира у зависности од температуре/термичке обраде истог материјала. Вредност не би требало да буде укључена у дизајн без провере из техничког листа произвођача или релевантног стандарда материјала.

3. За шта се углавном користе Ешбијеви дијаграми (избор материјала)?

  • А) Да се израчуна тачан трошак производње дела
  • Б) Да се направи ценовник добављача
  • Ц) Упоредити својства материјала (нпр. чврстоћа-густина) и одабрати кандидате ✔
  • Д) Одредити толеранције делова

Опис: Асхби дијаграми упоређују материјале постављањем два својства материјала (нпр. чврстоћа-густина, модул еластичности) на осе и визуализују најпогоднији скуп кандидата на основу индекса перформанси. Није предвиђено да одреди тачан трошак, толеранцију или цену снабдевања.

4. АИ је дао прорачун стреса, али нисте сигурни у конзистентност јединице. Шта првенствено обухвата димензиона (јединична) анализа?

  • А) Правописне грешке у тексту
  • Б) Грешке у боји у графици
  • Ц) Величина излазне датотеке
  • Д) Недоследност јединица и грешке конверзије две стране једначине ✔

Опис: Димензиона (јединична) анализа проверава да ли су јединице обе стране једначине конзистентне; На пример, за напон, резултат би требало да буде Н/м² = Па. Ако се јединице не поклапају, постоји грешка у формули или конверзији. Не ради се о врсти, боји или величини датотеке.

5. У термичком прорачуну, АИ је рекао да грејач од 5 кВ загрева 1 литар воде за 20°Ц за 2 секунде. Који је најбољи први одговор?

  • А) Провера и одбацивање резултата са очувањем енергије и редом величине ✔
  • Б) Записивање резултата са више децималних места и прихватање
  • Ц) Питајте АИ „да ли сте сигурни?“ и бити задовољан одговором 'да'
  • Г) Избришите питање, поставите га од почетка и добијте први одговор

Опис: Брза верификација се врши провером исправности и уштедом енергије: потребно је приближно 84 кЈ да се 1 кг воде загреје на 20°Ц; Са 5 кВ ово траје ~17 секунди, а не 2 секунде. Резултат је нефизички и не може се прихватити без провере.

6. Која је најкритичнија провера пре него што верујете да је резултат стреса интерпретиран АИ у ФЕА анализи?

  • А) Обојена мапа стреса визуелно изгледа „лепо“.
  • Б) Верификација независношћу мреже, граничним условом и аналитичким поређењем ✔
  • В) Завршавање решења за кратко време
  • Д) АИ каже 'резултат је сигуран'

Опис: ФЕА резултат зависи од густине мреже, граничних услова и дефиниције материјала. Закључак; Независност мреже (резултат се не мења када се мрежа затегне) треба проверити упоређивањем са тачношћу граничног услова и, ако је могуће, са аналитичким приступом.

7. У ФЕА, како мрежа постаје гушћа у оштром унутрашњем углу, вредност напона се стално повећава. На шта ова ситуација углавном указује?

  • А) Материјал је дефинитивно неисправан
  • Б) Постоји грешка мерења сензора
  • Ц) Вештачка (сингуларна) концентрација напона на оштром углу; радијус угла мора бити моделован ✔
  • Д) Решење је увек на сигурној страни

Објашњење: Идеални оштар (нулти радијус) унутрашњи угао је сингуларна тачка у теорији еластичности; Како мрежа постаје гушћа, напетост тежи бесконачности. Ово је вештачки резултат. У стварном делу, радијус угла мора бити моделиран или интерпретиран фактором зареза/локалним проценом.

8. АИ је открио 'могући квар унутрашњег прстена' у подацима о вибрацијама лежаја. Који је најисправнији приступ?

  • А) Потпуно укидање машине без питања
  • Б) Занемарите коментар и наставите са радом
  • Ц) Потпуно онемогућавање сензора
  • Д) Верификујте интерпретацију карактеристичном фреквенцијом грешке, калибрацијом и инспекцијом на терену ✔

Објашњење: АИ тумачење аномалије/неуспеха је хипотеза. Треба проверити карактеристичне фреквенције грешака у спектру вибрација (нпр. прелазну фреквенцију унутрашњег прстена БПФИ), калибрацију сензора и могуће грешке у подацима; Коментар не треба претварати у одлуку о одржавању без провере инспекције на терену и механизма физичког квара.

9. Који аспект резултата захтева највећу пажњу приликом процене обрадивости (ДФМ) дела са АИ?

  • А) Усклађеност препорука са стварним ограничењима машина, алата и процеса ✔
  • Б) Само естетски изглед дела
  • Ц) Величина датотеке ЦАД модела
  • Д) Опције боја и премаза

Опис: АИ; Може да претпостави ограничења машина, алата, калупа и процеса без стварних ограничења радионице. На пример, може да сугерише недостижан радијус унутрашњег угла или немогућу толеранцију. Препоруке ДФМ-а треба да буду валидиране у односу на постојећу опрему и стварна ограничења процеса.

10. Шта треба да се уради пре слања АИ генерисане толеранције цртежа/ГД&Т белешке у производњу?

  • А) Обрада белешки директно у цртеж како АИ генерише
  • Б) Проверите и одобрите оцене у складу са стандардним и функционалним захтевима ✔
  • Ц) Сужавање толеранција насумично и мислећи да је безбедно
  • Д) Промена симбола како би били незаборавни

Опис: АИ; може произвести нетачне или нестандардне вредности толеранције, ГД&Т (геометријско димензионисање и толеранције) симболе или ознаке завршне обраде површине. Напомене треба да буду ревидиране у складу са релевантним стандардом (нпр. ИСО/АСМЕ ГД&Т) и функционалним захтевима; Конзистентност толеранција у смислу монтаже и функције мора да потврди инжењер.

11. АИ је навео да је дизајн „у складу са ЕН 13445 клаузула 7.4.2“. Које је најисправније понашање?

  • А) Пишите директно у извештај јер АИ даје атрибуцију
  • Б) Ослањајући се на коментар на интернет форуму
  • Ц) Провера броја супстанце и садржаја из званичног/тренутног стандардног текста ✔
  • Д) Промена броја ставке тако да се памти

Опис: АИ може произвести нетачне или халуциниране стандардне бројеве ставки и тачке прекида. Референтна супстанца и вредност не треба да се узимају као основа за дизајн или извештај без верификације из званичног и тренутног стандардног текста.

12. Шта је обавезно пре употребе Питхон инжењерског прорачуна генерисане вештачком интелигенцијом?

  • А) Директно поверење коду јер ради без грешака
  • Б) Скратите имена променљивих и обришите редове коментара
  • Ц) Напишите скрипту дуже и претпоставите да је безбедан
  • Д) Валидација са тестовима са познатим резултатима, провером јединица и ивичним случајевима ✔

Коментар: АИ код може да садржи нетачну конверзију јединица, нетачну формулу или у крајњим случајевима нетачан резултат и може погрешно израчунати чак и ако ради без грешака. Цоде; Тест улазе са познатим резултатима треба потврдити провером јединице (величине) и ивичним случајевима.

13. Шта је исправно у погледу одговорности у извођењу сигурносно-критичног прорачуна са АИ у машинству?

  • А) Одговорност остаје на надлежном инжењеру који одобри; АИ није замена за одобрење ✔
  • Б) Инжењер је ослобођен одговорности ако АИ одобри
  • Ц) АИ излаз замењује потпис инжењера
  • Д) Људска верификација је непотребна на налогу који је критичан за безбедност

Опис: Надлежни инжењер је одговоран за тачност и одобрење/потписивање инжењерског резултата; АИ не може преузети ову одговорност. За прорачуне и дизајне од кључне важности за безбедност, АИ је нацрт/улаз и није замена за одобрење и верификацију инжењера.

14. Која је најбоља акција када покушавате да анализирате поверљиви дизајн производа компаније помоћу јавног АИ алата?

  • А) Инсталирање стелт дизајна на јавном возилу што се тиче брзине
  • Б) Усклађеност са политиком података, анонимизација осетљивих података или коришћење корпоративних/изолованих алата ✔
  • Ц) Дељење података о клијентима је увек неопходно за брзину
  • Д) Питање приватности је ирелевантно за коришћење АИ

Откривање: Поверљиви дизајн, подаци о клијентима или непатентиране идеје не би требало да се као такви постављају на јавне алате чија политика података није позната; Ово представља ризик од повреде интелектуалне својине и приватности. Политика података компаније се мора поштовати, осетљиви подаци морају бити анонимизовани или се мора користити корпоративни/изоловани алат.