Добици:
- Способност препознавања типова тестних података као што су динамометар, тест на путу, издржљивост и ДВП&Р и њихово место у процесу верификације
- Могућност коришћења вештачке интелигенције за сумирање, означавање аномалија и израду извештаја у великим скуповима тестних података
- Способност унакрсног потврде интерпретације теста АИ са мерном несигурношћу, поновљивошћу и критеријумима прихватања
Одговор на питање „да ли испуњава услове“ пре него што возило или компонента крене у производњу крије се у подацима о тестирању и верификацији. Испитивање у аутомобилској индустрији протеже се од лабораторије (динамометар, климатска комора, вибрациони сто) до пута (тест на путу, стаза издржљивости) и лабораторије за удес. Ови тестови генеришу огромне податке: један тест издржљивости може да садржи милионе редова записа сензора. У овој јединици ћемо видети врсте ових података, њихово место у процесу верификације и како вештачка интелигенција помаже у анализи (али како одлука остаје на инжењеру).
Шта су верификација и валидација?
Ова два термина се често мешају:
- Провера: „Да ли смо исправно направили производ?“ Мери усклађеност са захтевом. Пример: „Спецификација пута кочења каже 38 метара; ми смо измерили, 36,5 метара. Погодно.“
- Валидација: „Да ли смо направили прави производ?“ Да ли задовољава потребе у стварној употреби? Пример: „Да ли возачи сматрају да се ова кочница осећа безбедно?“
У аутомобилској индустрији, овим процесом се обично управља помоћу документа ДВП&Р (План и извештај верификације дизајна): то је табела која наводи који захтев ће бити тестиран којим тестом, са којим критеријумима прихватања и резултатом.
Типични типови тестних података
Тип теста
Какве мере
узорак података
динамометар (дино)
Снага мотора, обртни момент, емисија
Крива обртног момента, потрошња горива
тест на путу
Понашање стварног стања
ГПС, убрзање, сигнали за вожњу
издржљивост
доживотни умор
Вибрације, напрезање, број циклуса
клима/животна средина
Отпорност на топло-хладно-влагу
температура, радни статус
НВХ
Бука/вибрације
Звучни притисак, спектар убрзања
судар (судар)
Безбедност
Брзи видео, лажни сензори
Сваки тест има критеријум прихватања (захтев). Анализа треба да докаже да ли подаци испуњавају овај критеријум.
Шта вештачка интелигенција ради у анализи тестова?
АИ је моћан асистент у анализи тестних података за:
- Резиме: Статистички резиме, вршне вредности, дистрибуција из милиона редова.
- Ознака аномалије: „На овом снимку постоји неочекивани пад обртног момента на 214 секунди.“
- Поређење образаца: Упоређивање две пробне вожње или различитих возила и проналажење разлика.
- Нацрт извештаја: Израда текста резултата ДВП&Р и графичких објашњења.
- Помоћ коду: Генерисање скрипте за анализу (Питхон).
Али будите опрезни: ово су све скице и наговештаји. Тест инжењер је тај који одлучује да ли је тест прошао или не и да ли је аномалија стварна или је грешка мерења.
Савет: Питајте АИ "да ли је овај тест прошао?" Уместо да питам: „Које области у овим подацима показују ризик према критеријумима прихватања, које додатне провере треба да извршим?“ питати. Први захтева одлуке (не посао вештачке интелигенције), други захтева наговештаје (посао вештачке интелигенције).
Мерна несигурност и поновљивост
Ниједно мерење није савршено. Два концепта су критична:
- Мерна несигурност: природна граница грешке мерног уређаја. Ако је пут кочења "36,5 м" и несигурност ±0,8 м, стварна вредност је између 35,7-37,3 м. Ако је спецификација 38м сигурни сте; али да је спецификација 37 м, несигурност би била веома близу границе.
- Поновљивост: Да ли добијате сличне резултате када поново урадите исти тест? Једна вожња је можда прошла случајно. У аутомобилској индустрији, критични тестови се понављају више пута, у различитим возилима/условима.
„Аномалија“ коју означава АИ може заправо бити шум мерења. Неизвесност и двострука провера су неопходни пре доношења одлуке.
Опрез: АИ изговарање „положен критеријум прихватања“ је варљиво ако не узима у обзир несигурност мерења и дуплирање. У резултатима близу границе, граница несигурности може променити резултат теста.
Мини студије случаја
Случај 1 - Аномалија или бука? У тесту издржљивости, АИ означава 3 изненадна скока у сигналу напрезања. Инжењер за тестирање гледа необрађене податке: скокови одговарају тачним тренуцима када се дата логгер поново покреће; Дакле, то није прави структурални догађај, то је прекид регистрације. Аномалије су документоване као артефакти. Резултат: АИ је дао траг, инжењер изоловао основни узрок; аутоматски печат „неуспех“ би био погрешан.
Случај 2 – Скоро гранични резултат. Просечна удаљеност у тесту кочница је 37,4 м, спецификација је 38 м. АИ каже "прошао". Инжењер схвата мерну несигурност (±0,9 м) и да су направљене само 2 вожње; Горња граница премашује спецификацију од 38,3 м. Тест је повећан на 6 вожњи и услови (врућа кочница, оптерећено возило) се мењају; Резултат је потврђен безбедан. Закључак: Рећи „прошао“ без двосмислености и понављања је ризично.
Случај 3 – Моћ кратког резимеа. Један НВХ тест има 40 ГБ података са 12 инструмената. АИ даје табелу и поређење са сумирањем вршних фреквенција и амплитуда за сваки алат; Инжењер усмерава пажњу на 2 проблематична возила за 20 минута уместо за 2 сата. Затим својим рукама испитује сирови спектар та два возила. Резултат: АИ је извршио елиминацију, инжењер је извршио дубоку анализу.
брзи шаблони
Шаблон 1 – Резиме теста:
Улога: Ви сте аналитичар тест података. Задатак: Сумирајте запис динамометра у наставку. Контекст: подаци о обртајима, 1000-6000 о/мин; критеријум прихватања: вршни обртни момент најмање 320 Нм, без колапса криве снаге. Ограничење: доношење одлука 'прошао/непао'; Наведите зоне ризика и додатне препоруке за контролу према критеријумима. Излаз: збирна статистика + зона ризика + препоручена контрола.
Шаблон 2 – рашчлањивање аномалија:
Улога: Ви сте стручњак за мерење и инструментацију. Задатак: Водите ме у разликовању да ли су означене аномалије стварни догађаји или артефакти мерења. Контекст: 3 изненадна скока сигнала напрезања; Диктафон се повремено поново покреће. Излаз: Могуће објашњење + провера дискриминације за сваку аномалију.
Шаблон 3 – Процена несигурности:
Улога: Ви сте консултант за метрологију (науку о мерењу). Задатак: Процените сигурност резултата према критеријумима прихватања. Контекст: Измерена вредност 37,4 м, несигурност ±0,9 м, спецификација 38 м, број вожњи 2. Ограничење: Обавезно узмите у обзир несигурност и број понављања. нагласити блискост до границе.Исход: Евалуација + препорука за додатно тестирање + преостали ризик.
Шаблон 4 – ДВП&Р нацрт извештаја:
Улога: Ви сте верификациони инжењер. Задатак: Напишите нацрт текста ДВП&Р резултата за следеће резултате теста. Контекст: Услов, метода испитивања, критеријум прихватања и измерена вредност су испуњени (анонимно). Ограничење: само нацрт; Немојте користити стриктну изјаву 'одобрено', оставите простор за одобрење инжењера. Излаз: Захтев | тест | критеријум | резултат | статус (нацрт).
Слаби промпт / Јаки промпт
Слабо обавештење:
Погледајте ове податке теста, да ли су прошли?
Без критеријума прихватања, двосмислености и понављања; АИ каже слепо „прошао/неуспео“, што је опасно.
Снажан упит:
Улога: Ви сте аналитичар података о тестовима аутомобила. Задатак: Анализирати приложене податке о испитивању кочница у односу на критеријуме прихватања и саветовати који додатни докази су потребни за одлуку. Контекст: Критеријум 38 м; мерна несигурност ±0,9 м; Постоје 2 услова; оптерећење возила тестирано у једном услову. Ограничење: Декларисање 'Положено'; Навести ризике и предложене додатне услове у погледу неизвесности и дуплирања.Исход: Ризик | оправдање | препоручена додатна табела за испитивање.
Уобичајене грешке
- Натерати АИ да донесе одлуку „иди/неуспеш“. Одлуку доноси инжењер; АИ даје трагове.
- Занемаривање мерне несигурности. У резултатима близу границе, неизвесност мења исход.
- Ослањајући се на једно трчање. Без поновљивости резултат је крхак.
- Одмах размотрите аномалију као "квар". Можда постоји артефакт/шум снимања; Вратите се на необрађене податке.
- Слепо копирање извештаја. АИ нацрт не може постати званични документ без одобрења и исправке инжењера.
Укратко
- Верификација мери усаглашеност са захтевом, валидација мери усклађеност са стварним потребама; ДВП&Р управља овим процесом.
- То је моћан помоћник у сумирању, обележавању аномалија, упоређивању и изради извештаја о подацима тестова вештачке интелигенције.
- Одлука (прошао/непао) је на инжењеру; АИ наговештаји, не знаци.
- Без мерне несигурности и поновљивости, резултат се не може тумачити; Резултати близу границе захтевају посебну пажњу.
- Аномалије морају бити раздвојене сировим подацима да би се утврдило да ли су стварни догађаји или артефакти мерења.
Задатак апликације
Изаберите тест (нпр. хладно покретање у климатској комори). (1) Напишите захтев, метод испитивања и критеријуме прихватања. (2) Захтевати сажетак и анализу зона ризика са шаблоном 1 (без тражења одлуке). (3) Процените замишљени исход близу границе неизвесности помоћу шаблона 3. (4) Направите нацрт ДВП&Р користећи шаблон 4, наводећи које области остављате на одобрење инжењера.
контролна листа
- [ ] Јасно сам написао услове и критеријуме прихватања.
- [ ] Тражио сам од АИ ризик/наговештај, а не одлуку.
- [ ] Укључио сам мерну несигурност у резултат.
- [ ] Оценио сам способност поновљивости (број покретања).
- [ ] Испитивао сам аномалије са сировим подацима правећи разлику између чињенице и артефакта.
- [ ] Означио сам нацрт извештаја за одобрење инжењера.