단위 6 / 11

테스트 및 검증 데이터 분석

이득:

  • 동력계, 도로 테스트, 지구력, DVP&R 등의 테스트 데이터 유형과 검증 프로세스에서의 위치를 인식하는 기능
  • 인공 지능을 사용하여 대규모 테스트 데이터 세트에서 이상 현상을 요약하고 플래그를 지정하며 보고서 초안을 작성하는 기능
  • 측정 불확실성, 반복성 및 허용 기준을 사용하여 AI의 테스트 해석을 교차 검증하는 기능

차량이나 부품이 생산에 들어가기 전에 "요구 사항을 충족합니까?"라는 질문에 대한 대답은 테스트 및 검증 데이터에 숨겨져 있습니다. 자동차 테스트는 실험실(동력계, 기후 챔버, 진동 테이블)에서 도로(도로 테스트, 지구력 트랙) 및 충돌 실험실까지 확장됩니다. 이러한 테스트는 대규모 데이터를 생성합니다. 단일 내구성 테스트에는 수백만 행의 센서 기록이 포함될 수 있습니다. 이 단원에서는 이 데이터의 유형, 검증 프로세스에서의 위치, 인공 지능이 분석에 어떻게 도움이 되는지(그러나 결정은 엔지니어에게 어떻게 남아 있는지) 살펴보겠습니다.

확인과 검증이란 무엇입니까?

두 용어는 종종 혼동됩니다.

  • 확인: "제품을 올바르게 제작했나요?" 요구사항 준수 여부를 측정합니다. 예: "제동 거리 사양에는 38미터라고 되어 있는데, 우리가 측정한 값은 36.5미터입니다. 적합합니다."
  • 검증: "우리가 올바른 제품을 만들었는가?" 실제 사용 요구 사항을 충족합니까? 예: "운전자는 이 브레이크가 안전하다고 생각합니까?"

자동차에서 이 프로세스는 일반적으로 DVP&R(Design Verification Plan and Report) 문서로 관리됩니다. 이는 어떤 요구 사항을 어떤 테스트로 테스트할지, 어떤 승인 기준으로 테스트할지, 결과를 나열한 표입니다.

일반적인 테스트 데이터 유형

테스트 유형

어떤 조치를 취합니까?

샘플 데이터

동력계(dyno)

엔진 출력, 토크, 배기가스 배출

RPM-토크 곡선, 연료 소비

도로 테스트

실제 조건 동작

GPS, 가속도, 주행 신호

내구성

평생의 피로

진동, 변형률, 사이클 수

기후/환경

온냉습 저항

온도, 작동 상태

NVH

소음/진동

음압, 가속도 스펙트럼

충돌(충돌)

보안

고속 비디오, 더미 센서

각 테스트에는 승인 기준(요구사항)이 있습니다. 분석은 데이터가 이 기준을 통과하는지 여부를 입증하는 것입니다.

인공지능은 테스트 분석에서 어떤 일을 하나요?

AI는 테스트 데이터 분석의 강력한 보조자로서 다음을 수행합니다.

  1. 요약: 통계 요약, 최고값, 수백만 행의 분포.
  2. 이상 표시: "이 녹음에서 214초에 예상치 못한 토크 저하가 있습니다."
  3. 패턴 비교: 두 번의 테스트 실행 또는 서로 다른 차량을 비교하고 차이점을 찾는 것입니다.
  4. 보고서 초안: DVP&R 결과 텍스트 및 그래픽 설명 초안을 작성합니다.
  5. 코드 도움말: 분석 스크립트 생성(Python).

하지만 조심하세요. 이것들은 모두 스케치와 힌트일 뿐입니다. 테스트 통과 여부, 이상이 실제인지 측정 오류인지를 결정하는 사람은 테스트 엔지니어입니다.

힌트: AI에게 "이 테스트를 통과했나요?"라고 물어보세요. "이 데이터의 어느 지역이 허용 기준에 따라 위험을 나타내는지, 어떤 추가 확인을 해야 합니까?"라고 묻는 것보다, 묻다. 첫 번째는 결정(AI의 작업 아님)이 필요하고 두 번째는 힌트(AI의 작업)가 필요합니다.

측정 불확실성 및 반복성

어떤 측정도 완벽하지 않습니다. 두 가지 개념이 중요합니다.

  • 측정 불확도: 측정 장치의 자연적인 오차 한계입니다. 제동 거리가 "36.5m"이고 불확실성이 ±0.8m인 경우 실제 값은 35.7~37.3m입니다. 사양이 38m이면 안전합니다. 그러나 사양이 37m라면 불확실성은 한계에 매우 가까울 것입니다.
  • 반복성: 동일한 테스트를 다시 수행하면 비슷한 결과가 나오나요? 우연히 한 번의 실행이 지나갔을 수도 있습니다. 자동차에서는 다양한 차량/조건에서 중요한 테스트가 여러 번 반복됩니다.

AI가 표시한 "이상 현상"은 실제로 측정 노이즈일 수 있습니다. 결정을 내리기 전에 불확실성과 재확인이 필수적입니다.

주의: "허용 기준 통과"라고 말하는 AI는 측정 불확실성과 중복을 설명하지 않는 경우 기만적입니다. 한계에 가까운 결과에서는 불확실성의 한계로 인해 테스트 결과가 변경될 수 있습니다.

미니 사례 연구

사례 1 - 이상인가, 소음인가? 지구력 테스트에서 AI는 스트레인 신호에 3번의 급격한 점프를 표시합니다. 테스트 엔지니어는 원시 데이터를 살펴봅니다. 점프는 데이터 로거가 다시 시작되는 정확한 순간에 해당합니다. 따라서 이는 실제 구조적 사건이 아니라 등록 중단입니다. 변칙은 유물로 문서화되어 있습니다. 결과: AI가 단서를 제공하고 엔지니어가 근본 원인을 찾아냈습니다. 자동 "실패" 스탬프가 잘못되었습니다.

사례 2 - 경계선에 가까운 결과. 브레이크 테스트 평균 거리는 37.4m, 사양은 38m이다. AI는 "통과"라고 말합니다. 엔지니어는 측정 불확도(±0.9m)와 2번의 실행만 이루어졌다는 사실을 깨달았습니다. 상한은 38.3m 사양을 초과합니다. 테스트는 6회까지 증가하고 조건(핫 브레이크, 적재 차량)이 다양해집니다. 결과는 안전한 것으로 확인되었습니다. 결론: 모호함과 반복 없이 '합격'이라고 말하는 것은 위험하다.

사례 3 - 빠른 요약의 힘. 한 번의 NVH 테스트에는 12개 장비에서 얻은 40GB의 데이터가 있습니다. AI는 각 도구의 피크 주파수와 진폭을 요약한 표와 비교를 출력합니다. 엔지니어는 2시간이 아닌 20분 만에 문제가 있는 차량 2대에 주의를 집중합니다. 그런 다음 그는 자신의 손으로 두 차량의 원시 스펙트럼을 조사합니다. 결과: AI가 제거를 수행하고 엔지니어가 심층 분석을 수행했습니다.

프롬프트 템플릿

템플릿 1 - 테스트 요약:

역할: 당신은 테스트 데이터 분석가입니다. 과제: 아래의 동력계 기록을 요약하세요. 상황: RPM 데이터, 1000-6000rpm; 허용 기준: 최소 320Nm의 최대 토크, 전력 곡선 붕괴 없음. 제약: '합격/불합격' 의사결정; 기준에 따라 위험 구역 및 추가 제어 권장 사항을 나열합니다. 출력: 요약 통계 + 위험 영역 + 권장 제어.

템플릿 2 - 이상 구문 분석:

역할: 귀하는 측정 및 계측 전문가입니다. 작업: 표시된 이상 현상이 실제 이벤트인지 측정 인공물인지 구별하는 방법을 안내해 주세요. 상황: 스트레인 신호의 3번의 갑작스러운 점프; 레코더가 간헐적으로 다시 시작됩니다. 출력: 각 이상 징후에 대한 가능한 설명 + 판별 검사.

템플릿 3 - 불확실성 평가:

역할: 귀하는 계측(측정 과학) 컨설턴트입니다. 작업: 허용 기준에 따라 결과의 안전성을 평가합니다. 상황: 측정값 37.4m, 불확실성 ±0.9m, 사양 38m, 실행 횟수 2.제약: 불확실성과 반복 횟수를 고려해야 합니다. 한계에 근접함을 강조합니다. 출력: 평가 + 추가 테스트에 대한 권장 사항 + 남은 위험.

템플릿 4 - DVP&R 보고서 초안:

역할: 당신은 검증 엔지니어입니다. 작업: 다음 테스트 결과에 대한 DVP&R 결과 텍스트 초안을 작성합니다. 맥락: 요구사항, 테스트 방법, 허용 기준 및 측정값이 충족됩니다(익명). 제약조건: 초안에만 해당; 엄격한 '승인됨' 설명을 사용하지 말고 엔지니어 승인을 위한 공간을 남겨두십시오. 출력: 요구 사항 | 테스트 | 기준 | 결과 | 상태(초안).

약한 프롬프트 / 강한 프롬프트

약한 프롬프트:

이 테스트 데이터를 보세요. 통과했나요?

수용 기준, 모호함, 반복이 없습니다. AI는 맹목적으로 '합격/불합격'을 알려준다. 이는 위험하다.

강력한 프롬프트:

역할: 당신은 자동차 테스트 데이터 분석가입니다. 작업: 첨부된 브레이크 테스트 데이터를 승인 기준에 따라 분석하고 결정에 필요한 추가 증거가 무엇인지 조언합니다. 맥락: 기준 38m; 측정 불확도 ±0.9m; 2가지 조건이 있습니다. 하나의 조건에서 차량 부하 테스트를 거쳤습니다. 제약 조건: '통과' 선언; 불확실성과 중복 측면에서 위험과 제안된 추가 조건을 나열합니다. 출력: 위험 | 정당화 | 추가 테스트 테이블을 권장합니다.

일반적인 실수

  • AI가 성공/실패 결정을 내리도록 합니다. 결정은 엔지니어가 내립니다. AI가 단서를 제공합니다.
  • 측정 불확실성을 무시합니다. 한계에 가까운 결과에서는 불확실성이 결과를 변화시킵니다.
  • 한 번의 실행에 의존합니다. 반복성이 없으면 결과가 깨지기 쉽습니다.
  • 이상 현상을 즉시 "오작동"으로 간주하십시오. 녹음 아티팩트/소음이 있을 수 있습니다. 원시 데이터로 돌아갑니다.
  • 보고서를 블라인드 복사합니다. AI 초안은 엔지니어의 승인과 수정 없이는 공식 문서가 될 수 없습니다.

요약하면

  • 검증은 요구사항 준수를 측정하고 검증은 실제 요구 준수를 측정합니다. DVP&R은 이 프로세스를 관리합니다.
  • AI 테스트 데이터에 대한 보고서 요약, 이상 표시, 비교 및 ​​초안 작성을 위한 강력한 도우미입니다.
  • 결정(성공/실패)은 엔지니어에게 달려 있습니다. AI는 징후가 아닌 힌트를 제공합니다.
  • 측정 불확실성과 반복성이 없으면 결과를 해석할 수 없습니다. 한계에 가까운 결과에는 특별한 주의가 필요합니다.
  • 실제 이벤트인지 측정 아티팩트인지 확인하려면 이상 현상을 원시 데이터로 분리해야 합니다.

응용과제

테스트를 선택합니다(예: 온도 조절실의 냉간 시동). (1) 요구사항, 시험방법 및 합격기준을 작성한다. (2) 템플릿 1을 사용하여 요약 및 위험 영역 분석을 요청합니다(결정을 요청하지 않음). (3) 템플릿 3을 사용하여 불확실성 한계에 가까운 가상 결과를 평가합니다. (4) 템플릿 4를 사용하여 엔지니어 승인을 위해 떠날 영역을 나타내는 DVP&R 초안을 생성합니다.

체크리스트

  • [ ] 요구사항과 승인 기준을 명확하게 작성했습니다.
  • [ ] AI에게 결정이 아닌 위험/힌트를 요청했습니다.
  • [ ] 측정 불확도를 결과에 포함시켰습니다.
  • [ ] 반복성(실행 횟수) 숙련도를 평가했습니다.
  • [ ] 사실과 인공물을 구분하여 원시 데이터로 이상 징후를 조사했습니다.
  • [ ] 엔지니어 승인을 위해 보고서 초안을 표시했습니다.