Satuan 6 / 11

Analisis Data Uji dan Validasi

Keuntungan:

  • Kemampuan untuk mengenali tipe data pengujian seperti dinamometer, uji jalan, ketahanan dan DVP&R serta tempatnya dalam proses verifikasi
  • Kemampuan untuk menggunakan kecerdasan buatan untuk meringkas, menandai anomali, dan menyusun laporan dalam kumpulan data pengujian yang besar
  • Kemampuan untuk memvalidasi silang interpretasi tes AI dengan ketidakpastian pengukuran, keterulangan, dan kriteria penerimaan

Jawaban atas pertanyaan “apakah memenuhi persyaratan” sebelum kendaraan atau komponen mulai diproduksi tersembunyi dalam data pengujian dan verifikasi. Pengujian di bidang otomotif mulai dari laboratorium (dinamometer, ruang iklim, tabel getaran) hingga jalan raya (uji jalan, lintasan ketahanan) dan laboratorium kecelakaan. Pengujian ini menghasilkan data yang sangat besar: satu pengujian ketahanan dapat berisi jutaan baris rekaman sensor. Dalam unit ini, kita akan melihat jenis data ini, tempatnya dalam proses verifikasi, dan bagaimana kecerdasan buatan membantu dalam analisis (tetapi bagaimana keputusan tetap berada di tangan insinyur).

Apa itu verifikasi dan validasi?

Kedua istilah ini sering membingungkan:

  • Verifikasi: "Apakah kami membuat produk dengan benar?" Mengukur kepatuhan terhadap persyaratan. Contoh: "Spesifikasi jarak pengereman adalah 38 meter; kami mengukurnya, 36,5 meter. Cocok."
  • Validasi: “Apakah produk yang kita buat sudah tepat?” Apakah itu memenuhi kebutuhan dalam penggunaan nyata? Contoh: “Apakah pengemudi merasa rem ini aman?”

Di bidang otomotif, proses ini biasanya dikelola dengan dokumen DVP&R (Rencana dan Laporan Verifikasi Desain): berupa tabel yang berisi daftar persyaratan yang akan diuji dengan pengujian yang mana, dengan kriteria penerimaan yang mana, dan hasilnya.

Tipe data pengujian yang umum

Jenis tes

Tindakan apa

data sampel

Dinamometer (dinamo)

Tenaga mesin, torsi, emisi

Kurva torsi RPM, konsumsi bahan bakar

tes jalan

Perilaku kondisi sebenarnya

GPS, akselerasi, sinyal mengemudi

daya tahan

kelelahan seumur hidup

Getaran, regangan, jumlah siklus

iklim/lingkungan

Ketahanan panas-dingin-kelembaban

suhu, status kerja

NVH

Kebisingan/getaran

Tekanan suara, spektrum percepatan

Tabrakan (tabrakan)

Keamanan

Video berkecepatan tinggi, sensor tiruan

Setiap tes memiliki kriteria penerimaan (persyaratan). Analisis untuk membuktikan apakah data lolos kriteria tersebut.

Apa yang dilakukan kecerdasan buatan dalam analisis tes?

AI adalah asisten yang ampuh dalam analisis data pengujian untuk:

  1. Peringkasan: Ringkasan statistik, nilai puncak, distribusi dari jutaan baris.
  2. Penandaan anomali: "Ada penurunan torsi yang tidak terduga pada 214 detik dalam rekaman ini."
  3. Perbandingan pola: Membandingkan dua uji coba atau kendaraan berbeda dan menemukan perbedaan.
  4. Draf laporan: Menyusun teks hasil DVP&R dan penjelasan grafis.
  5. Bantuan kode: Menghasilkan skrip analisis (Python).

Namun hati-hati: ini semua hanyalah sketsa dan petunjuk. Insinyur pengujianlah yang memutuskan apakah pengujian tersebut lulus atau tidak dan apakah suatu anomali itu nyata atau kesalahan pengukuran.

Petunjuk: Tanyakan kepada AI “apakah tes ini lulus?” Daripada bertanya, "Wilayah mana dalam data ini yang menunjukkan risiko berdasarkan kriteria penerimaan, pemeriksaan tambahan apa yang harus saya lakukan?" bertanya. Yang pertama membutuhkan keputusan (bukan tugas AI), yang kedua membutuhkan petunjuk (tugas AI).

Ketidakpastian dan pengulangan pengukuran

Tidak ada pengukuran yang sempurna. Dua konsep sangat penting:

  • Ketidakpastian pengukuran: Margin kesalahan alami suatu alat ukur. Jika jarak pengereman adalah "36,5 m" dan ketidakpastiannya ±0,8 m, maka nilai sebenarnya adalah antara 35,7-37,3 m. Jika spesifikasinya 38m Anda aman; tetapi jika spesifikasinya 37 m, ketidakpastiannya akan sangat mendekati batasnya.
  • Keterulangan: Apakah Anda mendapatkan hasil yang sama ketika Anda melakukan tes yang sama lagi? Satu kali lari mungkin terjadi secara kebetulan. Dalam otomotif, pengujian kritis diulang berkali-kali, pada kendaraan/kondisi berbeda.

"Anomali" yang ditandai oleh AI mungkin sebenarnya adalah kebisingan pengukuran. Ketidakpastian dan pengecekan ulang sangat penting sebelum mengambil keputusan.

Perhatian: AI yang menyatakan "melampaui kriteria penerimaan" bersifat menipu jika tidak memperhitungkan ketidakpastian dan duplikasi pengukuran. Jika hasil mendekati batas, margin ketidakpastian dapat mengubah hasil pengujian.

Studi kasus kecil

Kasus 1 - Anomali atau kebisingan? Dalam uji ketahanan, AI menandai 3 lompatan tiba-tiba pada sinyal regangan. Insinyur penguji melihat data mentah: lompatan tersebut sesuai dengan momen yang tepat ketika pencatat data dimulai ulang; Jadi ini bukan peristiwa struktural nyata, ini penghentian pendaftaran. Anomali didokumentasikan sebagai artefak. Hasilnya: AI memberikan petunjuk, merekayasa akar permasalahan yang terisolasi; cap "kegagalan" otomatis akan salah.

Kasus 2 - Hasil mendekati batas. Jarak rata-rata dalam pengujian rem adalah 37,4 m, spesifikasinya 38 m. AI mengatakan "lulus". Insinyur menyadari ketidakpastian pengukuran (±0,9 m) dan hanya 2 kali lari yang dilakukan; Batas atas melebihi spesifikasi 38,3 m. Tes ditingkatkan menjadi 6 kali lari dan kondisinya (rem panas, kendaraan bermuatan) bervariasi; Hasilnya dipastikan aman. Kesimpulan: Mengatakan “lulus” tanpa ambiguitas dan pengulangan adalah hal yang beresiko.

Kasus 3 - Kekuatan ringkasan singkat. Satu tes NVH memiliki 40 GB data dari 12 instrumen. AI mengeluarkan tabel dan perbandingan yang merangkum frekuensi puncak dan amplitudo untuk setiap alat; Insinyur mengarahkan perhatiannya ke 2 kendaraan bermasalah dalam waktu 20 menit, bukan 2 jam. Kemudian dia memeriksa spektrum mentah kedua kendaraan tersebut dengan tangannya sendiri. Hasil: AI melakukan eliminasi, insinyur melakukan analisis mendalam.

templat cepat

Templat 1 - Ringkasan tes:

Peran: Anda adalah analis data pengujian. Tugas: Ringkaslah catatan dinamometer di bawah ini. Konteks: Data RPM, 1000-6000 rpm; kriteria penerimaan: torsi puncak minimal 320 Nm, tidak ada keruntuhan kurva tenaga. Batasan: Pengambilan keputusan 'Lulus/gagal'; Buat daftar zona risiko dan rekomendasi pengendalian tambahan sesuai kriteria. Keluaran: Ringkasan statistik + zona risiko + pengendalian yang direkomendasikan.

Templat 2 - Penguraian anomali:

Peran: Anda adalah ahli pengukuran dan instrumentasi. Tugas: Membimbing saya dalam membedakan apakah anomali yang ditandai merupakan peristiwa nyata atau artefak pengukuran. Konteks: 3 lompatan tiba-tiba pada sinyal regangan; Perekam dimulai ulang sebentar-sebentar. Keluaran: Penjelasan yang mungkin + pemeriksaan diskriminan untuk setiap anomali.

Templat 3 - Penilaian ketidakpastian:

Peran: Anda adalah konsultan metrologi (ilmu pengukuran).Tugas: Mengevaluasi keamanan hasil sesuai dengan kriteria penerimaan.Konteks: Nilai terukur 37,4 m, ketidakpastian ±0,9 m, spesifikasi38 m, jumlah lari 2.Kendala: Pastikan untuk memperhitungkan ketidakpastian dan jumlah pengulangan; menekankan kedekatan dengan batas. Keluaran: Evaluasi + rekomendasi untuk pengujian tambahan + risiko yang tersisa.

Templat 4 - Draf laporan DVP&R:

Peran: Anda adalah teknisi verifikasi. Tugas: Menulis draft teks hasil DVP&R untuk hasil tes berikut. Konteks: Persyaratan, metode pengujian, kriteria penerimaan, dan nilai terukur terpenuhi (anonim). Batasan: Hanya draf; Jangan gunakan pernyataan 'disetujui' yang ketat, sisakan ruang untuk persetujuan insinyur. Keluaran: Persyaratan | tes | kriteria | hasil | status (draf).

Perintah lemah / Perintah kuat

Perintah yang lemah:

Lihat data uji ini, apakah lolos?

Tidak ada kriteria penerimaan, ambiguitas dan pengulangan; AI mengatakan “lulus/gagal” secara buta, dan itu berbahaya.

Perintah yang kuat:

Peran: Anda adalah analis data pengujian otomotif. Tugas: Menganalisis data uji rem terlampir terhadap kriteria penerimaan dan memberi saran bukti tambahan apa yang diperlukan untuk mengambil keputusan. Konteks: Kriteria 38 m; ketidakpastian pengukuran ±0,9 m; Ada 2 kondisi;uji beban kendaraan dalam satu kondisi. Kendala: Menyatakan 'Lulus'; Buat daftar risiko dan usulan kondisi tambahan dalam hal ketidakpastian dan duplikasi. Keluaran: Risiko | pembenaran | merekomendasikan tabel pengujian tambahan.

Kesalahan umum

  • Membuat AI mengambil keputusan maju/gagal. Keputusan dibuat oleh insinyur; AI memberi petunjuk.
  • Mengabaikan ketidakpastian pengukuran. Ketika hasil mendekati batas, ketidakpastian mengubah hasil.
  • Mengandalkan sekali jalan. Tanpa pengulangan, hasilnya akan rapuh.
  • Segera anggap anomali tersebut sebagai "kerusakan". Mungkin ada rekaman artefak/kebisingan; Kembali ke data mentah.
  • Menyalin laporan secara buta. Draf AI tidak dapat menjadi dokumen resmi tanpa persetujuan dan koreksi insinyur.

Singkatnya

  • Verifikasi mengukur kesesuaian terhadap persyaratan, validasi mengukur kesesuaian dengan kebutuhan sebenarnya; DVP&R mengelola proses ini.
  • Ini adalah asisten yang ampuh dalam meringkas, menandai anomali, membandingkan, dan menyusun laporan pada data pengujian AI.
  • Keputusan (lulus/gagal) ada di tangan teknisi; Petunjuk AI, bukan tanda.
  • Tanpa ketidakpastian pengukuran dan pengulangan, hasilnya tidak dapat diinterpretasikan; Hasil yang mendekati batas memerlukan perhatian khusus.
  • Anomali harus dipisahkan dengan data mentah untuk menentukan apakah anomali tersebut merupakan peristiwa nyata atau artefak pengukuran.

Tugas aplikasi

Pilih pengujian (misalnya penyalaan dingin di ruang iklim). (1) Tuliskan persyaratan, metode pengujian dan kriteria penerimaan. (2) Meminta ringkasan dan analisis zona risiko dengan Template 1 (tanpa meminta keputusan). (3) Evaluasi hasil imajiner yang mendekati batas ketidakpastian dengan Templat 3. (4) Buatlah draf DVP&R menggunakan Templat 4, yang menunjukkan area mana yang akan Anda tinggalkan untuk mendapatkan persetujuan insinyur.

daftar periksa

  • [ ] Saya telah menuliskan dengan jelas persyaratan dan kriteria penerimaannya.
  • [ ] Saya menanyakan risiko/petunjuk kepada AI, bukan keputusan.
  • [ ] Saya memasukkan ketidakpastian pengukuran dalam hasilnya.
  • [ ] Saya mengevaluasi kemahiran pengulangan (jumlah proses).
  • [ ] Saya memeriksa anomali dengan data mentah dengan membedakan antara fakta dan artefak.
  • [ ] Saya menandai draf laporan untuk persetujuan insinyur.