Çift-sensör yedekliliği karşılaştırma deneylerinde sık karşılaşılan sorunlar nelerdir?

Değişken kontrolü, veri istatistikleri ve sonuç değerlendirmesi, ikili-sensör yedekliliği karşılaştırma araştırmalarında üç temel endişe alanıdır. En yaygın sekiz sorun ve bunların düzeltmeleri aşağıda listelenmiştir:

I. Değişken kontrolüyle ilgili sorunlar (tuzaklara en yatkın olan, sonuçların geçerliliğini doğrudan etkileyen)

Sorun: Değişkenler benzersiz değildir; donanım ve algoritma değişiklikleri aynı anda gerçekleşir. Deneyler yapılırken birçok kişi hem sensörü hem de algoritmayı aynı anda değiştirir. Sonuçlar düzeldiğinde, suçlunun algoritma mı yoksa sensör mü olduğundan emin olamıyorlar.

Çözüm: Algoritmayı değiştirin, bir sensör setini diğerine geçmeden önce test edin ve aynı sensör çiftini aynı montaj yerinde kullanın.

Tutarsız test koşulları ve değiştirilmiş süreç parametreleri sorundur. A ürünü kontrol grubu tarafından, B ürünü ise deney grubu tarafından kullanılmaktadır. İki ürünün süreçleri farklı şekilde dalgalandığı için sonuçlar karşılaştırılamaz.

Çözüm: Test boyunca aynı ürünün üretimini sabit tutun ve sıcaklık, basınç veya hız gibi süreç değişkenlerini değiştirmeyin. Herhangi bir değişiklik yapmanız gerekiyorsa bunları not edin ve başka bir hesaplama yapın.

Sorun: Yetersiz örneklem büyüklüğü ve test süresi. Sadece üç ila beş günlük testlerden sonra karar vermek, kasıtsız müdahaleye yer bırakır; bu da istatistiksel önyargılara ve güvenilmez bulgulara yol açabilir.

II. Veri İstatistikleri (Hesaplama Hatalarını Kolaylaştırır)

Sorun: Hatalı-olmayan durumlar, yanlış uyarı oranı hesaplamasında doğru şekilde sayılıyor. Az tahmin edilen bir yanlış alarm oranı, yalnızca yanlış alarmların sayılmasından ve gerçek ancak tespit edilemeyen sorunların göz ardı edilmesinden kaynaklanır.

Cevap, yanlış alarm sayısını "doğrulanmış gerçek arızalar" ile sınırlamaktır. Bilinen sorunlar için, algoritmanın alarm vermede başarısız olduğu durumları doğrudan sayın; tipik, hatasız-durumları içermez.

Sorun: Yanlış alarm oranı hesaplamasının tüm üretim döngüsünü kapsayan paydası hatalı. Yanlış alarm oranı, toplam üretim döngüsünün yanlış alarm sayısına bölünmesiyle yanlış hesaplanır. Gerçek hesaplama "Yanlış alarm sayısı / Toplam alarm sayısı" şeklindedir ve bu da yanlış alarm oranının gözle görülür derecede düşük olmasına neden olur.

Çözümler: Geleneksel hesaplama formülüne sıkı sıkıya bağlı kalın. İstatistikler yalnızca tetiklenen alarmları içermelidir; Uyarıların olmadığı tipik üretim paydaya dahil edilmemelidir.

Sorun: Algoritma doğrudan sınıflandırmayı üretiyor; Alarmın doğruluğunun manuel olarak işaretlenmesi yoktur. Algoritma kendi alarmlarını doğru kabul ettiğinden, yanlış alarm oranı gerçek orandan çok daha düşük olduğundan sahte bulgular üretiyor.

Çözüm: Bir alarmın gerçek bir kusur mu yoksa girişim mi olduğunu belirlemek için tüm alarmların manuel olarak sökülmesi, sensörlerin değiştirilmesi ve her alarmın etiketlenip kategorize edilmesi gerekir.

III. Sonuç Yargı Kategorisi (Yanlış sonuçlara kolayca varılır)

Sorun: Kısa-vadeli sonuçlar uğruna uzun-vadeli istikrarı göz ardı etmek. Bir haftalık testin ardından, yanlış alarm oranının kabul edilebilir aralıkta olması durumunda algoritmanın derhal nitelikli olduğu kabul edilir. Yaşlanma ve adaptasyon doğrulamasının olmayışı, üç aylık kullanımdan sonra yanlış uyarı oranının artmasına neden oluyor.

Çözüm: Yanlış alarm oranındaki değişim oranını istatistiksel olarak incelemek amacıyla resmi ürün kesinleştirmesi için 90-günlük uzun vadeli bir test eklenmelidir; ayrıca değişikliklerin doğrulanması için simüle edilmiş yaşlandırma testleri yapılmalıdır.

Sorun: Küçük değişimler için anlamlılık testi yapılmadan sonuca varılıyor. İki grup yanlış alarm oranları arasında birkaç yüzdelik puan farklılık olduğunda, bu rastgele dalgalanmaların sonucu olsa bile yeni algoritmanın üstün olduğu varsayılır.

Çözüm: Yanlış alarm oranı %60'ın altına düşerse ki{0}}kare testi yapın; Farkın geçerliliğini belirlemek için 0,05'ten küçük bir ap-değeri gereklidir. Düşüş %60’ın üzerindeyse doğrudan bir sonuca varılabilir.