Endüstriyel vision projeleri çoğu zaman “model yeterince doğru değil” noktasında takılır. Bazen ağ kapasitesi veya aydınlatma sınırdır. Sıkça eğitim etiketleri tutarsızdır: aynı defekt tipi farklı kutu boyutlarıyla çizilir, sınırdaki işaretler Pazartesi defekt Salı kabul olur veya iki annotator özdeş görüntülere farklı kurallar uygular.
Etiket denetimi vaka çalışmaları ve aydınlatma kayması notları ilgili vision arıza kiplerini ele alır. Bu yazı, model seçiminden önce bir veri sorunu olarak annotation gürültüsü ve uyuma odaklanır.
Gürültü performansı neden sınırlar
Supervised dedektörler ve sınıflandırıcılar gösterilen etiket dağılımını taklit eder. Etiketler çelişkili insan yargılarını kodluyorsa, eğitim kaybının ulaşabileceği optimum bir uzlaşmadır—tesisin yazılı kalite standardı değil. Aynı gürültülü süreçten çekilmiş bir test split üzerindeki metrikler iyimser görünebilir; üretim anlaşmazlıkları sürer.
Gürültüyü azaltan editoryal pratikler
Örnekli yazılı sınıf tanımları. Sınır vakalar iş talimatında resim ister; yalnızca tek satırlık sınıf adı değil.
Bir örneklemde çift annotation. Bir satıcı etiketleme işini ölçeklemeden önce uyumu ölçün (basit yüzde uyum veya Cohen’s kappa tarzı bir özet bile). Düşük uyum, tanımın bitmediği anlamına gelir.
Dondurulmuş bir gold set. Model her başarısız olduğunda “düzeltilmeyen” küçük, karara bağlanmış bir görüntü seti tutun. Yeni annotator’lar geldiğinde tanım kaymasını yakalamak için kullanın.
Zor vakaları ayırın. Belirsiz görüntüler, yazı-tura etiketle train/test’e zorlanmak yerine inceleme kuyruğuna aittir.
Yapılmaması gerekenler
Üretim yanlış redlerini, yazılı standardı güncellemeden yalnızca başarısız görüntüleri kabul sınıfına yeniden etiketleyerek “düzeltmeyin.” Bu, modele dünün kolaycılığını eşleştirmeyi öğretir. İki mühendisin aynı şekilde uygulamayacağı etiketlere sahip bir veri setinde architecture karşılaştırmayın.
Vision modelleri, kutuların arkasındaki insan kuralları kadar tutarlıdır. Önce kuralları ve gold set’i temizleyin; ardından backbone seçiminin optimize edecek bir zemini olur.