Etiket denetimi LA-5: kendiyle anlaÅŸamayan vision seti

Denetim: LA-5 · Vision kusur etiket seti
Örnek: 1.200 görüntü çift etiket
İddia: “Gold label.”
Biçim: Etiket denetimi. Bir accuracy slaytı daha değil.

---

Inter-rater özeti

| Sınıf | Uyum % | Cohen-ish κ (yaklaşık) | Not | | --- | --- | --- | --- | | Scratch | 91 | Yüksek | Kılavuz net | | Stain | 74 | Orta | Işık kavgası | | Critical crack | 62 | Düşük | En pahalı sınıf | | OK | 88 | — | OK’ye varsayılan yanlılık |

Para critical sınıfta yaşar; uyum orada ölür.

İnsanlar anlaşamıyorsa model ‘yanlış’ değil—gerçek tanımsızdır.

---

Bulgular

1. Kılavuz v3, proje ortasında sessizce v2’nin yerini aldı; setin yarısı karışık kural.
2. “OK”, ikinci saatten sonra yorgunluk düğmesi olarak kullanıldı.
3. Kıdemli relabel sürüm artışı olmadan — eğitim iki gerçeği birden gördü.
4. Sentetik overlay’ler tesis aydınlatmasına uymayan crack dokuları kullandı.

---

Sonraki train öncesi zorunlu kapılar

| Kapı | Kural | | --- | --- | | Kılavuz freeze ID | Dataset manifest ile eşleşmeli | | Critical sınıf çift etiket | κ kapısı yeşil olana kadar %100 | | Yorgunluk blokları | Maks sürekli etiket dakikası | | Relabel MoC | Sürüm + diff raporu | | Sentetik | Ayrı split, sessiz birleştirme yok |

---

Tasarruf

• Critical sınıf için mevcut “gold”u dondur.
• Critical’ı yalnızca v4 altında yeniden etiketle.
• Confusion-matrix iÅŸi LA-5 kapanana kadar bekler.
• κ kapısı yeÅŸil olmadan müşteri deck’lerinde accuracy iddiası yasak.

Sürümsüz kılavuzlar gold’u pirince çevirir.

---

Komşu çitler

Confusion-matrix post-mortem’leri konuşlandırılmış modelde kaçış metriklerini sahiplenır. Soft-sensor model kartları proses vekillerini sahiplenır. Sentetik veri yazıları üretim hilelerini sahiplenır. LA-5 etiketlerin sözleşme olup olmadığını sahiplenır. İki annotator kavgasını kovalamak için yeniden train etmeyin.

---

Kapanış

Bir vision modeli kendi etiketlerinin uyumunu aşamaz. κ yayınlayın—ya da hiç olmayan “gold”u göndermeyi sürdürün.