감사: LA-5 · 비전 결함 라벨 세트
표본: 1,200장 이중 라벨
주장: "골드 라벨."
형식: 라벨 감사. 또 하나의 정확도 슬라이드 아님.
상호평가자 스냅샷
| 클래스 | 일치 % | Cohen-ish κ (대략) | 메모 | | --- | --- | --- | --- | | Scratch | 91 | High | 가이드 명확 | | Stain | 74 | Med | 조명 싸움 | | Critical crack | 62 | Low | 돈이 걸린 최악 클래스 | | OK | 88 | — | OK 기본 편향 |
돈이 사는 클래스가 일치가 죽는 곳이다.
사람이 불일치하면 모델이 '틀린' 게 아니라—진실이 정의되지 않았다.
발견
- 가이드라인 v3가 프로젝트 중반 조용히 v2를 대체; 세트의 절반이 규칙 혼재.
- "OK"가 두 시간 후 피로 버튼으로 사용됨.
- 시니어 재라벨이 버전 상승 없이 — 학습이 두 진실을 봄.
- 합성 오버레이가 플랜트 조명과 안 맞는 crack 텍스처 사용.
다음 학습 전 필수 게이트
| 게이트 | 규칙 | | --- | --- | | 가이드라인 freeze ID | 데이터셋 매니페스트와 일치 | | Critical 이중 라벨 | κ 게이트 충족까지 100% | | 피로 블록 | 연속 라벨 분 상한 | | 재라벨 MoC | 버전 + diff 리포트 | | 합성 | 별도 스플릿, 조용한 병합 금지 |
처분
- Critical "골드" 동결.
- Critical만 v4로 재라벨.
- 혼동행렬 작업은 LA-5 종료까지 대기.
- κ 게이트 그린 전 고객 덱 정확도 주장 차단.
버전 없는 가이드는 골드를 황동으로 만든다.
인접 경계
혼동행렬 포스트모템은 배포 모델의 탈출 지표를 담당한다. 소프트센서 모델카드는 공정 프록시를 담당한다. 합성데이터 에세이는 생성 트릭을 담당한다. LA-5는 라벨이 계약인지를 담당한다. 두 어노테이터 말다툼을 쫓아 재학습하지 말 것.
마무리
비전 모델은 라벨 일치율을 이길 수 없다. κ를 공개하라—아니면 없던 "골드"를 계속 내보내라.