본문으로 건너뛰기
전체 분석

섹터 · AI · 2026년 8월 04일

라벨 감사 LA-5: 스스로와 불일치한 비전 세트

상호평가자 카파, 가이드라인 드리프트, 조용한 재라벨이 학습 진실이 존재하는지 결정한다—산업 AI 라벨 감사. 혼동행렬 포스트모템만, 합성데이터 에세이, 소프트센서 모델카드 거부가 아니다.

라벨 감사 LA-5: 스스로와 불일치한 비전 세트

감사: LA-5 · 비전 결함 라벨 세트
표본: 1,200장 이중 라벨
주장: “골드 라벨.”
형식: 라벨 감사. 또 하나의 정확도 슬라이드 아님.


상호평가자 스냅샷

| 클래스 | 일치 % | Cohen-ish κ (대략) | 메모 | | --- | --- | --- | --- | | Scratch | 91 | High | 가이드 명확 | | Stain | 74 | Med | 조명 싸움 | | Critical crack | 62 | Low | 돈이 걸린 최악 클래스 | | OK | 88 | — | OK 기본 편향 |

돈이 사는 클래스가 일치가 죽는 곳이다.

같은 결함 이미지에서 두 라벨러 박스가 어긋남

사람이 불일치하면 모델이 ‘틀린’ 게 아니라—진실이 정의되지 않았다.


발견

  1. 가이드라인 v3가 프로젝트 중반 조용히 v2를 대체; 세트의 절반이 규칙 혼재.
  2. “OK”가 두 시간 후 피로 버튼으로 사용됨.
  3. 시니어 재라벨이 버전 상승 없이 — 학습이 두 진실을 봄.
  4. 합성 오버레이가 플랜트 조명과 안 맞는 crack 텍스처 사용.

다음 학습 전 필수 게이트

| 게이트 | 규칙 | | --- | --- | | 가이드라인 freeze ID | 데이터셋 매니페스트와 일치 | | Critical 이중 라벨 | κ 게이트 충족까지 100% | | 피로 블록 | 연속 라벨 분 상한 | | 재라벨 MoC | 버전 + diff 리포트 | | 합성 | 별도 스플릿, 조용한 병합 금지 |


처분

  • Critical “골드” 동결.
  • Criticalë§Œ v4로 재라벨.
  • 혼동행렬 작업은 LA-5 종료까지 대기.
  • κ 게이트 그린 ì „ 고객 덱 정확도 주장 차단.

버전 스탬프 v4가 찍힌 라벨 가이드라인 출력

버전 없는 가이드는 골드를 황동으로 만든다.


인접 경계

혼동행렬 포스트모템은 배포 모델의 탈출 지표를 담당한다. 소프트센서 모델카드는 공정 프록시를 담당한다. 합성데이터 에세이는 생성 트릭을 담당한다. LA-5는 **라벨이 계약인지**를 담당한다. 두 어노테이터 말다툼을 쫓아 재학습하지 말 것.


마무리

비전 모델은 라벨 일치율을 이길 수 없다. κ를 공개하라—아니면 없던 “골드”를 계속 내보내라.

같은 섹터의 다른 분석