본문으로 건너뛰기
정비 RAG는 매뉴얼이 그대로인데 임베딩이 드리프트하면 실패한다
전체 분석

섹터 · AI · 2026년 9월 19일 · 2분

정비 RAG는 매뉴얼이 그대로인데 임베딩이 드리프트하면 실패한다

임베딩 모델·청킹·코퍼스 버전이 재인덱싱 없이 움직이면 리트리버가 잘못된 SOP를 돌려준다. 챔피언–챌린저는 모델 승격이고, 이 노트는 조용히 낡는 벡터 인덱스다.

CMMS나 교대 인수인계에 retrieval-augmented 어시스턴트를 연결한 플랜트는 화면의 자산 태그에 맞는 절차를 기대한. 대개 깨지는 것은 “LLM이 정비를 잊었다”가 아니다. 벡터 인덱스다. 임베딩 모델 업그레이드, 청커 변경, 또는 옛 벡터가 새 파일명을 가리키거나 새 벡터가 옛 이웃 옆에 앉지 못하게 하는 반쯤 갱신된 PDF 코퍼스.

플랜트 피처의 컨셉 드리프트와 챔피언–챌린저 승격은 인접 주제다. 이 노트는 정비 RAG를 위한 임베딩·인덱스 정직성이다.

나쁜 답처럼 보이는 실패 모드

  • 재임베드 없는 모델 교체. 새 임베딩 체크포인트가 기하를 바꾼다. 옛 벡터와 새 쿼리가 다른 공간에 산다. Top-k는 확신 있고 틀리다.
  • 재인덱스 없는 코퍼스 편집. 개정 SOP PDF가 디스크에서 바뀌는데 청크는 이전 리비전 해시를 가리킨다.
  • 청킹 변경. 라이브러리 범프 후 제목 인식 청킹이 고정 토큰 창으로 바뀐다—섹션 제목이 더 이상 retrieval을 고정하지 않는다.
  • 혼합 다국어 매뉴얼. 한 임베딩 모델이 KR/TR PDF를 약하게 다루고 EN 청크가 이웃을 지배한다.

엔지니어가 CMMS 옆에서 RAG retrieval 결과를 보는 모습

무엇을 동결하고 무엇을 재인덱싱할지

임베딩 모델 ID, 청커 버전, 코퍼스 스냅샷 ID를 하나의 배포 단위로 보라. 함께 승격하라. 변경 후 인덱스를 재구축하고 골든 쿼리 세트를 돌려라. 알려진 자산 ID, 고장 코드, 기대 문서 ID가 있는 LOTO 절차 제목. 현장 노출 전에 적중률을 점수화하라.

정비 매뉴얼과 임베딩 모델 버전 노트

Retrieval 옆에 둘 가드레일

모든 답에 문서 ID와 리비전을 인용하라. 유사도가 임계값 아래면 거절하라. 자유 텍스트 retrieval만으로 작업지시 쓰기를 승인하지 마라—CMMS 툴 호출은 여전히 allowlist가 필요하다.

“예전엔 맞는 SOP를 찾던” 정비 코파일럿은 대개 예의가 아니라 인덱스 기하를 잃었다. 생성기를 탓하기 전에 벡터를 다시 세워라.

공유

LinkedIn

같은 섹터의 다른 분석

AI