RAG가 오래된 문서를 답으로 쓰지 않게 하는 수명 관리

검색 증강 생성(RAG)은 문서를 잘 찾아도 폐기된 매뉴얼을 인용하면 오답을 만듭니다. 지식검색의 품질은 인덱싱 속도뿐 아니라 문서가 언제까지 유효한지 관리하는 과정에서 결정됩니다.

문서의 효력부터 구분한다

파일이 저장소에 있다는 이유만으로 최신 지침이라고 보지 않습니다. 문서 소유자, 승인일, 적용 시작일, 만료일을 메타데이터로 붙입니다. 동일한 절차가 여러 버전일 때 현재 효력 있는 판본을 찾는 규칙이 먼저 필요합니다.

검색 후보에 버전 정책을 적용한다

검색 인덱스에는 원문과 함께 버전, 업무 영역, 접근 권한을 넣습니다. 필터로 구버전 문서를 제외하되 과거 이력 조회처럼 예외가 필요한 질문은 분리합니다. 권한 없는 문서가 검색 후보에 들어가지 않게 검색 단계에서 막는 편이 안전합니다.

시행일 경계에서 시험한다

시행일 전후에 다른 답을 내야 하는 질문을 평가셋에 넣습니다. 예를 들어 같은 부품 교체 절차가 9월부터 바뀌었다면 8월 사고 분석과 오늘 작업 지시는 다른 문서를 써야 합니다. 답변의 링크와 문서 버전까지 확인합니다.

모른다고 말할 기준도 측정한다

최신 문서 인용률만 보면 부족합니다. 유효한 문서를 못 찾았을 때 ‘모른다’고 답하는 비율도 봅니다. 오래된 답을 자신 있게 하는 것보다 출처 확인을 요청하는 편이 현장 위험을 낮출 수 있습니다.

폐기와 교체 이력을 남긴다

문서가 폐기되면 삭제만 하지 말고 교체 문서와 책임자를 연결합니다. 인덱스 갱신 지연으로 구버전이 남는 기간을 측정하고, 긴급 변경은 수동 무효화 경로를 마련합니다. 변경 이력이 있어야 나중에 잘못된 답의 원인을 찾습니다.

현장에 적용할 때의 순서

1. 문서 효력 기간과 소유자 부여
2. 검색 인덱스에 버전·권한 필터 적용
3. 시행일 경계 질문으로 답변 시험

주의할 실패: 폐기 문서가 캐시나 검색 후보에 남음

관찰할 지표: 유효 문서 인용률과 잘못된 구버전 인용 건수

적용 전 체크리스트

• 문서별 효력 기간·소유자 기록
• 검색 단계의 권한·버전 필터
• 시행일 경계 질문으로 회귀 검증

참고 자료

Azure AI Search — RAG overview. 검색·생성 구조는 Microsoft 공식 설명을 참고했습니다. 효력 기간과 무효화 정책은 실무 설계 제안입니다.

이미지와 도식은 이해를 돕기 위한 개념 시각화입니다. 특정 고객의 실제 설비·데이터·화면을 재현한 것이 아닙니다.

#RAG #지식검색 #문서버전 #검색품질 #기업AI #AI거버넌스 #네이처프랙탈 #문서관리 #업무자동화 #디지털전환