AI 성능을 품목과 교대조별로 나눠 보는 이유
전체 평균 성능이 유지돼도 특정 품목이나 야간 교대조에서는 오류가 늘 수 있습니다. 생산 비중이 큰 조건의 결과가 평균을 좌우하면 작은 구간의 문제를 놓치기 쉽습니다.
실무 적용 방법
업무에 영향을 주는 품목, 설비, 촬영 조건과 교대조를 기준으로 결과를 나눠 봅니다. 구간별 처리 건수와 정답 확인 여부를 함께 표시하고 표본이 적은 결과에는 그 한계를 알립니다. 차이가 생기면 입력 조건과 검수 절차도 함께 조사합니다.
예외 상황과 확인 방법
정답 라벨이 늦게 들어온 건을 특정 구간에서만 제외하고 있지 않은지 확인합니다. 구간별 수치 차이만으로 원인을 단정하지 말고 같은 조건의 사례를 검토해 조치 범위를 정합니다.
적용 전 체크리스트
- 전체 평균과 주요 구간의 결과를 함께 보는가
- 표본 수와 라벨 확인 비율이 표시되는가
- 성능 차이를 입력 조건과 함께 조사하는가
#모델드리프트 #AI모니터링 #라벨지연 #제조AI #품질검사 #기업AI #네이처프랙탈 #데이터품질 #MLOps #현장적용
이 주제를 실제 시스템으로 옮기려면 AI 알고리즘 개발 살펴보기