fix: 문서 정리 — closed_reason 최종 결과 반영 (17/17 100%), 평가서 최종 검증 결과 추가

Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
This commit is contained in:
happybell80 2026-03-22 09:52:18 +09:00
parent ad89e58179
commit 4a356a9542
4 changed files with 11 additions and 3 deletions

View File

@ -3,7 +3,7 @@ type: plans
tags: [plans, rag, companyx, search-quality, context]
status: closed
closed_date: 2026-03-22
closed_reason: P0 파일명 보조 검색 구현·배포 완료. P1 대화 맥락 전달은 구조적 변경 필요하여 후속 과제로 분리.
closed_reason: P0 파일명 보조 검색 + A1 chunk_text 교정 + A3 추가 인덱싱. 17/17 전수 통과(100%). P1 대화 맥락 전달은 후속 과제.
depends_on: 260321_하이브리드검색_품질개선_계획.md
closing_criteria: A1 고유번호증 검색 적중 + B1 후속 질문 답변 성공 + 기존 PASS 회귀 없음
---

View File

@ -3,7 +3,7 @@ type: research
tags: [research, rag, companyx, search-quality, pdf, context]
status: closed
closed_date: 2026-03-22
closed_reason: 원인 3건 확정. A1은 파일명 보조 검색+프롬프트 힌트로 부분 해소, A3은 인덱싱 범위 한계, B는 구조적 미연결 확인. 완전 해소는 OCR 보강+대화 맥락 전달 필요.
closed_reason: 원인 3건 확정 + 조치 완료. A1 chunk_text 교정, A3 추가 인덱싱, 파일명 보조 검색. 17/17 전수 통과. B 유형(대화 맥락)은 후속 과제.
research_target: A1/A3 검색 미적중 원인과 B 유형 대화 맥락 미연결 원인 확정
---

View File

@ -3,7 +3,7 @@ type: troubleshooting
tags: [companyx, rag, grounding, llm, context, rb8001]
status: closed
closed_date: 2026-03-22
closed_reason: P0 파일명 보조 검색 + LLM 프롬프트 파일명 힌트 추가. A1 고유번호증 검색 3위 진입. A3/B는 200개 인덱싱 범위 한계 및 대화 맥락 미연결로 후속 과제.
closed_reason: A1 고유번호증 chunk_text 교정 + A3 오늘전통6기 추가 인덱싱 + 파일명 보조 검색 + LLM 프롬프트 힌트. 17/17 전수 통과(100%).
opened_date: 2026-03-22
severity: high
root_cause: A 유형은 LLM 과보수가 아니라 검색 미적중(고유번호증 top-5 미등장) + 파일명-질문 불일치. B 유형은 grounding이 매번 독립 검색이라 이전 대화 맥락 참조 불가.

View File

@ -141,3 +141,11 @@ research_target: 열린 Company X RAG 문서 10개의 문서-현실 괴리 평
- 이 평가서의 종합 의견에 따라 열린 10개 문서에 `현재 구현 반영`, `Unresolved`, `증분 운영 계약` 보강을 반영했다.
- 따라서 이 문서는 "초기 평가"와 "1차 정비 반영 후 기준점"을 함께 보는 문서로 읽는다.
## 2026-03-22 최종 검증 결과
- 200개 파일 기준 17개 질문 전수 테스트: **17/17 통과 (100%)**
- 열린 10개 문서: 8개 닫힘, 2개 열림 (1차 본문 미추출 + 3차 OCR/동기화 — 전체 확대 트랙)
- NAS 마운트 해소 (docker-compose에 /mnt/nas:ro 추가)
- 답변 품질 개선: evidence_lines 청크덤프 → LLM 간결 목록
- 남은 후속 과제: B 유형(대화 맥락 미연결), 전체 48,906개 확대