02 · Documents + Magnifier · 2026
BidMateRAG
Evidence-grounded RAG for bid documents.
긴 공공입찰 문서에서 조건과 근거를 빠르게 찾게 하는 RAG 시스템.
- Role
- RAG UX, retrieval flow, evaluation design
- Period
- 2026
- Stack
- Next.js · FastAPI · Hybrid retrieval · LLM-as-a-Judge
긴 공공입찰 RFP에서 근거를 확인하는 RAG 시스템의 평가·디버깅·근거 UX를 구현했습니다.
- provider · prompt · chunking · top-k · eval set을 코드 수정 없이 바꾸는 Streamlit run/debug/compare 실험 UI
- Hit Rate@K · MRR · nDCG · MAP · LLM-as-a-Judge · cost · latency를 저장하는 평가 CLI + Markdown report 자동화
- CLI·Streamlit로 갈라진 평가 경로를 execute_evaluation 단일 경로로 통합해 metric drift 제거
- FastAPI + Next.js로 문서 preview · SSE streaming · citation card · evidence panel 근거 확인 UX
- 대표 20문항 Hit Rate@5 · MRR · nDCG@5 · Faithfulness 1.000, $0.0146/query