AI Q&A 엔진이 답변 정확도 94%를 달성한 방법

geck0 Engineering · 2024-12-01

문제: 환각(Hallucination) 없는 기업용 AI

일반 ChatGPT는 회사 내부 데이터를 모릅니다. 단순 RAG도 근거 없는 답변을 생성할 수 있습니다.

geck0의 AI Q&A Engine은 3-layer 검증으로 이를 해결합니다.

Layer 1: Knowledge Graph Retrieval

단순 벡터 검색이 아닌 관계 기반 검색입니다. "A 프로젝트 의사결정"을 물으면 관련 Slack 스레드, Notion 페이지, Jira 티켓을 연결 그래프로 함께 가져옵니다.

Layer 2: Source Attribution

모든 답변에 근거 문서 링크를 첨부합니다. 사용자가 원문을 클릭해 검증할 수 있습니다.

Layer 3: Confidence Scoring

답변 신뢰도가 70% 미만이면 "확실하지 않습니다"라고 표시하고, 관련 담당자에게 에스컬레이션합니다.

결과

내부 벤치마크 500개 질문 기준 94% 정확도, 평균 응답 시간 2.1초.

기술 상세는 API 레퍼런스에서 확인하세요.