지식 엔진 테스트 가이드
Sediment는 권한이 있는 자료를 찾아 평가하고, Chat은 작성한 답변이 그 근거로 뒷받침되는지 확인한 뒤 보여줍니다. Service는 그 평가를 요구사항 검토에 사용하며 승인과 이슈 발행을 담당합니다. 아래 사례는 테스트 방법이며 실제 실행 결과가 아닙니다.
실행 전 계정을 연결하고 AI 전송·비용 동의란을 확인하세요. 질문, 출처, 버전, 평가 ID, 결과와 실패 이유를 함께 기록하면 다시 확인할 수 있습니다.
1. Chat에서 바로 질문하기
왼쪽 Chat에서 Mother의 두 가지 역할은 무엇인가?처럼 문서로 확인할 수 있는 질문을 입력하세요.
답변 생성 후 근거 검증까지 기다리므로 첫 답변이 늦어질 수 있습니다. 검증이 불확실하거나 실패하면 초안 대신 답변을 보류했다는 안내가 나와야 합니다. 표시된 인용과 실제 원문도 비교하세요.
2. MCP 요구사항 접수
기존 HypeProof MCP에서 자료와 관련된 요구사항을 접수하고 같은 제안을 다시 조회하세요.
Service의 ai_review.knowledge에 평가 ID·자료 지문·상태가 표시되는지 확인하세요. 조회는 AI 재평가를 하지 않습니다. 자료가 바뀌면 review_stale이 되고 같은 제안을 새 revision으로 검토해야 합니다. 충돌은 담당자 승인으로 넘깁니다. 이 경로는 Service 연동이 활성화되어 있어야 합니다.
3. 실제 지식 찾기
계정에 저장된 문서에서 확인할 수 있는 질문을 입력하세요.
검색된 원문, 출처 ID, 버전이 실제 문서와 일치하는지 확인합니다. ready라도 최종 판단은 원문을 읽고 내려 주세요.
4. 근거가 없는 질문
자료에 없는 사건이나 아직 기록되지 않은 결정을 질문하세요.
근거가 없으면 insufficient 또는 clarification 등으로 한계가 드러나야 합니다. 없는 내용을 답으로 만들면 실패입니다.
5. 문서 사이의 충돌
실제 자료에 서로 다른 결정을 담은 문서가 있을 때만 같은 주제를 질문하세요.
원문과 날짜·버전을 비교하세요. conflict가 나오면 사람의 확인이 필요합니다. 충돌 자료가 없다면 이 경우는 미실행으로 기록하세요.
6. 뒷받침되지 않은 초안
실제 문서에 없는 단정적인 주장을 초안에 넣고 관련 질문을 입력하세요. 초안에는 검색 결과의 인용 번호 [1], [2]를 적어 주세요. 번호가 없거나 범위를 벗어나면 인용 검증에서 거절됩니다.
초안의 support가 unsupported 또는 uncertain인지, 이유가 검색된 근거를 가리키는지 확인하세요. AI 평가가 항상 정확하다고 가정하지 마세요.
7. 인증과 접근 제한
연결을 해제하고 평가 버튼 상태를 확인하세요. 권한 없는 계정 테스트는 별도의 승인된 계정으로 진행하세요.
연결이 없으면 실행할 수 없어야 합니다. 권한이 없는 자료가 노출되면 실패입니다. 계정이 없으면 권한 테스트는 미실행입니다.
PASS: 원문과 관찰한 동작이 일치 · FAIL: 기대 동작과 불일치 · BLOCKED: 연결 또는 서비스 장애 · NOT RUN: 필요한 자료·계정이 없거나 아직 실행하지 않음. 로컬 모의 검증은 실제 계정의 자료 조회 증거와 구분해 주세요.