RAG
5편의 기록
격리는 주장이 아니라 증명이다
거부돼야 하는 요청을 CI가 매번 거부해 보이지 못하면 그것은 격리가 아니라 격리 주장이다.
모델은 점수가 아니라 방법으로 고른다
리더보드 1.38pt 차이는 노이즈였다. 교체 판단은 사전 동결한 decision rule과 자기 워크로드 실측이 만든다.
에이전트 기억은 조회를 믿으면 안 된다
1주 211건 운영 실측에서 recall 재현율은 15.6%였다. 조회는 완전성을 보장하지 않는다.
측정하지 않은 것을 측정했다고 하지 않는다
조건 라벨을 뗀 수치는 측정이 아니라 주장이다. 라벨과 함께 쓸 수 없는 수치는 버린다.
AX를 한다면서 DX 설계를 그대로 쓰는 회사가 많다
관계 테이블, 지식 테이블, 벡터 컬럼. AI를 얹는 게 아니라 밑에 깔아야 한다, LLM이 읽기 좋은 스키마가 AX의 출발점이다.