관측
34편의 기록
Upstage API 하루 실측, 정확도를 맨 나중에 재기로 했다
영수증 50장에서 상호명 F1이 76%로 나왔다. 오답 14건을 원본과 대조하니 모델이 틀린 것은 1건이었고 나머지는 정답 쪽과 내가 쓴 스키마 문구가 만들었다.
같은 결함이 닷새 간격으로 두 번 났고 원인은 4개월 전 커밋 하나였다
배포 제외 목록에서 빠진 자산 두 건이 닷새 간격으로 공개 서빙됐다. 첫 건은 캐시 퍼지 세 가지가 성공 응답을 주고도 살아남았고, 둘째 건의 원인은 4개월 전 백업 커밋 하나였다
차단 대상을 한 줄로 좁혔더니 파일 84개 258곳이 나왔다
프로필을 정리해도 치명 다섯 건은 전부 프로필 바깥에 있었다. 무엇을 의도된 노출로 볼지 한 줄로 정한 뒤 지울 목록이 줄었고, 못 지우는 네 건에 자리가 생긴 기록
블로커 판정 두 건을 오진으로 뒤집고 지침에 한 줄을 넣었다
브라우저 자동화 도구 aside와 배포 도구 Wrangler에서 나온 블로커 판정 두 건이 각각 모델 명시와 계정 식별자 지정으로 뒤집혔고, 그 경험이 에이전트 지침 조항이 된 기록
27일에 커밋일은 10일, 세션 인덱스에는 하루만 잡혔다
한 프로젝트의 27일 구간을 커밋 원장과 세션 인덱스 두 집계기로 각각 세어 보고, 밀도 수치에 집계 범위 라벨을 붙이지 않으면 무엇이 사라지는지 실측으로 확인한 기록
이미지 1,000장을 전부 열고 프롬프트 950건을 데이터에서 지웠다
무료 배포 자료가 유료 본체를 잠식하지 않는 선을 첫날 한 문장으로 고정하고, 그 선을 화면이 아니라 서버로 나가는 데이터에서 구현했다
뮤테이션 59종을 붙인 점검 스크립트가 라우팅보다 먼저 깨졌다
라우팅 점검 스크립트를 만든 사흘 동안 그 스크립트 자체를 뮤테이션 59종으로 두들겨 생존 7건을 닫았고, 그 투자는 8월 중순 상류가 설정 테이블을 옮긴 날에 정산됐다
에이전트가 쓴 기록에 등급을 매기려고 증거 종류를 셋으로 늘렸다
석 달 치 작업 이력을 사료로 정리하면서 실측과 구술 2분법이 서지 않는 자리를 찾고, 에이전트 자기 기록을 세 번째 범주로 세운 기록
야간 3시간 반 컷오버에서 30건을 검증하고 사후 수치는 못 쟀다
사무망 라우터와 서버용 스위치를 한 밤에 바꾸면서 검증표 30건과 리스크 16건을 작업 전에 써 두었고, 무사고로 끝낸 뒤 못 잰 것을 못 잰 것으로 적은 기록
석 달 동안 원천 부재로 닫아둔 8일 구간의 기록이 세 곳에 있었다
내 기기와 계정만 전수 조사해 원천 부재로 판정한 8일 구간의 1차 기록을 제3자 시스템과 클라우드 사본 세 곳에서 찾고, 부재 판정 라벨에 조사 범위를 붙이기로 한 기록
기록 279건에 심리 서술이 0건이었고 원인은 저장 규율이었다
업무용 메모리 뱅크 한 곳의 원장을 사료로 읽고, 그 안의 빈칸을 도구 이전·원천 소멸·규율 밖 세 종류로 갈라 판정한 기록
38일 동안 쌓인 2,134건 중 경험은 29건이었다
개인 메모리 뱅크 38일 구간의 저장 종류별 분포를 전량 조회로 실측하고, 경험 기록의 저수율을 입력 형태가 만든 편향으로 판정한 기록
다섯 런타임이 같은 뱅크에 쓰는 동안 검증 기준선을 다시 잡았다
코딩 에이전트 런타임 다섯이 하나의 게이트웨이와 하나의 뱅크를 공유하는 환경에서, 다른 세션의 정상 쓰기를 실패로 처리하지 않고 귀속과 재기준선으로 다루는 네 가지 규율
태그 어휘 241종을 158종으로 접었다
같은 뜻으로 갈라진 태그가 조회를 조용히 새게 했다. 별칭 68쌍을 정책에 선언해 서버가 저장 시점에 한 번 고치도록 바꾸고, 개인 뱅크를 이틀에 걸쳐 라이브로 재태깅한 기록
Gemini 무료 계정, 하루 5회라던 한도를 직접 세어봤다
무료 계정만으로 따라올 수 있어야 하는 소상공인 AI 교육을 만들다 보니 무료 한도가 교재의 사실 주장이 됐다. 문서와 커뮤니티의 숫자를 직접 확인하자 세 항목이 달랐다.
표준이라던 TEI 추론 서버가 내 맥에서는 10배 느렸다
개인 메모리 검색을 죽이던 리랭킹 35~55초를 표준 해법인 TEI로 고치려다 실측에서 기각했다. 채택 근거는 벤더가 발표한 수치가 아니라 내 기계에서 나온 숫자다.
18건 저장 성공이라던 보고, 실제 저장은 0건이었다
개인 메모리뱅크(Hindsight-Crew)에 기록 18건을 저장하는 호출이 전부 실패했는데 에이전트의 보고는 성공이었다. 발각은 자동 검증이 아니라 사람의 지적이었다.
재현율 0.45, 검색기를 고치기 전에 빠진 22건을 열어봤다
팀 메모리 시스템(Hindsight)으로 쓴 보고서의 활동 재현율이 목표 0.95에 크게 못 미쳤다. 검색기를 손보기 전에 분모부터 열자 빠진 22건 중 진짜 손실은 1건이었다.
통화 기록의 행을 그대로 세니 통화가 40% 부풀려졌다
통화 SaaS가 내보낸 원천 테이블의 행을 그대로 세면 통화 건수가 약 40% 부풀려졌다. 그 숫자가 영업사원 역량 평가의 분모로 들어갈 예정이었다.
80년 동안 수학자들이 풀지 못한 문제를, AI가 혼자 반증했다
에르되시의 unit distance 추측을 모델이 자율 반증했다. 검증이 가장 엄격한 도메인에서 AI가 '발견자'로 인정받은 순간.
깃허브가 내부 저장소 3,800개를 털렸다
입구는 직원 PC의 변조된 VS Code 확장 하나. 자동 업데이트되는 '신뢰'가 곧 공격의 입구다.
명령을 기다리지 않는 24시간 에이전트, Gemini Spark
'지시하면 처리'에서 '상시 위임'으로 넘어가는 첫 메이저 시도. 권한 위임 범위, 감사 경로, 회수 버튼이 다음 쟁점이다.
앤트로픽, 금융 에이전트 10개를 오픈소스로 풀었다
피치북 제작부터 KYC 심사까지 에이전트 10개가 한 리포에. MCP 커넥터 11개로 실무 금융 데이터에 직접 붙는다.
챗봇을 코드 없이 짜는 도구가 스타 14만 개를 찍었다
Dify가 스타 14만을 찍으며 '팀이 굴리는 에이전트' 카테고리를 열었다. 다음 병목은 권한 위임과 감사 로그다.
같은 회사를 8개월 새 세 번 뚫었다, Canvas 침해 사건
2억 7,500만 명 데이터를 쥔 갱단이 로그인 페이지에 협박문을 띄웠다. 패치는 단발 행위가 아니라 침입 경로 전수 점검이다.
AX를 한다면서 DX 설계를 그대로 쓰는 회사가 많다
관계 테이블, 지식 테이블, 벡터 컬럼. AI를 얹는 게 아니라 밑에 깔아야 한다, LLM이 읽기 좋은 스키마가 AX의 출발점이다.
HWP 파일을 브라우저에서 여는 Rust 오픈소스가 나왔다
HWP/HWPX를 설치 없이 웹에서 읽고 편집하는 rhwp. Claude Code 페어 프로그래밍에 사람이 결정하는 Hyper-Waterfall 방법론까지.
Claude Code가 한 달 동안 바보가 된 이유
사고 깊이 하향, 사고 기록 삭제 버그, 프롬프트 한 줄. 세 가지가 겹쳐 재현 불가능한 품질 저하를 만든 과정과 교훈.
프레임워크를 전부 지운 592줄, self-healing 브라우저 하네스
부족한 도구를 에이전트가 helpers.py에 직접 써 넣는 자가 치유 구조. 592줄이 1만 줄 프레임워크에 던진 질문.
클로드 4.7, 시스템 프롬프트 1408줄이 말하는 진짜 활용법
시스템 프롬프트 1408줄을 직접 읽고 찾아낸 4.7의 설계 변화. 공식 발표보다 프롬프트가 거짓말을 덜 한다.
스스로 진화한다는 AI 에이전트, 코드를 열어보니 난독화 덩어리였다
3,500 스타 자가진화 에이전트 리포에서 발견한 난독화 코드와 라이선스 모순. 오픈소스를 감별하는 세 가지 습관을 얻었다.
아폴로 11호가 진짜 달에 갔냐고?
1969년 아폴로 11호 항법 컴퓨터 소스코드가 GitHub에 있다. BURN_BABY_BURN 같은 유머가 조작설을 반박한다.
원샷 PRD는 반쪽이다, enhance 루프를 돌려라
품질 게이트 9개 기준 정량 채점, 갭 분석과 추가 인터뷰 루프로 7.5점에서 9.5점까지. 원샷 완벽은 LLM에게 아직 무리다.
커밋 후 /simplify, 프롬프트 체이닝 한 줄이면 끝
병렬 세션을 돌리면 사소한 2턴이 인지능력을 갉아먹는다. 한 턴에 명령을 엮는 체이닝으로 순서 보장과 대기 시간을 동시에 잡는 법.