[MCP] 6주차 Day 2 — 누가 무엇을 불렀는지 남긴다
주차 주제: 운영 | 제조 사례: 「AI_SYSTEM」 뿐이던 로그
오늘의 목표: 호출 로그에 무엇을 남길지 정하고, 그것으로 무엇을 볼지 정한다.
소요 시간: 30분
1. 왜 남기나
① 고칠 것을 찾으려고 ★
② 감사 ★
③ 사고 났을 때 추적 ★
④ 비용 ★①이 실무에서 가장 자주 쓰입니다. ★2. ★ 남길 것
□ 언제 ★
□ 누가 사람 · Agent (이름·모델·버전) ★
□ 어느 도구 ★
□ 인자 (민감한 건 가려서) ★
□ 결과 성공/없음/실패 · 건수 ★
□ 실패면 이유 ★
□ 걸린 시간 ★
□ 응답 토큰 ★
□ 대화 id (묶어 보려고) ★「누가」 를 데이터 과정 4주차처럼 나누세요. ★ 사람 / 시스템 / Agent ★3. ② 「누가」 를 안 나누면
3주차 Day 3 의 그 회사. ★ 조회자가 전부 "AI_SYSTEM" ★그러면· 감사에 답을 못 합니다 ★
· 권한 밖이 나갔는지 모릅니다 ★
· Agent 정확도를 못 잽니다 ★
· 되돌릴 범위를 못 정합니다 ★
(4주차 Day 4) ★넷 다 나중에 필요해집니다. ★그리고 그때 없으면 늦습니다. ★4. 인자를 가려서 남기세요
· 인자에 민감한 것이 들어갑니다 ★
고객명 · 단가 · 개인정보 ★그래서□ 가려서 남기거나 ★
□ 해시로 남기거나 ★
□ 무엇을 검색했나만 (값 말고 종류) ★그런데 검색어는 남기세요. ★1주차 Day 3 의 못 찾은 검색어가 ★
자산이었습니다.· 가릴 건 가리고 ★
· 검색어는 남기는 쪽으로 ★5. ★ 로그로 보는 것 — 여섯
① 도구별 호출 수 ★
0회인 것 → 빼세요 (1주차)
② 실패율 ★
높은 것 → 설명·검색을 고치세요 ★
③ 주 실패 이유 ★
고칠 것이 바로 나옵니다
④ 못 찾은 검색어 ★
→ 동의어·기준정보 ★
⑤ 대화당 호출 수·중복 ★
(컨텍스트 5주차 Day 4)
⑥ 응답 토큰 ★
평균과 최대여섯을 주마다 보세요. ★6. 표 하나면 됩니다
도구 호출 실패율 주 이유 응답P90 ★
──────────────────────────────────────────
________ ____ ___% ________ ______ ★
________ ____ ___% ________ ______
________ 0 — — — ★· 0회를 맨 아래에 모으세요 ★
· 두 달 연속 0 이면 빼세요 ★7. 제조 현장의 실제
어느 업체, 로그를 붙이고 첫 달에 본 것. 도구 호출 실패율 주 이유 ★
────────────────────────────────────────
품목검색 2,400 18% 못 찾음 ★
실적조회 890 4% 인자 형식 ★
재고조회 610 2% — ★
거래처검색 140 31% 못 찾음 ★
설비조회 0 — — ★
문서검색 0 — — ★넷을 바로 고쳤습니다① 품목검색 못 찾음 18% ★
→ 정규화·동의어 (1주차 Day 3)
→ 3% ★
② 거래처검색 31% ★
→ 사업자번호·약칭도 받게
→ 6% ★
③ 실적조회 인자 형식 ★
→ 기간을 "2026-06" 도 받게
→ 1% ★
④ 설비·문서 조회 0회 ★
→ 뺐습니다 ★한 달 로그로 넷이 고쳐졌습니다. ★8. ★ 「못 찾음」 이 가장 값집니다
· 실패 중에 가장 많고 ★
· 가장 고치기 쉽고
· 그리고 기준정보로도 갑니다 ★그래서 따로 모으세요. 못 찾은 검색어 · 시각 · 누가 ★그리고 반복되는 것부터 보세요. ★· 같은 말로 여러 번 찾았으면 ★
· 그건 있어야 할 것입니다 ★9. 감사를 위한 것
감사에서 묻는 것은 대개 "누가 무엇을 언제 봤나" ★그래서□ 실명이 남아야 합니다 ★
□ 시각이 남아야 합니다 ★
□ 조회한 대상이 남아야 합니다 ★
□ 그리고 지울 수 없어야 합니다 ★마지막이 중요합니다. ★데이터 과정 4주차 Day 4 와 같습니다. ★10. 오늘 해 볼 것 (15분)
① 로그가 있나 확인하세요
□ 호출을 남기나 ★
□ 누가 가 실명인가 ★
□ 실패 이유가 남나 ★
□ 응답 토큰이 남나 ★② 여섯을 볼 수 있나
□ 도구별 호출 □ 실패율 □ 주 실패 이유 ★
□ 못 찾은 검색어 □ 중복 호출 □ 응답 토큰 ★③ 0회를 찾으세요
두 달 연속 0회인 도구 ___개 ★
→ 빼세요 ★11. 내일 할 것
★ 도구가 바뀔 때 — 규격과 버전.
도구도 모델처럼 조용히 바뀝니다.
이 글은 MCP 과정의 6주차 2일차입니다. 과정 전체 보기
진도와 검색이 되는 판: AXPulse 기술따라가기
댓글
댓글 쓰기