[컨텍스트 엔지니어링] 1주차 Day 4 — 넣을 수 있는 것과 넣어야 하는 것
주차 주제: 창 안을 들여다본다 | 제조 사례: 전부 넣고 정확도를 잃은 회사
오늘의 목표: 창이 커진 것이 왜 더 어려워진 것인지 이해한다.
소요 시간: 30분
1. 한 문장으로
넣을 수 있는 것과 넣어야 하는 것이
같지 않습니다. ★2. 창이 커지면서 생긴 일
예전
· 창이 작았습니다 ★
· 골라 넣을 수밖에 없었습니다
· 그래서 고민했습니다 ★지금
· 다 들어갑니다 ★
· 그래서 다 넣습니다
· 그리고 고민을 안 합니다 ★제약이 없어지자 설계가 없어졌습니다. ★3. ★ 많이 넣으면 나빠지는 넷
① 관련 없는 것이 방해합니다 ★
비슷한 다른 것을 가져다 씁니다
② 가운데를 흘립니다 ★
(2주차 Day 1)
③ 모순이 생깁니다 ★
구버전과 신버전이 같이 있으면
④ 비싸고 느려집니다 ★③이 제조 문서에서 특히 큽니다. ★· 개정 이력 ★
· 폐기된 규격
· 다른 고객 사양 ★같은 문서 안에 있습니다. ★4. ③ 이 왜 위험한가
모순이 있으면 모델은· 둘 중 하나를 고릅니다 ★
· 그런데 왜 골랐는지 안 말합니다 ★
· 그리고 매번 다르게 고릅니다 ★그래서
어제 맞던 답이 오늘 틀립니다. ★사람은 다릅니다. "이거 두 개가 다른데요?" 하고 묻습니다. ★그래서 프롬프트에 적으세요 "자료 안에 서로 다른 값이 있으면 ★
고르지 말고 둘 다 말하라." ★5. 넣을지 정하는 물음 넷
① 이 질문에 쓰이나 ★
② 없으면 답이 달라지나 ★
③ 최신인가 ★
④ 다른 것과 부딪히나 ★②가 핵심입니다. ★빼고 돌려 보세요.
답이 같으면 안 넣어도 되는 것입니다. ★6. 빼고 돌려 보기
가장 확실한 시험입니다. ★ ① 지금 구성으로 20건 ★
② 한 덩어리를 빼고 20건
③ 정확도를 비교합니다 ★ 결과 뜻 ★
──────────────────────────────────────
같음 빼도 됩니다 ★
나빠짐 필요합니다
좋아짐 방해하고 있었습니다 ★세 번째가 자주 나옵니다. ★그리고 그때가
가장 값진 발견입니다. ★7. 제조 현장의 실제
어느 업체, 검사 판정에 자료를 많이 넣었습니다.· 검사 표준 ★
· 고객 사양서 전문
· 과거 유사 판정 20건 ★
· 설비 이력
· 품목 마스터 ★"많이 알면 잘 하겠지" ★하나씩 빼고 재 봤습니다. 뺀 것 정확도 판정 ★
──────────────────────────────────────
(전부 넣음) 81% 기준
− 설비 이력 81% 빼도 됨 ★
− 품목 마스터 82% 빼도 됨 ★
− 과거 판정 20건 89% 방해했음 ★
− 고객 사양서 74% 필요함 ★
− 검사 표준 52% 필요함 ★과거 판정 20건을 빼니 8%p 올랐습니다. ★왜
· 비슷한 다른 건의 판정을 그대로 베꼈습니다 ★
· 조건이 달랐는데도 ★최종 구성 검사 표준 + 고객 사양서(해당 절만) ★
+ 과거 판정 3건 (조건이 같은 것만) ★ 정확도 81% → 93% ★
토큰 1/5 ★8. ★ 「과거 사례」 가 자주 방해합니다
· 비슷해 보이는데 조건이 다릅니다 ★
· 모델은 비슷한 쪽으로 끌립니다 ★
· 그리고 그럴듯하게 답합니다 ★쓰려면
· 조건이 같은 것만 ★
· 적게 (3건 안팎) ★
· 그리고 왜 이걸 골랐는지를 같이 ★"비슷한 사례 20건" 은 대개 해롭습니다. ★9. 그래서 이 과정의 방향
넣는 법이 아니라 덜어내는 법. ★3주차 전체가 그것입니다. ★10. 오늘 해 볼 것 (15분)
① 덩어리 하나를 빼고 재 보세요
뺀 것 ____________ ★
전 정확도 ___% 후 ___% ★
→ 같음 / 나빠짐 / 좋아짐 ★② 모순을 찾으세요
자료 안에 같은 항목의 다른 값이 있나 ★
□ 개정 이력 □ 폐기 규격 □ 다른 고객 ★③ 프롬프트에 한 줄 넣으세요
"자료에 서로 다른 값이 있으면
고르지 말고 둘 다 말하라" ★
→ 넣고 20건 돌려 보세요 ★11. 내일 할 것
이번 주를 마무리합니다.
우리 컨텍스트 구성표를 만듭니다. 덩어리 · 토큰 · 쓰임 · 뺄 후보까지.
이 글은 컨텍스트 엔지니어링 과정의 1주차 4일차입니다. 과정 전체 보기
진도와 검색이 되는 판: AXPulse 기술따라가기
댓글
댓글 쓰기