jdZddlZddlmZmZddlmZddlmZmZm Z dZ de de fd Z d ed ee efd ee ee effd e ee efdee e ee effdee ee effdefdZy)u자체 완결 HTML 리포트 — 표 중심, 프롬프트는 줄 발췌만. 측정 정의 라벨(metrics/attribute 의 정의와 일치): - 발송량은 전수 합(외삽 없음), 단위는 '자'(code point). - '정적' = 그 스텝 호출의 90% 이상에 실린 줄. N)datetimetimezone)Path)AnyDictLista body{font-family:'Apple SD Gothic Neo',sans-serif;margin:24px; background:#fafafa;color:#222} h1{font-size:22px} h2{font-size:17px;margin-top:32px} table{border-collapse:collapse;background:#fff;font-size:13px} th,td{border:1px solid #ddd;padding:4px 8px;text-align:right} th{background:#f0f0f0} td.l,th.l{text-align:left} td.line{font-family:monospace;font-size:11px;max-width:680px; overflow-wrap:anywhere;text-align:left} .warn{color:#b00} .dim{color:#888} sreturnc>tjt|S)N)htmlescapestr)r s R/Users/manta/Documents/Projects/TheRoad-I1/tools/opik_prompt_audit/audit/report.py_escrs ;;s1v out_dirmetastepsdupscurves attributionsc$ |jddt|jd}td|j D}g}|j d|j d|j dt d |j d |j d t|jd d t|jddd|jd|jdd|ddtjtjjdd |j d|jdM|j d|jddd|jdddd|jdddd |jd!r*|j d"tt|d!d|j d#|j d$|D]]\} } |r | d%|z d&znd} |j d't| d(| d)d(| d*dd(| d+dd(| d,d(| d-d(| d%dd(| d.d/_|j d0|j d1|j d2|j d3|dd4D]} |j d5t| d6dd7d8td9j| d:d(| d;d8tdt!| d=d>kDrd?ndd(| d@ddA |j d0|j dB|j dCg} |jD]a\}}|dDd}|dEdF|ddFz }|dEdGjdHd|ddGjdHdz }| j ||||fc| j#dI|j dJ| ddKD]]\}}}}dLjdM|D}|dkDrdNnd}|j d't|d8t|dO|dP|dQd(|dQdA _|j d0|j dR|j dS|ddTD]\} } |j| }|s|j dUt| dV|j dWt%|dXjdd>D]'\}}|j d't|d(|ddA)|j dY|dZddA|j d0|d[z }|j'd\j|d]^|S)_NT)parentsexist_okc|dd S)N total_chars)kvs rzrender..&sA}1E0Er)keyc3&K|] }|d yw)rNr.0rs r zrender..'s9.Q- .szu'Opik 프롬프트 감사zu+

Opik 역추적 프롬프트 감사

u

창: sincez ~ untilu · 호출 call_count trace_countu건 · 총 발송(전수 합) ,u자 · 생성 seconds)timespecz

u

측정 정의: 단위는 자(code point, wire byte·token 아님) · 호출=Opik span 1건(provider retry 미반영) · 정적=그 스텝 호출의 90% 이상에 실린 줄 · system/user 역할만 집계.

excluded_test_rowsu#

시험 기록 제외: u 건 (수집 raw_countru건 → 집계 u건)

caveatz

u;

① 스텝별 발송량 (전수 합, 내림차순)

urdzz
스텝호출sys 평균usr 평균sys 정적usr 정적총량(자)비중
z calls system_avguser_avgsystem_static_ratiouser_static_ratioz.1fz %
u>

② 교차 스텝 중복 조각 (노출량 상위 25)

u

role 이 user 뿐인 행은 여러 스텝이 공유한 입력 데이터(시나리오 전문 등)일 수 있다 — 규칙 중복과 다른 부류이니 발췌를 보고 가를 것.

uzuJ

③ 팩 버전 성장 추이 (표시 구간 첫→끝 Δ 큰 순)

u

bytes=버전 디렉토리 안 stem 파일 전체 합(schema 포함, os byte). system.md 열은 그 stem 단독. Δ는 아래 나열된 구간(최근 5버전)의 첫→끝 차이다.

bytesstemsz system.md)reverseu
문장(발췌)role스텝 수스텝노출량(자)
linez+roles step_countz, ru …exposure_charsz
u → c3LK|]}d|dd|dddd|ddy w) vversion(tsz): rBr,Nrr#s rr&zrender..ts?) ~Qqwq|nC' 1~ >s"$z class=warnzz+,uH

④ 스텝별 정적분의 팩 귀속 (발송량 상위 스텝)

u

한계: 현재 checkout 최신 팩만 색인(당시 활성판·오버레이 미반영) · exact-line 일치 · 같은 줄이 여러 팩에 있으면 정렬상 첫 파일로 귀속. 40자 미만 줄은 귀속 대상 밖.

rLz

z

uS
module버전(월일): 합계구간 Δ(합계)구간 Δ(system.md)
pack_bytesuO
팩 파일(module/version/stem)정적 자
팩 색인 밖(코드 내장·조립 산문 등)unmatched_bytesz report.html zutf-8)encoding)mkdirsorteditemssumvaluesappendCSSrgetrnowrutc isoformatrjoinlensortlist write_text)rrrrrrrowsgrandpartsstepr%sharedgrownmodulerstaildelta sys_deltaseqclsattsrcbouts rrenderrts MM$M. %++-%E FD 9%,,.9 9EE LL)* LL:; LL73%x() LL>? LL T$((7"345S "% & '{dhh|TXXVcMd6e5fg&&+AYn << % / / / C DD JK  LL YZ  xx$%1 1xx,-a01xx Q/2/xx a(+8 5 6  xx }T#d8n*=%>$?tDE LLNO LL 34a27- 5(3.Q tDzl)AgJ<@\?1%Yq}Q.?@*+,-()*+]#A&ic{+  G H LL LLQR LL +, LL QR#2Y !$qy#"7!897 4567\?#$ !G*Ra. 9:;QwZ1,v"56%&q)  5 6 LL LL]^ LL => Elln "#wR!DGG$44"Xg&**;:Aww'++K;<  eY56 %  JJtJ LL LM+0*&y&$ll %qymb tF|n,=d3i[se1U2Ji "~Z I J +5 LL LL[\ LL UV8at$  24:,eDE  ' (3|,2245bq9FC LL"49+Yqe:F H:  -.q1 = >  Z  M !CNN499U#gN6 Jr)__doc__r rrpathlibrtypingrrrrXobjectrrrtrrrrys  '"" Fsw w sCx.w T#s(^# $w tCH~  w d4S>** + w sDcN*+ w wr