Ablation / 성능개선 실험

@comfozi/approval-ml의 실험 파이프라인(temporal_eval · entity_robustness · featurize_ab) 결과입니다. 모두 코드로 계산되며 라이브 재현됩니다.

Temporal (시간 이력)

• AUC 0.8682 → 0.9456 (시간 피처 계층 추가).
• 오류(1−AUC) 비율 2.424배 감소 — 발표의 "오류 2.4배 감소"와 정확히 일치.

Entity (거래처/품목 정규화)

• 엔티티 콜드스타트 비율 67% → 9% (canonicalization 적용).
• 계산 코드(cold_frac)에서 f-string으로 리포트에 포맷됨(하드코딩 아님).

보완성 (complementarity)

시간 이력 · 품목명 의미벡터 · 거래처 묶기 — 각각도 개선되지만, 함께 적용하면 더 오릅니다. 개별 격리 실험과 통합 실험은 세팅이 달라 절대값 비교 대신 기본 대비 상승폭만 봅니다.

노트

증분 크기는 데이터 분포·노이즈·적용 순서에 따라 달라집니다. 핵심 메시지는 절대값이 아니라 "세 요소가 보완적"이라는 구조입니다. 모든 수치는 합성 데이터 위 개념 실증입니다.