scoring_rule split
| rule | n | acc | Brier |
|---|---|---|---|
| v1.5 | 16 | 75.0% | 0.2131 |
| v1.6 | 46 | 37.0% | 0.2606 |
| v1.7-revert | 34 | 55.9% | 0.2652 |
| v1.8 | 118 | 58.5% | 0.2730 |
| v1.8-credit-fail | 25 | 60.0% | 0.2304 |
| v2.0-shadow | 5 | 60.0% | 0.5616 |
| v2.1-B-shadow | 52 | 51.9% | 0.4635 |
MoneyBall Score 의 모델 진화 과정을 모두 공개합니다. 현재 운용 중인 v1.8 가중치와 함께 v2.0-shadow · v2.1-B-shadow · v1.5 · v1.6 · v1.7-revert era 별 적중률과 Brier 점수를 같은 cohort 위에서 비교하여, v1.8 유지 확정 결정의 근거를 투명하게 박제합니다.
결정 임계 = v1.8 real cohort n=150 — 실측 cohort 진척 및 Brier drift 원인 분석은 /accuracy live 참조. 임계 달성 완료 — v2.1-B rejected (Brier 0.4635), v1.8 유지 확정. 본 dashboard 는 cohort 갱신 시점마다 자동 갱신됩니다.
source: 2026-06-22-cohort-cycle-1340.md
**총 n=296** (적중 162 / 54.7%)
| rule | n | acc | Brier |
|---|---|---|---|
| v1.5 | 16 | 75.0% | 0.2131 |
| v1.6 | 46 | 37.0% | 0.2606 |
| v1.7-revert | 34 | 55.9% | 0.2652 |
| v1.8 | 118 | 58.5% | 0.2730 |
| v1.8-credit-fail | 25 | 60.0% | 0.2304 |
| v2.0-shadow | 5 | 60.0% | 0.5616 |
| v2.1-B-shadow | 52 | 51.9% | 0.4635 |
| 요일 | n | acc |
|---|---|---|
| 화 | 43 | 55.8% |
| 수 | 27 | 51.9% |
| 목 | 86 | 54.7% |
| 금 | 54 | 57.4% |
| 토 | 43 | 58.1% |
| 일 | 43 | 48.8% |
| tier | n | acc |
|---|---|---|
| low | 211 | 53.1% |
| mid | 53 | 54.7% |
| high | 32 | 65.6% |
| rule | low | mid | high | veryhigh |
|---|---|---|---|---|
| v1.5 | 67% (3) | 67% (6) | 86% (7) | — |
| v1.6 | 38% (32) | 42% (12) | 0% (2) | — |
| v1.7-revert | 60% (25) | 33% (6) | 67% (3) | — |
| v1.8 | 55% (74) | 60% (25) | 68% (19) | — |
| v1.8-credit-fail | 60% (20) | 75% (4) | 0% (1) | — |
| v2.0-shadow | 60% (5) | — | — | — |
| v2.1-B-shadow | 52% (52) | — | — | — |
자동 생성 — plan #8 Tier 1 M7 op-analysis-weekly cron.