{
 "report": "crack-gate-design-ab.html",
 "generated": "2026-07-13",
 "code_sha": "4b4e8500f5a246185fbe228f674d2d9e15eab7e2",
 "claims": [
  {
   "metric": "AUROC 베이스라인(첫토큰 p_crack) — 1차/신선셋",
   "value": 0.9684,
   "ci": [
    0.9581,
    0.9787
   ],
   "seeds": [
    0.9787,
    0.9581
   ],
   "n_seed": 2,
   "std": 0.0103,
   "uncertainty_kind": "single_measurement"
  },
  {
   "metric": "AUROC 체크리스트 v1(5기준 등가중)",
   "value": 0.6088,
   "ci": [
    0.6088,
    0.6088
   ],
   "seeds": [
    0.6088
   ],
   "n_seed": 1,
   "std": 0.0,
   "uncertainty_kind": "single_measurement"
  },
  {
   "metric": "AUROC 체크리스트 v2(재설계, 신선셋)",
   "value": 0.3876,
   "ci": [
    0.3876,
    0.3876
   ],
   "seeds": [
    0.3876
   ],
   "n_seed": 1,
   "std": 0.0,
   "uncertainty_kind": "single_measurement"
  },
  {
   "metric": "FP기각@TP유지90% 베이스라인 — 1차/신선셋",
   "value": 0.904,
   "ci": [
    0.863,
    0.945
   ],
   "seeds": [
    0.945,
    0.863
   ],
   "n_seed": 2,
   "std": 0.041,
   "uncertainty_kind": "single_measurement"
  }
 ],
 "data": [
  {
   "name": "BCL 게이트 크롭 1차(TP400/FP800)+신선셋(TP400/FP800, skip으로 분리)",
   "sha256": "(chk_results*.json에 per-crop 기록)",
   "license": "CC0(BCL 파생)",
   "files": 2400,
   "provenance": "real_heldout"
  }
 ],
 "split": {
  "type": "OOD",
  "proof": "게이트는 크롭 무학습 zero-shot. v2는 v1 진단 후 설계→신선 크롭(원본 skip 분리)에서 평가=설계누수 방지. 베이스라인도 신선셋 재측정으로 공정비교.",
  "leakage_check": "1차/신선셋 크롭 소스 이미지 교집합 0(skip_tp 700/skip_fp 1400)."
 },
 "seeds": [
  0
 ],
 "seed_independence": "게이트=결정론(greedy) 단일모델 — 시드 대신 두 독립 크롭셋(1차/신선)으로 재현성 확인(베이스라인 0.979/0.958 안정, 체크리스트 0.61/0.39 불안정).",
 "ci_method": "ci=두 독립 크롭셋 결과의 min-max(체크리스트 v1/v2는 각 1셋 측정=단일값 정직 표기).",
 "labels": {
  "verified_n": 6,
  "verifier": "Claude 육안검증(TP 크롭=진짜 균열 몽타주 확인). GT=BCL 원저자 마스크→TP/FP 자동라벨(검출∩GT). 인간 스팟체크 권장.",
  "auto_label_flagged": true,
  "note": "TP=검출CC가 GT 4px팽창과 겹침, FP=무크랙 이미지의 검출CC. 파싱 성공 ≥99.9%."
 },
 "model": "Cosmos-Reason2-8B(제품 이미지 격리, greedy) · 베이스라인=제품 크랙 프롬프트 동일",
 "caveats": [
  "단일 백본 결과(VG-백본 선정 별도). 크롭 풀에 기준 발화율 민감(C2: 1차 +0.22→신선 +0.00).",
  "결론=현 제품 게이트 설계(대조 프레이밍+첫토큰 soft) 유지, 체크리스트는 진단 도구로만."
 ]
}