alopecia/data/comparator_validation.json

109 lines
3.5 KiB
JSON

{
"_description": "트윈을 검증된 비교 기준선으로 올리는 엄밀 검증: 다단계 보정곡선(out-of-sample LOTO) + context별 신뢰성 점수표 + 사전임계 판정. V&V40 프레임.",
"calibration": {
"classes_used": [
"JAK_inhibitor",
"finasteride"
],
"curve": [
{
"nominal": 0.5,
"empirical": 0.463,
"n": 41
},
{
"nominal": 0.8,
"empirical": 0.902,
"n": 41
},
{
"nominal": 0.9,
"empirical": 0.951,
"n": 41
},
{
"nominal": 0.95,
"empirical": 0.976,
"n": 41
}
],
"calibration_error": 0.054,
"interval_score_90": 0.7,
"n_points": 41
},
"scorecard": [
{
"context": "치료-타이밍 궤적(회복 형태)",
"metric": "보정오차 0.054, 90%커버 0.951",
"threshold": "보정오차≤0.12 & 90%∈[0.8,1.0]",
"verdict": "검증된 비교군",
"tier": 1
},
{
"context": "질환 축 방향(AA/AGA, 벌크)",
"metric": "AA p<1e-11 · AGA 모발↓ p=0.004 (GSE68801/90594)",
"threshold": "독립 데이터 방향 일치 & p<0.05",
"verdict": "방향 검증(비교군 가능)",
"tier": 2
},
{
"context": "개입 축 방향(JAK-i, DHT)",
"metric": "JAK-i IFN↓ p=0.020 · DHT→DKK1 p=0.001 (GSE167360/178374)",
"threshold": "방향 일치 & p<0.05",
"verdict": "방향 검증(비교군 가능)",
"tier": 2
},
{
"context": "ex vivo 전체모낭 Wnt억제(GSE267664)",
"metric": "10/11 방향, 부호검정 p=0.0059",
"threshold": "부호검정 p<0.05",
"verdict": "방향 검증(비교군 가능)",
"tier": 2
},
{
"context": "모델 등가성(Halloy 벤치마크)",
"metric": "AGA 밀도 42.8 vs 트윈 42.5 · anagen 87 vs 85",
"threshold": "독립모델과 수렴(차<5%p)",
"verdict": "등가 확인",
"tier": 2
},
{
"context": "개인환자 예측",
"metric": "개인 IPD 검증 부재(dry-run +3.4% 불확정)",
"threshold": "전향적 검증 + UQ 보정",
"verdict": "비교군 자격 미달",
"tier": 3
},
{
"context": "절대 정량 크기",
"metric": "정성 모델·파라미터 sloppy(LOOCV 0.43)",
"threshold": "전향적 검증 + UQ 보정",
"verdict": "비교군 자격 미달",
"tier": 3
},
{
"context": "신규 병용 시너지",
"metric": "실데이터로 반증됨(IJT 가법미만)",
"threshold": "전향적 검증 + UQ 보정",
"verdict": "비교군 자격 미달",
"tier": 3
}
],
"context_of_use": {
"tier1_calibrated_comparator": [
"치료-타이밍 궤적(회복 형태)"
],
"tier2_directional_comparator": [
"질환 축 방향(AA/AGA, 벌크)",
"개입 축 방향(JAK-i, DHT)",
"ex vivo 전체모낭 Wnt억제(GSE267664)",
"모델 등가성(Halloy 벤치마크)"
],
"tier3_not_yet": [
"개인환자 예측",
"절대 정량 크기",
"신규 병용 시너지"
]
},
"honest_boundary": "타이밍=보정된(calibrated) 비교군; 축방향=방향 검증 비교군. 개인예측·절대정량·신규시너지는 전향/IPD 전까지 비교군 자격 미달. 규제용 합성 대조군(placebo 대체)은 별도 검증 필요."
}