# APOSTOLUS 평가 자료와 분할

2026-11-14에 12개 과제의 공개 평가자료 후보, 정답, 분할 단위, 접근 조건과 보류 근거를 고정했다. 재현 가능한 사례·그룹·연도 명부는 15개다. 8-1의 공개 다중오믹스 비교와 19-1의 공개 문헌 순위 평가를 진행 가능한 범위로 확정했다. 나머지 10개에는 원 목표를 판단하는 데 필요한 정답이 일부 또는 전부 미확보다.

| 과제 | 자료와 물리적 분할 | 정답 정의 | 평가 범위 |
| --- | --- | --- | --- |
| 5-1 | D3R GC4, BACE1 34개 검증과 Cathepsin S 39개 시험 | 같은 표적에서 측정 친화도의 상대 차이, 중심화 RMSE | 공개 기존 물질 벤치마크. 직접 열역학 실측과 골격 외삽 보류. |
| 8-1 | TCGA-BRCA 621명. 조직 수집기관 단위 372/124/125명 | 24개월 이내 진행. 조기 검열 제외. 실제 학습 대비 합성 학습의 AUROC 비율 | 시험 125명 중 양성 8명. 합성 모델 학습과 성능은 후속 단계. |
| 18-2 | ePillID v1.0. 공식 소비자 이미지 2,238/745/745 | 공식 품목 유형 ID. 보류와 오식별 집계 | 공개 사진 식별. 국내 처방·조제·투약 연결 정답 보류. |
| 19-1 | Phenopacket Store 0.1.27. 과거 7,304, 개발 1,054, 시험 1,874 사례 | 공개 문헌이 보고한 단일 원인 HGNC 유전자. 논문 기준으로 시점 분리 | 순위 평가 172/1,874(9.18%). 전체 환자 VCF와 ACMG/AMP 독립 판정은 자료 미확보. |
| 16-2 | OASIS-2 150명, 373방문. 피험자 단위 90/29/31 | 같은 참여자의 다음 CDR과 관측 간격 | 자연 경과. 적응 훈련의 문항·반응·중단 정답 보류. |
| 16-3 | OASIS-2 피험자 90/29/31, ADReSS 공식 음성 시험 명부 48명 | 동일 MRI 방문의 CDR 0 또는 ≥1. 음성은 공식 AD 레이블 | 모달리티별 종점. 동일인 MRI·음성과 독립 기관 정답 보류. |
| 18-1 | UP-Fall 피험자 11/3/3. KFall 명부 20/6/6 | 실험 동작 클래스. KFall 승인 자료의 시작·충격 프레임 | 착용 센서 모의 낙상. 병동 실낙상과 3초 선행 종점 보류. |
| 18-3 | Cholec80 수술 40/8/32 | 영상 프레임의 기구 7종 존재 표지 | 기구 존재. 기구 개체 수, 반출·잔류 거즈 정답 보류. |
| 12-1 | NSSP 공개 연도 집계 3/1/1 | 원 목표는 독립 사건 판정과 발생 시각, 완전한 사전 관측 | 공개 집계는 추세 대조. 개인·시간 정답 보류. |
| 12-2 | ED-SAFE 공개 집계 3행은 참고, 가상 상태 전환 4개 시험 | 원 목표는 독립 추적 결과와 별도의 응답 안전 분류 | 추적 환자 행은 승인 대상. 유가족 연계와 안전 분류 정답 보류. |
| 12-3 | WESAD 스트레스 실험 참가자 9/3/3 | 원 목표는 NHATS 이후 두 조사 파에서 지속한 고립 | 스트레스 실험과 종단 고립 자료를 별도 처리. 동일인 센서 연결 보류. |
| 12-4 | YRBS 조사연도 3/2/1, 가상 인계 6건 | 원 목표는 독립 사건 시각과 별도의 실제 인계 시각 | 공개 통계와 상태 전환 시험. 학교·연령·연계 정답 보류. |

표의 학습·검증·시험 순서는 세 숫자로 적었다. 보고된 개수는 명부나 출처에 직접 대조한 구획에 한정한다. 12-2의 ED-SAFE 집계는 조회 기준이며 나눠 학습하지 않는다. 명부 고정은 승인 대상 원자료의 확보를 대신하지 않는다. 19-1의 시간 분할에서 과거 환자 사례는 중복 대조에 쓰였으며 실제 기준 모델은 HPO 역사 지식을 사용했다.

## 19-1 공개 평가

2024–2025년 204편의 문헌에서 1,874개 사례로 시험했다. 당시 HPO에는 정답 유전자 702건이 포함돼 있었고, 그중 172건(24.50%)이 상위 5위였다. 전체는 **9.18%**이고 논문별 군집을 반영한 95% 부트스트랩 구간은 1.21–20.96%다. 같은 데이터의 정확 HPO 일치 기준은 8.70%였다. 90% 목표에 미달했다.

논문이 보고한 SNV가 있는 1,358건 중 과거 ClinVar와 정확한 좌표·대립유전자·유전자가 모두 맞은 사례는 356건이었다. 정답으로 보고된 변이의 주석 범위 확인이다. 유전자 순위 계산에는 변이를 전달하지 않았다.

## 평가 방법 문서

- [5-1 등 일곱 과제](plan-a.md) · [예방 네 과제](plan-b.md)
- [19-1 공개 평가와 재현 절차](rare19-evaluation.md) · [공개 집계 JSON](rare19-published-results.json)