질문 → 목표

대조와 복기

기록한 목표와 측정값이 만나는 곳입니다. 합성 범위 안의 값과 실제 사례의 값은 서로 다른 질문에 답하므로 대조마다 측정 범위를 적습니다.

9기록한 대조내부 목표와 같은 지표

6범위 안에서 기준에 듦연구 성과가 아님

2목표 미달기록 그대로 남김

0외부 코호트 대조실행한 것이 없음

목표와 측정값

“이 범위 안에서 기준에 듦”은 옆에 적은 범위 안에서 사전에 정한 기준을 충족했다는 뜻입니다. 과제의 목표를 달성했다는 뜻이 아닙니다.

과제	내부 목표	측정값	측정 범위	읽기
19-1	원인 유전자 상위 5순위 검출률 90% 이상	1,874건 중 172건 상위 5위 (9.18%)	공개 문헌 사례	목표 미달
8-1	원본 대비 하류 예측 성능 보존율 95% 이상	종점 4개 중 최저 91.4%, 3개가 95% 이상 (합성, 기준 생성기, 출시 차단)	합성 입력만	목표 미달
18-2	금기 처방·유사약 오인 누락률 0%	주입 오류 4,500건 중 0건 통과 (합성 비전 출력, 정상 조제의 62.0%가 자동 통과)	합성 입력만	이 범위 안에서 기준에 듦
16-2	가상 코호트 난이도 수렴률 95% 이상	합성 수렴률 96.2% (하한 0.9505)	합성 입력만	이 범위 안에서 기준에 듦
16-3	독립 외부 코호트 AUROC 0.90 이상	합성 외부 AUROC 0.932, 0.926. 목표 미달 조건: ZERO_ADAPTATION_B_TO_A, SPEECH_UNSEEN_UNIT, EFFECT_SCALE_0.5, EFFECT_SCALE_0.75	합성 입력만	지표에 따라 갈림
12-1	급성 위기 신호 탐지 재현율 90% 이상	합성 재현율 0.9155	합성 입력만	이 범위 안에서 기준에 듦
12-2	동결 테스트의 치료 금기 발화 위배율 0%	0 / 30,190 (합성)	합성 입력만	이 범위 안에서 기준에 듦
12-3	장기 고립 전환 탐지 정밀도 85% 이상	합성 정밀도 0.978 (하한 0.933)	합성 입력만	이 범위 안에서 기준에 듦
12-4	위기 감지 후 즉시 전환율 100%	감지된 턴 1,584 / 1,584 (합성)	합성 입력만	이 범위 안에서 기준에 듦

목표와 다른 것을 잰 측정

이 모듈들은 과제의 내부 목표와 다른 양을 재므로 위 대조에 넣지 않습니다.

19-1실자료 감사다른 측정

공개 기록으로 감사한 ACMG 기준 주장

에이전트가 주장한 ACMG 기준은 공개 기록으로 만든 근거 장부와 대조한 뒤에만 보고서에 오릅니다. 보류 유전자 20개에서 전문가 패널이 양성 쪽으로 판정한 변이 1,324개 중 1,323개를 병원성 쪽으로 부르지 않았고(99.92%), 병원성 쪽으로 판정한 1,890개 중 984개를 병원성 또는 병원성 추정으로 판정했습니다(52.06%). 감사 관문은 넣어 본 거짓 주장 9,493건 중 9,493건을 막았고, 장부에서 낸 기준 164,867건 중 0건을 막았습니다.

19-1가상 시험다른 측정

고정 가상 사례의 역할 분리와 감사 관문

고정 형식의 VCF에서 변이를 주석하고 HPO 표현형으로 후보 유전자 순위를 계산하며, 별도 감사기가 근거 코드·순위·입력 해시를 다시 대조합니다. 가상 사례 4건 중 2건이 상위 5위에 들었습니다. 경계에서 동점이면 같은 점수의 후보가 모두 5위 안에 들어야 검출로 셉니다.

대조가 보여 주지 않는 것

이 화면의 어떤 대조도 독립 외부 코호트에서 한 것이 아니며 감사자 서명이 없습니다. 측정마다의 한계는 연결된 과제 기록에 적었습니다.

부정·혼합 결과 →검토가 필요한 항목 →