임상시험에서 주요 심혈관 사건 판정을 위한 인공지능 활용
Using Artificial Intelligence to Adjudicate Major Adverse Cardiovascular Events in Clinical Trials.
Marti-Castellote et al.
- 가장 중요한 부분은 인공지능 판정과 의사 위원회 판정이 같은 약물 효과 결론을 내렸다는 점입니다.
- 이 연구는 한 가지 임상시험 자료에서만 인공지능을 검증했습니다.
- 혹시 앞으로 참여할 임상시험에서 인공지능으로 사건을 판정할 계획이 있나요?
2020 CONSORT-AI 지침은 AI 중재를 쓴 임상시험 보고의 표준을 제시하며, 본 연구의 Auto-MACE 시스템은 MACE 판정이라는 명확한 목적과 입력·출력 기준, 성능 오류 분석을 갖춰 이를 상당 부분 충족합니다. 2025 EHRA·HRS 지침은 EP 분야 AI 연구 보고 체크리스트로서 정답 정의, 성능 평가, 오류 분석을 강조하는데, 본 논문의 CEC 대조와 신뢰도 보고가 이를 따릅니다.
근거 2020 CONSORT-AI 임상시험 결과 보고 지침 · 2025 EHRA·HRS 전기생리 AI 현황 성명(보고 체크리스트)
앞으로 필요한 연구 AI 판정의 불확실 사건에 대한 성능이 명확하지 않으므로, 향후 연구에서는 Auto-MACE가 확신 없이 분류한 사건들을 인간 전문가가 재판정한 결과와 일치도를 비교하는 전향적 분석이 필요합니다.
일차적 의견
• PARADISE-MI 시험(N=5,661)에서 MI 후 수축기 부전 환자에 대한 sacubitril/valsartan과 ramipril 비교, Auto-MACE AI 시스템으로 MACE 판정.
• Auto-MACE와 CEC 일치도: 심사망 97%, MI 89%, 뇌졸중 88% (확신 있는 사건). 복합 MACE HR 0.91 (95% CI 0.78–1.07) vs CEC HR 0.90 (95% CI 0.77–1.05).
• 제한점: AI는 잠재적 사건의 46–81%에서만 확신 있는 판정 제공; 미검토 불확실 사건에 대한 성능 불명확.
확신 있는 사건에 대해 AI 보조 MACE 판정이 임상 위원회와 유사한 정확도를 달성하며, 불확실한 경우만 인간 검토 시 시험 업무량을 크게 줄일 수 있는 가능성을 제시한다.
쉽게 풀어 쓴 해설
- 심근경색 후 심장 펌프 기능이 약해진 환자들의 주요 사건을 판정할 때 인공지능이 전문가와 97% 일치했어요.
- 다만 명확하지 않은 사건의 절반 이상은 인공지능이 판정을 내리지 못했어요.
- 심근경색으로 심실 수축 기능이 떨어진 5,661명을 두 약물 그룹으로 나눠 비교했어요.
- 사망·재경색·뇌졸중 같은 주요 심장 사건을 인공지능과 의료 전문가가 각각 판정해서 결과가 얼마나 같은지 살펴봤어요.
- 심근경색 후 약물 치료 효과를 평가하는 임상 시험의 판정 방식에 관한 것이에요.
- 개별 환자의 치료 결정보다는 앞으로 시험을 어떻게 더 잘 진행할지에 대한 연구예요.
- 인공지능이 확신하지 못한 사건들에서 실제 판정 정확도가 어떤 수준인지는 알 수 없어요.
- 다음 외래에서 "인공지능 활용이 임상 시험의 판정 속도를 높일 수 있을까요"라고 여쭤 보세요.