2025 PROBAST+AI 예측모형 품질·비뚤림 위험 평가 도구
PROBAST+AI: an updated quality, risk of bias, and applicability assessment tool for prediction models using regression or artificial intelligence methods
평가 도구 · PROBAST+AI 개발 그룹 · BMJ · 2025.03
PROBAST 2019를 회귀모형과 AI·머신러닝 예측모형 모두에 쓸 수 있게 개정한 평가 도구입니다. 모형 개발은 '품질', 성능 평가는 '비뚤림 위험'으로 나눠 판정하고, 공정성을 묻는 문항을 넣었습니다.
이전 판 · 2019 PROBAST(예측모형 연구 비뚤림 위험 평가 도구)
현행 · 정리 기준일 2026-10-12 현재 이 지침 계열에서 가장 최근에 나온 판입니다.
꼭 확인할 핵심
- 모형 개발은 16개, 성능 평가는 18개 신호 질문으로 봅니다. 두 부분 모두 참여자·데이터 출처, 예측인자, 결과, 분석의 4개 영역으로 이뤄집니다.
- 데이터 출처와 연구 설계가 적절한지, 포함·제외 기준이 대표성 있는 데이터를 만들었는지 봅니다. 전자의무기록(EHR)·레지스트리 같은 일상 진료 데이터의 질과 대표성도 따집니다.
- 예측인자 전처리가 모든 참여자에게 같았는지, 최종 예측인자를 모형을 실제 쓰는 시점에 얻을 수 있는지 확인합니다.
- 개발 분석은 표본 크기, 결측·중도절단 자료 처리, 클래스 불균형(class imbalance) 보정 뒤 재보정, 과적합 대책을 평가합니다.
- 성능 평가는 겉보기(apparent) 성능에 그치지 않았는지, 학습·테스트 분할 때 데이터 누수(data leakage)를 막았는지 봅니다. 재표본 때 개발 단계를 모두 반복했는지, 보정·판별·순편익을 제대로 평가했는지도 확인합니다.
- 공정성과 알고리즘 비뚤림을 네 영역 곳곳에서 묻습니다. 적용 가능성은 앞의 3개 영역에서 판정합니다.
이전 판과 달라진 점
- 회귀모형뿐 아니라 AI·머신러닝 예측모형까지 같은 틀로 평가하도록 범위를 넓혔습니다.
- 2019판의 단일 평가를 모형 개발(품질, 16문항)과 성능 평가(비뚤림 위험, 18문항)로 나눴습니다. 개발이 부실해도 성능 평가는 비뚤리지 않을 수 있고 그 반대도 가능하다고 봅니다.
- 성능 평가를 겉보기·내부 검증·외부 검증으로 구분하고, 데이터 누수, 클래스 불균형, 재표본 절차를 묻는 문항을 새로 넣었습니다.
- 공정성과 알고리즘 비뚤림을 모든 영역에 반영했고, 통계와 컴퓨터과학에서 다르게 쓰던 용어를 맞췄습니다.
- 응답에 '해당 없음'을 더했고, 체계적 문헌고찰이 아니어도 지침 개발자·규제기관·편집자·임상의가 개별 모형을 평가할 때 쓰도록 했습니다.
- 3라운드 델파이와 26명 합의 회의를 거쳤고, 저자들은 PROBAST+AI가 2019판을 확장·대체한다고 밝혔습니다.
판 이력 · 발표 순서
- 2019.01 2019 PROBAST 예측모형 연구 비뚤림 위험 평가 도구 · 개정됨
- 2025.03 2025 PROBAST+AI 예측모형 품질·비뚤림 위험 평가 도구 · 현행 · 지금 보는 판
이 지침을 근거로 해석한 최근 논문
- 심장 MRI의 인공지능 대 임상의 좌심실 분할: 사망 예측을 위한 다기관 예후 연구 Lancet Digit Health · 2026-11-14
- 인공지능 기반 심전도를 이용한 사망률 및 심혈관 위험도 예측: 모델 개발 및 검증 연구 Lancet Digit Health · 2026-11-14
- 대동맥판막협착증 진행을 예측하는 심초음파 기반 AI 모델의 개발 및 외부 검증 JACC Adv · 2026-11-12
- 심부전 환자에서 급사의 1차 예방 최적화 J Am Coll Cardiol · 2026-11-11
- 일상 의료기록을 이용한 대동맥판협착증의 3년 위험 예측: 919,954명 대상 두 코호트 개발 및 검증 Eur Heart J Digit Health · 2026-11-11
- 인공지능 기반 관상동맥 CT 혈관조영술에서 급성 관상동맥증후군을 예측하는 관상동맥 병변의 특성과 역치 JACC Cardiovasc Imaging · 2026-11-08
원문과 근거 자료
원문 보기 · 무료 전문 · PubMed 40127903 · DOI
인용: BMJ 2025;388:e082505
정리 기준일 2026-10-12. 권고 등급은 원문 표기를 따랐고(유럽 지침과 2019년 중반 이전 미국 지침은 I·IIa·IIb·III, 그 뒤 미국 지침은 1·2a·2b·3), 읽는 법은 논문 읽는 법에 있습니다. 이 정리는 원문을 대신하지 않으니, 진료에 적용하기 전에는 원문 권고표를 확인하세요.
심장AI 분야의 다른 현행 진료지침
- 2025 STARD-AI 진단 정확도 연구 보고 지침 보고 지침 · 2025.09
- 2025 PRIME 2.0 심혈관 영상 멀티모달 AI 평가 체크리스트 보고 지침 · 2025.08
- 2025 EHRA·HRS 전기생리 AI 현황 성명(보고 체크리스트) 학회 성명 · 2025.03
- 2025 FUTURE-AI 신뢰할 수 있는 의료 AI 국제 합의 지침 합의문 · 2025.02
- TRIPOD-LLM 대형언어모델 연구 보고 지침(2025) 보고 지침 · 2025.01
- CLAIM 2024 의료영상 AI 체크리스트 보고 지침 · 2024.05
- TRIPOD+AI 예측모형 보고 지침(2024) 보고 지침 · 2024.04
- AHA 심장질환 AI 활용 과학 성명(2024) 학회 성명 · 2024.02
- 2024 AHA 심혈관 영상 AI 가치 창출 과학 성명 학회 성명 · 2024.01
- 2022 DECIDE-AI 초기 임상평가 보고 지침 보고 지침 · 2022.05
- 2020 CONSORT-AI 임상시험 결과 보고 지침 보고 지침 · 2020.09
- 2020 SPIRIT-AI 임상시험 계획서 보고 지침 보고 지침 · 2020.09
- 2020 MI-CLAIM 임상 AI 모델 최소 보고 체크리스트 보고 지침 · 2020.09
모든 내용은 심장내과 전문의를 포함한 의료진의 감수 아래 검토·작성되어 게시됩니다. 의학적 조언이 아니며 진료를 대신하지 않습니다.
전체 회차 · 전문의 코멘트 · 진료지침 · 학회 일정 · 독자 요청 해설 · 편집 방침 · 논문 읽는 법 · 소개 · 문의 · 개인정보처리방침