Sign In

Evaluating Generative AI as an Educational Tool for Radiology Resident Report Drafting

Created by
  • Haebom
Category
Empty

저자

Antonio Verdone, Aidan Cardall, Fardeen Siddiqui, Motaz Nashawaty, Danielle Rigau, Youngjoon Kwon, Mira Yousef, Shalin Patel, Alex Kieturakis, Eric Kim, Laura Heacock, Beatriu Reig, Yiqiu Shen

개요

본 연구는 레지던트의 유방 영상 보고서에 대한 자동화된 피드백을 제공하는 HIPAA를 준수하는 GPT-4o 시스템을 평가했습니다. 5,000쌍의 레지던트-전문의 보고서 쌍을 분석하고, GPT-4o가 흔한 오류를 식별하고 피드백을 제공하도록 했습니다. 100쌍의 보고서를 사용한 리더 연구를 통해 GPT의 정확도와 유용성을 평가했습니다.

시사점, 한계점

GPT-4o는 레지던트 보고서에서 주요 교육적 오류를 안정적으로 식별할 수 있습니다.
GPT-4o는 방사선과 교육을 지원하는 확장 가능한 도구로 활용될 수 있습니다.
GPT와 판독자 간의 일치도는 높았으며, GPT를 인간 판독자를 대체해도 일치도에 큰 영향을 미치지 않았습니다.
GPT의 피드백은 대부분의 경우 유용하다고 평가되었습니다.
한계점: 연구의 구체적인 한계점은 논문에 명시되지 않았습니다.
👍