Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Performance of Large Language Models in Supporting Medical Diagnosis and Treatment

Created by
  • Haebom

저자

Diogo Sousa, Guilherme Barbosa, Catarina Rocha, Dulce Oliveira

개요

본 연구는 대규모 언어 모델(LLM)을 의료 분야에 통합하여 진단 정확도를 높이고 치료 계획을 지원하는 가능성을 평가한 연구입니다. 다양한 오픈소스 및 클로즈드소스 LLM들을 2024년 포르투갈 의학 전문의 시험(PNA) 성적을 기준으로 평가하여 정확도와 비용 효율성을 비교 분석하였습니다. 일부 모델은 의대생의 평균 성적을 능가하는 결과를 보였으며, 정확도와 비용을 종합적으로 고려하여 우수 모델을 선정하고, Chain-of-Thought와 같은 추론 방법론의 영향과 LLM이 의료 전문가의 복잡한 임상 의사 결정을 지원하는 데 유용한 보완 도구로서 기능할 가능성을 제시합니다.

시사점, 한계점

시사점:
다양한 LLM의 의료 지식 수준 비교 및 우수 모델 도출 가능성 제시.
LLM이 의학 교육 및 의료 서비스 향상에 기여할 수 있음을 시사.
Chain-of-Thought 등 추론 방법론의 성능 개선 방향 제시.
LLM의 비용 효율성 평가를 통해 실질적인 의료 적용 가능성 확인.
한계점:
PNA 시험 성적만을 기준으로 평가하여 실제 임상 환경 적용의 일반화 가능성에 대한 추가 연구 필요.
LLM의 윤리적, 법적 문제 및 책임 소재에 대한 고려 부족.
특정 국가(포르투갈)의 시험 데이터를 사용하여 일반화의 한계 존재.
LLM의 의사결정 과정 투명성 및 신뢰도 확보에 대한 추가 연구 필요.
👍