Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Leveraging Evidence-Guided LLMs to Enhance Trustworthy Depression Diagnosis

Created by
  • Haebom
Category
Empty

저자

Yining Yuan, J. Ben Tamo, Micky C. Nnamdi, Yifei Wang, May D. Wang

개요

본 논문은 임상 진단 자동화에 대한 대규모 언어 모델(LLM)의 잠재력을 탐구하지만, 투명성 부족과 진단 표준과의 불일치로 인한 신뢰 및 임상 적용의 어려움을 해결하기 위해 두 단계의 진단 프레임워크를 제안합니다. 첫째, DSM-5 기준에 근거한 증거 추출과 논리적 추론을 결합하여 구조화된 진단 가설을 생성하는 Evidence-Guided Diagnostic Reasoning (EGDR)을 소개합니다. 둘째, Knowledge Attribution Score (KAS)와 Logic Consistency Score (LCS)라는 두 가지 해석 가능한 메트릭을 통해 생성된 진단의 사실적 정확성과 논리적 일관성을 평가하는 Diagnosis Confidence Scoring (DCS) 모듈을 제안합니다. D4 데이터셋에서 평가한 결과, EGDR은 다양한 LLM에서 직접적인 문맥 내 프롬프팅 및 Chain-of-Thought (CoT) 방식보다 우수한 성능을 보였습니다.

시사점, 한계점

시사점:
EGDR은 LLM의 진단 정확도를 최대 45%, DCS를 최대 36% 향상시켜 임상적으로 근거 있고 해석 가능한 AI 기반 진단 기반을 제공합니다.
EGDR은 OpenBioLLM 및 MedLlama와 같은 다양한 LLM에서 일관된 성능 향상을 보입니다.
KAS와 LCS를 통해 진단의 신뢰성을 높이는 투명하고 해석 가능한 진단 결과를 제공합니다.
한계점:
D4 데이터셋의 의존성 및 일반화 가능성 추가 검증 필요.
실제 임상 환경에서의 유효성 평가가 필요합니다.
특정 LLM의 성능에 따라 결과가 달라질 수 있습니다.
👍