Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

LLM-Match: An Open-Sourced Patient Matching Model Based on Large Language Models and Retrieval-Augmented Generation

Created by
  • Haebom
Category
Empty

저자

Xiaodi Li, Shaika Chowdhury, Chung Il Wi, Maria Vassilaki, Xiaoke Liu, Terence T Sio, Owen Garrick, Young J Juhn, James R Cerhan, Cui Tao, Nansu Zong

개요

LLM-Match는 환자의 의료 기록과 임상 시험 자격 기준을 정확하게 일치시켜 환자를 적절한 임상 시험에 연결하는 환자 매칭을 위한 새로운 프레임워크입니다. LLM-Match는 전자 건강 기록(EHR)에서 관련 환자 맥락을 추출하는 검색 증강 생성(RAG) 모듈, 시험 자격 기준(포함 및 제외 기준 모두), 환자 맥락, 시스템 지침을 통합하여 입력 프롬프트를 구성하는 프롬프트 생성 모듈, 구조화된 프롬프트와 정답 레이블을 사용하여 모델 매개변수를 최적화하는 분류 헤드가 있는 미세 조정 모듈, 테스트 데이터 세트에서 미세 조정된 모델의 성능을 평가하는 평가 모듈의 네 가지 주요 구성 요소로 구성됩니다. n2c2, SIGIR, TREC 2021, TREC 2022의 네 가지 공개 데이터 세트에서 오픈소스 모델을 사용하여 LLM-Match를 평가하고 TrialGPT, Zero-Shot 및 GPT-4 기반 폐쇄 모델과 비교한 결과, LLM-Match가 모든 기준 모델보다 성능이 뛰어났습니다.

시사점, 한계점

시사점: 오픈소스 대규모 언어 모델을 활용하여 환자 매칭의 정확도를 향상시킬 수 있음을 보여줍니다. 기존 방법보다 우수한 성능을 달성하여 임상 시험 참여율을 높일 수 있는 가능성을 제시합니다. 다양한 공개 데이터셋에서 성능 검증을 통해 실용성을 입증했습니다.
한계점: 사용된 오픈소스 모델의 특성에 따라 성능이 영향을 받을 수 있습니다. 다양한 의료 데이터 형식 및 질병의 복잡성을 완벽하게 처리하는 데에는 한계가 있을 수 있습니다. 모델의 설명력 및 해석 가능성에 대한 추가적인 연구가 필요합니다. 데이터셋의 편향이 모델 성능에 영향을 미칠 가능성이 있습니다.
👍