Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Task as Context Prompting for Accurate Medical Symptom Coding Using Large Language Models

Created by
  • Haebom

저자

Chengyang He, Wenlong Zhang, Violet Xinying Chen, Yue Ning, Ping Wang

개요

본 논문은 백신 안전 보고서와 같은 비정형 의료 텍스트에서 정확한 의료 증상 코딩을 수행하는 것을 목표로 합니다. 기존의 증상 추출 및 연결을 독립적인 작업으로 처리하는 방식은 임상 서술의 변동성과 복잡성을 제대로 처리하지 못하는 한계가 있습니다. 이를 해결하기 위해, 본 논문은 작업 특정 컨텍스트를 LLM 프롬프트에 포함시키는 새로운 프레임워크인 Task as Context (TACO) Prompting을 제안합니다. 또한, 백신 이상 사례 보고 시스템(VAERS) 보고서를 기반으로 한 사람이 주석을 단 데이터셋 SYMPCODER와 증상 연결 및 언급 충실도를 종합적으로 평가하기 위한 2단계 평가 프레임워크를 소개합니다. Llama2-chat, Jackalope-7b, GPT-3.5 Turbo, GPT-4 Turbo, GPT-4o 등 여러 LLM에 대한 종합적인 평가를 통해 TACO가 증상 코딩과 같은 맞춤형 작업의 유연성과 정확성을 향상시키는 데 효과적임을 보여줍니다.

시사점, 한계점

시사점:
TACO Prompting 프레임워크를 통해 LLM을 활용한 의료 증상 코딩의 정확도와 효율성 향상 가능성 제시.
SYMPCODER 데이터셋 제공을 통한 향후 연구의 기반 마련.
다양한 LLM 성능 비교를 통한 최적 모델 선택 및 향후 연구 방향 제시.
의료 텍스트 처리 분야 발전에 기여.
한계점:
SYMPCODER 데이터셋의 규모 및 다양성에 대한 추가적인 검토 필요.
TACO Prompting 프레임워크의 일반화 가능성 및 다른 의료 코딩 작업에 대한 적용 가능성 추가 연구 필요.
특정 LLM에 대한 의존성 및 다른 LLM 모델로의 확장성에 대한 추가 연구 필요.
희귀 증상에 대한 코딩 성능에 대한 추가적인 분석 필요.
👍