दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

एजेंटिक बड़े भाषा मॉडल पुनर्प्राप्ति-आधारित रेडियोलॉजी प्रश्न उत्तर में सुधार करते हैं

Created by
  • Haebom

लेखक

सेबस्टियन विंड, जेटा सोपा, डैनियल ट्रुहन, महशाद लोटफिनिया, ट्राई-थिएन गुयेन, केनो ब्रेसेम, लिसा एडम्स, मिराबेला रुसु, हेराल्ड के ओस्लर, गेरहार्ड वेलेन, एंड्रियास मायर, सोरोश तैयबी अरास्तेह

रूपरेखा

यह शोधपत्र रेडियोलॉजी प्रश्नोत्तर (QA) के लिए एक एजेंट-आधारित पुनर्प्राप्ति-संवर्धित पीढ़ी (RAG) ढाँचा प्रस्तावित करता है। पारंपरिक एकल-चरण पुनर्प्राप्ति विधियों की सीमाओं को पार करने के लिए, हमने एक ऐसी प्रणाली का निर्माण किया है जिसमें LLMs रेडियोलॉजी प्रश्नों को स्वचालित रूप से विघटित करते हैं और रेडियोपीडिया से लक्षित नैदानिक साक्ष्यों को पुनरावृत्त रूप से पुनर्प्राप्त करते हैं ताकि गतिशील रूप से साक्ष्य-आधारित प्रतिक्रियाएँ उत्पन्न की जा सकें। हमने RSNA-RadioQA और ExtendedQA डेटासेट से 104 विशेषज्ञ-समीक्षित प्रश्नों पर विभिन्न आर्किटेक्चर, पैरामीटर आकारों (0.5B से 670B से अधिक), और सीखने के प्रतिमानों (सामान्य प्रयोजन, अनुमान अनुकूलन, और नैदानिक फ़ाइन-ट्यूनिंग) वाले 24 LLMs का मूल्यांकन किया। एजेंट पुनर्प्राप्ति ने शून्य-शॉट प्रॉम्प्टिंग और पारंपरिक ऑनलाइन RAG (73% बनाम 64%, P<0.001; 73% बनाम 68%, P<0.001) की तुलना में औसत नैदानिक सटीकता में उल्लेखनीय सुधार किया, विशेष रूप से मध्यम आकार के मॉडलों के लिए। इसके अलावा, हमने चिकित्सकीय रूप से प्रासंगिक संदर्भ प्राप्त करके मतिभ्रम को कम किया और तथ्यात्मक साक्ष्य को बढ़ाया। चिकित्सकीय रूप से परिष्कृत मॉडलों में भी महत्वपूर्ण सुधार देखे गए, जो खोज और परिष्कृतीकरण की पूरक भूमिकाओं का सुझाव देते हैं।

Takeaways, Limitations

Takeaways:
एजेंट-आधारित आरएजी फ्रेमवर्क रेडियोलॉजी क्यूए में यथार्थवाद और नैदानिक सटीकता में सुधार करने की क्षमता प्रदर्शित करता है।
यह मध्यम आकार के एलएलएम में विशेष रूप से प्रभावी है और छोटे पैमाने के मॉडलों के प्रदर्शन को बेहतर बनाने में भी योगदान देता है।
हमने खोज और फाइन-ट्यूनिंग की पूरक भूमिकाओं की पहचान की है।
मतिभ्रम में कमी और चिकित्सकीय रूप से प्रासंगिक सूचना पुनर्प्राप्ति के माध्यम से तथ्यात्मक आधार को मजबूत करने में योगदान देता है।
Limitations:
इसकी नैदानिक उपयोगिता को सत्यापित करने के लिए आगे के अध्ययन की आवश्यकता है।
बहुत बड़े मॉडलों (>200B पैरामीटर) के लिए, प्रदर्शन में सुधार न्यूनतम था।
यह रेडियोपीडिया डेटा पर निर्भर करता है और डेटा पूर्वाग्रह के प्रभाव पर विचार किया जाना चाहिए।
👍