दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

तथ्य तेजी से फीके पड़ जाते हैं: बड़े भाषा मॉडल में पुराने चिकित्सा ज्ञान के स्मरण का मूल्यांकन

Created by
  • Haebom

लेखक

जुराज व्लादिका, महदी धैनी, फ्लोरियन मैथेस

रूपरेखा

यह शोधपत्र चिकित्सा अनुसंधान और चिकित्सकों का समर्थन करके स्वास्थ्य सेवा में सुधार लाने हेतु बड़े पैमाने के भाषा मॉडल (एलएलएम) की क्षमता पर विचार करता है। हालाँकि, नए अनुसंधान और विकास के अनुरूप चिकित्सा अनुशंसाएँ विकसित होने पर स्थिर प्रशिक्षण आँकड़ों पर उनकी निर्भरता एक बड़ा जोखिम पैदा करती है। यदि एलएलएम में पुराना चिकित्सा ज्ञान बना रहता है, तो वे हानिकारक सलाह दे सकते हैं या नैदानिक ​​तर्क कार्यों में विफल हो सकते हैं। इस समस्या की जाँच के लिए, हम व्यवस्थित समीक्षाओं से प्राप्त दो नए प्रश्न-उत्तर (क्यूए) डेटासेट प्रस्तुत करते हैं: मेडरेवक्यूए (सामान्य जैव-चिकित्सा ज्ञान को कवर करने वाले 16,501 क्यूए जोड़े) और मेडचेंजक्यूए (512 क्यूए जोड़ों का एक उपसमूह जहाँ चिकित्सा सहमति समय के साथ बदली है)। आठ प्रमुख एलएलएम पर डेटासेट मूल्यांकन सभी मॉडलों में पुराने ज्ञान पर एक समान निर्भरता प्रकट करते हैं। इसके अलावा, हम इस परिघटना की व्याख्या करने के लिए अप्रचलित पूर्व-प्रशिक्षण आँकड़ों और प्रशिक्षण रणनीतियों के प्रभाव का विश्लेषण करते हैं और शमन के लिए भविष्य की दिशाएँ प्रस्तावित करते हैं, जिससे अधिक अद्यतित और विश्वसनीय चिकित्सा एआई प्रणालियों के विकास की नींव रखी जा सके।

Takeaways, Limitations

Takeaways:
चिकित्सा क्षेत्र में एलएलएम को लागू करते समय पुराने चिकित्सा ज्ञान पर निर्भरता की समस्या को स्पष्ट रूप से उजागर किया गया है।
हम पुरानी ज्ञान समस्याओं के मूल्यांकन के लिए नए QA डेटासेट (MedRevQA, MedChangeQA) प्रस्तुत करते हैं।
विभिन्न एलएलएम में पुराने ज्ञान पर लगातार निर्भरता का प्रयोगात्मक प्रदर्शन करना।
पुराने ज्ञान की समस्या के कारणों का विश्लेषण और शमन उपायों के लिए सुझाव।
अधिक विश्वसनीय चिकित्सा एआई प्रणालियों के विकास की नींव रखना।
Limitations:
आगे के शोध के लिए प्रस्तुत डेटासेट के आकार को विस्तारित करने की आवश्यकता है।
विश्लेषण में प्रयुक्त एलएलएम के प्रकार सीमित हैं।
प्रस्तावित शमन उपायों की प्रभावशीलता का आगे सत्यापन आवश्यक है।
👍