दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

ओमनीप्ले: ओमनी-मोडल गेम खेलने पर ओमनी-मोडल मॉडल की बेंचमार्किंग

Created by
  • Haebom

लेखक

फूकिंग बी, शियू हुआंग, ज़िजिया ताओ, ज़िकिन फ़ेंग, लेयी पैन, जुन्ज़े चेन, मिन रेन, लियू जियांग, झाओफ़ेंग हे

रूपरेखा

ओमनीप्ले विविध संवेदी सूचनाओं का लाभ उठाने वाले इंटरैक्टिव एजेंट मॉडलों की बुद्धिमत्ता के मूल्यांकन हेतु एक नया मानक है। मौजूदा मानकों की सीमाओं को पार करने के लिए, यह दृश्य, श्रवण और लौकिक सूचनाओं सहित विभिन्न तौर-तरीकों को एकीकृत करता है और एक इंटरैक्टिव खेल वातावरण प्रदान करता है। पाँच खेल वातावरणों से युक्त, यह एजेंट की क्रॉस-मोडल तर्क क्षमताओं का आकलन करने के लिए तौर-तरीकों के बीच अंतःक्रियाएँ और संघर्ष उत्पन्न करता है। छह प्रमुख बहुविध मॉडलों के मूल्यांकन से उच्च-रिज़ॉल्यूशन मेमोरी कार्यों पर असाधारण प्रदर्शन का पता चला, लेकिन मज़बूत तर्क और रणनीतिक योजना की आवश्यकता वाले कार्यों में महत्वपूर्ण विफलताएँ मिलीं। यह भेद्यता एक भंगुर संलयन तंत्र से उत्पन्न होती है, जो तौर-तरीकों के संघर्ष होने पर प्रदर्शन में तेज़ी से गिरावट प्रदर्शित करता है। इसके अलावा, इसने "कम ही अधिक है" विरोधाभास की खोज की, जहाँ संवेदी जानकारी को हटाने से विरोधाभासी रूप से प्रदर्शन में सुधार होता है। इसलिए, मज़बूत एजीआई पर शोध के लिए केवल स्केलिंग से कहीं अधिक की आवश्यकता है; इसे सहक्रियात्मक संलयन के लिए एक स्पष्ट समाधान प्रदान करना होगा।

Takeaways, Limitations

Takeaways:
हम ओमनीप्ले प्रस्तुत करते हैं, जो एजेंट मॉडलों की बुद्धिमत्ता के मूल्यांकन के लिए एक नया मानक है, जो विविध तौर-तरीकों के साथ एकीकृत और अंतःक्रिया करता है।
हम मौजूदा मल्टीमॉडल मॉडलों की कमजोरियों (मजबूत अनुमान और रणनीतिक योजना का अभाव) और उनके कारणों (भंगुर संलयन तंत्र) को उजागर करते हैं।
"कम ही अधिक है" विरोधाभास की खोज, साधन एकीकरण के महत्व और चुनौतियों पर प्रकाश डालती है।
इससे पता चलता है कि मजबूत एजीआई के विकास के लिए सरल मापनीयता से परे तालमेल संलयन पर अनुसंधान आवश्यक है।
Limitations:
ओमनीप्ले बेंचमार्क की सामान्यता निर्धारित करने के लिए आगे अनुसंधान की आवश्यकता है।
मूल्यांकन में प्रयुक्त मॉडलों के प्रकार और संख्या पर सीमाएं।
विभिन्न प्रकार के मोडैलिटी संघर्षों और अंतःक्रियाओं पर अधिक व्यापक शोध की आवश्यकता है।
👍