दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

आइटम प्रतिक्रिया सिद्धांत में कठिनाई और भेदभाव पर आइटम-लेखन दोषों का प्रभाव

Created by
  • Haebom

लेखक

रॉबिन श्मुकर, स्टीवन मूर

रूपरेखा

यह शोधपत्र एक आइटम लेखन त्रुटि (IWF) रूब्रिक का उपयोग करते हुए एक अध्ययन प्रस्तुत करता है, जो पाठ्य विशेषताओं के आधार पर परीक्षण वस्तुओं का मूल्यांकन करता है, और आइटम प्रतिक्रिया सिद्धांत (IRT)-आधारित शैक्षिक मूल्यांकन के लिए पारंपरिक, संसाधन-गहन पायलट-परीक्षण-आधारित आइटम सत्यापन दृष्टिकोण का स्थान लेता है। हमने 7,126 बहुविकल्पीय प्रश्नों (STEM) पर एक स्वचालित IWF रूब्रिक (19 मानदंड) लागू किया और IRT मापदंडों (कठिनाई, भेदभाव) के साथ उनके संबंधों का विश्लेषण किया। विश्लेषण से IWF की संख्या और IRT कठिनाई एवं भेदभाव मापदंडों के बीच महत्वपूर्ण सहसंबंधों का पता चला, विशेष रूप से जीवन/पृथ्वी विज्ञान और भौतिक विज्ञान में, और यह भी पता चला कि विशिष्ट IWF मानदंडों (जैसे, नकारात्मक शब्दावली, अवास्तविक गलत उत्तर) का आइटम की गुणवत्ता पर अलग-अलग प्रभाव पड़ता है। निष्कर्ष के तौर पर, हम सुझाव देते हैं कि स्वचालित IWF विश्लेषण मौजूदा सत्यापन विधियों का एक कुशल पूरक हो सकता है, जो विशेष रूप से कम कठिनाई वाले बहुविकल्पीय प्रश्नों की जाँच के लिए उपयोगी है।

____T51902_____, Limitations

Takeaways:
स्वचालित IWF विश्लेषण मौजूदा संसाधन-गहन IRT आइटम सत्यापन विधियों को कुशलतापूर्वक पूरक कर सकता है।
आईडब्ल्यूएफ विश्लेषण कम कठिनाई वाले बहुविकल्पीय प्रश्नों की प्रभावी पहचान कर सकता है।
आइटम की कठिनाई और भेदभाव पर विशिष्ट IWF मानदंडों के प्रभाव का विश्लेषण आइटम विकास में सुधार के लिए उपयोग किया जा सकता है।
Limitations:
यह अध्ययन STEM क्षेत्र तक ही सीमित था, तथा अन्य क्षेत्रों में इसकी सामान्यता निर्धारित करने के लिए और अधिक शोध की आवश्यकता है।
डोमेन-सामान्य मूल्यांकन मानदंडों और एल्गोरिदम को बेहतर बनाने के लिए आगे अनुसंधान की आवश्यकता है।
ऐसे एल्गोरिदम विकसित करने की आवश्यकता है जो डोमेन-विशिष्ट विषय-वस्तु को समझ सकें।
👍