दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

बहुउद्देश्यीय एचपीसी जॉब शेड्यूलिंग के लिए एलएलएम-आधारित तर्क की प्रभावकारिता का मूल्यांकन

Created by
  • Haebom

लेखक

प्राची जाधव, होंगवेई जिन, ईवा डीलमैन, प्रसन्ना बालाप्रकाश

रूपरेखा

यह शोधपत्र उच्च-प्रदर्शन कंप्यूटिंग (HPC) कार्य निर्धारण समस्याओं के समाधान हेतु ReAct ढाँचे पर आधारित एक बड़े पैमाने के भाषा मॉडल (LLM)-आधारित अनुसूचक का प्रस्ताव करता है। मौजूदा अनुमान-आधारित विधियाँ (FCFS, SJF) और अनुकूलन तकनीकें गतिशील कार्यभार के अनुकूल नहीं हैं और एक साथ कई उद्देश्यों का अनुकूलन नहीं कर सकतीं। प्रस्तावित LLM-आधारित अनुसूचक, शेड्यूलिंग इतिहास को ट्रैक करने के लिए स्क्रैचपैड मेमोरी का उपयोग करता है, प्राकृतिक भाषा प्रतिक्रिया के माध्यम से निर्णय लेने की क्षमता में सुधार करता है, और एक बाधा प्रवर्तन मॉड्यूल के माध्यम से व्यवहार्यता और सुरक्षा सुनिश्चित करता है। OpenAI के O4-Mini और Anthropic के Claude 3.7 का उपयोग करके विभिन्न वास्तविक-विश्व HPC कार्यभार परिदृश्यों पर किए गए मूल्यांकन दर्शाते हैं कि LLM-आधारित अनुसूचक प्रभावी रूप से कई उद्देश्यों को संतुलित करता है और प्राकृतिक भाषा ट्रैकिंग के माध्यम से पारदर्शी अनुमान प्रदान करता है। यह उत्कृष्ट बाधा संतुष्टि प्रदर्शित करता है और डोमेन-विशिष्ट अधिगम के बिना विविध कार्यभारों के अनुकूल हो जाता है। हालाँकि, वास्तविक समय परिनियोजन के लिए अनुमान गुणवत्ता और कम्प्यूटेशनल ओवरहेड के बीच का समझौता एक चुनौती बना हुआ है। यह शोधपत्र, एचपीसी शेड्यूलिंग में अनुमानात्मक एलएलएम के अनुप्रयोग का पहला व्यापक अध्ययन है, जो कम्प्यूटेशनल दक्षता की सीमाओं पर प्रकाश डालते हुए बहु-उद्देश्यीय अनुकूलन के लिए इसकी क्षमता को प्रदर्शित करता है।

Takeaways, Limitations

Takeaways:
हम प्रदर्शित करते हैं कि एलएलएम-आधारित शेड्यूलिंग विविध एचपीसी कार्यभारों में कई उद्देश्यों (मेकस्पैन को न्यूनतम करना, विलंबता को कम करना, संसाधन उपयोग को अनुकूलित करना और निष्पक्षता सुनिश्चित करना) को प्रभावी ढंग से संतुलित कर सकती है।
प्राकृतिक भाषा ट्रैकिंग से शेड्यूलिंग प्रक्रिया में पारदर्शिता सुनिश्चित करने और निर्णय लेने की प्रक्रिया को समझने में आसानी हो सकती है।
यह डोमेन-विशिष्ट शिक्षण के बिना विविध कार्यभार के अनुकूल होने की लचीलापन प्रदान करता है।
हम जटिल शेड्यूलिंग समस्याओं के लिए एलएलएम के संभावित अनुप्रयोग प्रस्तुत करते हैं।
Limitations:
एलएलएम की अनुमान गुणवत्ता और कम्प्यूटेशनल ओवरहेड के बीच का समझौता इसे वास्तविक समय में परिनियोजन के लिए चुनौतीपूर्ण बना सकता है।
एलएलएम की कम्प्यूटेशनल लागत महत्वपूर्ण है, जिसके लिए वास्तविक एचपीसी वातावरण में अनुप्रयोग के लिए आर्थिक दक्षता की समीक्षा की आवश्यकता होती है।
👍