दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

एप्पल इंटेलिजेंस फाउंडेशन लैंग्वेज मॉडल: तकनीकी रिपोर्ट 2025

Created by
  • Haebom

लेखक

एथन ली (ताओयी), एंडर्स बोसेन लिंडबो लार्सन (ताओयी), चेन झांग (ताओयी), ज़ियू झोउ (ताओयी), जून किन (ताओयी), डियान आंग याप (ताओयी), नरेंद्रन राघवन (ताओयी), जुआनकाई चांग (ताओयी), मार्गिट बॉलर (ताओयी), एरे यिल्डिज़ (ताओयी), जॉन पीबल्स (ताओयी), हन्ना गिलिस कोलमैन (ताओयी), माटेओ रोन्ची (ताओयी), पीटर ग्रे (ताओयी), कीन यू (ताओयी), एंथोनी स्पालविएरी-क्रूस (ताओयी), रुओमिंग पैंग (ताओयी), रीड ली (ताओयी), यूली यांग (ताओयी), इमाद सोरौश (ताओयी), झियुन लू (ताओयी), क्रिस्टल जिओ (ताओयी), रोंग सीटू (ताओयी), जॉर्डन हफ़ेकर (ताओयी), डेविड ग्रिफिथ्स (ताओयी), ज़ैद अहमद (ताओयी), पेंग झांग (ताओयी), डैनियल परिला (ताओयी), आसफ लिबरमैन (ताओयी), जेनिफर मल्लालियू (ताओयी), परसा मजाहेरी (ताओयी), किबिन चेन (ताओयी), मंजोत बिल्खु (ताओयी), एओनान झांग (ताओयी), एरिक वांग (ताओयी), डेव नेल्सन (ताओयी), माइकल फिट्ज़मौरिस (ताओयी), थॉमस वॉयस (ताओयी), जेरेमी लियू (ताओयी), जोश शेफ़र (ताओयी), शिवेन झाओ (ताओयी), प्रशांत यादला (ताओयी), फरज़िन रस्तेह (ताओयी), पेंगशेंग गुओ (ताओयी), अर्सलान फारूक (ताओयी), जेरेमी स्नो (ताओयी), स्टीफन मर्फी (ताओयी), ताओ लेई (ताओयी), मिनसिक चो (ताओयी), जॉर्ज हॉरेल (ताओयी), सैम डॉज (ताओयी), लिंडसे हिसलोप (ताओयी), सुमीत सिंह (ताओयी), एलेक्स डोंब्रोव्स्की (ताओयी), ऐश्वर्या राघवन (ताओयी), साशा सिरोविका (ताओयी), मंदाना सेबी (ताओयी), फेय लाओ (ताओयी), मैक्स लैम (ताओयी), टीजे लू (ताओयी), झाओयांग जू (ताओयी), करनजीत सिंह (ताओयी), मार्क किरचनर (ताओयी), डेविड मिजराही (ताओयी), रजत अरोड़ा (ताओयी), हाओटियन झांग (ताओयी), हेनरी मेसन (ताओयी), लॉरेंस झोउ (ताओयी), यी हुआ (ताओयी), अंकुर जैन (ताओयी), फेलिक्स बाई (ताओयी), जोसेफ एस्ट्रास्कस (ताओयी), फ्लोरिस वीयर्स (ताओयी), जोश गार्डनर (ताओयी), मीरा चियांग (ताओयी), यी झांग (ताओयी), पुलकित अग्रवाल (ताओयी), टोनी सन (ताओयी), क्वेंटिन क्यूनब्रोएक (ताओयी), मैथ्यू हॉपकिंस (ताओयी), बुगु वू (ताओयी), ताओ जिया (ताओयी), चेन चेन (ताओयी), ज़िरुई वांग (ताओयी), चा चेन (ताओयी), शियाओयी रेन (ताओयी), फेंग नान (ताओयी), जोश एल्मन (ताओयी), डोंग यिन (ताओयी), यूसुफ गोरेन (ताओयी), जेफ लाई (ताओयी), यिरान फी (ताओयी), सिड इवांस (ताओयी), मुयांग यू (ताओयी), गुओली यिन (ताओयी), यी किन (ताओयी), एरिन फेल्डमैन (ताओयी), ईशा गर्ग (ताओयी), अपर्णा राजमणि (ताओयी), कार्ला वेगा (ताओयी), वॉकर चेंग (ताओयी), टीजे कोलिन्स (ताओयी), हंस हान (ताओयी), राउल री मेनाचो (ताओयी), साइमन येंग (ताओयी), सोफी ली (ताओयी), फानी मुत्याला (ताओई), यिंग-चांग चेंग (ताओयी), झे गण (ताओयी), स्प्राइट चू (ताओयी), जस्टिन लाज़ारो (ताओयी), एलेसेंड्रो पप्पलार्डो (ताओयी), फेडेरिको स्कोज़फावा (ताओयी), जिंग लू (ताओयी), एरिक डैक्सबर्गर (ताओयी), लॉरेंट डचेसन (ताओयी), जेन लियू (ताओयी), डेविड गुएरा (ताओयी), स्टेफानो लिगास (ताओयी), मैरी बेथ केरी (ताओयी), ब्रेंट रामरथ (ताओयी), सिरो सन्नीनो (ताओयी), मार्सिन इचनेर (ताओयी), हाओशुओ हुआंग (ताओयी), रुई कियान (ताओयी), मोरित्ज़ श्वार्जर-बेकर (ताओयी), डेविड रियाजाती (ताओयी), मिंगफेई गाओ (ताओयी), बैलिन वांग (ताओयी), जैक कैकलर (ताओयी), यांग लू (ताओयी), रैनसेन नीयू (ताओयी), जॉन डेनिसन (ताओयी), गिलाउम क्लेन (ताओयी), जेफरी बिघम (ताओयी), दीपक गोपीनाथ (ताओयी), नवीद शी (ताओयी), डैरेन बोटेन (ताओयी), गिलाउम टार्टावेल (ताओयी), एलेक्स गुइलेन गार्सिया (ताओयी), सैम जू (ताओयी), विक्टोरिया एम ओंचजुआन हलादजियन (ताओयी), ज़ी-यी डौ (ताओयी), मैथियास पॉलिक (ताओयी), एडोल्फो लोपेज़ मेंडेज़ (ताओयी), जेन ली (ताओयी), होंग-यू चेन (ताओयी), चाओ जिया (ताओयी), धवल दोशी (ताओयी), झेंगडोंग झांग (ताओयी), रौनक मंजानी (ताओयी), आरोन फ्रैंकलिन (ताओयी), ज़ाइल रेन (ताओयी), डेविड चेन (ताओयी), आर्टसिओम पेशको (ताओयी), नंदिता रघुराम (ताओयी), हंस हाओ (ताओयी), जिउलोंग शान (ताओयी), काव्या नेरेला (ताओयी), रैमसे तंतावी (ताओयी), विवेक कुमार (ताओयी), साईवेन वांग (ताओयी), ब्रिसेन वेर्शिंग (ताओयी), भुवन ढींगरा (ताओयी), ध्रुति शाह (ताओयी), ओब अदारानिजो (ताओयी), शिन झेंग (ताओयी), टैट मैडसेन (ताओयी), हदास कोटेक (ताओयी), चांग लियू (ताओयी), यिन ज़िया (ताओयी), हनली ली (ताओयी), सुमा जयराम (ताओयी), यानचाओ सन (ताओयी), अहमद फाखरी (ताओयी), वासिलियोस सेवेरिस (ताओयी), डस्टिन विदर्स (ताओयी), यांगहाओ ली (ताओयी), अल्प अयगर (ताओयी), एंड्रेस रोमेरो मियर वाई टेरान (ताओयी), काइवेई हुआंग (ताओयी), मार्क ली (ताओयी), शियुजुन ली (ताओयी), युहोंग ली (ताओयी), टायलर जॉनसन (ताओयी), जे तांग (ताओयी), जोसेफ यितान चेंग (ताओयी), फूटांग पेंग (ताओयी), एंड्रयू वॉकिंगशॉ (ताओयी), लुकास गुइबार्ट (ताओयी), अभिषेक शर्मा (ताओयी), चेंग शेन (ताओयी), पिओत्र माज (ताओयी), यासुताका तनाका (ताओयी), यू-क्यूआन झांग (ताओयी), विवियन मा (ताओयी), टॉमी वेहविलेनेन (ताओयी), केल्विन ज़ो (ताओयी), जेफ निकोल्स (ताओयी), मैथ्यू लेई (ताओयी), डेविड किउ (ताओयी), यिहाओ कियान (ताओयी), गोकुल संथानम (ताओयी), वेन्ताओ वू (ताओयी), येना हान (ताओयी), डोमिनिक मोरित्ज़ (ताओयी), हैजिंग फू (ताओयी), मिंग्ज़ जू (ताओयी), विवेक राठौड़ (ताओयी), जियान लियू (ताओयी), लुई डी'हाउवे (ताओयी), किन बा (ताओयी), हाईटियन सन (ताओयी), हाओरन यान (ताओयी), फिलिप डुफ्टर (ताओयी), अन्ह गुयेन (ताओयी), यिहाओ फेंग (ताओयी), एम्मा वांग (ताओयी), केयू हे (ताओयी), राहुल नायर (ताओयी), संस्कृति शाह (ताओयी), जियारुई लू (ताओयी), पैट्रिक सोनेनबर्ग (ताओयी), जेरेमी वार्नर (ताओयी), युआनझी ली (ताओयी), बोवेन पैन (ताओयी), ज़ियि झोंग (ताओयी), जो झोउ (ताओयी), सैम डेवर्निया (ताओयी), ओली सारिकीवी (ताओयी), इरीना बेलौसोवा (ताओयी), राचेल बर्गर (ताओयी), शांग-चेन वू (ताओयी), डि फेंग (ताओयी), बास स्ट्रैथोफ़ (ताओयी), जेम्स चाउ (ताओयी), युआनयांग झांग (ताओयी), मार्को जुलियानी (ताओयी), एडुआर्डो जिमेनेज (ताओयी), अभिषेक सुंदरराजन (ताओयी), जियानझी डू (ताओयी), चांग लान (ताओयी), नीलेश शाहदादपुरी (ताओयी), पीटर ग्राश (ताओयी), सर्गिउ सिमा (ताओयी), जोश न्यून्हम (ताओयी), वर्षा पेडी (ताओयी), जियानयु वांग (ताओयी), केलेन हाग (ताओयी), एलेक्स ब्रौनस्टीन (ताओयी), डेनियल मोलिनारी (ताओयी), रिचर्ड वेई (ताओयी), ब्रेंडा यांग (ताओयी), निकोलस लुस्किन (ताओयी), जोआना अर्रेज़ा-टेलर (ताओयी), मेंग काओ (ताओयी), निकोलस सीडल (ताओयी), साइमन वांग (ताओयी), जियामिंग हू (ताओयी), यिपिंग मा (ताओयी), मेंग्यू ली (ताओयी), कीरन लियू (ताओयी), हैंग सु (ताओयी), सचिन रवि (ताओयी), चोंग वांग (ताओयी), (ताओयी), जेन ली (ताओयी), एंड्रयू हैनसेन (ताओयी), जेवियर मोवेल्लन (ताओयी), क्रिस्टोफर न्यूबॉयर (ताओयी), हांझी झोउ (ताओयी), क्रिस चाने (ताओयी), नजीर कमालदीन (ताओयी), वैलेन्टिन वुल्फ (ताओयी), फर्नांडो बरमूडेज़ -मेडिना (ताओयी), जोरिस पेलेमन्स (ताओयी), पीटर फू (ताओयी), हॉवर्ड जिंग (ताओयी), जियांग कोंग (ताओयी), वेन शान (ताओयी), गेब्रियल जैकोबी-कूपर (ताओयी), डोंगकाई शेन (ताओयी), टॉम गुंटर (ताओयी), गुइल्यूम सेगुइन (ताओयी), फैंगपिंग शि (ताओयी), शियू ली (ताओयी), यांग जू (ताओयी), अरीबा कमल (ताओयी), डैन मासी (ताओयी), सप्तर्षि गुहा (ताओयी), क्यूई झू (ताओयी), जेना थिबोडौ (ताओयी), चांगयुआन झांग (ताओयी), रेबेका कैलाहन (ताओयी), चार्ल्स मालौफ (ताओयी), विल्सन त्साओ (ताओयी), बोयू ली (ताओयी), किंगकिंग काओ (ताओयी), नाओमी साबो (ताओयी), चेंग लिओंग (ताओयी), यी वांग (ताओयी), अनुपमा मान अनुपमा (ताओयी), कोलोराडो रीड (ताओयी), केनेथ जंग (ताओयी), ज़ीफ़ेंग चेन (ताओयी), मोहना प्रसाद सत्य मूर्ति (ताओयी), यिफ़ेई हे (ताओयी), एरिक हॉर्नबर्गर (ताओयी), देवी कृष्णा (ताओयी), सेन्यू टोंग (ताओयी), माइकल (ताओयी), ली, डेविड हल्दीमैन, यांग झाओ, बोवेन झांग, चांग गाओ, क्रिस बार्टेल्स, सुषमा राव, नथाली ट्रान, साइमन लेहनेर, को गियांग, पैट्रिक डोंग, जुंटिंग पैन, बियाओ वांग, डोंगक्सू ली, मेहरदाद फराजताबर, डोंगसेओंग ह्वांग, ग्रेस डुआनमु, ईशान वर्मा, सुजीत रेड्डी, क्यूई शान, होंगबिन गाओ, नान डू, प्रग्न्या श्रीधर, फॉरेस्ट हुआंग, यिंगबो वांग, निखिल भेंदावाडे, डायने झू, साई ऐथाराजू, फ्रेड होहमान, लॉरेन गार्डिनर, चुंग-चेंग चिउ, यिनफेई यांग, अल्पर कोकमेन, फ्रैंक चू, के ये, कान एल्गिन, ओरोन लेवी, जॉन पार्क, डोनाल्ड झांग, एल्डन शूप, नीना वेन्ज़ेल, माइकल बुकर, ह्युनजिक किम, चिंगुन एर्डेनेबिलेग, नान डुन, एरिक लियांग यांग, प्रियल छत्रपति, विशाल महतानी, हैमिंग गैंग, कोहेन चिया, दीपा शेषाद्रि, डोंगान यू, यान मेंग, केल्सी पीटरसन, जेन यांग, योंगकियांग वांग, कैरिना पेंग, डौग कांग, अनुवा अग्रवाल, अल्बर्ट एंटनी, जुआन लाओ टेबर, एल्बिन मैडापल्ली जोस, रेगन पोस्टन, एंडी डी वांग, जेरार्ड कैसामायोर, एल्मिरा अमिरलू, वायलेट याओ, वोज्शिएक क्रिसिंस्की, कुन डुआन, लेज़ी एल

रूपरेखा

Apple ने दो बहुभाषी, बहुविध भाषा मॉडल प्रस्तुत किए हैं जो Apple उपकरणों और सेवाओं में Apple Intelligence सुविधाओं को सशक्त बनाते हैं। एक मॉडल 3 बिलियन-पैरामीटर का ऑन-डिवाइस मॉडल है जिसे आर्किटेक्चरल नवाचारों (साझा KV कैश और 2-बिट क्वांटिज़ेशन-अवेयर ट्रेनिंग सहित) के माध्यम से Apple Silicon के लिए अनुकूलित किया गया है। दूसरा मॉडल एक स्केलेबल सर्वर मॉडल है जो एक नए पैरेलल ट्रैक मिक्सचर ऑफ एक्सपर्ट्स (PT-MoE) ट्रांसफॉर्मर पर बनाया गया है जो ट्रैक पैरेललिज्म, मिश्रित-विशेषज्ञ विरल संगणन और इंटरलीव्ड ग्लोबल-लोकल अटेंशन को जोड़ता है। दोनों मॉडल बड़े पैमाने पर बहुभाषी और बहुविध डेटासेट पर प्रशिक्षित हैं, जो ज़िम्मेदार वेब क्रॉलिंग, लाइसेंस प्राप्त कॉर्पोरा और उच्च-गुणवत्ता वाले सिंथेटिक डेटा से प्राप्त होते हैं, और एक नए एसिंक्रोनस प्लेटफ़ॉर्म पर पर्यवेक्षित लर्निंग फ़ाइन-ट्यूनिंग और रीइन्फोर्समेंट लर्निंग के माध्यम से और उन्नत किए जाते हैं। परिणामी मॉडल कई अतिरिक्त भाषाओं का समर्थन करते हुए छवियों को समझते हैं और टूल कॉल निष्पादित करते हैं। सार्वजनिक बेंचमार्क और मानवीय मूल्यांकन में, सर्वर और ऑन-डिवाइस मॉडल, दोनों ने समान आकार के सार्वजनिक बेसलाइन मॉडल से मेल खाया या उनसे बेहतर प्रदर्शन किया। नया स्विफ्ट-केंद्रित आधारभूत मॉडल फ्रेमवर्क निर्देशित निर्माण, सीमित टूल कॉल और LoRA अडैप्टर ट्यूनिंग प्रदान करता है, जिससे डेवलपर्स इन सुविधाओं को केवल कुछ कोड लाइनों के साथ एकीकृत कर सकते हैं। Apple के इंटेलिजेंस मॉडल में नवीनतम प्रगति, AI के प्रति Apple के ज़िम्मेदार दृष्टिकोण पर आधारित है, जिसमें सामग्री फ़िल्टरिंग और स्थानीय-विशिष्ट मूल्यांकन जैसे सुरक्षा उपाय, साथ ही उपयोगकर्ता की गोपनीयता की रक्षा के लिए प्राइवेट क्लाउड कंप्यूट जैसे नवाचार शामिल हैं।

Takeaways, Limitations

Takeaways:
यह एप्पल सिलिकॉन के लिए अनुकूलित एक हल्के ऑन-डिवाइस मॉडल और एक स्केलेबल सर्वर मॉडल दोनों प्रदान करता है, जिससे अनुप्रयोगों की एक विस्तृत श्रृंखला के लिए प्रयोज्यता बढ़ जाती है।
समृद्ध और अधिक विविध उपयोगकर्ता अनुभव प्रदान करने के लिए बहुभाषी और बहुविध सुविधाओं का समर्थन करता है।
एक नया स्विफ्ट-आधारित फ्रेमवर्क डेवलपर्स को एप्पल के अंतर्निहित मॉडलों को आसानी से एकीकृत करने की अनुमति देता है।
हम एआई और गोपनीयता के प्रति जिम्मेदार दृष्टिकोण के प्रति अपनी प्रतिबद्धता पर जोर देते हैं।
इसने सार्वजनिक बेंचमार्क में प्रतिस्पर्धी प्रदर्शन दर्शाया है।
Limitations:
उपयोग किये गये डेटासेट की विशिष्टता और आकार के साथ-साथ डेटा संग्रहण प्रक्रिया के बारे में विस्तृत जानकारी का अभाव है।
प्राइवेट क्लाउड कंप्यूट के बारे में विशिष्ट तकनीकी विवरण सीमित हैं।
मॉडल के पर्यावरणीय प्रभाव और ऊर्जा खपत के बारे में कोई जानकारी नहीं है।
इसमें दीर्घकालिक रखरखाव और अद्यतन योजनाओं का कोई उल्लेख नहीं है।
अन्य मौजूदा मॉडलों के साथ अधिक विस्तृत तुलनात्मक विश्लेषण की आवश्यकता है।
👍