दैनिक अर्क्सिव

यह पेज दुनियाभर में प्रकाशित होने वाले आर्टिफिशियल इंटेलिजेंस संबंधित रिसर्च पेपर्स को संक्षिप्त रूप में प्रस्तुत करता है।
यहां Google Gemini का उपयोग करके पेपर्स का सारांश तैयार किया जाता है और यह पेज गैर-लाभकारी रूप से संचालित किया जाता है।
पेपर के कॉपीराइट लेखक और संबंधित संस्थान के पास हैं, और साझा करते समय बस स्रोत का उल्लेख करें।

अवरोध-जागरूक चेहरे के परिवर्तन के लिए अनिश्चितता-निर्देशित फेस मैटिंग

Created by
  • Haebom

लेखक

हयेबिन चो, जेह्युप ली

रूपरेखा

यह पत्र एक नए फेस मैटिंग फ्रेमवर्क, फेसमैट, का प्रस्ताव करता है, जो एक उच्च-रिज़ॉल्यूशन वाले अल्फा मैट का अनुमान लगाता है जो चेहरे से अवरोधक तत्वों को अलग करता है ताकि अवरोधन की समस्या (जब हाथ, बाल, सहायक उपकरण आदि चेहरे को अस्पष्ट कर देते हैं) का समाधान किया जा सके जो फेस फिल्टर के प्रदर्शन को कम कर देता है। इसे प्राप्त करने के लिए, हम फेसमैट प्रस्तुत करते हैं, एक फेस मैटिंग फ्रेमवर्क जो बिना ट्रिमैप्स के अनिश्चितता को ध्यान में रखता है। फेसमैट को शिक्षक-छात्र मॉडल लर्निंग पाइपलाइन का उपयोग करके प्रशिक्षित किया जाता है। शिक्षक मॉडल अल्फा मैट और पिक्सेल-वार अनिश्चितता, दोनों का पूर्वानुमान करता है, और फिर इस अनिश्चितता की जानकारी का उपयोग छात्र मॉडल को स्थानिक रूप से अनुकूली रूप से निर्देशित करने के लिए किया जाता है। मौजूदा विधियों के विपरीत, फेसमैट सहायक इनपुट (ट्रिमैप्स या सेगमेंटेशन मास्क) के बिना काम करता है और त्वचा को अग्रभूमि और पृष्ठभूमि अवरोधों में स्पष्ट रूप से अलग करके संश्लेषण रणनीति में सुधार करता है। इसके अलावा, हम एक नए निर्मित, बड़े पैमाने के सिंथेटिक डेटासेट, सेलेबएमैट का उपयोग करके प्रयोग करते हैं, और प्रदर्शित करते हैं कि हमारा दृष्टिकोण विभिन्न बेंचमार्क में मौजूदा अत्याधुनिक विधियों से बेहतर प्रदर्शन करता है। स्रोत कोड और सेलेबएमैट डेटासेट सार्वजनिक रूप से उपलब्ध हैं।

Takeaways, Limitations

Takeaways:
एक नवीन फेस मैटिंग विधि जो फेस फिल्टर की अवरोधन समस्या का समाधान करती है।
एक कुशल फेसमैट फ्रेमवर्क का प्रस्ताव, जिसके लिए ट्राइमैप की आवश्यकता नहीं होती।
अनिश्चितता संबंधी जानकारी का लाभ उठाकर बेहतर मेटिंग प्रदर्शन और सामान्यीकरण प्रदर्शन।
सेलेब-ए-मैट, एक बड़े पैमाने का सिंथेटिक डेटासेट, जारी किया गया
वास्तविक समय अनुप्रयोगों के लिए उपयुक्त दक्षता
स्पष्ट संश्लेषण रणनीतियों के लिए त्वचा/अवरुद्ध विभेदन
Limitations:
वर्तमान में, हमने सिंथेटिक डेटासेट सेलेबएमैट का उपयोग करके प्रयोग किए हैं, इसलिए वास्तविक दुनिया के डेटा पर आगे प्रदर्शन मूल्यांकन की आवश्यकता है।
सिंथेटिक डेटासेट की सीमाओं के कारण, वास्तविक दुनिया में विभिन्न अवरोधन प्रकारों के लिए सामान्यीकरण प्रदर्शन के आगे सत्यापन की आवश्यकता है।
फेसमैट की कम्प्यूटेशनल लागत और वास्तविक समय प्रसंस्करण प्रदर्शन के विस्तृत विश्लेषण का अभाव है।
👍