गतिशील प्रसार के माध्यम से उच्च-निष्ठा 3डी-टू-4डी दृश्य संपादन

शिफेंग चेन और 4 अन्य लेखकों द्वारा लिखित कैटालिस्ट4डी: हाई-फिडेलिटी 3डी-टू-4डी सीन एडिटिंग वाया डायनेमिक प्रोपेगेशन नामक पेपर का पीडीएफ देखें।

पीडीएफ देखें
HTML (प्रयोगात्मक)

अमूर्त:एनईआरएफ और 3डीजीएस का उपयोग करके 3डी दृश्य संपादन में हाल की प्रगति उच्च गुणवत्ता वाले स्थिर दृश्य संपादन को सक्षम बनाती है। इसके विपरीत, गतिशील दृश्य संपादन चुनौतीपूर्ण बना हुआ है, क्योंकि जो विधियाँ सीधे 2डी प्रसार मॉडल को 4डी तक बढ़ाती हैं, वे अक्सर गति कलाकृतियों, अस्थायी झिलमिलाहट और असंगत शैली प्रसार का उत्पादन करती हैं। हम कैटालिस्ट4डी पेश करते हैं, जो एक ऐसा ढांचा है जो स्थानिक और लौकिक सुसंगतता को बनाए रखते हुए उच्च गुणवत्ता वाले 3डी संपादन को गतिशील 4डी गॉसियन दृश्यों में स्थानांतरित करता है। इसके मूल में, एंकर-आधारित मोशन गाइडेंस (एएमजी) मूल और संपादित गॉसियन दोनों से संरचनात्मक रूप से स्थिर और स्थानिक रूप से प्रतिनिधि एंकर का एक सेट बनाता है। ये एंकर मजबूत क्षेत्र-स्तरीय संदर्भों के रूप में काम करते हैं, और उनके पत्राचार को क्रॉस-क्षेत्र हस्तक्षेप या गति बहाव के बिना लगातार विरूपण प्रसार को सक्षम करने के लिए इष्टतम परिवहन के माध्यम से स्थापित किया जाता है। पूरक रूप से, रंग अनिश्चितता-निर्देशित उपस्थिति शोधन (सीयूएआर) प्रति-गाऊसी रंग अनिश्चितता का अनुमान लगाकर और रोड़ा-प्रेरित कलाकृतियों के लिए चुनिंदा क्षेत्रों को परिष्कृत करके अस्थायी उपस्थिति स्थिरता को संरक्षित करता है। व्यापक प्रयोगों से पता चलता है कि कैटालिस्ट4डी अस्थायी रूप से स्थिर, उच्च-निष्ठा वाले गतिशील दृश्य संपादन को प्राप्त करता है और दृश्य गुणवत्ता और गति सुसंगतता दोनों में मौजूदा तरीकों से बेहतर प्रदर्शन करता है।