कैसे कॉर्नेल विश्वविद्यालय की वर्चुअल रियलिटी शोध चुनौती Krikey AI एनिमेशन के साथ हल की गई

सारांश

Krikey AI ने कॉर्नेल विश्वविद्यालय की दो शोध टीमों, वर्चुअल एम्बॉडमेंट लैब (VEL) और लैब फॉर इंटीग्रेटेड सेंसर कंट्रोल (LISC) को स्कूबा डाइवर्स के लिए रोबोटिक सहायकों पर एक शोध परियोजना के लिए पानी के भीतर गति डेटा एकत्र करने में सक्षम बनाया।

यह डेटा एक वर्चुअल वातावरण में एकीकृत किया जाना था जिसका वर्णन यहां किया गया है: UnRealTHASC - Underwater Real-Time Human Autonomous Systems Collaboration के लिए एक साइबर-फिजिकल XR टेस्टबेड; लेखक: सुश्रुत सर्वे, जिया गुओ, जोवन मेनेजेस, कॉनर टेट, यितिंग जिन, जस्टिन वॉकर, सिल्विया फेरारी को आगामी सम्मेलन: IEEE International Conference on Robot and Human Interactive Communication (IEEE RO-MAN 2024) में प्रस्तुत किया जाएगा। 

• विवरण: कॉर्नेल विश्वविद्यालय की प्रोफेसर सिल्विया फेरारी और एंड्रिया स्टीवेन्सन वॉन और उनकी टीमें स्कूबा डाइवर्स के लिए रोबोट बडीज के विकास में मदद करने के लिए एक हाइड्रोडायनामिक मोशन मॉडल बनाने की कोशिश कर रही थीं। उन्हें स्कूबा डाइवर्स के पानी के भीतर की गति डेटा को ट्रैक करने और विश्लेषण के लिए इसे सटीक रूप से निकालने के तरीके की आवश्यकता थी। पीएचडी छात्र जियाहाओ लियू ने Krikey AI को एक उपकरण के रूप में इस्तेमाल किया।
• Krikey AI की उपयोग की गई सुविधाएँ: AI वीडियो से एनिमेशन प्रक्रिया, एनिमेशन, 3D वीडियो संपादक, कैमरा एंगल्स, FBX निर्यात

"सवाल यह नहीं है कि क्या हम इसे बेहतर और तेज़ी से कर सकते हैं, सवाल यह है कि क्या हम इसे बिल्कुल कर सकते हैं?" ~ प्रोफेसर एंड्रिया वॉन, कॉर्नेल विश्वविद्यालय

चुनौती

• मोशन कैप्चर डेटासेट से पानी के भीतर गति डेटा का पुनर्निर्माण करना
• मोशन कैप्चर डेटासेट से गति डेटा सटीकता में सुधार के लिए XSense डेटा के संयोजन में वीडियो से पुनर्निर्मित डेटा का उपयोग करना
• शोध विनिर्देशों के अनुरूप नए पानी के भीतर डेटासेट खोजना या बनाना

समाधान

• Krikey AI हमारे AI वीडियो से एनिमेशन टूल का उपयोग करके गति की गणना के लिए एक अतिरिक्त संदर्भ बिंदु बन गया
• Krikey AI ने शोध टीम को अपने डेटा रिपॉजिटरी का विस्तार करने में सक्षम बनाया। टीम अब स्कूबा डाइवर्स के मौजूदा वीडियो डेटासेट का संभावित रूप से उपयोग कर सकती है, जिससे नए डेटासेट बनाने का समय और लागत समाप्त हो जाती है
• Krikey AI ने टीम को अन्य सॉफ्टवेयर टूल में निर्बाध रूप से उपयोग और आगे विश्लेषण करने के लिए मोशन फ़ाइलों के निर्यात की अनुमति दी

कॉर्नेल विश्वविद्यालय की वर्चुअल रियलिटी लैब के लिए, Krikey AI का शक्तिशाली AI वीडियो से एनिमेशन टूल महत्वपूर्ण शोध बाधाओं को दूर करने में सहायक साबित हुआ। Krikey के क्लाउड इन्फ्रास्ट्रक्चर ने वीडियो डेटा को संसाधित करने और सटीक मोशन फ़ाइलों को निर्यात करने के लिए आवश्यक उच्च-प्रदर्शन कंप्यूट और स्केलेबल स्टोरेज प्रदान किया। इस Amazon Web Services (AWS)-समर्थित नींव ने तेज़ सेटअप और कम लागत को सक्षम किया, जिससे कॉर्नेल के अभिनव कार्य में तेज़ी आई।

ROI (निवेश पर प्रतिफल)

वैकल्पिक सॉफ्टवेयर टूल का मूल्यांकन करने के बाद, कॉर्नेल विश्वविद्यालय ने इस परियोजना के लिए शोध करने के लिए Krikey AI एनिमेशन टूल का उपयोग किया।

वर्चुअल एनिमेशन के लिए समय और लागत

• वैकल्पिक वर्चुअल एनिमेशन सॉफ्टवेयर टूल की तुलना में Krikey AI को स्थापित करना 7 गुना तेज़ था
• वैकल्पिक मोशन कैप्चर टूल की तुलना में 64% कम लागत (उदाहरण: एक कम लागत वाला, सभ्य मोशन कैप्चर सिस्टम $500 - $1000 के बीच हो सकता है जिसमें सेटअप का समय लागत शामिल नहीं है, Krikey AI एनिमेशन $30 / महीना है)
• अमूल्य: मोशन कैप्चर डेटा से परे वीडियो डेटासेट का विस्तार करने की क्षमता

वर्चुअल एनिमेशन की सटीकता और दक्षता

• Krikey AI ने कॉर्नेल विश्वविद्यालय के शोधकर्ताओं को पानी के भीतर गति के लिए गोताखोरों के अंगों की स्थिति, रोटेशन और ओरिएंटेशन मेट्रिक्स को अधिक सटीक रूप से पहचानने की अनुमति दी
• गोताखोर पर मार्कर पेंट करने और पानी के भीतर तय की गई दूरी की गणना करने की कोशिश करने के बजाय, Krikey AI एनिमेशन के साथ शोध टीम के पास अब AI वीडियो से एनिमेशन रूपांतरण से अधिक सटीक गति डेटा था
• एक भविष्य का लक्ष्य पानी के भीतर स्कूबा डाइवर्स के मौजूदा अभिलेखीय वीडियो का उपयोग करना और मिनटों में वर्चुअल एनिमेशन गति डेटा देखना है

ग्राहक के बारे में

कॉर्नेल विश्वविद्यालय की वर्चुअल एम्बॉडमेंट (वर्चुअल रियलिटी) लैब का नेतृत्व प्रोफेसर एंड्रिया वॉन करती हैं। उनकी लैब का शोध इमर्सिव मीडिया पर केंद्रित है और लोग इसे कैसे समझते और अनुभव करते हैं, जिसमें गैर-मौखिक व्यवहार, संचार और सहयोग के आसपास के अनुप्रयोग शामिल हैं। उन्होंने स्टैनफोर्ड विश्वविद्यालय में संचार विभाग से पीएचडी पूरी की, वर्चुअल ह्यूमन इंटरेक्शन लैब में शोध किया। कॉर्नेल विश्वविद्यालय में प्रोफेसर वॉन के पीएचडी छात्र, जियाहाओ लियू, स्कूबा डाइवर्स के लिए रोबोट सहायकों के लिए एक हाइड्रोडायनामिक मॉडल बनाने के लिए शोध परियोजना का नेतृत्व कर रहे हैं।

यह परियोजना प्रोफेसर सिल्विया फेरारी के नेतृत्व वाली लैब फॉर इंटीग्रेटेड सेंसर कंट्रोल (LISC) और प्रोफेसर एंड्रिया वॉन के नेतृत्व वाली वर्चुअल एम्बॉडमेंट लैब (VEL) के बीच पानी के भीतर सेटिंग्स में मानव-एजेंट टीमिंग पर एक सहयोग से उपजी है। गोताखोरों के साथ काम करने के लिए रोबोट गाइडों की क्षमता में सुधार करने के लिए, LISC में पोस्ट-डॉक जिया गुओ, और LISC के पीएचडी छात्र सुश्रुत सर्वे, VEL के पीएचडी छात्र जियाहाओ लियू और अन्य टीम सदस्यों के साथ स्कूबा डाइवर्स का एक हाइड्रोडायनामिक मॉडल बनाने के लिए काम कर रहे हैं। 

Krikey AI के बारे में

Krikey AI एनिमेशन टूल किसी को भी मिनटों में 3D चरित्र को एनिमेट करने में सक्षम बनाते हैं। चरित्र एनिमेशन का उपयोग मार्केटिंग, ट्यूटोरियल, गेम, फिल्म, सोशल मीडिया, लेसन प्लान और बहुत कुछ में किया जा सकता है। वीडियो से एनिमेशन और टेक्स्ट से एनिमेशन AI मॉडल के अलावा, Krikey एक 3D संपादक प्रदान करता है जिसका उपयोग निर्माता लिप सिंक किए गए संवाद, पृष्ठभूमि बदलने, चेहरे के भाव, हाथ के इशारे, कैमरा एंगल्स और अपने एनिमेटेड वीडियो में बहुत कुछ जोड़ने के लिए कर सकते हैं। Krikey के AI टूल आज www.krikey.ai पर, Canva Apps, Adobe Express और AWS Marketplace पर ऑनलाइन उपलब्ध हैं!

चुनौती

शोध टीम जानती थी कि मानव-रोबोट इंटरैक्शन चुनौतीपूर्ण थे। उन्होंने गोताखोर के व्यवहार को पकड़ने और विभिन्न पानी के भीतर की चुनौतियों का अनुकरण करने के लिए एक डाइविंग सिम्युलेटर बनाने का फैसला किया। वे समझना चाहते थे कि लोग रोबोट को कैसे व्यवहार करना पसंद करते हैं और रोबोट पानी के भीतर मानव आंदोलन को कैसे समझते हैं।

पानी के भीतर मोशन कैप्चर शोध

शुरुआत में, कॉर्नेल विश्वविद्यालय की VR शोध टीम ने वर्चुअल एनिमेशन टूल के साथ आंदोलनों को पकड़ने के दो तरीके पहचाने। सबसे पहले, सिमुलेशन में एक व्यक्ति मोशन कैप्चर सूट पहनकर एक वर्चुअल वातावरण में तैर सकता था। दूसरा, एक व्यक्ति ड्राईसूट के नीचे मोशन कैप्चर सूट पहनकर वास्तविक पानी में तैर सकता था, हालांकि यह तकनीकी और तार्किक रूप से बहुत चुनौतीपूर्ण साबित हुआ।

इनमें से किसी भी तरीके से वास्तव में अनुवाद की गति मीट्रिक - लोग पानी के माध्यम से कैसे चलते हैं - को कैप्चर नहीं किया गया। इसके लिए, उन्हें एक हाइड्रोडायनामिक मॉडल बनाने की आवश्यकता थी। आंदोलनों और पानी की स्थितियों के एक निश्चित सेट को देखते हुए, एक गोताखोर कितनी दूर तैर पाएगा?

गति डेटा के लिए वर्तमान शोध प्रक्रिया

Krikey AI का उपयोग करके शरीर की गति की समकालिकता को मापने से पहले, कॉर्नेल विश्वविद्यालय की टीम ने मोशन कैप्चर डेटा और 3D पुनर्निर्माण सॉफ्टवेयर टूल का उपयोग किया। हालांकि, जैसे ही उन्होंने Krikey AI को आज़माया, उन्हें यह अपनी शोध पद्धति के लिए अधिक सटीक और सुविधाजनक लगा। अन्य सॉफ्टवेयर टूल एनिमेशन या गति डेटा को तेज़ी से आउटपुट करने में संघर्ष करते थे और यदि कोई बाधा (शरीर के कुछ हिस्से वस्तुओं से ढके हुए) होती थी तो सटीक आंदोलन प्राप्त करना मुश्किल था। कॉर्नेल विश्वविद्यालय की शोध टीम को वैकल्पिक सॉफ्टवेयर टूल स्थापित करने में 7+ दिन लगे। Krikey AI के साथ वे इसे एक घंटे से भी कम समय में आज़मा पाए और तुरंत परिणाम देखे। उन्होंने कैमरे पर खुद को लहराते हुए एक वीडियो फिल्माया और उसे एनिमेशन में परिवर्तित करके शुरुआत की। एक बार जब उन्होंने AI वीडियो से एनिमेशन टूल की गति और सटीकता देखी, तो उन्होंने अपने डेटासेट से वीडियो का परीक्षण करना शुरू कर दिया।

गोताखोर आंदोलन का एक हाइड्रोडायनामिक मॉडल विकसित करना

कॉर्नेल विश्वविद्यालय की शोध टीम का लक्ष्य एक रोबोट सहायक को प्रशिक्षित करना था जो स्कूबा डाइवर्स की मदद कर सके। ऐसा करने के लिए, उन्हें गोताखोर आंदोलन का एक हाइड्रोडायनामिक मॉडल बनाने की आवश्यकता थी ताकि वे रोबोट को गोताखोर के साथ चलने के लिए बेहतर ढंग से प्रशिक्षित कर सकें। उन्हें डेटा की तीन धाराओं को एकीकृत करना था जिसमें शामिल थे: वीडियो, मोशन कैप्चर और पुनर्निर्मित अनुवाद गति डेटा। शुरुआत में वे चिंतित थे क्योंकि उनके पास पानी के भीतर मोशन कैप्चर डेटा का एक सीमित डेटासेट था और नए डेटासेट बनाने में बहुत समय और लागत लगेगी। फिर उन्हें Krikey AI एनिमेशन टूल मिले।

समाधान

यहां बताया गया है कि कॉर्नेल विश्वविद्यालय की शोध टीम ने Krikey AI एनिमेशन टूल का उपयोग करके अपनी शोध चुनौती को कैसे हल किया।

Krikey AI ने मोशन कैप्चर पद्धति को कैसे प्रतिस्थापित किया

Krikey AI के साथ, कॉर्नेल विश्वविद्यालय की VR लैब शोध टीम गोताखोर की गति को कैप्चर करने वाले एक एकल वीडियो का उपयोग कर सकती थी और इसे एक अवतार के साथ 3D स्पेस में गति डेटा प्राप्त करने के लिए AI वीडियो से एनिमेशन में परिवर्तित कर सकती थी। फिर वे अपने मूल डेटासेट से मोशन कैप्चर डेटा की Krikey AI वीडियो पुनर्निर्माण डेटा से तुलना कर सकते थे और देख सकते थे कि क्या यह संरेखित था। इससे उन्हें यह सुनिश्चित करने में मदद मिली कि उनके हाइड्रोडायनामिक मॉडल में अधिक सटीक वीडियो डेटा खींचा गया था। भविष्य में, वे कई अलग-अलग गोताखोरों के लिए सिमुलेटेड डेटा उत्पन्न करने की उम्मीद करते हैं, जिससे रोबोट "डाइविंग बडी" के लिए प्रशिक्षण डेटा अधिक विविध, सटीक और मजबूत हो सके।

समय बचाना और सटीकता में सुधार करना

डेटासेट के विस्तार और Krikey AI द्वारा गति की गणना के लिए एक आसान पद्धति प्रदान करने के साथ, कॉर्नेल विश्वविद्यालय की शोध टीम अब गणना कर सकती थी कि एक गोताखोर पानी के माध्यम से कैसे चलेगा जिसमें गति, गहराई, पानी में आंदोलन की शक्ति, दूरी और बहुत कुछ शामिल है। Krikey AI एक प्रमुख सॉफ्टवेयर टूल था जिसने डेटा और आवश्यक गणनाओं की विभिन्न धाराओं को एक साथ लाया। इसने गति, सटीकता को सक्षम किया और शोध करने के समय को कम किया।

इंटरऑपरेबिलिटी के साथ दक्षता

कॉर्नेल विश्वविद्यालय की वर्चुअल रियलिटी शोध टीम को वीडियो, मोशन कैप्चर सूट ट्रैकर्स से डेटा को एकीकृत करना था और इन्हें यूनिटी में जोड़ना था। Krikey AI ने उन्हें दो समस्याओं को हल करने में मदद की। सबसे पहले, Krikey AI ने मोशन कैप्चर डेटा को वीडियो डेटा के साथ संरेखित करने में मदद की और गति की गणना के लिए सत्य संदर्भ का स्रोत बन गया। दूसरा, भविष्य में Krikey AI शोध टीम को स्कूबा डाइवर्स के अभिलेखीय वीडियो से आंदोलन डेटा खींचने में सक्षम बना सकता है, जिससे नए डेटासेट बनाने की आवश्यकता समाप्त हो जाती है। यूनिटी में FBX फ़ाइलों को आसानी से निर्यात करने की क्षमता के साथ, VR शोध टीम Krikey AI एनिमेशन का उपयोग करके अपने शोध में प्रमुख गति मेट्रिक्स की पहचान करने में सक्षम थी।

कॉर्नेल विश्वविद्यालय के शोधकर्ता, जियाहाओ लियू ने मोशन कैप्चर और Krikey AI FBX फ़ाइलों से रिग्स को जोड़ने के लिए एक स्क्रिप्ट बनाई। वह स्थिति, रोटेशन और ओरिएंटेशन के गति मेट्रिक्स को जल्दी से पहचान और सटीक रूप से माप पाया, जो हाइड्रोडायनामिक मॉडल के लिए एक सहायक स्रोत होगा।

कॉर्नेल वर्चुअल रियलिटी रिसर्च लैब में Krikey AI का उपयोग कैसे किया गया

कॉर्नेल विश्वविद्यालय की वर्चुअल रियलिटी (VR) लैब शोध टीम ने अपनी शोध पद्धति को बदलने के लिए Krikey AI एनिमेशन टूल का विभिन्न तरीकों से उपयोग किया।

AI वीडियो से एनिमेशन

Krikey का AI वीडियो से एनिमेशन टूल ने कॉर्नेल शोध टीम को किसी भी वीडियो का उपयोग करने और उसे एनिमेशन में बदलने में सक्षम बनाया, बजाय केवल विशिष्ट मोशन कैप्चर डेटासेट पर निर्भर रहने के। इसने उनके डेटा रिपॉजिटरी का विस्तार किया और उनके हाइड्रोडायनामिक मोशन मॉडल के आउटपुट को मजबूत करने में मदद की।

कैमरा एंगल्स

Krikey AI का वीडियो संपादक ग्राहकों को कैमरा एंगल्स जोड़ने में सक्षम बनाता है ताकि वे किसी भी एनिमेशन को कई अलग-अलग एंगल्स से देख सकें और इसे तुरंत एक दर्शक में कल्पना कर सकें। इससे कॉर्नेल शोध टीम को यह सुनिश्चित करने में मदद मिली कि उनकी वीडियो से एनिमेशन फाइलें उपयोग योग्य थीं और निर्यात और शीट में संख्याओं में परिवर्तित होने से पहले कई एंगल्स से देखी गईं।

FBX निर्यात

Krikey AI के FBX फाइल निर्यात ने कॉर्नेल शोध टीम को अपने एनिमेशन को यूनिटी सॉफ्टवेयर टूल में ले जाने में मदद की जहां वे उन्हें और अधिक हेरफेर कर सकते थे, डेटा को अपने पिछले मोशन कैप्चर डेटासेट से जोड़ सकते थे (उस डेटासेट की सटीकता को मजबूत करने के लिए) और प्रमुख गति मेट्रिक्स को भी निकाल सकते थे। Krikey AI के एनिमेशन आउटपुट इन अतिरिक्त सॉफ्टवेयर टूल के साथ आसानी से इंटरऑपरेबल थे, जिससे कॉर्नेल विश्वविद्यालय की टीम के लिए अपने शोध वर्कफ़्लो में Krikey AI का उपयोग करना आसान और सहज हो गया।

कॉर्नेल विश्वविद्यालय के शोधकर्ता, जियाहाओ लियू ने मोशन कैप्चर और Krikey AI FBX फ़ाइलों से रिग्स को जोड़ने के लिए एक स्क्रिप्ट बनाई। वह स्थिति, रोटेशन और ओरिएंटेशन के गति मेट्रिक्स को जल्दी से पहचान और सटीक रूप से माप पाया, जो हाइड्रोडायनामिक मॉडल के लिए एक सहायक स्रोत होगा।

"Krikey AI हमारे कॉर्नेल विश्वविद्यालय की शोध लैब में गति की गणना के लिए सत्य संदर्भ का स्रोत बन गया। AI वीडियो से एनिमेशन ने हमारे डेटासेट का विस्तार किया और हमें नए डेटासेट बनाने में समय बिताने के बजाय मौजूदा वीडियो के साथ काम करने की अनुमति दी। Krikey AI एनिमेशन टूल ने इस शोध परियोजना को करने की प्रक्रिया में हमारी टीम का बहुत समय और पैसा बचाया है।" ~ प्रोफेसर एंड्रिया वॉन, कॉर्नेल विश्वविद्यालय