🍶 👩🏽 💅 इंटेल IoT रोड शो या वास्तविक दुनिया में आभासी वास्तविकता 👷🏻 🎩 💬

27 जून से 28 जून 2015 तक, इंटेल द्वारा एक हैकथॉन आयोजित किया गया था, जहां सेंडड्राइव परियोजना ने दूसरा स्थान हासिल किया। प्रस्तुति के दौरान, हमारी टीम ने भविष्य में थोड़ा सा देखा और प्रदर्शित किया कि कैसे इंटरनेट की चीजों से जुड़ी एक आभासी जगह में डुबोकर मानवीय क्षमताओं का विस्तार किया जाए।

थोड़ी पृष्ठभूमि

यह सब DevCon 2015 सम्मेलन के साथ शुरू हुआ , जहां मैं पहली बार RealSense तकनीक की क्षमताओं से परिचित हुआ , और रात के हैकथॉन में मैं कैमरे और RealSense SDK की क्षमताओं का मूल्यांकन करने के लिए भाग्यशाली था। मेरी पहली इच्छा थी कि मैं अपने "आभासी" हाथों को देखने के लिए कैमरे को आभासी वास्तविकता के चश्मे से जोड़ूं। हालाँकि, मुझे उस हैकथॉन में मुफ्त यूनिटी प्रोग्रामर और 3 डी डिज़ाइनर नहीं मिले। इसलिए, वियतनाम के एक लड़के के साथ मिलकर, हमने एसडीके और कैमरे के साथ काम करने की सुविधाओं का अध्ययन करने में काफी अच्छी तरह से एक सरल प्रोग्राम प्रदर्शित किया जो प्रोग्रामर को आंखें चार्ज करने में मदद करता है और यह सुनिश्चित करता है कि प्रोग्रामर इसके चारों ओर "मूर्ख" न हो। मुझे यह भी पता चला कि सेंट पीटर्सबर्ग में एक हफ्ते में इस तकनीक का उपयोग करने वाला एक और हैकाथॉन होगा ।

इसलिए, अब मेरे पास तैयारी के लिए एक सप्ताह था। मुझे अपने विचार में सहकर्मी दिमित्री पोस्टिल्गू से दिलचस्पी थी, जिन्होंने विंडोज फोन फॉर यूनिटी में तीन-आयामी हाथों से मुक्त इंटरफ़ेस को छोड़ दिया था। और इस समय मैं एक स्मार्टफोन में हाथों की स्थिति पर डेटा स्थानांतरित करने की क्षमता विकसित कर रहा था।

यह कार्य तुच्छ नहीं था, क्योंकि RealSense को एक बहुत शक्तिशाली प्रोसेसर और USB 3.0 की आवश्यकता होती है, जो स्पष्ट कारणों से हमारे स्मार्टफोन में अनुपस्थित थे। मुझे यूनिटी के लिए एक प्लग-इन लिखना था, जो फोन पर एक सर्वर और पीसी के लिए एक क्लाइंट एप्लिकेशन को तैनात करता है जो संसाधित डेटा पैकेट को फोन में स्थानांतरित करता है, जो हमें कई कैमरों को भविष्य के आभासी चश्मे से "कनेक्ट" करने में सक्षम बनाता है ताकि हाथों की स्थिति को अधिक सटीक रूप से निर्धारित किया जा सके।

परिणाम एक काफी लचीला वास्तुकला था जिसमें एकता के लिए कोई ध्यान देने योग्य अंतर नहीं था: क्या कैमरे से डेटा सीधे जाता है (मामले के लिए जब एप्लिकेशन को पीसी पर तैनात किया जाता है) या वाईफाई के माध्यम से (मामले के लिए जब आवेदन स्मार्टफोन पर तैनात किया जाता है)। आगे देखते हुए, यह वह वास्तुकला थी जिसने हमें आखिरी हैकाथॉन में प्रस्तुति के दौरान बचाया।

सप्ताह आभासी हाथों का एक प्रोटोटाइप बनाने के लिए एक बहुत ही कम समय निकला, क्योंकि हम मुख्य कार्य से अपने खाली समय में परियोजना में लगे हुए थे। उन्होंने रात में भी परियोजना लिखी, जबकि मिन्स्क से सेंट पीटर्सबर्ग तक ट्रेन से यात्रा की। परिणामस्वरूप, हमने पहला स्थान प्राप्त किया ।

इसके अलावा दूसरे हैकाथॉन में, मैंने एक महीने में आने वाले इंटेल IoT रोड शो के बारे में सीखा और मैक्सिम मैसल्सकी से "किचन ऑफ रोबोट" से मुलाकात की।- रोबोटिक्स के लिए मिन्स्क प्रयोगशाला। उसके साथ, हमने आखिरकार आभासी और वास्तविक दुनिया को एकजुट करने का फैसला किया।

इन क्षमताओं को प्रदर्शित करने के लिए, मैक्सिम ने एक चलती कैमरे के साथ एक रोबोट को इकट्ठा किया, जिसे हमने हैकॉटन में इंटेल एडिसन बोर्ड से जोड़ा। मैक्सिम ने वाईफाई लॉन्च किया और रोबोट के कैमरे से नेटवर्क तक एक वीडियो स्ट्रीम प्रसारित किया। हमने नियंत्रण आदेशों की एक प्रणाली विकसित की और एक रोबोट बन गया जिसमें आप आभासी वास्तविकता से "आगे बढ़ सकते हैं"।

रोबोट वीडियो कैमरे के माध्यम से जो कुछ भी देखता है उसे प्रसारित करता है: इंटेल एडिसन पर सीधे कैमरे में लॉन्च किए गए कैमरे से धारा आभासी चश्मे में, और आभासी वास्तविकता आभासी "नियंत्रण लीवर" से सिर और कमान की स्थिति को स्थानांतरित करती है। हम रोबोट अवतार के नियंत्रण बूथ में उपयोगकर्ता के चश्मे में "उपस्थिति प्रभाव" बनाने में कामयाब रहे। उसी समय, उपयोगकर्ता न केवल अपने हाथों (बिना माउस, कीबोर्ड, या किसी भी तार के) का उपयोग करने के लिए यह इंगित कर सकता था कि रोबोट को कहां जाना चाहिए, बल्कि अपने सिर को पक्षों की ओर भी मोड़ना चाहिए, जबकि रोबोट ने आज्ञाकारी रूप से अपने कैमरे को चालू करके प्रदर्शन किया।

एक रोबोट अवतार, निश्चित रूप से, बहुत अच्छा है, लेकिन यह पूरी तरह से स्पष्ट नहीं है कि यह कितना अच्छा है। इसलिए, एक रोबोट हमारे लिए पर्याप्त नहीं था। हैकाथॉन से पहले भी, हमारे पास एक छोटा बुद्धिशीलता सत्र था कि कैसे बेहतर और अधिक स्पष्ट रूप से तकनीक की उपयोगिता को जूरी तक पहुँचाया जाए। लंबे समय तक उदाहरणों के लिए जाने की आवश्यकता नहीं थी, उनमें से बहुत सारे थे (उनमें से कुछ आप परियोजना विवरण में पा सकते हैं), लेकिन 24 घंटों में बहुत कुछ नहीं किया जा सकता है, इसलिए दो प्रकारों को चुनने का निर्णय लिया गया:

एक बिजली के उपकरण को बंद करना (आखिरकार, कोई भी नहीं चाहता है कि उसका घर जल जाए क्योंकि लोहे या चूल्हे को जल्दबाजी में बंद कर दिया गया था);
. , , , :) , , … , - .

मितव्ययी मैक्सिम अपने साथ कई सर्व और रिले ले आया, बाकी को मौके पर देखने का फैसला किया गया।

एक इलेक्ट्रिक उपकरण के रूप में जो एक अपार्टमेंट को जला सकता है, हमने एक इलेक्ट्रिक केतली का उपयोग किया। इसके साथ हमें वीडियो विंग्स के एक लड़के एवगेनी टकेवस्की ने मदद की, जिसे हमारी परियोजना में दिलचस्पी थी और वह दूसरे दिन की सुबह घर से केतली ले आया।

कैट फीडर को सेंट पीटर्सबर्ग के रास्ते में एक ट्रेन में कागज पर डिज़ाइन किया गया था, एक कंप्यूटर मॉडल तैयार किया गया था और जैसे ही यह आया, एक 3 डी प्रिंटर पर मुद्रित किया गया। लेकिन बिल्ली की खोज के साथ, सब कुछ अधिक जटिल था। आयोजन स्थल के आसपास कोई बिल्ली नहीं थी, इसलिए हमने इंटेल के विशेषज्ञों में से एक खिलौना टेडी बियर उधार लिया।

मुझे कहना होगा कि परियोजना ने परीक्षण के स्तर पर गहरी रुचि जताई। फिर भी, हर दिन आप एक प्रोग्रामर को अपनी आंखों को सफेद बॉक्स में बंद करते हुए नहीं देखते हैं, लैपटॉप के सामने अपने हाथों को लहराते हुए और रोबोट स्टैंड के बगल में खड़े होकर, पहियों को आगे-पीछे घुमाते हुए और अपने सिर को लहराते हुए ... कुछ दर्शक तो इतने भाग्यशाली थे कि खुद को रोबोट ड्राइवर के रूप में परखने में सफल रहे।

प्रस्तुतीकरण

दुर्भाग्य से, प्रस्तुति के समय, इंटरनेट पूरी तरह से चला गया, हाथों की स्थिति के बारे में किसी भी डेटा हस्तांतरण के बारे में बात करना संभव नहीं था, और इससे भी अधिक रोबोट के कैमरे से स्ट्रीमिंग वीडियो प्रसारित करने के बारे में। रिलीज से पहले आखिरी सेकंड में, जितना संभव हो सके डेटा स्ट्रीम को अनलोड करने का निर्णय लिया गया था, केवल रोबोट नियंत्रण आदेशों को छोड़कर और पूरी तरह से आभासी चश्मे को खोलना। हमें परियोजना के पीसी संस्करण का प्रदर्शन करना था, जिसमें हमारे सिर को मोड़ना और रोबोट की आंखों से देखना असंभव था। हम केवल आभासी हाथों की मदद से रोबोट, चायदानी और फीडर को नियंत्रित कर सकते थे, कंधे पर रोबोट की चाल को देखते हुए, केतली को बंद करते हुए और फ़ीड को बाहर फैला रहे थे। और अंत में, जो लोग चाहते हैं, हमने चश्मे को मापने और आभासी दुनिया में खुद को कम से कम एक पल के लिए महसूस करने की पेशकश की।

आभासी वास्तविकता क्यों?

दुर्भाग्य से, तकनीकी कठिनाइयों के कारण, हम परियोजना के मुख्य विचार को व्यक्त करने में सक्षम नहीं थे - कैसे आभासी दुनिया से नियंत्रण केवल माउस के साथ स्क्रीन पर बटन पर क्लिक करने से अलग है । और सब कुछ वास्तव में सरल है, किसी के लिए माउस पर क्लिक करना अधिक सुविधाजनक है, किसी को स्क्रीन पर उंगली पकड़ना, किसी को कंसोल में लिखना, आभासी वास्तविकता मानव शरीर से परिचित कार्यों और इशारों का उपयोग करके वास्तविक दुनिया के साथ बातचीत करना संभव बनाता है, जो आपको प्रदर्शन करने की अनुमति देता है। एक व्यक्ति के लिए एक बार में कई क्रियाएं।

उदाहरण के लिए, वर्तमान कार्यान्वयन में, आप रोबोट को एक हाथ से सीधा कर सकते हैं, इसे दूसरे के साथ दाईं ओर मोड़ सकते हैं, और अपना सिर घुमा सकते हैं और देख सकते हैं कि बाईं तरफ क्या होता है। निश्चित रूप से, कई मोटर चालकों को स्टीयरिंग व्हील को एक हाथ से पकड़ना पड़ता था, दूसरे के साथ फोन पर बात करना और समय-समय पर साइड में देखना यह देखने के लिए कि क्या मोड़ में कोई गैप पैदल यात्री था। यहाँ भी ऐसा ही है। खैर, आभासी दुनिया में एक बोनस के रूप में, एक व्यक्ति सुपर हीरो की तरह "क्षमता से परे" हो सकता है। उदाहरण के लिए, रोबोट से केतली या फीडर पर जाने के लिए, मैंने अपने हाथों से पास बनाए, जिससे इस दुनिया में तीन आयामी वस्तुओं की आवाजाही हो गई, जैसे जेडी ... मेरे हाथ से आग का गोला छोड़ने और इस तरह रोबोट को बंद करने का विचार था, लेकिन यह बहुत ज्यादा था।

क्या यह स्वतंत्रता नहीं है? आंदोलन की स्वतंत्रता, विचार की स्वतंत्रता, कार्रवाई की स्वतंत्रता, कल्पना की स्वतंत्रता ...

लेकिन यह सब नहीं है। किसी व्यक्ति के लिए अकेले किसी जटिल वस्तु का प्रबंधन करना हमेशा सुविधाजनक नहीं होता है। वर्तमान परियोजना कार्यान्वयन कई लोगों को एक साथ एक ही उपकरण के कई हिस्सों का प्रबंधन करने की अनुमति देता है। आपको उदाहरणों के लिए दूर नहीं जाना पड़ेगा। दो उपयोगकर्ता रोबोट टैंक से जुड़ सकते हैं, एक सतह पर टैंक की गति को नियंत्रित करेगा, और दूसरा इस समय टैंक के टॉवर को घुमाएगा और थूथन को नियंत्रित करने के लिए उपयोग करेगा। बस कल्पना कीजिए कि एक टैंक युद्ध खेल इसके कार्यान्वयन के साथ कैसा लगेगा?

उत्पादन के दृष्टिकोण से, अब उपयुक्त कीबोर्ड, चूहों, जॉयस्टिक या किसी अन्य मैनिपुलेटर्स के निर्माण पर बहुत पैसा खर्च करने की आवश्यकता नहीं है। बस एक नियंत्रण कक्ष ड्रा और आभासी दुनिया में लोड। और यह कैसा दिखेगा यह केवल कल्पना और विशिष्ट आवश्यकताओं पर निर्भर करता है।

आगे क्या होगा?

हैकथॉन में, हमारा लक्ष्य चीजों, रोबोटों और आभासी वास्तविकता के इंटरनेट के सहजीवन द्वारा पेश की जाने वाली संभावनाओं को प्रदर्शित करना था। अब हम परियोजना को उन्मुख करने के स्तर पर हैं और निम्नलिखित क्षेत्रों को कम कर रहे हैं:

कई लोगों द्वारा एक साथ नियंत्रित रोबोट का विकास, एक टैंक रोबोट का प्रोटोटाइप;
वर्तमान परियोजना में एंड्रॉइड और आईओएस प्लेटफार्मों के लिए समर्थन जोड़ना;
एक पूर्ण रोबोट अवतार का विकास, आइटम लेने में सक्षम और दो आँखों से एक स्टीरियो तस्वीर प्रसारित करना;
चीजों के इंटरनेट और आभासी वास्तविकता से जुड़ने के लिए एक संपूर्ण प्रोटोकॉल और एसडीके विकसित करना। यह जो कोई भी अपने इलेक्ट्रॉनिक गैजेट्स को आभासी वास्तविकता से आसानी से जोड़ना चाहता है, और परिणामस्वरूप चश्मे की सीमा का विस्तार होगा;
अपने स्वयं के आभासी चश्मे का विकास;
एक तंत्रिका इंटरफ़ेस जोड़ना, जो लोगों को न केवल शरीर के आंदोलनों की मदद से चीजों को नियंत्रित करने में सक्षम होगा, बल्कि विचार की शक्ति से भी। आखिरी हैकाथॉन में एक समान इंटरफ़ेस का उपयोग करने वाले कई प्रोजेक्ट थे और शायद हम मानवता के लाभ के लिए अपने प्रयासों को जोड़ सकते हैं।

इंटेल IoT रोड शो या वास्तविक दुनिया में आभासी वास्तविकता

थोड़ी पृष्ठभूमि

प्रस्तुतीकरण

आभासी वास्तविकता क्यों?

आगे क्या होगा?

More articles: