एक छोटे से शौकिया प्रोजेक्ट के रूप में, मैंने अपने पसंदीदा विज्ञान कथा श्रृंखला - स्टार ट्रेक: डीप स्पेस नाइन (डीएस 9) में से एक, स्टार ट्रेक: डीप स्पेस 9 के रूसी अनुवाद में अपकमिंग करने के लिए एआई गीगापिक्सल न्यूरल नेटवर्क के साथ प्रयोग किया।

डीप स्पेस नाइन के लिए संभावनाएँ

फ़ाइनल फ़ैंटेसी 7 की तरह, जहाँ मैं रेमको मॉड में बैकग्राउंड, टेक्सचर और वीडियो का अपस्केल करता हूं , डीएस 9 में एचडी वर्ज़न जारी करने की कोई योजना नहीं है। जबकि लोकप्रिय सीज़न ओरिजिनल सीरीज़ और द नेक्स्ट जनरेशन (TNG) को ज्यादातर फिल्माया गया था, DS9 को 90 के दशक के मध्य में विजुअल इफेक्ट्स (स्पेस बैटल आदि) के साथ फिल्माया गया था।

एनालॉग फिल्म को उच्च रिज़ॉल्यूशन के साथ फिर से स्कैन किया जा सकता है, लेकिन यह डिजिटल वीडियो के साथ काम नहीं करेगा। श्रृंखला को फिर से बनाना बहुत महंगा होता जा रहा है: यह एक कारण है कि इसे एचडी में जारी नहीं किया गया था।

DS9 ने मशीन सीखने को फिर से तैयार किया

मैंने सोचा कि यहां तंत्रिका नेटवर्क का उपयोग करना उपयोगी होगा। एआई गीगापिक्सल, डीएस 9 कम-रिज़ॉल्यूशन फ़्रेम जैसे उपकरणों का उपयोग करके उच्च परिभाषा तक बढ़ाया जा सकता है: 1080p या 4K। वे कभी भी एक अच्छे रीमास्टिंग के साथ तुलना नहीं करेंगे, लेकिन यह सही दिशा में एक कदम है।

इसलिए, मैंने कुछ तख्ते पर कोशिश की कि क्या होता है। परिणाम बहुत अच्छे हैं। एआई गीगापिक्सल वास्तविक तस्वीरों में प्रशिक्षित तंत्रिका नेटवर्क का उपयोग करता है। वे फाइनल फैंटेसी वीडियो गेम के अपकमिंग रेंडर्स के लिए अच्छी तरह से अनुकूल हैं, लेकिन उन्होंने DS9 फ्रेम और अद्भुत गुणवत्ता के साथ विशेष प्रभावों को भी बढ़ाया है।

यहाँ कुछ उदाहरण हैं:


मूल संकल्प 480p (विस्तार के लिए क्लिक करें)


एन्हांस्ड 1080p रिज़ॉल्यूशन (बड़ा करने के लिए क्लिक करें)


मूल संकल्प 480p (विस्तार के लिए क्लिक करें)


एन्हांस्ड 1080p रिज़ॉल्यूशन (बड़ा करने के लिए क्लिक करें)

ये एकल शॉट्स आशाजनक दिखे। छवियों के पहले सेट में, स्पेससूट्स में स्टेशन स्टाफ केवल कुछ स्पॉट का प्रतिनिधित्व करता है। अपस्केल के बाद, बहुत तेज आंकड़े दिखाई दिए।

बांह के क्लोज़-अप में भी सुधार हुआ। त्वचा पर झुर्रियाँ और दरारें अधिक विस्तृत दिखती हैं, और बेसबॉल बेहतर चमक और जटिल फर्मवेयर दिखाता है।

वीडियो

हालांकि, वास्तविक जांच यह है कि तंत्रिका नेटवर्क फ्रेम के अनुक्रम के साथ कैसे सामना करेंगे, अर्थात वीडियो। क्या कलाकृतियाँ और अन्य समस्याएं दिखाई देंगी? आखिरकार, एआई गिगपेलेल को व्यक्तिगत छवियों को अपकेंद्रित करने के लिए डिज़ाइन किया गया है और वीडियो के व्यक्तिगत फ्रेम के बीच संबंध को ध्यान में नहीं रखा गया है।

सत्यापन के लिए, मैंने 6 वें सीज़न के एपिसोड "विक्टिम ऑफ़ द एंजेल्स" का हिस्सा बनने का फैसला किया। यह डोमिनियन युद्ध के बारे में एक उत्कृष्ट श्रृंखला है, जहां महाकाव्य अंतरिक्ष युद्ध और अधिक व्यक्तिगत क्षणों का सामना करना पड़ता है।

मैं आपको भविष्य के लेखों में इस प्रक्रिया के बारे में अधिक बताऊंगा, लेकिन संक्षेप में: फ्रेम निकालना और स्केल करना, और फिर उनसे एक नया वीडियो बनाना, लगभग दो दिन का समय लगा। यह एपिसोड के पहले पांच मिनट (फिर से शुरू, दृश्य और परिचय) का प्रसंस्करण है। ओपन सोर्स सॉफ्टवेयर के साथ मिड-रेंज और हाई-एंड पीसी के लिए सामान्य समय।

परिणाम ने मुझे खौफ में डाल दिया। मुझे उम्मीद थी कि वह बेहतर दिखेगी। कोई समस्या नहीं है और कलाकृतियों। चूंकि (चलती) छवियां एक हजार से अधिक शब्दों के लायक हैं, यहां तुलना के लिए दो वीडियो हैं।

पहला अभी भी तख्ते पर "पहले और बाद में" स्थिति को दर्शाता है।


दूसरा दो वीडियो की तुलना करता है। ध्यान दें कि बेहतर संस्करण कितना तेज दिखता है।


यदि संभव हो तो मैं आपके टीवी पर YouTube ऐप के माध्यम से इन वीडियो को देखने की सलाह देता हूं। यह एक बेहतर अहसास देता है कि डीएस 9 को सीधे टीवी पर कैसे देखा जाएगा।

तुलना करना अच्छा है, लेकिन वास्तविक वीडियो कैसा दिखता है? यहां एपिसोड के पहले पांच मिनट पूर्ण रूप से 1080p के संकल्प के साथ हैं :

4K के बारे में क्या?

ईमानदारी से, मुझे पता नहीं है। हालाँकि, मैं 4K पर ज़ूम कर सकता हूं, लेकिन मेरे पास सुधार के लिए जाँच करने के लिए टीवी या मॉनिटर नहीं है। हालाँकि, मैंने यह वीडियो रिकॉर्ड किया है। यह दिलचस्प है कि 4K उपकरण वाले लोगों की राय 1080p संस्करण की तुलना में बेहतर दिखती है या नहीं।

रेंडरिंग ने मेरे कंप्यूटर को लगभग पिघला दिया, क्योंकि यह 1080p की तुलना में बहुत अधिक गहन है, इसलिए हम खुद को इस 4K उदाहरण तक सीमित कर लेंगे।

आगे क्या है?

चूंकि मेरे पास DS9 के अधिकार नहीं हैं, इसलिए मैं वह नहीं कर सकता जो मैं श्रृंखला के साथ चाहता हूं। मैं पूर्ण एपिसोड जारी करूंगा, लेकिन यह केवल कानूनी रूप से असंभव है। ये वीडियो सीबीएस के कॉपीराइट धारकों के लिए अवधारणा का एक प्रमाण हैं, जो मशीन सीखने और तंत्रिका नेटवर्क पर एक नज़र रखने के लिए डीएस 9 के संभावित पुन: उपयोग के लिए हैं, जो हमारी पसंदीदा फिल्म को एचडी युग के करीब लाएगा।

कल्पना कीजिए कि एक पेशेवर टीम शक्तिशाली उपकरणों के साथ क्या कर सकती है, विशेष रूप से प्रशिक्षित तंत्रिका नेटवर्क (शायद टीएनजी सीज़न में इसे प्रशिक्षण दे रही है - मूल फ्रेम और रीमेकिंग के बाद फ्रेम से डेटा का एक सेट का उपयोग करके) और मेरी तरह डीवीडीआरआईपी के बजाय एसडी स्रोतों तक पहुंच।

खैर, अपने हिस्से के लिए, मैं आपको अपस्केल प्रक्रिया के बारे में अधिक बता सकता हूं कि मैंने इसे कैसे संचालित किया, जो कि भविष्य के लेख का विषय होगा।

मुझे पता है कि आप इसके बारे में क्या सोचते हैं।