كمشروع صغير للهواة ، جربت مع شبكات AI Gigapixel العصبية لترقية واحدة من سلسلة خيال علمي المفضل - Star Trek: Deep Space Nine (DS9) ، في الترجمة الروسية لستار تريك: Deep Space 9.

آفاق تسعة الفضاء السحيق

تمامًا مثل Final Fantasy 7 ، حيث أقوم بإجراء مجموعة كبيرة من الخلفيات والأنسجة ومقاطع الفيديو في Remako mod ، ليس لدى DS9 خطط لإصدار إصدار HD. في حين تم تصوير الفصول الشعبية الأصلية من السلسلة الأصلية والجيل القادم (TNG) ، تم تصوير DS9 في منتصف التسعينيات بتأثيرات بصرية (معارك فضائية ، إلخ).

يمكن إعادة مسح فيلم تمثيلي بدقة أعلى ، لكن هذا لن يعمل مع الفيديو الرقمي. أصبحت إعادة إنشاء المسلسل أكثر تكلفة: هذا أحد الأسباب لعدم إصداره بدقة عالية.

DS9 تعلم آلة remastered

اعتقدت أنه سيكون من المفيد استخدام الشبكات العصبية هنا. باستخدام أدوات مثل AI Gigapixel ، يمكن تحجيم الإطارات منخفضة الدقة DS9 بدقة عالية: 1080p أو 4K. لن تقارن أبدًا بإعادة صياغة جيدة ، لكن هذه خطوة في الاتجاه الصحيح.

لذلك ، حاولت على عدة إطارات ما يحدث. النتائج رائعة. يستخدم AI Gigapixel الشبكات العصبية المدربة على الصور الحقيقية. إنها مناسبة تمامًا للعروض الراقية لألعاب الفيديو Final Fantasy ، ولكنها أيضًا زادت إطارات DS9 والمؤثرات الخاصة بجودة مذهلة.

فيما يلي بعض الأمثلة:


القرار الأصلي 480p (انقر للتكبير)


قرار 1080p المحسن (اضغط للتكبير)


القرار الأصلي 480p (انقر للتكبير)


قرار 1080p المحسن (اضغط للتكبير)

هذه الطلقات واحدة تبدو واعدة. في المجموعة الأولى من الصور ، لا يمثل طاقم المحطة في بدلات الفضاء سوى نقاط قليلة. بعد الارتفاع ، ظهرت شخصيات أكثر حدة.

تحسين الصورة عن قرب للذراع. تبدو التجاعيد والتجاعيد على الجلد أكثر تفصيلاً ، ويظهر البيسبول أفضل تألقًا ومعقدة.

فيديو

ومع ذلك ، فإن الاختيار الحقيقي هو كيف ستتعامل الشبكات العصبية مع تسلسل الإطارات ، أي الفيديو. سوف تظهر القطع الأثرية وغيرها من المشاكل؟ بعد كل شيء ، تم تصميم AI Gigapixel لتحسين الصور الفردية ولا يأخذ في الاعتبار العلاقة بين الإطارات الفردية للفيديو.

للتحقق ، قررت معالجة جزء من حلقة "ضحية الملائكة" من الموسم السادس. هذه سلسلة ممتازة عن حرب دومينيون ، حيث توجد معارك فضاء ملحمية والمزيد من اللحظات الشخصية وجهاً لوجه.

سأخبركم المزيد عن هذه العملية في المقالات المستقبلية ، ولكن باختصار: استغرق استخراج الإطارات وتوسيع نطاقها ، ثم إنشاء فيديو جديد منها ، حوالي يومين. هذا هو معالجة الدقائق الخمس الأولى من الحلقة (استئناف ، مشهد الافتتاح والمقدمة). إنه وقت عادي تمامًا لأجهزة الكمبيوتر متوسطة المدى وعالية الجودة مع برنامج مفتوح المصدر.

النتيجة قادتني إلى الرعب. بدا أفضل مما كنت آمل. لا مشاكل والتحف. نظرًا لأن الصور (المتحركة) تساوي أكثر من ألف كلمة ، إليك مقطعان فيديو للمقارنة.

الأول يوضح الوضع "قبل وبعد" على الإطارات الثابتة.


الثاني يقارن اثنين من أشرطة الفيديو. لاحظ كيف تبدو النسخة المحسنة أكثر وضوحًا.


أوصي بشدة بمشاهدة مقاطع الفيديو هذه من خلال تطبيق YouTube على التلفزيون ، إذا كان ذلك ممكنًا. وهذا يعطي شعورًا أفضل بكيفية ظهور DS9 المحسّن مباشرةً على التلفزيون.

المقارنات جيدة ، ولكن كيف يبدو الفيديو الحقيقي؟ في ما يلي الدقائق الخمس الأولى من الحلقة كاملة بدقة 1080 بكسل :

ماذا عن 4K؟

بصراحة ، أنا لا أعرف. على الرغم من أنني أستطيع التكبير إلى 4K ، إلا أنه ليس لدي تلفزيون أو شاشة بها الدقة للتحقق من التحسينات. ومع ذلك ، لقد سجلت هذا الفيديو. من المثير للاهتمام سماع رأي الأشخاص الذين يستخدمون أجهزة 4K ما إذا كان يبدو أفضل مقارنةً بالإصدار 1080 بكسل.

جعل تقريبًا صهر جهاز الكمبيوتر الخاص بي ، لأنه أكثر كثافة من 1080 بكسل ، لذلك سنقتصر على مثال 4K هذا.

ما التالي؟

نظرًا لأنني لا أملك حقوق DS9 ، لا أستطيع فعل ما أريد مع المسلسل. أود إصدار حلقات كاملة ، لكن هذا مستحيل قانونًا. تعد مقاطع الفيديو هذه دليلًا على مفهوم أصحاب حقوق النشر في CBS لإلقاء نظرة على التعلم الآلي والشبكات العصبية لإمكانية إعادة صياغة DS9 ، والتي ستجعل الفيلم المفضل لدينا أقرب قليلاً إلى عصر HD.

تخيل ما يمكن لفريق محترف أن يفعله بالمعدات القوية ، والشبكات العصبية المدربة خصيصًا (ربما تدريبه في موسم TNG - باستخدام مجموعة من البيانات من الإطارات والإطارات الأصلية بعد إعادة الصياغة) والوصول إلى مصادر SD بدلاً من DVDRip ، مثل شبكة الاتصال.

حسنًا ، من جهتي ، يمكنني أن أخبركم أكثر عن العملية الراقية ، وكيفية إجرائها ، والتي ستكون موضوع مقال في المستقبل.

اسمحوا لي أن أعرف ما هو رأيك حول هذا الموضوع.