
作为一个小型业余项目,我使用
AI Gigapixel神经网络进行了实验,以升级我最喜欢的科幻小说系列之一-星际迷航:深空九号(DS9),并将俄语译成《星际迷航:深空9》。
太空九号的前景
就像《最终幻想7》一样,我在
Remako mod中制作了高档的背景,纹理和视频,DS9也没有计划发布高清版本。 虽然通常拍摄热门季节的《原始剧集》和《下一代》(TNG),但在90年代中期拍摄的DS9具有视觉效果(太空战等)。
可以以更高的分辨率重新扫描模拟胶片,但这不适用于数字视频。 重新制作该系列的成本变得越来越高:这是其未在HD中发行的原因之一。
DS9重新制作的机器学习
我认为在这里使用神经网络会很有用。 使用AI Gigapixel等工具,可以将DS9低分辨率帧缩放为高清:1080p或4K。 他们永远都无法与出色的修复能力相提并论,但这是朝着正确方向迈出的一步。
因此,我尝试了几帧会发生什么。 结果很好。 AI Gigapixel使用在真实照片中训练的神经网络。 它们非常适合于《最终幻想》视频游戏的高档渲染,但它们也以惊人的质量缩放了DS9帧和特殊效果。
以下是一些示例:
原始分辨率480p(单击放大)
增强的1080p分辨率(点击放大)
原始分辨率480p(单击放大)
增强的1080p分辨率(点击放大)这些单发看起来很有希望。 在第一组图像中,身穿太空服的空间站工作人员仅代表少数几个位置。 升级之后,出现了更加清晰的数字。
手臂的特写也有所改善。 皮肤上的皱纹和皱纹看起来更加细致,棒球显示出更好的光泽和复杂的固件。
录影带
但是,真正的检查是神经网络将如何应对帧序列,即视频。 会出现人工制品和其他问题吗? 毕竟,AI Gigapixel旨在放大单个图像,并且没有考虑视频单个帧之间的关系。
为了进行验证,我决定处理第6季的部分情节“天使的受害者”。 这是有关“统治战争”的精彩系列,那里有史诗般的太空战斗,还有更多面对面的个人时刻。
在以后的文章中,我将告诉您更多有关此过程的信息,但总之:提取和缩放帧,然后从中生成新视频大约需要两天。 这是该集的前五分钟(恢复,开场和介绍)的处理。 对于带有开源软件的中高端PC来说,这是正常的时间。
结果使我敬畏。 他看起来比我希望的要好。 没有问题和文物。 由于(运动中的)图像价值超过一千个单词,因此以下是两个视频进行比较。
第一个演示了静止帧上的“前后”情况。
第二个比较两个视频。 请注意,改进后的版本看起来更加清晰。
如果可能的话,我强烈建议您通过电视上的YouTube应用观看这些视频。 这样可以更好地了解增强型DS9在电视上的外观。
比较不错,但是真实视频看起来像什么? 以下是本
集的前五分钟,分辨率为1080p :
4K呢?
老实说,我不知道。 尽管我可以放大到4K,但我没有电视或具有该分辨率的显示器来检查是否有改善。 但是,我录制了该视频。 听到人们对4K设备的看法是否与1080p版本相比更好看,这很有趣。
渲染几乎使我的计算机融化了,因为它的强度比1080p高得多,因此我们将限于此4K示例。
接下来是什么?
由于我不拥有DS9的权利,因此该系列不能做我想做的。 我会发布整集,但从法律上讲这是不可能的。 这些视频更是CBS版权持有者观看机器学习和神经网络的概念证明,可以重新制作DS9,这将使我们喜欢的电影更接近高清时代。
想象一下,专业的团队可以使用强大的设备,经过特殊训练的神经网络(也许是在TNG季中对其进行训练-基于原始帧和重新制作后的帧中的一组数据)进行处理,然后访问SD源而不是像我的DVDRip。
好吧,就我而言,我可以告诉您更多有关高档过程,我如何进行的内容,这将是以后文章的主题。
让我知道您对此有何想法。