Vous avez probablement entendu parler de la technologie Yandex DeepHD, avec l'aide de laquelle ils ont encore une fois amélioré la qualité des dessins animés soviétiques. Hélas, il n'est pas encore accessible au public et il est peu probable que nous, programmeurs ordinaires, ayons la force d'écrire notre propre décision. Mais personnellement, en tant que propriétaire d'un écran Retina (
2880x1800 ), j'ai récemment vraiment voulu voir Rick et Morty. Quelle a été ma déception quand j'ai vu à quel point le 1080r avait l'air savoureux sur cet écran, dans lequel existent les originaux de cette série animée! (C'est une excellente qualité et généralement assez suffisante, mais croyez-moi, la rétine est si arrangée que l'animation avec ses lignes claires en 1080p semble savonneuse, comme 480p sur un moniteur FHD)
J'ai fermement décidé que je voulais voir cette série animée en 4K, même si je ne sais absolument pas comment écrire des réseaux de neurones. Cependant, une solution a été trouvée! Curieusement, nous n'avons même pas besoin d'écrire de code, nous avons seulement besoin d'
environ 100 Go d'espace disque et d'un peu de patience. Et le résultat est une image 4K claire qui semble plus décente que toute interpolation.
La préparation
Tout d'abord, vous devez comprendre immédiatement qu'il n'y a pas de technologie d'accès ouvert pour augmenter la vidéo à l'aide de réseaux de neurones. Généralement. Mais il existe plusieurs projets qui sont capables d'agrandir des photographies. Et si c'est le cas, recodons notre vidéo en un énorme tas d'images!
Cela peut être fait via Adobe Premiere Pro ou un autre programme pour travailler avec la vidéo, mais je suis sûr que tout le monde ne l'a pas installé. Par conséquent, utilisons l'utilitaire de console
ffmpeg . J'ai pris le premier épisode de la première saison et ça a commencé:
$ ffmpeg -i RiM01x01_4K.mp4 -q:v 1 IM/01x01_%05d.jpg
JPG, PNG?. , 31 000 PNG, , . , .
, -q:v 1 , JPG .
10 , .
26 .
!
?
, - —
Let's Enhance,
waifu2x ( ) Mail.ru Vision.
.
Mail.ru Vision Let's Enhance , , , , 31000 , , . waifu2x, , . - « » — .
Github , … ! , , , , . , !
Adobe Photoshop!, true story , . Adobe , !
, > … « 2.0».
! , Let's Enhance. ( 8 ):
— , ?, ! Actions, , . , .
« ». — ! , 4
82 .
,
ffmpeg.
, , :
ffmpeg -i RiM01x01_1080p.mp4 -vn -ar 44100 -ac 2 -ab 320K -f mp3 sound.mp3
4-. , !
ffmpeg -i 01x01_%05d.jpg -i sn.mp3 -vcodec libx264 -preset veryslow -crf 10 -r 23.976 RiM_01x01_4K.mp4
: -r ,
, !
!
« » 4.
. , -, … . , Photoshop . , Action, , . - . , , — , ?