Morty, kami di UltraHD! Cara menonton film apa pun dalam 4K, menyelesaikannya melalui jaringan saraf yang sedikit diketahui

Anda mungkin pernah mendengar tentang teknologi Yandex DeepHD, dengan bantuan yang entah bagaimana mereka sekali lagi meningkatkan kualitas kartun Soviet. Sayangnya, belum tersedia untuk umum, dan kami, programmer biasa, tidak mungkin memiliki kekuatan untuk menulis keputusan kami sendiri. Tetapi secara pribadi, sebagai pemilik layar Retina ( 2880x1800 ), saya baru-baru ini benar-benar ingin melihat Rick dan Morty. Apa kekecewaan saya ketika saya melihat bagaimana 1080r terlihat bersabun di layar ini, di mana aslinya serial animasi ini ada! (Ini adalah kualitas yang sangat baik dan biasanya cukup, tetapi percayalah, retina sangat diatur sehingga animasi dengan garis-garis yang jelas dalam 1080p terlihat seperti sabun, seperti 480p pada monitor FHD)

Saya dengan tegas memutuskan bahwa saya ingin melihat serial animasi ini dalam 4K, meskipun saya benar-benar tidak tahu bagaimana menulis jaringan saraf. Namun, solusinya ditemukan! Anehnya, kita bahkan tidak perlu menulis kode, kita hanya perlu ~ 100 GB ruang disk dan sedikit kesabaran. Dan hasilnya adalah gambar 4K yang jelas yang terlihat lebih baik daripada interpolasi apa pun.

Persiapan

Pertama, Anda perlu segera memahami bahwa tidak ada teknologi akses terbuka untuk meningkatkan video menggunakan jaringan saraf. Umumnya. Tetapi ada beberapa proyek yang dapat memperbesar foto. Dan jika demikian, mari kita recode video kita menjadi banyak sekali frame!

Ini dapat dilakukan melalui Adobe Premiere Pro atau program lain untuk bekerja dengan video, tapi saya yakin tidak semua orang menginstalnya. Karena itu, mari kita gunakan utilitas konsol ffmpeg . Saya mengambil episode pertama musim pertama dan itu dimulai:

$ ffmpeg -i RiM01x01_4K.mp4 -q:v 1 IM/01x01_%05d.jpg

10 , . 26 .

!

?

, - — Let's Enhance, waifu2x ( ) Mail.ru Vision.

.

Mail.ru Vision Let's Enhance , , , , 31000 , , . waifu2x, , . - « » — .

Github , … ! , , , , . , !

Adobe Photoshop!

, true story , . Adobe , !

, > … « 2.0».



! , Let's Enhance. ( 8 ):



— , ?
, ! Actions, , . , .

« ». — ! , 4 82 .

,

ffmpeg.

, , :

ffmpeg -i RiM01x01_1080p.mp4 -vn -ar 44100 -ac 2 -ab 320K -f mp3 sound.mp3

4-. , !

ffmpeg -i 01x01_%05d.jpg -i sn.mp3 -vcodec libx264 -preset veryslow -crf 10 -r 23.976 RiM_01x01_4K.mp4

: -r , , !

!

« » 4. . , -, … . , Photoshop . , Action, , . - . , , — , ?