"O Segredo do Terceiro Planeta" com gráficos aprimorados de redes neurais

Percebi que Habr tem interesse no tópico de melhorar gráficos em jogos antigos.

Acabei de fazer um mod gráfico para o primeiro Gothic .

Recentemente, decidi, por um método semelhante, melhorar os gráficos do meu desenho animado favorito desde a infância -
" O mistério do terceiro planeta ."

Aqui estão os quadros de comparação .

E abaixo está o resultado:


Diga-me se vale a pena. Alguém precisa disso? Ou é melhor não tocar nos clássicos?

As seguintes tecnologias foram usadas:

• Ffmpeg
• ESRGAN
• Gigapixel ai

E agora um pouco sobre como isso foi feito, porque estamos ligados.

Analisamos os formatos disponíveis no YouTube

youtube-dl -F https://www.youtube.com/watch?v=

Baixe os formatos necessários (áudio e vídeo)

youtube-dl -f 11 https://www.youtube.com/watch?v=

Verificando a taxa de quadros do arquivo

ffprobe -v error -select_streams v -of default=noprint_wrappers=1:nokey=1 -show_entries stream=r_frame_rate input.mp4

Storyboard

ffmpeg -i "input.mp4" -start_number 0 -vf fps=25 "convert/capture-%002d.png"

Além disso, o procedimento padrão para aumentar quadros usando uma rede neural.

Colagem de png + audio

• sem permissão - ffmpeg -framerate 25 -i convert/capture-%002d.png -vb 20M -i audio.webm -vcodec mpeg4 -y "ffmpegtest.mp4"
• com a resolução especificada - ffmpeg -framerate 25 -s 900x720 -i convert/capture-%002d.png -vb 20M -i audio.webm -c:v libx264 -pix_fmt yuv420p -crf 23 -y "ffmpegtest3.mp4"