Jaringan saraf belajar mewarnai video hitam putih.

Beberapa minggu yang lalu, di Geektimes , materi diterbitkan bahwa jaringan saraf belajar mewarnai foto hitam putih. Jaringan saraf sudah lama dapat melakukan banyak hal, tidak hanya bekerja dengan foto. Tapi ini mungkin salah satu demonstrasi kemampuan jaringan yang paling terbuka. Yang lebih mengungkap adalah "kustomisasi gambar" dari DeepDream AI dari Google, meskipun gambar yang dihasilkan agak ... psychedelic , katakanlah.

Sekarang jaringan saraf telah diajarkan untuk mewarnai film hitam dan putih. Ini dilaporkan oleh pengguna mar_cnu . Alat yang sesuai untuk mewarnai film hitam dan putih dibuat tepat dengan upayanya. Dan meskipun hasilnya tidak bisa disebut ideal, semuanya cukup bagus.

Sebagai bahan sumber, ia memilih trailer untuk film Prancis lama dari tahun 1964. Berikut ini cuplikan sumber:



Pengembang menjelaskan pilihannya dengan fakta bahwa trailer memiliki semua yang Anda butuhkan - hutan, sungai, orang, rumah, jalan. Inilah yang terjadi setelah memproses video:



Seperti yang Anda lihat, hasilnya tidak sempurna, seperti yang disebutkan di atas. Tapi salah satu alasannya adalah video aslinya. Tidak jelas, seperti semua film pada masa itu, sering kali semuanya menyatu dalam "gambar", sehingga masuk akal jika program mengalami kesulitan.

Semua ini dilakukan sebagai berikut:

1. Menemukan video asli;
2. Sumber dikonversi menggunakan layanan ini ;
3. Jalankan skrip

untuk file dalam video / *
do
echo "$ file"
th colorize.lua "$ file" "color - $ {file% .jpg} .png"
selesai

4. ffmpeg -i "color-frame% 04d. png ”-c: v libx264 colorvideo.mp4
5. ffmpeg -i blackandwhitevideo.webm audio.mp3
6. 6) ffmpeg -i colorvideo.mp4 -i audio.mp3 -c: v libx264 -c: copy -strict

Untuk layanan ini, sebagaimana dicatat oleh pengguna dengan benar, tugas yang paling sulit adalah mengimplementasikan transisi yang mulus antara masing-masing frame. Jika Anda menjeda video, Anda sering berhasil "menangkap" bingkai dengan warna yang hampir sempurna. Tetapi untuk membuat transisi yang mulus antar frame adalah tugas yang sulit dan terpisah.

Source: https://habr.com/ru/post/id393425/