Algoritma baru yang dibuat oleh para ilmuwan memungkinkan Anda untuk membuat "kepala bicara" yang hampir sempurna dengan orang-orang nyata



Para peneliti mempelajari cara mengedit video dengan memasukkan kata dan kalimat apa pun ke dalam mulut seseorang di video . Teknologi ini memproses video sedemikian rupa sehingga terlihat sangat alami dan organik, Anda dapat melihat yang palsu hanya jika Anda curiga mengedit.

Algoritma baru ini dibuat oleh tim peneliti gabungan dari Stanford, Max Planck Institute, Princeton dan Adobe. Pengeditan hanya terdiri dalam membuat teks yang harus diucapkan oleh orang dari video. Sisa pekerjaan dilakukan oleh jaringan saraf. Sulit untuk melihat yang palsu karena ekspresi wajah dan pola gerakan "pembicara" dipertahankan, teknologi ini memungkinkan jejak gangguan.

Untuk mencapai ini, pencipta algoritma mengajarinya cara menganalisis video. Jaringan saraf memilih gerakan yang diperlukan, elemen ekspresi wajah dan kata-kata dengan artikulasi, dan kemudian menggabungkan masing-masing frame sehingga video yang dimodifikasi terlihat utuh. Hasilnya, pada kenyataannya, model komputer yang melakukan tindakan yang diperlukan untuk pemilik teknologi.

Gerakan bibir, lidah, semua elemen artikulasi adalah orisinal, jaringan saraf "memotong" mereka dari video asli. Setelah itu, video tidak terlihat terlalu alami, karena berisi sejumlah besar potongan dan jeda. Oleh karena itu, teknologi β€œmenghaluskan” opsi yang dihasilkan sehingga terlihat sealami mungkin.

Sebelum digunakan, jaringan saraf perlu dilatih - perlu "memberi makan" video setidaknya 40 menit dengan orang atau orang-orang yang pidatonya akan diganti. Benar, ini hanya relevan untuk video berbahasa Inggris, karena hanya ada 44 fonem dalam bahasa Inggris, sehingga jaringan saraf jauh lebih mudah untuk belajar menggunakan bahasa Inggris sebagai contoh daripada Rusia atau Jepang. Namun, seiring waktu, teknologi ini dapat digunakan untuk mengedit video dengan orang-orang yang berbicara bahasa lain. Di bawah ini adalah video yang berfungsi sebagai demonstrasi kemampuan teknologi yang dijelaskan.


Tentu saja, pekerjaan ini menimbulkan sejumlah pertanyaan. Salah satunya adalah keamanan informasi dan media. Jika ada kata-kata yang dapat dimasukkan ke dalam mulut seseorang, dan hasilnya akan terlihat sangat alami, apakah teknologinya berbahaya? Para penulis pengembangan mengklaim bahwa ya, itu dapat digunakan oleh penyerang. Tapi, misalnya, editor grafis sudah ada sejak lama, dengan bantuan mereka Anda juga bisa memalsukan apa pun, tetapi dunia dan kami terus ada dengannya.

Selain itu, penulis mengatakan bahwa mereka memahami bahwa teknologi yang sama dapat digunakan oleh politisi yang tidak bermoral. Yang terakhir akan dapat menghindari kebutuhan untuk membuat pidato di depan kamera jika mereka diganti dengan "kepala bicara" yang terbentuk dari pidato sebelumnya yang direkam dalam video.

Untuk mendeteksi palsu, penulis ide menyarankan menggunakan tanda air khusus dan beberapa teknik lain yang akan memungkinkan untuk mengenali pemalsuan.

Tentu saja, fakta modifikasi video mudah dibuktikan jika ada video asli. Selain itu, penulis berencana untuk mengembangkan metode untuk melindungi konten media dengan menambahkan "sidik jari digital" ke versi asli, yang mudah dideteksi dan dipahami apakah video tersebut asli atau palsu.

Teks lengkap penelitian dapat ditemukan di sini .

Source: https://habr.com/ru/post/id455439/


All Articles