Google memperkenalkan Resonance Audio SDK - alat bantu untuk desain suara game, video 360 derajat, aplikasi VR dan AR.
Ini bukan pengembangan pertama perusahaan di bidang ini. Pada Januari 2016, Google Karton SDK dengan surround sound dirilis. Versi yang direvisi
dimasukkan dalam platform Daydream 2.0 VR, yang saat ini
terbuka untuk pengembang pihak ketiga.
Sebuah hal baru yang disebut "Audio Resonansi" menggabungkan pencapaian Google di bidang ini dan memungkinkan Anda untuk menerapkannya di banyak platform, termasuk seluler.
Di bawah ini kita akan berbicara tentang fitur Audio Resonansi.
Foto Jennifer Boyer CC BYApa yang diberikannya
- Efek kehadiran penuh . Sudut pandang penglihatan manusia rata-rata 160-200 derajat, tetapi dengan bantuan kemampuan pendengaran, seseorang dapat membentuk bagi dirinya sendiri gambaran ruang yang lengkap. Dengan menyinkronkan visi virtual dan suara virtual, Anda dapat mencapai efek kehadiran yang lebih besar dalam realitas virtual.
- Penggunaan CPU yang ekonomis . Teknologi Ambisonics berfungsi di sini - versi 3D dari perekaman Sisi Tengah . Dengan kata sederhana, ini memungkinkan Anda untuk menghemat sumber daya komputasi dalam proses "pencampuran" ratusan sumber suara virtual. Selain itu, Unity menyediakan kemungkinan perhitungan awal efek reverb tergantung pada sifat akustik dari lingkungan virtual.
- Lintas-platform . Audio resonansi berfungsi pada sistem operasi Android, iOS, Windows, MacOS, Linux; pada mesin Unity dan Unreal Engine; dengan perpustakaan audio FMOD ; Paket perangkat lunak yang bijaksana workstation suara digital. Google juga menyediakan API untuk C / C ++, Java, dan Objective-C.
- Pembentukan media suara yang kompleks . Menggunakan SDK, Anda dapat bekerja dengan sejumlah parameter yang memengaruhi persepsi spasial suara. Misalnya, atur arah rambatan gelombang suara. Para pengembang mengutip situasi dengan sumber suara dalam bentuk gitar virtual: itu akan terdengar lebih keras jika karakter permainan Anda berdiri di depannya dan lebih tenang jika di belakangnya.
Selain itu, SDK memberikan persepsi suara yang berbeda tergantung pada kondisi lingkungan (misalnya, di ruang terbuka dan terbatas). Dengan menggunakan fitur ini, pengembang akan dapat membuat adegan yang lebih realistis.
Cara Kerja Audio Resonansi
Teknologi ini memungkinkan Anda untuk mengatur posisi sumber suara bersama dengan sifat distribusinya dan
mensimulasikan interaksi gelombang suara dengan objek virtual. Untuk melakukan ini, Resonance Audio memperkenalkan tiga jenis komponen persepsi keseluruhan efek suara tertentu.
- Suara langsung - langsung dari sumber ke pendengar tanpa berinteraksi dengan hambatan. Ini memiliki intensitas tertinggi dibandingkan dengan komponen lain dan mereda ketika bergerak menjauh dari sumbernya.
- Refleksi primer dari permukaan - memiliki intensitas yang lebih rendah, yang juga tergantung pada sifat-sifat permukaan. Mereka memungkinkan Anda untuk mengevaluasi ukuran dan bentuk ruang virtual.
- Refleksi sekunder dan selanjutnya mengikuti , yang tiba dengan peningkatan kepadatan dan ditumpangkan pada suara langsung. Gambaran yang lebih lengkap tentang ruang di sekelilingnya dibangun di atasnya.
Seperti yang
ditekankan oleh Chris Hegstrom (Chris Hegstrom), perancang suara Microsoft HoloLens, otak manusia memproses informasi suara lebih cepat daripada visual. Naluri pemeliharaan diri mengajar orang tersebut untuk menentukan jarak ke sumber suara, dan pembentukan efek kehadiran dibangun berdasarkan prinsip ini, yang komponen audionya sebagian besar bertanggung jawab:
Efek dari kehadiran adalah perbedaan antara "Wow, game ini memiliki animasi yang sangat keren dari bug besar" dan "Sialan, bug raksasa terbang di atasku!"
Menggunakan kemampuan dari Resonance Audio (
video ), seseorang yang terbenam di dunia maya membentuk semacam "peta" ruang di mana ia berada. Dan perkiraan lokasi objek yang tidak bisa dilihatnya, seseorang menentukan hanya dengan mendengar.
Apa lagi yang perlu Anda ketahui
Pentingnya bekerja pada teknologi surround sound dikonfirmasi oleh eksperimen, salah satunya
dilakukan oleh G'Audio Lab. Orang diberi dua demo permainan - satu dengan suara surround, dan yang lainnya dengan normal. Setelah proses permainan selesai, responden secara terbuka mengatakan bahwa mereka bahkan tidak berpikir bahwa suara dapat membuat perbedaan besar dalam perasaan proses permainan.
Joel Susal, kepala divisi virtual dan augmented reality Dolby,
ingat bahwa itu adalah efek suara realistis seperti derit tajam pintu atau suara langkah yang mendekat yang membuat kita secara naluriah menoleh untuk melihat sumber suara dan memahami bahwa semuanya -sehingga terjadi. Teknologi surround sound akan memperkaya gameplay game VR dan memperluas area interaksi dengan lingkungan game.
Surround sound dapat digunakan tidak hanya dalam permainan dan film, tetapi juga dalam
video musik , selama siaran langsung VR konser dan pertandingan olahraga, sehingga seseorang yang berada di rumah merasakan bagian dari acara tersebut. Surround sound akan membantu Anda merasakan sesuatu yang tidak begitu mudah dirasakan bahkan di dunia nyata - misalnya, tidak hanya pergi ke konser, tetapi berada tepat di panggung, di sebelah artis favorit Anda.
Materi lain dari "Hi-Fi World" kami: