Bagaimana mengubah gambar menjadi suara, dan mengapa Anda membutuhkannya

Grafik dan infografis - format presentasi data ini seringkali tidak dapat diakses oleh orang buta dan tunanetra. Pengembang dari perusahaan Amerika SAS Institute mencoba menyelesaikan masalah ini dengan membuat plugin Akselerator Grafik berbasis browser gratis.

Tugasnya adalah menerjemahkan informasi grafik menjadi audio. Hari ini kita berbicara tentang pengembangan SAS Institute dan kasus-kasus lain di mana suara membantu "melihat".


Foto takomabibelot / PD

Cara Kerja Akselerator Grafik


SAS Institute sedang mengembangkan perangkat lunak untuk analisis data statistik. Dalam kebanyakan kasus, hasil analisis ini ditampilkan dalam grafik, sehingga sulit bagi orang-orang tunanetra untuk bekerja dengan solusi SAS.

Untuk memperbaiki situasi, salah satu pengembang perusahaan, Ed Summers, mengambil alih, yang kehilangan penglihatannya pada usia sepuluh tahun karena penyakit mata degeneratif (ia mengembangkan retinitis pigmentosa ).

Ed dan rekan menciptakan solusi yang akan membantu orang-orang tunanetra menggunakan infografik dan diagram yang dibangun oleh aplikasi SAS untuk tujuan pendidikan atau pekerjaan. Jadi ada Grafik Akselerator . Ini adalah plugin gratis untuk Google Chrome yang menggunakan teknik sonication . Ini menyajikan informasi grafis - termasuk peta panas dan diagram lingkaran - dalam format audio.

Instrumen bekerja dengan grafik fungsi sebagai berikut: pengguna menggerakkan penunjuk di sepanjang sumbu horizontal menggunakan panah pada keyboard, dan Graphics Accelerator memainkan not piano untuk setiap titik pada grafik. Semakin besar nilainya di sepanjang sumbu Y, semakin tinggi suaranya. Anda dapat mendengarkan bagaimana ini terdengar di tutorial video dari SAS Institute .

Untuk kemudahan navigasi, nilai-nilai dari bagian kiri grafik direproduksi melalui speaker lubang suara kiri (atau kolom speaker), dan dari kanan - melewati kanan. Grafik juga disertai dengan deskripsi teks yang dapat didengar menggunakan pembaca layar.

Di mana lagi sonifikasi digunakan


Seseorang dapat "menyaring" suara berlebih, mengabaikan kebisingan latar belakang dan hanya fokus pada informasi yang diperlukan. Itulah sebabnya kita dapat dengan mudah mengenali suara orang-orang di lingkungan yang sibuk. Properti ini dikenal sebagai " efek pesta koktail ".

Dengan menggunakan metode sonifikasi, lebih mudah bagi kita untuk berkonsentrasi dan memperhatikan beberapa fitur spesifik dalam data, untuk menemukan pola. Misalnya, NASA telah mengembangkan alat sendiri untuk sonifikasi xSonify . Program ini digunakan oleh astronom Wanda Diaz Merced dalam penelitiannya.

Selama pidatonya di TED, dia mengatakan bahwa dengan bantuan program sonifikasi, dia menganalisis grafik yang menunjukkan intensitas cahaya bintang dari waktu ke waktu, "mendengarkan" semburan sinar gamma dari benda-benda langit.


Foto oleh Antonio Roberts / CC

Sonifikasi banyak digunakan oleh para peneliti dari daerah lain. Para peneliti dari University of Idaho dan Eastern Washington State University mempelajarinya dengan fitur migrasi salmon chinook - ikan dari keluarga salmon. Ketika ikan bergerak dari kolam ke kolam, komposisi kimianya berubah menjadi otolith , formasi padat kecil di telinga bagian dalam. Dengan menganalisis komposisi ini, para ilmuwan dapat memahami di mana ikan ini atau itu berada.

Para peneliti mengumpulkan data tentang perubahan konsentrasi masing-masing unsur kimia dan membandingkannya satu sama lain. Informasi disajikan dalam bentuk suara. Setiap elemen dalam otolith diberi frekuensinya sendiri. Ketika ikan pindah dari satu tempat ke tempat lain, suara yang "dipancarkan" otolith juga berubah.

Teknik sonifikasi juga digunakan oleh orang-orang yang mengerjakan proyek di persimpangan sains dan seni. Sound membantu memvisualisasikan perubahan penting di dunia, seperti pemanasan global . Angka kering berubah menjadi musik yang mengganggu, yang menggambarkan peningkatan suhu rata-rata di planet ini dan tingkat karbon dioksida di atmosfer.


Proyek serupa dibuat oleh pengembang dan artis Brian Foo (Brian Foo). Melalui sonifikasi, ia menunjukkan kesejahteraan finansial orang-orang di berbagai bagian New York , tingkat polusi udara di Beijing , serta gender dan keragaman ras dalam film-film Hollywood .


Sonifikasi memungkinkan Anda mempelajari lebih lanjut tentang data "tak terlihat" yang mengelilingi kita setiap hari. Misalnya, Anda dapat menggunakannya untuk mendengarkan Internet. Dalam kinerja Internet Rumbles , yang diadakan pada simposium KISS2014 , suara mewakili informasi tentang koneksi Internet perangkat di dalam ruangan. Anda juga dapat menyuarakan perubahan dalam konten situs yang berbeda: percobaan serupa dilakukan berdasarkan data dari Habr dan Wikipedia .

Dengan demikian, sonifikasi memberikan kesempatan untuk melampaui pekerjaan biasa dengan informasi dan melihat dunia kita dari sudut yang berbeda dan tidak terduga.



Lebih menarik tentang suara - di saluran Telegram kami:

Bagaimana cara mendengar warnanya
Sejarah Merek: Marshall
Beberapa Fakta Tentang Kaset Audio
Bagaimana suara Star Wars?
Kemana perginya musik di VK


Source: https://habr.com/ru/post/id421247/


All Articles