Surround-Musik: Wie VR-Technologien Ton übertragen
Fotos von David Pacey / CC3D- und VR-Technologien decken immer mehr Bereiche ab. Am beliebtesten sind Computerspiele und die Filmindustrie. In einem kürzlich erschienenen Artikel haben wir über die Möglichkeiten des Einsatzes von VR-Technologien in der Filmindustrie gesprochen und auch über 3D-Sound und seine Perspektiven.In diesem Artikel erfahren Sie mehr über die Funktionen der Ton- und Musikwiedergabe in VR, welche Probleme Audio-Profis haben und wie sie gelöst werden können."Was Sie erkennen, ist real"
Es gibt zwei Möglichkeiten, Informationen mithilfe der VR-Technologie zu übertragen. Im ersten Fall versuchen die Entwickler, das Bild so realitätsnah wie möglich nachzubilden. Im zweiten - eine völlig andere Welt und Atmosphäre zu erzeugen, eine Illusion zu erzeugen, in der alles, was passiert, logisch miteinander verbunden ist.Bei der zweiten Methode ist alles einfach: Wenn die Situation, die Charaktere und ihre Handlungen nicht real sind, unterscheiden sich die Gesetze dieser Welt von der Realität. Es ist viel schwieriger, das wiederherzustellen, was an sich real ist. Die Schwierigkeit liegt in der Tatsache, dass es in einigen Spielen oder Videos seltsame Momente gibt, die den menschlichen Geist aus dieser Illusion „herausziehen“.Spieleentwickler und Animatoren kennen die Hypothese, die als unheimlicher Taleffekt bezeichnet wird. Das Wesentliche der Hypothese ist, dass ein Charakter, der fast wie ein Mensch aussieht oder sich so verhält, sich aber immer noch geringfügig von ihm unterscheidet, uns Angst macht oder uns nicht gefällt. Etwas ähnliches geschieht mit dem Ton in der VR.Im Gegensatz zur visuellen Wahrnehmung ist es viel schwieriger festzustellen, welches Objekt sich vor uns befindet. Sie können die ungefähre Größe und den relativen Abstand dazu nur ermitteln, wenn das Objekt Geräusche macht. Aufgrund der Tatsache, dass wir eine reichhaltige "auditive" Erfahrung in der Wahrnehmung der Welt haben, vergleicht das Gehirn in der virtuellen Realität neue Informationen mit dem, was wirklich mit uns geschieht.Die menschliche Stimme ist in diesem Fall der „bekannteste“ Faktor für uns: Daher erleichtert ihre Präsenz im Sounddesign des Spiels unser „auditorisches Eintauchen“ in die virtuelle Realität spürbar. Aber die Stimme unterliegt ebenso wie der humanoide Charakter der Wirkung des "finsteren Tals". Zum Beispiel führt eine zu hohe Kompression des Klangs zu "Misstrauen" in unserem Bewusstsein.Das folgende Video hilft zu verstehen, wozu unser Gehirn fähig ist. Das Gehirn empfängt alle Informationen über die Bewegung von Objekten nur von einem Audiosignal. Es wird empfohlen, dass Sie dieses und die folgenden Videos mit Kopfhörern und geschlossenen Augen anhören.Der Ton in diesem Video wurde mit der binauralen Aufnahmemethode erstellt: Er wird über zwei Mikrofone ausgeführt, und das endgültige Fragment muss über die Kopfhörer zu hören sein.Neben der speziellen Anordnung der Mikrofone ist entweder eine Schaufensterpuppe, die einen echten Kopf imitiert, oder die sogenannte Jacklin-Scheibe (siehe Abbildung unten) an der Aufnahme beteiligt. Verwechseln Sie nicht die Konzepte „binaural“ und „stereo“. Bei der herkömmlichen Stereoaufnahme wird der Abstand zwischen den Ohren und die Schallreflexion von Kopf und Ohrmuscheln nicht berücksichtigt - Faktoren, die die Schallausbreitung beeinflussen.
Jacklins Disk / CCIn modernen Virtual-Reality-Helmen werden diese Bedingungen leider nicht berücksichtigt. Darüber hinaus liefern Unternehmen wie Project Morpheus und HTC Vive VR-Headsets ohne Kopfhörer und laden Kunden ein, ihre Technologie zu nutzen. Der Oculus Rift wird mit Markenkopfhörern geliefert, hier soll er jedoch durch ein Modell mit „höherer Qualität“ ersetzt werden.Kopfhörer mit Surround Sound 7.1-Technologie sind bei Spielern sehr beliebt. Die Kotaku Gaming Community Site hat für die besten Gaming-Kopfhörer gestimmt. Die beliebtesten Modelle waren die drahtlosen Kopfhörer Astro A50 und Logitech G930 , die diese Technologie unterstützen. Mit anderen Worten, die Community selbst hat festgestellt, dass „hohe Qualität“ einen Surround-Effekt impliziert.Der binaurale Klang unterscheidet sich also von Stereo. Stereo (2.0) unterscheidet sich wiederum vom Surround-Sound (7.1): Wenn für binaurale und Stereo-Sounds spezielle Tonaufnahmemethoden erforderlich sind, müssen Sie Sound über eine große Anzahl von Soundquellen abspielen, um einen räumlichen Soundeffekt zu erzielen. Aufgrund der Anzahl der Lautsprecher wird ein Immersionseffekt erzeugt.Für VR ist jedoch nicht das Eintauchen wichtig, sondern der „realistische“ Klang. Wenn die binaurale Aufnahme über 7.1-Headsets verarbeitet wird, entspricht die endgültige Aufnahme wahrscheinlich nicht den Erwartungen des Hörers. Dies bedeutet, dass Standardmethoden dieses Problem nicht lösen können.Die Hauptsache ist Realismus.
Photo pixabay / CCUm einen realistischen Klang zu erzielen, müssen Sie die Position des Körpers im Raum berücksichtigen und die Interaktion mit der Übertragungsfunktion des Kopfes (HRTF) überwachen .In VR hat der Benutzer die Möglichkeit, sich zu bewegen und Kopfbewegungen in jede Richtung auszuführen. Wenn dementsprechend der Kopf oder vielmehr die Ohren ihre Position ändern, muss sich dementsprechend auch das eingehende Tonsignal ändern. Die binaurale Aufzeichnung kann den Effekt des Eintauchens in die virtuelle Realität verstärken und die Tiefe der Ereignisse hervorheben.Neben den Geräuschen, die wir gewohnt sind zu hören - den sogenannten diegetischen Geräuschen - gibt es auch nicht-diabetische Geräusche: Wir hören sie im Alltag nicht, aber sie können Teil eines Computerspiels oder Films sein. Ein Beispiel ist Hintergrundmusik oder Erzählersprache.In einem Computerspiel interessiert uns nicht, woher die Stimme und die Musik kommen. Eine andere Sache ist die virtuelle Realität. Um nicht-diabetische Klänge in die virtuelle Welt zu integrieren, müssen Sie Verbindungsobjekte verwenden. Zum Beispiel würde es logisch aussehen, wenn der Erzähler im Radio oder in den Telefonhörer spricht.Was die Musik betrifft, so stellen sich hier andere Fragen. Natürlich kann es an ein Radio gebunden werden, damit klar ist, woher der Ton kommt. Dies reicht jedoch nicht aus: Die Musik wird ungleichmäßig klingen.Eine der möglichen Lösungen ist die Verwendung der dynamischen Komprimierung zusammen mit der Verstärkung niedriger Frequenzen, was einen „Proximity-Effekt“ verursacht. Im folgenden Video analysiert Alexander J Turner dieses Phänomen im Detail. Es hängt eng mit dem Gerät des Mikrofons zusammen: Je näher der Lautsprecher daran ist, desto heller sind die niedrigeren Frequenzen und der Klang wird gesättigter.Spiele verwenden häufig Kompositionen, die in Studios oder anderen akustischen Räumen aufgenommen wurden. Diese Räume vermitteln Lebendigkeit des Klangs aufgrund der Tatsache, dass der Klang der Instrumente mit Schallreflexionen im Raum gemischt wird. Bei einem Konzert im Wintergarten gibt es also kein Gefühl, dass Musik den persönlichen Raum zerquetscht oder in ihn eindringt. Im Gegenteil, wir haben das Gefühl, dass sie von uns entfernt ist.VR verwendet jedoch keine "zu lebhaften" Aufnahmen: Der Hörer wird nicht verstehen, woher der Ton kommt. Eine alternative Lösung für dieses Problem wäre, Musik in einer neutralen Umgebung aufzunehmen und anschließend zu verarbeiten, um den organischen Klang nicht zu stören. Es kann sich auch lohnen, auf Stereoklang zu verzichten und alles auf einen zentrierteren Klang zu reduzieren. Sie können es ein wenig komprimieren und dann die Equalizer-Einstellungen darauf anwenden. Dann klingt die Musik so, als würde sie nicht "irgendwo da draußen", sondern "in unserem Kopf" abgespielt.Die Wirkung des Realismus kann auch durch eine unauffällige Betonung der Umgebungssituation erreicht werden. Im nächsten Video können Sie beispielsweise sowohl visuelle als auch akustische Spannungen spüren. Es ist anzumerken, dass die Wirkung der diabetischen Geräusche in dieser Aufnahme stärker ist als die der nicht-diabetischen Geräusche, und dass mehr Wert auf die Einstellung als auf den Ton gelegt wird.Ein weiteres Beispiel für denselben Ansatz. Nur wenige Geräusche erzeugen eine intensive und intensive Atmosphäre.Daher kann ein zu sauber und genau kalibrierter Klang künstlich erscheinen. Gleichzeitig wird das Hörerlebnis viel stärker, auch wenn es „schmutzig“ ist, aber ein realistisches Bild erzeugt - mit Hilfe zusätzlicher Soundeffekte oder einer dynamischen Umgebung.Mit anderen Worten, bemühen Sie sich nicht, den Klang perfekt zu machen. Es ist notwendig, es so realistisch wie möglich zu gestalten, damit der Hörer die Emotionen spüren kann, die der Schöpfer eines Werkes konzipiert hat.Wir sind ständig auf dem neuesten Stand und studieren nur interessante Materialien über Klang. In jüngerer Zeit haben wir begonnen , die topische vorzubereiten verdaut , ein paar Beispiele und andere Materialien zu dem Thema - auf die folgenden Links:Source: https://habr.com/ru/post/de397147/
All Articles