Кіріспе
Құлақ кеңістіктегі бір нүктеден дыбысты қалай қабылдайтынын сипаттайтын жауап. Басқа қатысты беру функциясы (HRTF) – бұл құлақтың кеңістіктегі бір нүктеден дыбысты қалай қабылдайтынын сипаттайтын жауап. Дыбыс тыңдаушыға жеткенде, басының және құлақтарының мөлшері мен пішіні, құлақ жолы, бас тығыздығы, мұрын және ауыз қуысының мөлшері мен пішіні – бәрі де дыбысты өзгертіп, оның қабылдануына әсер етеді, кейбір жиіліктерді күшейтеді, ал басқаларын әлсіретеді. Жалпы айтқанда, HRTF 2–5 кГц жиіліктерін күшейтеді, 2700 Гц жиілікте +17 дБ негізгі резонансқа ие. Бірақ жауап қисығы бір ғана өспеден гөрі күрделі, кең жиілік спектріне әсер етеді және әр адам үшін айтарлықтай өзгеше болады. Екі құлаққа арналған HRTF жұбы кеңістіктегі белгілі бір нүктеден шыққандай сезілетін екі дыбысты жасау үшін қолданылуы мүмкін. Бұл – дыбыстың белгілі бір нүктеден құлаққа (әдетте, есту арнасының сыртқы жағына) қалай жететінін сипаттайтын беру функциясы. Кейбір тұтынушылық үй развлегіру құрылғылары стерео (екі динамик) құлаққаптар арқылы қоршаған дыбысты қайта жаңғырту үшін HRTF-ты пайдаланады. HRTF өңдеудің кейбір түрлері дыбыс шығару құрылғыларынан қоршаған дыбысты имитациялау үшін компьютерлік бағдарламаларға енгізілген.
A head related transfer function (HRTF) is a response that characterizes how an ear receives a sound from a point in space. As sound strikes the listener, the size and shape of the head, ears, ear canal, density of the head, size and shape of nasal and oral cavities, all transform the sound and affect how it is perceived, boosting some frequencies and attenuating others. Generally speaking, the HRTF boosts frequencies from 2–5 kHz with a primary resonance of +17 dB at 2,700 Hz. But the response curve is more complex than a single bump, affects a broad frequency spectrum, and varies significantly from person to person. A pair of HRTFs for two ears can be used to synthesize a binaural sound that seems to come from a particular point in space. It is a transfer function, describing how a sound from a specific point will arrive at the ear (generally at the outer end of the auditory canal). Some consumer home entertainment products designed to reproduce surround sound from stereo (two speaker) headphones use HRTFs. Some forms of HRTF processing have also been included in computer software to simulate surround sound playback from loudspeakers.
Дыбысты локализациялау
Адамның екі құлағы бар, бірақ дыбыстарды үш өлшемде анықтай алады – қашықтық бойынша (ауқым), биіктік бойынша (жоғары және төмен), алдыңғы және артқы жақтан, сондай-ақ екі жақта (азимут). Бұл ми, ішкі құлақ және сыртқы құлақ (пина) бірлесіп жұмыс істеп, орналасу туралы қорытынды шығару арқасында мүмкін болады. Дыбыс көздерін локализациялау қабілеті адамдар мен олардың ата-бабаларында эволюциялық қажеттілік ретінде қалыптасқан болуы мүмкін, себебі көздер көрерменнің айналасындағы әлемнің тек бір бөлігін ғана көре алады, ал көру қараңғыда шектеледі, ал дыбыс көзін анықтау қабілеті айналадағы жарықтан тәуелсіз, әртүрлі дәлдікпен барлық бағытта жұмыс істейді. Адамдар дыбыс көзінің орнын бір құлақтан алынған мәліметтер (монауралдық мәліметтер) негізінде, сондай-ақ екі құлақта алынған мәліметтерді салыстыру арқылы (айырмашылық мәліметтері немесе бинауралдық мәліметтер) бағалайды. Айырмашылық мәліметтеріне келу уақыты мен интенсивтіліктің айырмашылықтары жатады. Монауралдық мәліметтер дыбыс көзі мен адам анатомиясының өзара әрекеттесуінен туындайды, онда бастапқы дыбыс құлаққа кірмес бұрын өзгереді. Бұл өзгерістер көздің орнын кодтайды және көздің орны мен құлақтың орны арасындағы байланысты көрсететін импульстік жауап арқылы тіркелуі мүмкін. Бұл импульстік жауап басқа қатысты импульстік жауап (HRIR) деп аталады. Кез келген дыбыс көзін HRIR-мен конволюциялау оны тыңдаушы естігендей дыбысқа айналдырады, егер ол дыбыс көзінің орнында тұрса және тыңдаушының құлағы қабылдағыш орнында болса. HRIR виртуалды жан-жақты дыбыс құру үшін қолданылады. HRTF – HRIR-дің Фурье түрлендірмесі. Сол және оң құлақтарға арналған HRTF (жоғарыда HRIR ретінде көрсетілген) дыбыс көзінің (x(t)) сол және оң құлақтарда сәйкесінше xL(t) және xR(t) ретінде қабылданудан бұрын сүзгіленуін сипаттайды. HRTF дыбыстың еркін кеңістіктегі бағытынан құлаққа жеткен кездегі өзгерістері ретінде де сипатталуы мүмкін. Бұл өзгерістер тыңдаушының сыртқы құлағының пішінін, оның басы мен денесінің пішінін, дыбыс ойнатылатын кеңістіктің акустикалық қасиеттерін және т.б. қамтиды. Осы барлық қасиеттер тыңдаушының дыбыс қай жақтан келе жатқанын анықтау қабілетіне (немесе оның болмауына) әсер етеді. AES69 2015 стандартында Аудиоинженерлік қоғамы (AES) басқа қатысты трансферлік функциялар (HRTF) сияқты кеңістіктік бағытталған акустикалық деректерді сақтау үшін SOFA файл форматын анықтады. SOFA бағдарламалық кітапханалары мен файлдары Sofa Conventions веб-сайтында жинақталған.
regardless of the surrounding light. Humans estimate the location of a source by taking cues derived from one ear (monaural cues), and by comparing cues received at both ears (difference cues or binaural cues). Among the difference cues are time differences of arrival and intensity differences. The monaural cues come from the interaction between the sound source and the human anatomy, in which the original source sound is modified before it enters the ear canal for processing by the auditory system. These modifications encode the source location and may be captured via an impulse response which relates the source location and the ear location. This impulse response is termed the head related impulse response (HRIR). Convolution of an arbitrary source sound with the HRIR converts the sound to that which would have been heard by the listener if it had been played at the source location, with the listener's ear at the receiver location. HRIRs have been used to produce virtual surround sound. The HRTF is the Fourier transform of HRIR. HRTFs for left and right ear (expressed above as HRIRs) describe the filtering of a sound source (x(t)) before it is perceived at the left and right ears as xL(t) and xR(t), respectively. The HRTF can also be described as the modifications to a sound from a direction in free air to the sound as it arrives at the eardrum. These modifications include the shape of the listener's outer ear, the shape of the listener's head and body, the acoustic characteristics of the space in which the sound is played, and so on. All these characteristics will influence how (or whether) a listener can accurately tell what direction a sound is coming from. In the AES69 2015 standard, the Audio Engineering Society (AES) has defined the SOFA file format for storing spatially oriented acoustic data like head related transfer functions (HRTFs). SOFA software libraries and files are collected at the Sofa Conventions website.
HRTF қалай жұмыс істейді
Бұл механизм әр адамдағы бас және құлақ пішіндерінің өзгешелігіне байланысты өзгеріп отырады. HRTF – берілген дыбыс толқынының (жиілік және көзінің орны бойынша параметрленген) бас, құлақ қабы және дененің дифракция және шағылысу қасиеттері арқылы сүзілуін сипаттайды, бұл дыбыс құлақ пердесі мен ішкі құлақтың сезімталдық жүйесіне жеткенге дейін болады (есті білу жүйесін қараңыз). Биологиялық тұрғыдан алғанда, осы сыртқы құрылымдардың көз орнына қатысты алдын ала сүзілу әсері, көз орнын анықтауға, әсіресе көздің биіктігін анықтауға көмектеседі.
Виртуалды есту кеңістігінде дыбысты локализациялау
Виртуалды аудиторлық кеңістік құрудың негізгі қағидасы – егер тыңдаушының есіктің қалқаларына келіп түсетін акустикалық толқын формалары құлаққап арқылы да, ашық кеңістікте де бірдей болса, тыңдаушының сезімі де сол сияқты болуы керек. Әдетте, құлаққаптан шығарылатын дыбыстар бас ішінде пайда болатын сияқты қабылданады. Виртуалды аудиторлық кеңістікте құлаққаптар дыбысты "сыртқа шығаруға" мүмкіндік беруі керек. HRTF-ты пайдалану арқылы дыбыстарды төменде сипатталған техникамен кеңістікте орналастыруға болады, ол бастың толық 3D желісінде физикалық симуляция жүргізеді, ал EAC – бұрынғы HRTF-терден үйретілген нейрондық желіні қолданады және фотосуреттер мен басқа да жуық шамамен өлшемдерден жұмыс істейді.
Жазу және қайта орындау технологиясы
HRTF арқылы өңделген жазбалар, мысалы, компьютерлік ойын ортасында (A3D, EAX және OpenAL қараңыз), тыңдаушының HRTF-іне жуықтап келген жазбалар, стерео құлаққаптар немесе динамиктер арқылы естілгенде, екі жақтан ғана емес, барлық бағыттан келетін дыбыс ретінде қабылданады. Нәтижелердің дәлдігі HRTF деректерінің сіздің құлақтарыңыздың ерекшеліктеріне қаншалықты сәйкес келетіндігіне байланысты, бірақ жеке құлағыңыздан өлшенген нақты деректерден гөрі, жалпы HRTF артық болуы мүмкін. Apple және Sony сияқты кейбір өндірушілер пайдаланушының құлақ пішініне қарай таңдауға болатын әртүрлі HRTF ұсынады. Windows 10 және одан жоғары нұсқалары Microsoft Spatial Sound бағдарламасымен бірге келеді, ол Xbox One және Hololens 2 құрылғыларында қолданылатын кеңістіктік аудио платформасы. Windows PC немесе Xbox One-да HRTF-ті қолдану үшін платформа бірнеше аудио процессорларды пайдалана алады, олардың ішінде Windows Sonic for Headphones, Dolby Atmos және DTS Headphone:X бар. Платформа бекітілген орынды айналдыратын дыбыс көздерін де, кеңістікте қозғалатын динамикалық "объект" көздерін де шығара алады. Apple өз құрылғылары үшін, Apple немесе Beats құлаққаптарымен қолданылатын Spatial Sound ұсынады. Құлаққаптар арқылы музыка ойнату үшін Dolby Atmos қосылып, HRTF қолданылуы мүмкін. HRTF (немесе, дәлірек айтқанда, объектілердің орналасуы) бағыттың иллюзиясын сақтау үшін бас қозғалысын қадағалау арқылы өзгеруі мүмкін. Qualcomm Snapdragon ұқсас бас қозғалысын қадағалайтын кеңістіктік аудио жүйесіне ие, ол кейбір Android телефондарында қолданылады. YouTube 360 градустық және VR бейнелерімен бас қозғалысын қадағалайтын HRTF-ті пайдаланады. Қазіргі таңдағы Linux жүйесі меншікті кеңістіктік аудио (айналдыратын дыбыс плюс динамикалық объектілер) форматтарын тікелей өңдей алмайды. SoundScape Renderer бағыттық синтезді ұсынады. PulseAudio және PipeWire HRTF-ті пайдаланып виртуалды айналдыратын дыбысты (бекітілген арналар) қамтамасыз ете алады. PipeWire-тің соңғы нұсқалары HRTF-ті пайдаланып динамикалық кеңістіктік рендерингті де қамтамасыз ете алады, бірақ қосымшалармен интеграция жұмысы әлі де жалғасуда. Пайдаланушылар өздерінің орналасуын және динамикалық дыбыс көздерін конфигурациялай алады, сондай-ақ қолданыстағы параметрлерді пайдаланып айналдыратын динамиктерді симуляциялай алады. Кросс-платформалық OpenAL Soft, OpenAL-дың іске асырылуы, жақсартылған дыбыс локализациясы үшін HRTF-терді қолданады. Windows және Linux кеңістіктік аудио жүйелері кез келген стерео құлаққап моделін қолдайды, ал Apple кеңістіктік аудионы тек Apple немесе Beats брендінің Bluetooth құлаққаптарымен пайдалануға рұқсат береді.