cÉsar d. salvador modelos de propagaciÓn acÚstica y … · 2020. 9. 10. · entorno: room...

28
MODELOS DE PROPAGACIÓN ACÚSTICA Y AUDICIÓN BINAURAL CÉSAR D. SALVADOR 1

Upload: others

Post on 05-Oct-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

MODELOS DE PROPAGACIÓN ACÚSTICA Y AUDICIÓN BINAURAL

CÉSAR D. SALVADOR

�1

Page 2: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

PERCEPCIÓN DEL ESPACIO ACÚSTICO

EVENTO EN EL

ESPACIO

ESPACIALIDAD DEL EVENTO

INTRODUCCIÓN �2

Page 3: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

INFORMACIÓN ACÚSTICA Y AUDICIÓN ESPACIAL

FUENTE DE SONIDO

OYENTE

ENTORNO

�3

Page 4: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

INTRODUCCIÓN �4

Tiempo

Frecuencia

Entorno Oyente

Room impulse

response (RIR)

Room transfer function

(RTF)

Head-related impulse

response (HRIR)

Head-related transfer function (HRTF)

Page 5: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

ENTORNO: ROOM IMPULSE RESPONSE (RIR)

ENTORNO

�5

Señal de barrido en frecuencia

Page 6: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

ENTORNO: ROOM IMPULSE RESPONSE (RIR)

�6

R. Badeau, “Unified stochastic reverberation model,” in Proc. 26th European Signal Process. Conf., Rome, Italy, 2018.

Page 7: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

ENTORNO: ROOM IMPULSE RESPONSE (RIR)

�7

Page 8: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

ENTORNO: ROOM IMPULSE RESPONSE & ROOM TRANSFER FUNCTION

�8

R. Badeau, “Unified stochastic reverberation model,” in Proc. 26th European Signal Process. Conf., Rome, Italy, 2018.

Page 9: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

ENTORNO: SPATIAL ROOM IMPULSE RESPONSE

ENTORNO

�9

Señal de barrido en frecuencia

Page 10: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

SIMULADOR RÁPIDO DE PROPAGACIÓN ACÚSTICA

�10

HTTPS://GITHUB.COM/JINNSJJ/ARD-SIMULATOR J. Shi, Universidad de Tohoku

[1] J. Shi, C. D. Salvador, J. Treviño, S. Sakamoto, and Y. Suzuki, “Spherical harmonic representation of rectangular domain sound fields,” in Int. Symp. Universal Acoustical Communication, Sendai, Japan, Oct. 2018. [http://www.tfc.tohoku.ac.jp/event/4212.html] [2] N. Raghuvanshi, R. Narain, and M. C. Lin, “Efficient and Accurate Sound Propagation Using Adaptive Rectangular Decomposition,” IEEE Trans. Vis. Comput. Graphics, vol. 15, no. 5, pp. 789–801, Sep. 2009.

BASADO EN DESCOMPOSICIÓN ADAPTATIVA RECTANGULAR

Page 11: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

PROPAGACIÓN ACÚSTICA EN EL TIEMPO Y EL ESPACIO

�11

Page 12: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

APLICACIONES PARA MODELAR EL ENTORNO

▸ Unity

▸ Google Resonance Audio

Page 13: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

OYENTE: HEAD-RELATED IMPULSE RESPONSE (HRIR)

Señal de barrido en frecuencia

OYENTE

�13

Page 14: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

�14

HEAD-RELATED TRANSFER FUCTION (HRTF)

Page 15: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

MEDICIÓN DIRECTA

�15

Laboratorio de Acústica de la Universidad de Tohoku

Page 16: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

MEDICIÓN POR RECIPROCIDAD

�16

Laboratorio Hirahara-Morikawa de la Universidad Prefectural de Toyama

Page 17: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

�17

HEAD-RELATED TRANSFER FUNCTION (HRTF)

Page 18: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

�18

OYENTE: HEAD-RELATED TRANSFER FUNCTION (HRTF)

C. D. Salvador, S. Sakamoto, J. Treviño, and Y. Suzuki, “Distance-varying filters to synthesize head-related transfer functions in the horizontal plane from circular boundary values,” Acoust. Sci. Technol., vol. 38, no. 1, pp. 1–13, Jan. 2017.

Page 19: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

MODELOS GENÉRICOS E INDIVIDUALES

�19

Genéricos Individuales

C. D. Salvador, S. Sakamoto, J. Treviño, and Y. Suzuki, “Dataset of near-distance head-related transfer functions calculated using the boundary element method,” in Proc. Audio Eng. Soc. Int. Conf. Spatial Reproduction —Aesthetics and Science—, Tokyo, Japan, 2018.

Gen1 Gen2 Ind1 Ind2

Page 20: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

MODELOS GENÉRICOS E INDIVIDUALES

�20

Page 21: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

SISTEMAS DE COORDENADAS PARA POSICIONES DE FUENTES

�21

Page 22: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

APLICACIONES PARA MODELAR LA ANATOMÍA EXTERNA DEL OYENTE

▸ Spatially-oriented format for acoustics (SOFA)

▸ MESH2HRTF

Page 23: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

BINAURAL ROOM TRANSFER FUNCTION (BRTF) = HEAD-RELATED TRANSFER FUNCTION (HRTF) * ROOM TRANSFER FUNCTIONS (RTF)

FUENTE DE SONIDO

OYENTE

ENTORNO

�23

Page 24: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

REPRESENTACIÓN DEL ESPACIO A PARTIR DE LA PRESIÓN ACÚSTICA EN LOS TÍMPANOS

RETINOTOPÍA TONOTOPÍA

CócleaRetina

�24

Page 25: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

TONOTOPÍA

https://www.medel.com/

�25

Page 26: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc
Page 27: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

THE AUDITORY MODELING TOOLBOX

�27

http://amtoolbox.sourceforge.net/

Page 28: CÉSAR D. SALVADOR MODELOS DE PROPAGACIÓN ACÚSTICA Y … · 2020. 9. 10. · ENTORNO: ROOM IMPULSE RESPONSE (RIR) 6 R. Badeau, “Unified stochastic reverberation model,” in Proc

GRACIAS POR SU ATENCIÓN

César D. Salvador cesardsalvador.github.io

MODELOS DE PROPAGACIÓN ACÚSTICA Y AUDICIÓN BINAURAL �28