声画同步·3D空间声像定位
实验说明
实验一:声画同步·3D空间声像定位
本实验从视频的声画同步入手:先在“视频实验区”调节声画偏移,找出能察觉的声画不同步阈值,并让锣声跟随画面中的声源位置;再进入3D空间音频引擎,理解声像定位原理。
本实验通过拖拽音源在三维空间中的位置,实时感受声音方位与距离的变化,理解立体声声像与HRTF双耳渲染的区别。
通过切换环境混响和渲染模式,认识空间音频在游戏、VR等沉浸式内容中的作用(建议佩戴耳机体验)。
达成要求:能拖动音源并切换立体声声像与HRTF双耳渲染、混响环境,完成听声辨位挑战,用两种模式下的方位误差与前后搞反次数解释HRTF的作用,并能调节声画偏移、判断声画同步阈值,使声音方位与画面中的声源位置一致。
- 在“视频实验区”调节声画偏移,判断自己能察觉的声画不同步阈值,并让声音跟随画面中的声源位置
- 从音源库选择鼓、人声、吉他等音源并播放
- 拖拽音源改变其三维位置,观察距离读数与听感变化
- 在立体声声像与HRTF双耳渲染之间切换并对比
- 切换小房间、厅堂、大教堂等混响环境
- 开启自动旋转,感受声源环绕运动
- 完成“听声辨位挑战”:分别用立体声声像和HRTF双耳渲染各判断几轮,比较方位误差和前后搞反的次数
- 知识目标: 理解声像定位、HRTF、距离衰减与多普勒效应等空间音频原理
- 能力目标: 能够根据场景配置空间音频的渲染模式与环境参数
- 素养目标: 体会听觉体验设计在沉浸式媒体中的价值
- Web Audio API PannerNode三维声像
- 头相关传输函数(HRTF)双耳渲染
- 距离衰减模型与多普勒效应
- 混响与房间声学
- 空间音频在游戏与VR中的应用
漫话数媒
开始实验后,课前的“AI 导学”会在这里生成奇思、妙想的对话。
已阅读实验说明、看过仿真实验区,可直接从这里开始

