0分0秒

声画同步·3D空间声像定位

进阶层章内定位原理认知 建议时长7 分钟 产业场景短视频与VR影像的声画同步 设备无需摄像头、麦克风
下载

仿真实验区

开始实验并完成课前步骤后,这里的操作计入成绩

实验说明

实验一:声画同步·3D空间声像定位

本实验从视频的声画同步入手:先在“视频实验区”调节声画偏移,找出能察觉的声画不同步阈值,并让锣声跟随画面中的声源位置;再进入3D空间音频引擎,理解声像定位原理。

本实验通过拖拽音源在三维空间中的位置,实时感受声音方位与距离的变化,理解立体声声像与HRTF双耳渲染的区别。

通过切换环境混响和渲染模式,认识空间音频在游戏、VR等沉浸式内容中的作用(建议佩戴耳机体验)。

达成要求:能拖动音源并切换立体声声像与HRTF双耳渲染、混响环境,完成听声辨位挑战,用两种模式下的方位误差与前后搞反次数解释HRTF的作用,并能调节声画偏移、判断声画同步阈值,使声音方位与画面中的声源位置一致。

  • 在“视频实验区”调节声画偏移,判断自己能察觉的声画不同步阈值,并让声音跟随画面中的声源位置
  • 从音源库选择鼓、人声、吉他等音源并播放
  • 拖拽音源改变其三维位置,观察距离读数与听感变化
  • 在立体声声像与HRTF双耳渲染之间切换并对比
  • 切换小房间、厅堂、大教堂等混响环境
  • 开启自动旋转,感受声源环绕运动
  • 完成“听声辨位挑战”:分别用立体声声像和HRTF双耳渲染各判断几轮,比较方位误差和前后搞反的次数
  • 知识目标: 理解声像定位、HRTF、距离衰减与多普勒效应等空间音频原理
  • 能力目标: 能够根据场景配置空间音频的渲染模式与环境参数
  • 素养目标: 体会听觉体验设计在沉浸式媒体中的价值
  • Web Audio API PannerNode三维声像
  • 头相关传输函数(HRTF)双耳渲染
  • 距离衰减模型与多普勒效应
  • 混响与房间声学
  • 空间音频在游戏与VR中的应用

漫话数媒

开始实验后,课前的“AI 导学”会在这里生成奇思、妙想的对话。