AR视频合成·实景放声音
实验说明
实验三:AR视频合成·实景放声音
本实验以示例视频(锦里街景)或摄像头画面为实景,把虚拟音源标记叠加到视频画面上,体验AR视频合成;再通过放置空间锚点、调节距离衰减,理解AR中声音的定位。
本实验结合摄像头画面与空间音频,把声音“放置”在现实环境中的某个位置:走近听得到、走远听不到,体验声音与现实坐标的绑定。
通过选择音源、开启AR、调节距离衰减,理解AR空间音频的锚点定位与距离感知原理(建议使用手机浏览器体验)。
达成要求:能选择猫叫等音源在AR画面中放置空间锚点,调节衰减系数与俯仰角、偏航角,通过走近走远听感变化检验距离衰减与方向感知是否正确,并能以示例视频为实景完成虚拟音源与视频画面的叠加合成。
- 用示例视频当实景,把虚拟音源叠加到视频画面上,体验 AR 视频合成
- 从AR音源库选择猫叫、鸟鸣、篝火等音源
- 开启AR模式并授权摄像头
- 在画面中点击放置声音,形成空间音源
- 调节音量距离衰减系数,观察听感变化
- 清除音源并重新布置,比较不同布局
- 知识目标: 理解AR场景中空间锚点、距离衰减与方向感知的原理
- 能力目标: 能够设计基于现实位置的声音交互
- 素养目标: 体会虚实融合交互在空间计算产业中的应用前景
- WebXR与MediaStream摄像头接入
- 空间锚点与现实坐标绑定
- 距离衰减模型与方向感知
- AR音频交互设计
- 空间计算设备中的声音呈现
漫话数媒
开始实验后,课前的“AI 导学”会在这里生成奇思、妙想的对话。
已阅读实验说明、看过仿真实验区,可直接从这里开始

