0分0秒

AR视频合成·实景放声音

进阶层章内定位操作训练 建议时长7 分钟 产业场景AR视频合成与空间计算 设备摄像头可选(没有时用虚拟AR空间)
下载

仿真实验区

开始实验并完成课前步骤后,这里的操作计入成绩

实验说明

实验三:AR视频合成·实景放声音

本实验以示例视频(锦里街景)或摄像头画面为实景,把虚拟音源标记叠加到视频画面上,体验AR视频合成;再通过放置空间锚点、调节距离衰减,理解AR中声音的定位。

本实验结合摄像头画面与空间音频,把声音“放置”在现实环境中的某个位置:走近听得到、走远听不到,体验声音与现实坐标的绑定。

通过选择音源、开启AR、调节距离衰减,理解AR空间音频的锚点定位与距离感知原理(建议使用手机浏览器体验)。

达成要求:能选择猫叫等音源在AR画面中放置空间锚点,调节衰减系数与俯仰角、偏航角,通过走近走远听感变化检验距离衰减与方向感知是否正确,并能以示例视频为实景完成虚拟音源与视频画面的叠加合成。

  • 用示例视频当实景,把虚拟音源叠加到视频画面上,体验 AR 视频合成
  • 从AR音源库选择猫叫、鸟鸣、篝火等音源
  • 开启AR模式并授权摄像头
  • 在画面中点击放置声音,形成空间音源
  • 调节音量距离衰减系数,观察听感变化
  • 清除音源并重新布置,比较不同布局
  • 知识目标: 理解AR场景中空间锚点、距离衰减与方向感知的原理
  • 能力目标: 能够设计基于现实位置的声音交互
  • 素养目标: 体会虚实融合交互在空间计算产业中的应用前景
  • WebXR与MediaStream摄像头接入
  • 空间锚点与现实坐标绑定
  • 距离衰减模型与方向感知
  • AR音频交互设计
  • 空间计算设备中的声音呈现

漫话数媒

开始实验后,课前的“AI 导学”会在这里生成奇思、妙想的对话。