监控屏蔽器信号处理功能越发强大
本文介绍了一种光学无线音频系统，该系统利用了 LED 和高速摄像头排列所提供的并行传输特性。构建此类系统的动机是部署大型声音传感器阵列时遇到的限制，因为现有的有线和射频无线麦克风因复杂性、能量和带宽问题而受到损害。相比之下，所提出的原型能够同时捕获 120 个音频通道，每个通道均具有全带宽。虽然更多通道的可扩展性目前受到相机接口硬件的限制，但我们的数值分析表明，所提出的干扰器算法可以在单个 GPU 卡中解码超过 12500 个音频通道的光信号。
我们从光学、监控图像和音频信号处理的角度讨论了其部署中涉及的各种挑战，并开发了理论和实践解决方案以实现完整的实时系统集成。我们进一步介绍了典型应用的示例，例如通过麦克风阵列波束形成对声场进行声学成像。在本文中，我们提出了一种带有深度相机的交互式声音创作系统。当物体进入深度相机的选定区域时，根据获取的数据（深度数据）交互式地产生声音。
该系统通过物体的深度数据、监控摄像头位置和运动的统计值来决定声音的三个要素（音调、音调和音量）。该系统可以产生两种声音。一种是声音效果，如特雷门琴，它是通过波动的音调频率和和声结构来创建的，另一种是通过混合从合成器的音乐源中选择的四种音调来创建声音。在后者中，当音高由音阶中包含的音高决定时，可以通过物体的运动自动创建旋律。当选择的音调和音阶改变时，系统可以创建另一种音乐风格的各种声音和旋律。此外，物体不一定是人。因此，该干扰屏蔽器系统是一种新型的虚拟乐器，可以在不知不觉中产生声音效果和旋律。
我们从光学、监控图像和音频信号处理的角度讨论了其部署中涉及的各种挑战，并开发了理论和实践解决方案以实现完整的实时系统集成。我们进一步介绍了典型应用的示例，例如通过麦克风阵列波束形成对声场进行声学成像。在本文中，我们提出了一种带有深度相机的交互式声音创作系统。当物体进入深度相机的选定区域时，根据获取的数据（深度数据）交互式地产生声音。
该系统通过物体的深度数据、监控摄像头位置和运动的统计值来决定声音的三个要素（音调、音调和音量）。该系统可以产生两种声音。一种是声音效果，如特雷门琴，它是通过波动的音调频率和和声结构来创建的，另一种是通过混合从合成器的音乐源中选择的四种音调来创建声音。在后者中，当音高由音阶中包含的音高决定时，可以通过物体的运动自动创建旋律。当选择的音调和音阶改变时，系统可以创建另一种音乐风格的各种声音和旋律。此外，物体不一定是人。因此，该干扰屏蔽器系统是一种新型的虚拟乐器，可以在不知不觉中产生声音效果和旋律。
