Tensorflow:如何检测音频方向

尤利安·平扎鲁

我有一个任务:确定声源位置

我有一些使用tensorflow,对一些简单的特征和数据集进行预测的经验我假设对于这项任务,有必要分析声频以及可能的其他有关训练和预测步骤的相关数据。声音来自耳机,因此人耳能够检测到方向。

1)有人已经这样做了吗?(不幸的是找不到任何类似的项目)
2)在尝试实现这一目标时我会遇到什么样的警告?
3)我可以使用这种技术方法做到这一点吗?有没有其他声音处理框架/技术/开源项目可以帮助我?

我在这里问这个问题,因为我在 google、github、stackoverflow 上的研究没有向我显示关于该特定主题的任何相关结果,因此非常感谢任何帮助!

男子

这通常通过具有多个传感器的更传统的 DSP 来完成。您可能想要查看到达时间差 (TDOA) 和到达方向 (DOA)。GCC-PHAT 和 MUSIC 等算法会有所帮助。

您可能会遇到的问题是: DOA 精度是源的直接混响比的函数,即环境的混响越多,确定源位置就越困难。

此外,您可能还需要考虑要解析的位置维度数。3D 空间中的一个点比相对于传感器的方向要困难得多

使用机器学习作为解决此问题的方法并非完全没有价值,但您必须考虑您将学习的是什么,即您可能不想学习测试室的混响属性,而是想要学习传感器的空间属性。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

如何使用pydub检测音频流中的静音?

来自分类Dev

如何使用avprobe / ffprobe检测音频采样率?

来自分类Dev

如何在我的iPhone / iPad中检测音频插孔是否插入/未插入音频插孔?

来自分类Dev

检测音频中的特定声音

来自分类Dev

用于检测音频零交叉的选项

来自分类Dev

检测音频文件中的声音边界

来自分类Dev

如何检测音乐在后台播放

来自分类Dev

检测音频是否将在桌面浏览器上播放

来自分类常见问题

如何检测方向变化?

来自分类Dev

如何检测滑动方向?

来自分类Dev

如何在tvOS遥控器上检测音量按钮按下

来自分类Dev

检测音量按钮按下

来自分类Dev

检测音乐何时结束播放

来自分类Dev

检测音乐播放完毕

来自分类Dev

如何从UICollectionView检测滚动方向?

来自分类Dev

如何检测文件是否为音频/视频?

来自分类Dev

如何检测浮点音频文件

来自分类Dev

UITraitCollection iPad如何检测当前方向

来自分类Dev

如何在viewDidLoad之前检测设备方向?

来自分类Dev

如何在Libgdx中检测滑动方向?

来自分类Dev

如何使用JavaScript检测设备方向?

来自分类Dev

如何检测圆圈手势的方向?

来自分类Dev

如何检测强度梯度方向

来自分类Dev

在Android设备上使用OpenCv检测音乐形状

来自分类Dev

检测到多个图像目标时如何更改音频源

来自分类Dev

检测损坏的音频CD

来自分类Dev

尝试预测音频时出错:无法计算输出张量(“ ctc / ExpandDims_22:0”

来自分类Dev

如何在Xamarin.Forms中检测设备的屏幕方向?

来自分类Dev

如何从图像中检测机器人方向?