m303 发表于 2024-10-18 12:19:47

福利:Suzumushi 发布 VoMPE免费的人声转 MIDI 插件




Suzumushi 推出一款适用于 Windows 系统的语音转 MIDI 插件 VoMPE,现在可免费下载,通过声带振动和声道共振模拟声音产生的过程,并将其用于生成 MIDI 复音。

VoMPE(Voice over MIDI Polyphonic Expression)通过MIDI 可分析语音输入,并根据代表声带特征的共振频率输出 MIDI 音符,然后根据代表语音特征的共振峰频率输出 MIDI 复音。

VoMPE的发声过程可以用声带振动和声道共振来建模。在这种情况下,语音频谱是声带振动频谱和声道频率特性。因此,声道的频率特性称为频谱包络。声道的共振频率,即频谱包络的​​峰值频率,称为共振峰频率。这些在语音分析、合成和编码中被广泛使用。

VoMPE 使用线性预测系数(LPC)估计语音输入的频谱包络,然后找到共振峰频率。频谱包络分为多个频带,每个频带对应一个 MIDI 通道。VoMPE 输出一个 MIDI 音符,对应每个频段中振幅最大的共振峰频率。



适用于64 位 Windows系统,支持 VST3 插件格式, 16KHz、采样率为 16KHz、44.1KHz 和 48KHz。。


有关详细信息,请参阅以下文档。https://suzumushi0.hatenablog.com/entry/VM/VM_EN




免费下载:https://github.com/suzumushi0/VoMPE_binary
官网视频链接:https://youtu.be/jvvONMj7mZQ

https://v.qq.com/x/page/k35672os5jc.html



页: [1]
查看完整版本: 福利:Suzumushi 发布 VoMPE免费的人声转 MIDI 插件