新增 Mimi 与仅用户 VAP 对比并统一流式评测
This commit is contained in:
@@ -0,0 +1,13 @@
|
||||
MaAI Mimi 与 CPC 对比(相同当前 44 点,阈值严格 > 0.5)
|
||||
|
||||
模型 | 正确数 | 准确率 | 误放行 FP/22 | 误阻止 FN/22 | 相对 CPC 双声道准确率变化
|
||||
CPC 降噪版(双声道) | 32/44 | 72.73% | 8/22 | 4/22 | +0.00 个百分点(相对 +0.00%)
|
||||
CPC 降噪版(机器人静音) | 23/44 | 52.27% | 18/22 | 3/22 | -20.45 个百分点(相对 -28.13%)
|
||||
Mimi 标准版(双声道) | 30/44 | 68.18% | 7/22 | 7/22 | -4.55 个百分点(相对 -6.25%)
|
||||
Mimi 降噪版(双声道) | 34/44 | 77.27% | 7/22 | 3/22 | +4.55 个百分点(相对 +6.25%)
|
||||
|
||||
1. 标准版与降噪版的结果差异可直接从上表查看;二者使用相同 Mimi 编码器、双声道输入及 80 ms 帧,变化来自所选 VAP 权重。
|
||||
2. 与 CPC 比较时同时存在编码器、checkpoint 和原生帧率差异;不把结果归结为 Mimi 编码器的单独因果效果。
|
||||
3. 固定种子重复结果一致,但没有多种子误差条;六通录音的 44 个选定点不足以证明泛化优劣。
|
||||
|
||||
建议下一步:扩充并核验按通话隔离的测试集,在独立验证集上选择阈值;若要单独研究编码器,补充标准/降噪与 CPC/Mimi 的完整交叉配置。
|
||||
Reference in New Issue
Block a user